JavaDBF:保存行情实时数据到DBF文件
JavaDBF.jar其实很早都不再更新了,在日新月异的科技圈算得上远古上神的jar包,早该身归混沌了。
但我们的项目要用到,因为之前做的大宗期货交易行情的分析文件依然是dbf文件,没有办法,还得用
JavaDBF库把行情实时数据保存到DBF文件中。
第一步,新建DBFManager类
public class DBFManager { private static Logger logger = Logger.getLogger(DBFManager.class); // 构造一个单线程service,保证调用dbf写入的方法不阻塞 private static ExecutorService pool = Executors.newSingleThreadExecutor(); public static void startDbf(List<Quotation> allQuotation) { try { if (Variables.openDBF) { logger.info("写入DBF数据库开始"); long dt1 = System.currentTimeMillis(); // 执行线程 pool.execute(new Thread(new DBFThread(allQuotation))); logger.info("写入DBF数据库结束"); long dt2 = System.currentTimeMillis(); logger.info("读取行情和写入DBF花费时间:(" + (dt2 - dt1) + ")"); } } catch (Exception e) { logger.error("dbf写入错误"); } } }
在行情推送过来的地方调用
DBFManager.startDbf(quotations);
第二步,新建DBF线程类
public class DBFThread implements Runnable { private List<Quotation> quotations; /** * 传递构造方法. * * @param quotations */ public DBFThread(List<Quotation> quotations) { this.quotations = quotations; } @Override public void run() { // 将行情信息写入到dbf文件中 DBFOperation.writeDBFByQuotation(Variables.path_info_dbf, quotations); } }
第三步,新建DBF操作类
public class DBFOperation { private static Logger logger = Logger.getLogger(DBFOperation.class); /** * 删除文件内容. */ public static void deleteQuotation(String path) { File myDelFile = new File(path); if (myDelFile.exists()) { myDelFile.delete(); } } /** * 将行情信息添加到文件中 * * @param path * @param quotaionList * @throws IOException */ public static void writeDBFByQuotation(String path, List<Quotation> quotaionList) { FileOutputStream fos = null; try { DBFField fields[] = new DBFField[30]; // S1 HQZQDM 证券代码 Char 6 fields[0] = new DBFField(); fields[0].setName("S1"); fields[0].setDataType(DBFField.FIELD_TYPE_C); fields[0].setFieldLength(6); // S2 HQZQJC 证券名称 Char 8 fields[1] = new DBFField(); fields[1].setName("S2"); fields[1].setDataType(DBFField.FIELD_TYPE_C); fields[1].setFieldLength(80); // S3 HQZRSP 前收盘价格 Num 8 3 fields[2] = new DBFField(); fields[2].setName("S3"); fields[2].setDataType(DBFField.FIELD_TYPE_N); fields[2].setFieldLength(8); fields[2].setDecimalCount(3); // S4 HQJRKP 今开盘价格 Num 8 3 fields[3] = new DBFField(); fields[3].setName("S4"); fields[3].setDataType(DBFField.FIELD_TYPE_N); fields[3].setFieldLength(8); fields[3].setDecimalCount(3); Object[] obj1 = new Object[4]; obj1[0] = "000000"; obj1[1] = ""; for (int i = 2; i < obj1.length; i++) { obj1[i] = Double.parseDouble("0"); } // 定义DBFWriter实例用来写DBF文件 DBFWriter writer = new DBFWriter(); // 字符编码设置为GB2312,防止中文乱码 writer.setCharactersetName("GB2312"); writer.setFields(fields); // 添加纪录,此时未写入到dbf文件,而是在内容中 writer.addRecord(obj1); // Object[] objs = new Object[30]; for (Quotation quotation : quotaionList) { Object[] obj = new Object[4]; // 证卷代码 obj[0] = quotation.getScode(); // 证卷名称 // 中文乱码解决方法 Pattern pWord = Pattern.compile("[\u4e00-\u9fa5]");// 校验中文的正则表达式 String value = quotation.getSname(); String blank = ""; if (pWord.matcher(value).find()) {// 如果包含中文就要补够2倍中文字数个空格,否则会导致中文乱码 for (int j = 0; j < value.getBytes().length; j++) { blank += " "; } } obj[1] = value + blank; // 前收盘价 obj[2] = quotation.getLastPrice().doubleValue(); // 今开盘价 obj[3] = quotation.getOpen().doubleValue(); writer.addRecord(obj); } fos = new FileOutputStream(path); writer.write(fos); } catch (IOException e) { logger.error("写入DBF出错了" + e.getMessage()); } finally { try { fos.close(); } catch (IOException e) { logger.error("输出流关闭出错" + e.getMessage()); } } } }
写的操作我已经提供了,但我一直没有找到dbf文件的更新操作,也就是说,假如已存在一行数据,但第二次数据过来时,只需要更新一列,这时候该如何做呢?
JavaDBF:保存行情实时数据到DBF文件的更多相关文章
- Linux中Matlab保存多个数据到同一个文件当中
% load pyrim % NumTrain = 50; % load machine %NumTrain = 150; % load housing % NumTrain = 300; % loa ...
- Java读取Level-1行情dbf文件极致优化(1)
最近架构一个项目,实现行情的接入和分发,需要达到极致的低时延特性,这对于证券系统是非常重要的.接入的行情源是可以配置,既可以是Level-1,也可以是Level-2或其他第三方的源.虽然Level-1 ...
- delphi 2010 导出sql server 数据到DBF乱码问题
近日,由于业务需要导出sql server 数据到DBF文件,要查询多表记录,并适当处理后生成导出DBF文件,系统使用delphi2010平台开发. 首先按要求在VFP里创建DBF表,字段数有240个 ...
- xls/csv文件转换成dbf文件
转至:https://blog.csdn.net/linhai1028/article/details/80211252 编写的一个小脚本,主要是利用python中的pandas,xlrd,dbfpy ...
- Java读取Level-1行情dbf文件极致优化(3)
最近架构一个项目,实现行情的接入和分发,需要达到极致的低时延特性,这对于证券系统是非常重要的.接入的行情源是可以配置,既可以是Level-1,也可以是Level-2或其他第三方的源.虽然Level-1 ...
- Java读取Level-1行情dbf文件极致优化(2)
最近架构一个项目,实现行情的接入和分发,需要达到极致的低时延特性,这对于证券系统是非常重要的.接入的行情源是可以配置,既可以是Level-1,也可以是Level-2或其他第三方的源.虽然Level-1 ...
- matlab结构体形式保存数据生成.mat文件< 转>
2015年 参加天池大数据竞赛 为了建立模型,打算基于matlab使用Random Forest Algorithm的工具包 该工具包我在此分享给大家,http://yunpan.cn/cVX ...
- MATLAB实例:新建文件夹,保存.mat文件并保存数据到.txt文件中
MATLAB实例:新建文件夹,保存.mat文件并保存数据到.txt文件中 作者:凯鲁嘎吉 - 博客园 http://www.cnblogs.com/kailugaji/ 用MATLAB实现:指定路径下 ...
- EasyDSS高性能RTMP、HLS(m3u8)、HTTP-FLV、RTSP流媒体服务器功能简介---实时数据统计报表、视频文件上传、点播、分享、集成
熟悉EasyDSS流媒体服务器的小伙伴应该都知道,EasyDSS通过将EasyRTMP推流的直播流进行直播转码.智能处理.视频分发,再通过 CDN 分发节点分发到终端播放 SDK为观众播放高清低延时的 ...
随机推荐
- 3d-tiles、gltf 坐标系
gltf 为 y 轴向上的右手坐标系 3d-tiles 为 z 轴向上的右手坐标系
- 大数据学习之hdfs集群安装部署04
1-> 集群的准备工作 1)关闭防火墙(进行远程连接) systemctl stop firewalld systemctl -disable firewalld 2)永久修改设置主机名 vi ...
- *CTF——shellcode
一看题目是利用shellcode解决问题 伪代码: checksec:开启了NX exp: from pwn import* context(os='linux',arch='amd64',log ...
- Linux命令学习总结之rmdir命令的相关资料可以参考下
这篇文章主要介绍了Linux命令学习总结之rmdir命令的相关资料,需要的朋友可以参考下(http://www.nanke0834.com) 命令简介: rmdir命令用用来删除空目录,如果目录非空, ...
- 腾讯云服务器、nginx部署loopback
最近在研究学习nginx,买了腾讯云服务器.在阿里上申请了域名,部署项目遇到很多问题记录一下,以备后用: 1.在腾讯服务器买好,阿里域名申请好后(也可以在腾讯上申请域名),需要添加安全组,创建不同的规 ...
- hadoop tez 结合搭建以及测试异常解决
hadoop tez 搭建 1.下载tez,本人下载的是bin.0.92版本. http://www.apache.org/dyn/closer.lua/tez/0.9.2/ hadoop dfs - ...
- 数据分析 大数据之路 四 numpy 2
NumPy 数学函数 NumPy 提供了标准的三角函数:sin().cos().tan(import numpy as np a = np.array([0,30,45,60,90])print (' ...
- linux查看分区是否开启acl权限
1.为什么需要ACL权限 ACL的全称是 Access Control List (访问控制列表) .对于文件或者目录,都有相应的操作权限 r(read 读),w(write 写),x(execute ...
- hadoop2-HBase的Java API操作
Hbase提供了丰富的Java API,以及线程池操作,下面我用线程池来展示一下使用Java API操作Hbase. 项目结构如下: 我使用的Hbase的版本是 hbase-0.98.9-hadoop ...
- DevExpress内 GridControl中复选框值问题
在DevExpress的 GridControl内的复选柜勾选后,界面看到是勾选状态,但对应的DataView的值仍未变,在以下事件内处理 在对应的DataView内的 CellValueChangi ...