欢迎使用金字塔普通技术服务论坛,您可以在相关区域发表技术支持贴。
我司技术服务人员将优先处理 VIP客服论坛 服务贴,普通区问题处理速度慢,请耐心等待。谢谢您对我们的支持与理解。


金字塔客服中心 - 专业程序化交易软件提供商金字塔软件金字塔软件问题提交 → 数据导入超级慢

   

欢迎使用金字塔普通技术服务论坛,您可以在相关区域发表技术支持贴。
我司技术服务人员将优先处理 VIP客服论坛 服务贴,普通区问题处理速度慢,请耐心等待。谢谢您对我们的支持与理解。    


  共有3202人关注过本帖树形打印复制链接

主题:数据导入超级慢

帅哥哟,离线,有人找我吗?
klc
  1楼 | 信息 | 搜索 | 邮箱 | 主页 | UC


加好友 发短信
等级:黑侠 帖子:993 积分:1787 威望:0 精华:5 注册:2012/11/28 17:37:20
数据导入超级慢  发帖心情 Post By:2018/2/26 1:09:15 [只看该作者]

版本升级之后,导入数据超级慢,在该电脑上导出数据只需要2分钟,导入则需要两小时!数据文件只有60M啊!
升级之前(忘记之前的版本号了,大概是3.9X左右)导入同样大小的文件只要几分钟。
60M包含了三个期货市场一百多个品种1个月的1分钟数据,导一个月就要两小时啊,下图是一个小时前的截图(已经导了一个小时):

图片点击可在新窗口打开查看此主题相关图片如下:无标题.gif
图片点击可在新窗口打开查看

 回到顶部
帅哥哟,离线,有人找我吗?
klc
  2楼 | 信息 | 搜索 | 邮箱 | 主页 | UC


加好友 发短信
等级:黑侠 帖子:993 积分:1787 威望:0 精华:5 注册:2012/11/28 17:37:20
  发帖心情 Post By:2018/2/26 1:15:43 [只看该作者]

刚计算了以下,一个品种需要100秒,只是一个月的K线。运行的时候,16G的内存仅使用了不到4G,但4核cpu大概50%使用。

 回到顶部
帅哥哟,离线,有人找我吗?
banzhuan
  3楼 | 信息 | 搜索 | 邮箱 | 主页 | UC


加好友 发短信
等级:超级版主 帖子:16558 积分:0 威望:0 精华:0 注册:2017/6/1 10:24:09
  发帖心情 Post By:2018/2/26 8:59:08 [只看该作者]

您是导出、导入系统格式(DAD格式)的数据吗?   还有一种办法就是把原金字塔目录下的DATA文件夹全部复制到新版本的目录下,这样会比较快 

 回到顶部
帅哥哟,离线,有人找我吗?
klc
  4楼 | 信息 | 搜索 | 邮箱 | 主页 | UC


加好友 发短信
等级:黑侠 帖子:993 积分:1787 威望:0 精华:5 注册:2012/11/28 17:37:20
  发帖心情 Post By:2018/3/29 12:31:53 [只看该作者]

是系统格式.另外,没法替换文件因为:为了效率某电脑不会保存太长时间的历史数据,但会源源不断的接收新数据。为了复盘测试及检验策略,另一台电脑保存历史上全部的数据,并定期将上述产生的新数据合并过来(这就需要导出导入了)

 回到顶部
帅哥哟,离线,有人找我吗?
klc
  5楼 | 信息 | 搜索 | 邮箱 | 主页 | UC


加好友 发短信
等级:黑侠 帖子:993 积分:1787 威望:0 精华:5 注册:2012/11/28 17:37:20
  发帖心情 Post By:2018/3/29 12:33:19 [只看该作者]

此外,需要这样合并的主要为IB接口接收的行情,也无法从金字塔服务器下载到历史,所以只能自行收集了

 回到顶部