数据处理问题 点击:879 | 回复:2



gongkongedit

    
  • 精华:1099帖
  • 求助:0帖
  • 帖子:14392帖 | 54470回
  • 年度积分:0
  • 历史总积分:622
  • 注册:2008年9月08日
发表于:2003-05-08 18:32:00
楼主
老师,一般高速采集的数据如何处理,我的采样频率为100kHz,每秒钟就有100000个点,这样采个几分钟数据大得很,是转化成文本格式好呢?还是转为数据库?文本格式容量小,但数据处理不方便,而且数据量大了,一般的文本阅读器根本打不开,如果存为数据库文件,写入数据库的时间特别长,而且转化后的文件比较大。我该怎么办?老师,一般你们是如何进行大批量处理的?



sunshq

  • 精华:0帖
  • 求助:0帖
  • 帖子:0帖 | 4回
  • 年度积分:0
  • 历史总积分:10
  • 注册:2003年1月04日
发表于:2003-05-07 16:05:00
1楼
能不能同时运行两个程序,一个定时存储数据(文本),另一个把完成的文本存入数据库那

monet

  • 精华:0帖
  • 求助:0帖
  • 帖子:0帖 | 5回
  • 年度积分:0
  • 历史总积分:5
  • 注册:2002年3月11日
发表于:2003-05-08 18:32:00
2楼
你可以以连续采集的方法,同时对于ai read出来的数据用disk streaming技术存储,也就是每次在写数据的时候不要把文件关掉,等全部写完之后再关掉。

热门招聘
相关主题

官方公众号

智造工程师