为了账号安全,请及时绑定邮箱和手机立即绑定

这种情况数据是否需要合并

这种情况数据是否需要合并

天涯尽头无女友 2018-11-21 05:02:07
P>我正在做一个采集系统,采集下来的数据目前使用了一个store2xml组件将采集的数据以xml格式存放在一个data文件夹下,1.xml,2.xml,3.xml,4.xml.....</P> <P>每个文件一般至多不超过50k,这些数据用来为以后导入到某个系统中(系统是未知的,也就是导入的数据格式未知)</P> <P>&nbsp;</P> <P>我想问的就是</P> <P>1.以何种形式储存的数据,便于在各个系统间切换?mdb,excel,csv,xml,sqlite?</P> <P>2.针对上面我提出的xml的方案,我是否需要将这些数据合并成一个大的xml?感觉合并成大的xml还吃内存,有这个必要要合并吗</P> <P>&nbsp;</P>
查看完整描述

2 回答

?
暮色呼如

TA贡献1853条经验 获得超9个赞

1、涉及到系统切换,那么XML将是不二选择 2、如果可以,我觉得还是合并一下,几M大的XML并不会对内存造成什么影响,不管合并与否,建议按日期分成不同的目录,如果文件很多时,放同一个目录下会有问题,一般情况下一个文件夹里放几千个文件就已经比较吃力了

查看完整回答
反对 回复 2018-11-22
?
小怪兽爱吃肉

TA贡献1852条经验 获得超1个赞

1、只要你写得出分析器,任何格式都可以选择,像csv或excel其实就是个简单的数据库 2、不要合并,合并后打开都是件痛苦的事

查看完整回答
反对 回复 2018-11-22
  • 2 回答
  • 0 关注
  • 230 浏览

添加回答

举报

0/150
提交
取消
意见反馈 帮助中心 APP下载
官方微信