TC官方合作论坛

 找回密码
 立即注册
查看: 512|回复: 7
打印 上一主题 下一主题

[问题] TC读写百万行数据文件

[复制链接]
跳转到指定楼层
楼主
发表于 2016-12-30 21:46:28 | 只看该作者 回帖奖励 |倒序浏览 |阅读模式

马上加入TC

您需要 登录 才可以下载或查看,没有帐号?立即注册

x
想设计一个能够从一个百万行数据文件 读入数据,简单转换,写人数据的程序

法1:按行全部读入后,转换,写出
法2:按行,读入一行,转换,写出一行

其中转换过程很简单,只是简单的调换位置

2种方法效率都很慢,百万行数据 好几个小时都处理不完。

求教有什么其他可行的方法么?
回复

使用道具 举报

沙发
发表于 2016-12-30 23:30:24 | 只看该作者
TC读得比较慢! 这么多的话! 还是用别的快
回复 支持 反对

使用道具 举报

板凳
发表于 2016-12-31 00:52:51 | 只看该作者
数据文件?是文本,还是数据库?这个要看电脑配置还有数据库的吧?
回复 支持 反对

使用道具 举报

地板
 楼主| 发表于 2016-12-31 01:52:26 | 只看该作者
文本 dat文件  不是二进制的
回复 支持 反对

使用道具 举报

5#
发表于 2016-12-31 11:46:40 | 只看该作者
转换? 是怎么转换?是不是转换的效率低了?
回复 支持 反对

使用道具 举报

6#
 楼主| 发表于 2016-12-31 12:20:24 | 只看该作者
就颠倒几个数据位置,没有复杂的计算
回复 支持 反对

使用道具 举报

7#
发表于 2017-1-4 19:41:01 | 只看该作者
用个第三方的插件,比如365插件
回复 支持 反对

使用道具 举报

8#
 楼主| 发表于 2017-1-4 19:43:11 | 只看该作者
感谢各位的帮助,是脚本语言的问题,TC I/O操作比较慢,用其他如python等就能解决这个问题了
回复 支持 反对

使用道具 举报

*滑动验证:
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关闭

站长推荐上一条 /2 下一条

关闭

小黑屋|TC官方合作论坛 (苏ICP备18043773号

GMT+8, 2025-11-5 20:04 , Processed in 0.145844 second(s), 23 queries .

Powered by 海安天坑软件科技有限公司

© 2001-2013 Comsenz Inc.

快速回复 返回顶部 返回列表