中国开发网: 论坛: 程序员情感CBD: 贴子 603758
haitao
for 乱七八糟de BTer
for 乱七八糟de BTer
原来的处理过程:
inputfile=>数组1
fun1(数组1,var 数组2);
fun2(数组2,var 数组1);
...
funN(数组1,var 数组2);
数组2=>outputfile
——各个处理函数独立,但是程序需要内存量=文件字节数x2

一种办法是改为:
fun(input文件流,output文件流)
{
while (读流得到一个小数据块)
{
fun1(小数据块);
fun2(小数据块);
...
funN(小数据块);
写入文件流
}
}
——这样,内存开销小了,但是各个处理函数都只是处理一小块而不是整体

不知道*nix的
cat input | fun1 | fun2 | ... | funN > output
整个过程的内存需要量是不是也input大小的x1或x2?
我的blog:http://szhaitao.blog.hexun.com & http://www.hoolee.com/user/haitao
--以上均为泛泛之谈--
不尽牛人滚滚来,无边硬伤纷纷现 人在江湖(出来的),哪能不挨刀(总归是要的)
网络对话,歧义纷生;你以为明白了对方的话,其实呢?

您所在的IP暂时不能使用低版本的QQ,请到:http://im.qq.com/下载安装最新版的QQ,感谢您对QQ的支持和使用

相关信息:


欢迎光临本社区,您还没有登录,不能发贴子。请在 这里登录