我正在尝试加载和解析一个非常大的文本文件。尽管加载不是问题,但是在一行上有特定行具有2908778个字符。
这导致我的脚本出错。
在下面的脚本中,我删除了所有逻辑,然后直接读取行。 我还删除了所有有效行,只是在一个文本文件中留下了很长的行。运行时我得到以下错误:
$ dowhiledebug.sh dump.txt
dowhiledebug.sh[6]: no space
Script Ended dump.txt
实际脚本:
#!/bin/sh
filename=$1
count=1
if [ -f ${filename} ]; then
echo "after then"
while read line;
do
echo "$count"
count=$((count+1))
done < $filename
else
echo "Could not open file $filename"
fi
echo "Script Ended $filename"
更新(2013-01-17)
跟进问题:Is it possible to increase the maximum number of characters that ksh variable accepts?
答案 0 :(得分:4)
什么操作系统和版本的ksh?你可以echo ${.sh.version}
获得价值吗?如果是,请在上面的问题中加入。或者这可能是pdksh?
这是一个让你进入大球场的测试,假设现代ksh支持(( i++ ))
数学评估:
#100 char var
var=1234578901234456789012345678901234567890123456789012345789012344567890123456789012345678901234567890
$ while (( i++ < 10000 )) ;do var=$var$var ; print "i=$i\t" ${#var} ; done
i=1 200
i=2 400
i=3 800
i=4 1600
i=5 3200
i=6 6400
i=7 12800
i=8 25600
i=9 51200
i=10 102400
i=11 204800
i=12 409600
i=13 819200
i=14 1638400
i=15 3276800
i=16 6553600
i=17 13107200
i=18 26214400
i=19 52428800
i=20 104857600
i=21 209715200
i=22 419430400
-ksh: out of memory
$ print -- ${.sh.version}
Version JM 93t+ 2010-05-24
IHTH
答案 1 :(得分:1)
任何shell的限制都是C命令行最大值的限制。这是一个小程序,可以为您提取/usr/include/limits.h
的信息:
cpp <<HERE | tail -1
#include <limits.h>
ARG_MAX
HERE
我给了我(256 * 1024)或262144个字符。
如果未安装C编译器,则不起作用,但它可能是类似的限制。