Question

所以我向mysql发出了一个查询，并且它返回了1000行，但是程序的每次迭代都可以返回不同数量的行。我需要将这个结果集拆分（不使用mysql限制）到100行的块中，然后我可以在这100行行中以编程方式迭代。

所以

MySQLOutPut='1 2 3 4 ... 10,000"

我需要把它变成一个看起来像

的数组

array[1]="1 2 3 ... 100"
array[2]="101 102 103 ... 200"

等

我不知道如何优雅地完成这个

Answer 1

使用Charles＆＃39;数据生成：

MySQLOutput=$(seq 1 10000 | tr '\n' ' ')

# the sed command will add a newline after every 100 words
# and the mapfile command will read the lines into an array
mapfile -t MySQLOutSplit < <(
    sed -r 's/([^[:blank:]]+ ){100}/&\n/g; $s/\n$//' <<< "$MySQLOutput"
)

echo "${#MySQLOutSplit[@]}"
# 100

echo "${MySQLOutSplit[0]}"
# 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 49 50 51 52 53 54 55 56 57 58 59 60 61 62 63 64 65 66 67 68 69 70 71 72 73 74 75 76 77 78 79 80 81 82 83 84 85 86 87 88 89 90 91 92 93 94 95 96 97 98 99 100 

echo "${MySQLOutSplit[99]}"
# 9901 9902 9903 9904 9905 9906 9907 9908 9909 9910 9911 9912 9913 9914 9915 9916 9917 9918 9919 9920 9921 9922 9923 9924 9925 9926 9927 9928 9929 9930 9931 9932 9933 9934 9935 9936 9937 9938 9939 9940 9941 9942 9943 9944 9945 9946 9947 9948 9949 9950 9951 9952 9953 9954 9955 9956 9957 9958 9959 9960 9961 9962 9963 9964 9965 9966 9967 9968 9969 9970 9971 9972 9973 9974 9975 9976 9977 9978 9979 9980 9981 9982 9983 9984 9985 9986 9987 9988 9989 9990 9991 9992 9993 9994 9995 9996 9997 9998 9999 10000

Answer 2

这样的事情：

# generate content
MySQLOutput=$(seq 1 10000 | tr '\n' ' ') # seq is awful, don't use in real life

# split into a large array, each item stored individually
read -r -a MySQLoutArr <<<"$MySQLOutput"

# add each batch of 100 items into a new array entry
batchSize=100
MySQLoutSplit=( )
for ((i=0; i<${#MySQLoutArr[@]}; i+=batchSize)); do
  MySQLoutSplit+=( "${MySQLoutArr[*]:i:batchSize}" )
done

解释一些更好的观点：

read -r -a foo将内容读入名为foo的数组，在IFS上拆分，直到由read -d指定的下一个字符（此处没有给出，因此只读取一行）。如果您希望每一行都是一个新的数组条目，请考虑IFS=$'\n' read -r -d '' -a foo，它将每行读入一个数组，终止于输入流中的第一个NUL。
"${foo[*]:i:batchSize}"扩展为数组foo中的项目列表，从索引i开始，然后获取下一个batchSize项，与第一个项连接成一个字符串$IFS中的字符用作分隔符。

在bash中将变量拆分为一个数组，每个数组值包含列表中的n个值

2 个答案: