一个超大sqlite（两千多万行）按行数分割到指定文件夹下，能实现吗？

wenjun3000

一个超大sqlite（x.db3）有两千多万行，按行数（譬如10万行）分割到指定文件夹下（文件夹路径放在a.txt中），分割后放在指定文件夹下的文件名统一为x.db3，如果原文件夹下有相同文件名直接覆盖，请大神看看能否实现？
如果需要测试数据，回复后放入网盘。

moperyblue

回复 1# wenjun3000


    将分割后的文件(如10万行记录)都以x.db3为名 放入a.txt中指定的目录吗?

wenjun3000

回复 2# moperyblue


是的  

wenjun3000

a.txt中指定的目录下有相同文件名的文件x.db3直接覆盖

wenjun3000

回复 3# wenjun3000


a.txt中指定的文件目录路径中有中文，譬如a.txt中有如下路径
d:\xxx\北京
d:\xxx\南京
d:\xxx\上海
d:\xxx\重庆
d:\xxx\成都
等等

moperyblue

回复 5# wenjun3000


    分割出来的文件数与a.txt中的目录数一样吗?

wenjun3000

回复 6# moperyblue


是的

moperyblue

回复 7# wenjun3000


    是类似这样吗? 如: x000......xnnn这些是分割出来的文件.

是不是以下的过程?
x000 => x.db3 => d:\xxx\北京
x001 => x.db3 => d:\xxx\南京
x002 => x.db3 => d:\xxx\上海
x003 => x.db3 => d:\xxx\重庆
x004 => x.db3 => d:\xxx\成都
...


另, 顺序有要求吗? 如: 从原始文件分割出来的第一个文件(x000)能放到 南京,上海... 这些任一目录下吗?

wenjun3000

回复 8# moperyblue


是的，第一份数据分到a.txt中第一行的文件路径下覆盖
第二份数据分到a.txt中第二行的文件路径下覆盖  
第三份数据分到a.txt中第三行的文件路径下覆盖  
以此类推

jason680

回复 1# wenjun3000

$ cat a.txt
xx1
xx2
xx3

$ cat FILE
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15

$ awk -vline=5 'function nf(){getline p < "a.txt";system("mkdir -p "p);f=p"/x.db3";print "file:"f}NR%line==1{nf()}{print > f}' FILE
file:xx1/x.db3
file:xx2/x.db3
file:xx3/x.db3


$ grep . xx*/x.db3
xx1/x.db3:1
xx1/x.db3:2
xx1/x.db3:3
xx1/x.db3:4
xx1/x.db3:5
xx2/x.db3:6
xx2/x.db3:7
xx2/x.db3:8
xx2/x.db3:9
xx2/x.db3:10
xx3/x.db3:11
xx3/x.db3:12
xx3/x.db3:13
xx3/x.db3:14
xx3/x.db3:15