免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
12下一页
最近访问板块 发新帖
查看: 2597 | 回复: 10
打印 上一主题 下一主题

文本循环问题求救 [复制链接]

论坛徽章:
0
跳转到指定楼层
1 [收藏(0)] [报告]
发表于 2012-07-18 11:45 |只看该作者 |倒序浏览
我遇到的是一个这样的问题

我把需要下载的txt放到了我的一个空间里  比如是http://www.baidu.com/1.txt

然后1.txt的内容为:

http://www.baidu.com/1
http://www.baidu.com/2
http://www.baidu.com/3
http://www.baidu.com/4
http://www.baidu.com/5

如何循环下载1.txt里面的内容呢?  还请大家帮帮我 谢谢

论坛徽章:
0
2 [报告]
发表于 2012-07-18 11:58 |只看该作者
  1. wget http://www.baidu.com/1.txt
  2. while read line
  3. do
  4.   wget $line
  5. done < 1.txt
复制代码
兄弟,木测试过!

论坛徽章:
0
3 [报告]
发表于 2012-07-18 12:09 |只看该作者
回复 2# efossz


    谢谢 我去测试下

论坛徽章:
5
未羊
日期:2014-08-04 16:15:21天秤座
日期:2014-08-13 13:52:372015年辞旧岁徽章
日期:2015-03-03 16:54:152015年迎新春徽章
日期:2015-03-04 09:56:112015亚冠之浦和红钻
日期:2015-06-29 15:30:48
4 [报告]
发表于 2012-07-18 12:13 |只看该作者
  1. curl http://www.baidu.com/1.txt|awk '{system("wget -c "$0)}'
复制代码

论坛徽章:
0
5 [报告]
发表于 2012-07-18 12:13 |只看该作者
回复 2# efossz


    有错误的

./shell: line 3: 1.txt: No such file or directory

虽然自己新建立了个1.txt 但是好像什么都没做

也没有循环下载内容

论坛徽章:
0
6 [报告]
发表于 2012-07-18 12:47 |只看该作者
本帖最后由 personball 于 2012-07-18 12:48 编辑

回复 1# zchao4251500


    wget http://xxxxxxxxxxx/1.txt
wget -i 1.txt

man wget



-i file
       --input-file=file
           Read URLs from a local or external file.  If - is specified as
           file, URLs are read from the standard input.  (Use ./- to read from
           a file literally named -.)

           If this function is used, no URLs need be present on the command
           line.  If there are URLs both on the command line and in an input
           file, those on the command lines will be the first ones to be
           retrieved.  If --force-html is not specified, then file should
           consist of a series of URLs, one per line.

           However, if you specify --force-html, the document will be regarded
           as html.  In that case you may have problems with relative links,
           which you can solve either by adding "<base href="url">" to the
           documents or by specifying --base=url on the command line.

           If the file is an external one, the document will be automatically
           treated as html if the Content-Type matches text/html.
           Furthermore, the file's location will be implicitly used as base
           href if none was specified.

论坛徽章:
21
白羊座
日期:2013-08-23 15:49:17金牛座
日期:2013-10-08 17:00:03处女座
日期:2013-10-12 11:54:11CU十二周年纪念徽章
日期:2013-10-24 15:41:34午马
日期:2013-11-27 14:07:21巨蟹座
日期:2013-12-04 10:56:03水瓶座
日期:2013-12-04 15:58:00亥猪
日期:2014-05-24 16:02:3115-16赛季CBA联赛之辽宁
日期:2016-11-07 13:52:53戌狗
日期:2013-08-23 16:15:31白羊座
日期:2013-08-24 21:59:24巨蟹座
日期:2013-08-25 16:34:24
7 [报告]
发表于 2012-07-18 14:13 |只看该作者
回复 6# personball


    不错。            

论坛徽章:
13
15-16赛季CBA联赛之同曦
日期:2016-01-28 19:52:032015亚冠之北京国安
日期:2015-10-07 14:28:19NBA常规赛纪念章
日期:2015-05-04 22:32:03处女座
日期:2015-01-15 19:45:44卯兔
日期:2014-10-28 16:17:14白羊座
日期:2014-05-24 15:10:46寅虎
日期:2014-05-10 09:50:35白羊座
日期:2014-03-12 20:52:17午马
日期:2014-03-01 08:37:27射手座
日期:2014-02-19 19:26:54子鼠
日期:2013-11-30 09:03:56狮子座
日期:2013-09-08 08:37:52
8 [报告]
发表于 2012-07-18 15:14 |只看该作者

  1. # aria2c -i files.txt -j2        (Download URIs found in text file -j:同时进行任务数)
  2. # wget -i files.txt
复制代码

论坛徽章:
5
2015年辞旧岁徽章
日期:2015-03-03 16:54:152015年迎新春徽章
日期:2015-03-04 09:50:282015年亚洲杯之朝鲜
日期:2015-03-13 22:47:33IT运维版块每日发帖之星
日期:2016-01-09 06:20:00IT运维版块每周发帖之星
日期:2016-03-07 16:27:44
9 [报告]
发表于 2012-07-18 15:25 |只看该作者
回复 5# dn833


    还需要用awk来调用wget?

论坛徽章:
0
10 [报告]
发表于 2012-07-18 16:21 |只看该作者
谢谢大家了  已经解决了。
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

  

北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号:11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员  联系我们:huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP