免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
最近访问板块 发新帖
查看: 3172 | 回复: 5
打印 上一主题 下一主题

请教如何提取URL [复制链接]

论坛徽章:
0
跳转到指定楼层
1 [收藏(0)] [报告]
发表于 2009-05-05 17:47 |只看该作者 |倒序浏览
我想请教一下各位大大

我用的是centos,有没有什么命令能够把一个页面当中的URL按照需求提取出来形成一个列表?

比如说:我用curl -o html xxx.xxx.com把这个页面抓下来了以后,想把里面所有jpeg的URL提取出来形成一个列表。

有没有什么命令直接可以做到?如果写脚本来做的话需要用到什么命令?awk可以吗?

高人们能不能帮忙看看?万分感谢呀~

论坛徽章:
0
2 [报告]
发表于 2009-05-05 17:52 |只看该作者
try:
cat htm |grep -Eo 'http://.*.jpeg'

论坛徽章:
0
3 [报告]
发表于 2009-05-05 18:27 |只看该作者
感谢~这位大大:wink:

论坛徽章:
5
2015年辞旧岁徽章
日期:2015-03-03 16:54:152015年迎新春徽章
日期:2015-03-04 09:53:172015亚冠之水原三星
日期:2015-06-02 16:34:202015年亚冠纪念徽章
日期:2015-10-19 18:13:37程序设计版块每日发帖之星
日期:2015-11-08 06:20:00
4 [报告]
发表于 2009-05-05 20:37 |只看该作者
原帖由 我是DBA 于 2009-5-5 17:52 发表
try:
cat htm |grep -Eo 'http://.*.jpeg'


如果里面的图片连接是相对路径呢?

论坛徽章:
0
5 [报告]
发表于 2009-05-05 20:45 |只看该作者

回复 #4 xinglp 的帖子

相对路径给它也没用吧,估计就是这种,呵呵

论坛徽章:
5
2015年辞旧岁徽章
日期:2015-03-03 16:54:152015年迎新春徽章
日期:2015-03-04 09:53:172015亚冠之水原三星
日期:2015-06-02 16:34:202015年亚冠纪念徽章
日期:2015-10-19 18:13:37程序设计版块每日发帖之星
日期:2015-11-08 06:20:00
6 [报告]
发表于 2009-05-06 09:14 |只看该作者

回复 #5 我是DBA 的帖子

您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

  

北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号:11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员  联系我们:huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP