lynx -dum 批量查询$1页面中是否存在对应$2

老狼000

lynx -dum 批量查询A.txt中$1 链接的页面中是否存在对应$2的URL
。
A.txt

http://www.baidu.com/    http://www.a.com/
http://www.163.com.cn/  http://2.c.com/
http://www.360.cn/         http://www.a.com/
.....               


需求想用lynx -dump 一个个查$1中链接是否包含$2 [要对应]。
比如返回结果  >>B.txt
http://www.baidu.com/    http://top.baidu.com/  yes  #http://top.baidu.com/有在http://www.baidu.com/这个页面上
http://www.163.com.cn/  http://2.c.com/  no            #http://2.c.com/没有在http://www.163.com.cn/这个页面上
http://www.360.cn/         http://www.a.com/  no       #http://www.a.com/没有在http://www.360.cn/这个页面上
.....               

【另外谁发个while read line;do..语法使用，这个模糊倒置没能写好这个循环。本人新手,默默 借助论坛达人学习 感谢】

li0924

目测是这样吗？

1. awk '{split($1,a,".");split($2,b,"."); print index(a[2],b[2])?$0 FS "yes":$0 FS "NO"}'

复制代码

老狼000

老兄，你这个是。你再看下我的上面需求，谢谢回复 2# li0924


   

关阴月飞

回复 1# 老狼000


ynx -dump 批量查询A.txt中$1 链接的页面中是否存在对应$2的URL
。
A.txt

http://www.baidu.com/    http://www.a.com/
http://www.163.com.cn/  http://2.c.com/
http://www.360.cn/         http://www.a.com/
.....               


需求想用lynx -dump 一个个查。
返回结果  >>B.txt
http://www.baidu.com/    http://www.a.com/  yes
http://www.163.com.cn/  http://2.c.com/  no
http://www.360.cn/         http://www.a.com/  no
.....               

目测是这样：

1. while read  url1  url2
   
2. do
   
3. if lynx -dump $url1 |grep -q "$url2" ;then
   
4.    echo $url1  $url2 yes >>B.txt
   
5. else
   
6.    echo $url1 $url2 no >>B.txt
   
7. fi
   
8. done <A.txt

复制代码

老狼000

测试有效 谢谢 月飞兄回复 4# 关阴月飞