Chinaunix

标题: awk 使用变量 以及更简单的方法 [打印本页]
作者: Piaomiao139    时间: 2015-08-14 12:52
标题: awk 使用变量 以及更简单的方法
本帖最后由 Piaomiao139 于 2015-08-14 12:55 编辑

想写一个爬网站的脚本
现在的思路是
1）.获取指定网站的类容
2）.根据指定网站获取随后网站的类容（也就是这个网站有多少url 根据相应的url在去爬其他网站）
现在问题来了。
#!/bin/bash
# this function is get url in html

filename=$1
lineinfonumber=
while read 'Line'
do

    if [[ $Line == *[hH]ttp* ]]
    then
   
    lineinfonumber=`echo "$Line"|awk -F '"' '{print NF-1}'`
    ((printline= $lineinfonumber/2))
    printstr=
    for(( i=1;i<=$printline;i++))
    do
       ((printnumber=$i*2))
       printstr=$printstr"$"$printnumber
    done  
    echo $printstr
    printin='$1$2'
    echo "$Line" |awk -F '"' '{print '$printin'}'
    echo "$Line" |awk -F '"' '{print '$printstr'}'
fi
done < $filename

在这：
    echo $printstr
    printin='$1$2'
    echo "$Line" |awk -F '"' '{print '$printin'}'
    echo "$Line" |awk -F '"' '{print '$printstr'}'
的时候根本无法使用这个变量       $printstr 反而直接定义的可以使用 写了半天了 完全没反应  
有什么方法？
或者更简单的方法？
作者: haooooaaa    时间: 2015-08-14 12:53
awk -v ....
作者: Piaomiao139    时间: 2015-08-14 12:53
用while 是因为还要对每句的文本处理
作者: Piaomiao139    时间: 2015-08-14 12:54
回复 2# haooooaaa


    不是awk -v
是为什么呢？
因为这样也可以使用变量的你试试哇
作者: Piaomiao139    时间: 2015-08-14 12:56
可以试试  在print的时候是可以使用变量的
但是 我在这里不可以 就不知道为什么了
作者: ly5066113    时间: 2015-08-14 12:59
回复 1# Piaomiao139


我这里是可以的：
  1. $ printin='$1$2'
  2. $ echo '1"2"3' | awk -F '"' '{print '$printin'}'
  3. 12
复制代码
作者: Piaomiao139    时间: 2015-08-14 13:04
回复 6# ly5066113


    对这样 是可以 但是你之前的是个变量就不可以了。完全不知道为什么。
Line='<!DOCTYPE html><html><!--STATUS OK--><head><meta http-equiv="X-UA-Compatible" content="IE=Edge" /><meta charset="utf-8" />'
lineinfonumber=`echo "$Line"|awk -F '"' '{print NF-1}'`
    ((printline= $lineinfonumber/2))
    printstr=
    for(( i=1;i<=$printline;i++))
    do
       ((printnumber=$i*2))
       printstr=$printstr"$"$printnumber
    done  
    echo $printstr
    printin=`echo "$printstr"|sed 's/','$//g' `
   
    printin='$1$2'
    echo $printstr
    echo $printin
    echo "$Line" |awk -F '"' '{print '$printin'}'
    echo "$Line" |awk -F '"' '{print '$printstr'}'
这样你试试哇
作者: tuyajie    时间: 2015-08-14 13:16
本帖最后由 tuyajie 于 2015-08-14 13:21 编辑

  2. [unar@Prod-UNAR-M1 s02_signals.cm_flight.cm_flight]$ a='$1,$2'
  3. [unar@Prod-UNAR-M1 s02_signals.cm_flight.cm_flight]$  echo "1\"2" | awk -F'"' '{OFS=",";print '$a'}'
  4. 1,2
  5. [jay.liu@aliCloud chinaUnix]$ awk --version
  6. GNU Awk 4.0.1
复制代码
我解释不来了。。。
作者: ly5066113    时间: 2015-08-14 13:37
回复 7# Piaomiao139

没发现什么问题，不是很正常么？
  1. $ test.sh
  2. $2$4$6
  3. $2$4$6
  4. $1$2
  5. <!DOCTYPE html><html><!--STATUS OK--><head><meta http-equiv=X-UA-Compatible
  6. X-UA-CompatibleIE=Edgeutf-8
  7. $ cat test.sh
  8. #! /bin/bash
  9. Line='<!DOCTYPE html><html><!--STATUS OK--><head><meta http-equiv="X-UA-Compatible" content="IE=Edge" /><meta charset="utf-8" />'
  10. lineinfonumber=`echo "$Line"|awk -F '"' '{print NF-1}'`
  11.     ((printline= $lineinfonumber/2))
  12.     printstr=
  13.     for(( i=1;i<=$printline;i++))
  14.     do
  15.        ((printnumber=$i*2))
  16.        printstr=$printstr"$"$printnumber
  17.     done  
  18.     echo $printstr
  19.     printin=`echo "$printstr"|sed 's/','$//g' `
  20.    
  21.     printin='$1$2'
  22.     echo $printstr
  23.     echo $printin
  24.     echo "$Line" |awk -F '"' '{print '$printin'}'
  25.     echo "$Line" |awk -F '"' '{print '$printstr'}'
复制代码
作者: Piaomiao139    时间: 2015-08-14 13:51
回复 9# ly5066113


    我的有问题 不知道为什么换个环境正常。
作者: Piaomiao139    时间: 2015-08-14 13:52
回复 8# tuyajie


    。。。



欢迎光临 Chinaunix (http://bbs.chinaunix.net/) Powered by Discuz! X3.2