免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
最近访问板块 发新帖
查看: 2267 | 回复: 9
打印 上一主题 下一主题

[其他] Shell解析日志,日志中#开头的行不解析,请大家帮忙查看下,多谢! [复制链接]

论坛徽章:
3
程序设计版块每日发帖之星
日期:2016-02-27 06:20:00程序设计版块每日发帖之星
日期:2016-03-03 06:20:00数据库技术版块每日发帖之星
日期:2016-05-06 06:20:00
跳转到指定楼层
1 [收藏(0)] [报告]
发表于 2016-02-24 09:52 |只看该作者 |倒序浏览
名称为“sdc_02_17_2016”日志,内容如下【日志内容行数很多,且不确定;#的行固定为4行】:
#Software: WebTrends Collector        
#Version: 1.0
#Date: 2016-02-05 08:56:35
#Fields: date time c-ip
2016-02-17 07:05:54 210.100.20.6
2016-02-17 07:05:54 221.3.120.156
2016-02-17 07:05:55 10.11.56.124

shell程序:
#!/bin/sh
a=sdc_02_17_2016
HOSTNAME="120.2.18.9"
PORT="3306"
USERNAME="test"
PASSWORD="test"
DBNAME="dbtest"
TABLENAME="tabletest"
while  read c1 c2 c3
do
insert_sql="insert into ${TABLENAME}(dateid,times,ip,createdate) values('"$c1"','"$c2"','"$c3"',now())"
mysql --default-character-set=utf8  -h${HOSTNAME} -P${PORT} -u${USERNAME} -p${PASSWORD} ${DBNAME} -e  "${insert_sql}"  
done <$a

插入mysql数据库时,日志中#开始的行也保存库中,如何把#行的数据不保存库中,只保存后续的行数,还请大家帮忙指点下,多谢!

论坛徽章:
1
2015年辞旧岁徽章
日期:2015-03-03 16:54:15
2 [报告]
发表于 2016-02-24 10:04 |只看该作者
先把日志里#行删掉再导,sed -i '/^#/d'  sdc_02_17_2016

论坛徽章:
8
2015年辞旧岁徽章
日期:2015-03-03 16:54:152015小元宵徽章
日期:2015-03-06 15:58:18每日论坛发贴之星
日期:2015-06-08 22:20:00每日论坛发贴之星
日期:2015-06-08 22:20:00操作系统版块每日发帖之星
日期:2015-06-14 22:20:00数据库技术版块每日发帖之星
日期:2015-11-09 06:20:00数据库技术版块每日发帖之星
日期:2016-02-22 06:20:0015-16赛季CBA联赛之上海
日期:2017-01-01 23:58:53
3 [报告]
发表于 2016-02-24 10:19 |只看该作者
  1. sed -ie "s/#.*//g" file
复制代码

论坛徽章:
3
程序设计版块每日发帖之星
日期:2016-02-27 06:20:00程序设计版块每日发帖之星
日期:2016-03-03 06:20:00数据库技术版块每日发帖之星
日期:2016-05-06 06:20:00
4 [报告]
发表于 2016-02-24 10:43 |只看该作者
日志名称sdc_02_17_2016要变成sdc_02_17_2016(2).log就会报错。回复 2# wangzhen_518


   

论坛徽章:
3
程序设计版块每日发帖之星
日期:2016-02-27 06:20:00程序设计版块每日发帖之星
日期:2016-03-03 06:20:00数据库技术版块每日发帖之星
日期:2016-05-06 06:20:00
5 [报告]
发表于 2016-02-24 10:44 |只看该作者
日志名称sdc_02_17_2016要变成sdc_02_17_2016(2).log就会报错。回复 3# zl624867243


   

论坛徽章:
1
2015年辞旧岁徽章
日期:2015-03-03 16:54:15
6 [报告]
发表于 2016-02-24 11:15 |只看该作者
回复 4# bzh_516

把日志名字用引号括起来
   

论坛徽章:
3
程序设计版块每日发帖之星
日期:2016-02-27 06:20:00程序设计版块每日发帖之星
日期:2016-03-03 06:20:00数据库技术版块每日发帖之星
日期:2016-05-06 06:20:00
7 [报告]
发表于 2016-02-24 14:17 |只看该作者
谢谢您们。

论坛徽章:
3
程序设计版块每日发帖之星
日期:2016-02-27 06:20:00程序设计版块每日发帖之星
日期:2016-03-03 06:20:00数据库技术版块每日发帖之星
日期:2016-05-06 06:20:00
8 [报告]
发表于 2016-02-24 14:21 |只看该作者
谢谢您们。

论坛徽章:
3
程序设计版块每日发帖之星
日期:2016-02-27 06:20:00程序设计版块每日发帖之星
日期:2016-03-03 06:20:00数据库技术版块每日发帖之星
日期:2016-05-06 06:20:00
9 [报告]
发表于 2016-02-24 14:21 |只看该作者
谢谢您们。回复 6# wangzhen_518


   

论坛徽章:
28
2015年迎新春徽章
日期:2015-03-04 10:16:53午马
日期:2015-03-20 17:11:07亥猪
日期:2015-03-20 17:11:23戌狗
日期:2015-03-20 17:11:33酉鸡
日期:2015-03-20 17:11:47申猴
日期:2015-03-20 17:11:58未羊
日期:2015-03-20 17:12:10子鼠
日期:2015-03-20 17:12:23丑牛
日期:2015-03-20 17:12:40卯兔
日期:2015-03-20 17:12:51辰龙
日期:2015-03-20 17:13:00巳蛇
日期:2015-03-20 17:13:12
10 [报告]
发表于 2016-02-24 14:41 |只看该作者
不想改变原文件的话....这样也行...
  1. awk '!/^#/' urfile |while ......
  2. sed '/^#/d' urfile |while ......
复制代码
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

  

北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号:11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员  联系我们:huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP