免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
12下一页
最近访问板块 发新帖
查看: 1762 | 回复: 11
打印 上一主题 下一主题

[文本处理] shell处理文件问题 [复制链接]

论坛徽章:
1
数据库技术版块每日发帖之星
日期:2016-01-16 06:20:00
跳转到指定楼层
1 [收藏(0)] [报告]
发表于 2016-10-12 11:23 |只看该作者 |倒序浏览
大家好,有一个问题两中情况需要请教,注意文件的生成日期不一定跟后缀标识的日期一样,所以只能通过文件末尾名字来操作.问题是,保留文件最近3天的日志,定当前日期为2016/10/12
第一种情况:
/tmp目录下的文件名为
abc.20161007
abc.20161008
abc.20161009
abc.20161010
abc.20161011
abc.20161012
执行结果为只保留最近3天,即
abc.20161010
abc.20161011
abc.20161012
其余删掉
第二种情况:
/tmp目录下的文件名为
abc_2016_10_07.log
abc_2016_10_08.log
abc_2016_10_09.log
abc_2016_10_10.log
abc_2016_10_11.log
abc_2016_10_12.log
执行结果为只保留最近3天,即
abc_2016_10_10.log
abc_2016_10_11.log
abc_2016_10_12.log




实验了很多种命令,awk,不知道该如何实现.
先谢谢各位shell大神了!
感谢

论坛徽章:
39
双子座
日期:2014-08-06 17:37:19极客徽章
日期:2016-12-07 14:03:402017金鸡报晓
日期:2017-01-10 15:13:292017金鸡报晓
日期:2017-02-08 10:39:4215-16赛季CBA联赛之新疆
日期:2017-03-24 16:36:1915-16赛季CBA联赛之江苏
日期:2017-04-26 17:19:08黑曼巴
日期:2018-03-07 18:56:5615-16赛季CBA联赛之八一
日期:2018-03-09 10:44:1015-16赛季CBA联赛之江苏
日期:2018-03-12 15:12:1915-16赛季CBA联赛之青岛
日期:2018-03-16 09:13:0515-16赛季CBA联赛之山东
日期:2018-04-27 18:23:0515-16赛季CBA联赛之新疆
日期:2018-05-04 11:29:30
2 [报告]
发表于 2016-10-12 11:27 |只看该作者
如果排序好了直接取最后3行行不行?
tail -3

论坛徽章:
60
20周年集字徽章-20	
日期:2020-10-28 14:04:3015-16赛季CBA联赛之北京
日期:2016-07-06 15:42:0715-16赛季CBA联赛之同曦
日期:2016-06-12 10:38:0915-16赛季CBA联赛之佛山
日期:2016-05-27 11:54:56黄金圣斗士
日期:2015-12-02 11:44:35白银圣斗士
日期:2015-11-25 14:32:43白银圣斗士
日期:2015-11-23 12:53:352015亚冠之布里斯班狮吼
日期:2015-10-21 16:55:482015亚冠之首尔
日期:2015-09-01 16:46:052015亚冠之德黑兰石油
日期:2015-08-31 11:39:192015亚冠之萨济拖拉机
日期:2015-08-28 21:06:5315-16赛季CBA联赛之广东
日期:2016-07-12 14:58:53
3 [报告]
发表于 2016-10-12 11:35 |只看该作者
ls /tmp | head -n -3 # 先观察,或者自己排序

然后删除

ls /tmp | head -n -3 | xargs rm -f

论坛徽章:
145
技术图书徽章
日期:2013-10-01 15:32:13戌狗
日期:2013-10-25 13:31:35金牛座
日期:2013-11-04 16:22:07子鼠
日期:2013-11-18 18:48:57白羊座
日期:2013-11-29 10:09:11狮子座
日期:2013-12-12 09:57:42白羊座
日期:2013-12-24 16:24:46辰龙
日期:2014-01-08 15:26:12技术图书徽章
日期:2014-01-17 13:24:40巳蛇
日期:2014-02-18 14:32:59未羊
日期:2014-02-20 14:12:13白羊座
日期:2014-02-26 12:06:59
4 [报告]
发表于 2016-10-12 11:45 |只看该作者
回复 1# bingdele

check by yourself and modify rm=yes

$ ls  
abc.20161007  abc.20161010  abc_2016_10_07.log  abc_2016_10_10.log
abc.20161008  abc.20161011  abc_2016_10_08.log  abc_2016_10_11.log
abc.20161009  abc.20161012  abc_2016_10_09.log  abc_2016_10_12.log

$ ls abc_20*.log | awk -vrm=no '{if(match($0,"(20.._?[01]._?[0-3].)",d))a[d[1]]=$0}END{t=asorti(a,b);for(n=1;n<=t-3;++n){cmd="rm "a[b[n]];print cmd;if(rm=="yes")system(cmd)}}'
rm abc_2016_10_07.log
rm abc_2016_10_08.log
rm abc_2016_10_09.log

$ ls abc.20* | awk -vrm=no '{if(match($0,"(20.._?[01]._?[0-3].)",d))a[d[1]]=$0}END{t=asorti(a,b);for(n=1;n<=t-3;++n){cmd="rm "a[b[n]];print cmd;if(rm=="yes")system(cmd)}}'
rm abc.20161007
rm abc.20161008
rm abc.20161009

论坛徽章:
1
数据库技术版块每日发帖之星
日期:2016-01-16 06:20:00
5 [报告]
发表于 2016-10-12 11:47 |只看该作者
回复 3# reyleon

非常谢谢 这么简单!!引申一下:
这样基本应该可以,但是假如其中某天没有生成log(比如20161011那天),那就变为类似
20161009
20161010
20161012
变为保存了最近4天,即09 10 11(这天没日志) 12



论坛徽章:
54
2015亚冠之德黑兰石油
日期:2015-07-07 13:00:1615-16赛季CBA联赛之深圳
日期:2016-03-31 09:03:5415-16赛季CBA联赛之辽宁
日期:2016-05-09 20:38:15程序设计版块每日发帖之星
日期:2016-05-12 06:20:0015-16赛季CBA联赛之四川
日期:2016-05-13 15:19:4715-16赛季CBA联赛之福建
日期:2016-05-15 20:24:34每日论坛发贴之星
日期:2016-05-16 06:20:0015-16赛季CBA联赛之吉林
日期:2016-05-26 11:49:4715-16赛季CBA联赛之广东
日期:2016-05-26 13:49:18极客徽章
日期:2016-12-07 14:05:2315-16赛季CBA联赛之广夏
日期:2016-12-20 17:33:532017金鸡报晓
日期:2017-01-10 15:19:56
6 [报告]
发表于 2016-10-12 11:48 |只看该作者
  1. awk 'BEGIN{d=86400;t=systime()-d*2;for(i=1;i<30;i++)system("rm -f abc."strftime("%Y%m%d",t-i*d)" abc_"strftime("%Y_%m_%d",t-i*d)".log")}'
复制代码

论坛徽章:
307
程序设计版块每周发帖之星
日期:2016-04-08 00:41:33操作系统版块每日发帖之星
日期:2015-09-02 06:20:00每日论坛发贴之星
日期:2015-09-02 06:20:00程序设计版块每日发帖之星
日期:2015-09-04 06:20:00每日论坛发贴之星
日期:2015-09-04 06:20:00每周论坛发贴之星
日期:2015-09-06 22:22:00程序设计版块每日发帖之星
日期:2015-09-09 06:20:00程序设计版块每日发帖之星
日期:2015-09-19 06:20:00程序设计版块每日发帖之星
日期:2015-09-20 06:20:00每日论坛发贴之星
日期:2015-09-20 06:20:00程序设计版块每日发帖之星
日期:2015-09-22 06:20:00程序设计版块每日发帖之星
日期:2015-09-24 06:20:00
7 [报告]
发表于 2016-10-12 12:26 |只看该作者
  1. perl -e 'for(@ARGV){($v=$_)=~y/_//d;unlink($_) if($v!~/2016101[0-2]/)}' *
复制代码

论坛徽章:
28
15-16赛季CBA联赛之八一
日期:2016-02-22 19:10:4215-16赛季CBA联赛之深圳
日期:2016-12-01 10:34:0415-16赛季CBA联赛之新疆
日期:2016-12-07 10:24:2915-16赛季CBA联赛之同曦
日期:2016-12-15 12:06:43CU十四周年纪念徽章
日期:2016-12-18 13:03:4415-16赛季CBA联赛之吉林
日期:2017-01-03 15:52:2515-16赛季CBA联赛之辽宁
日期:2017-01-04 14:58:2415-16赛季CBA联赛之辽宁
日期:2017-01-15 09:42:512016科比退役纪念章
日期:2017-02-06 17:21:50黑曼巴
日期:2017-02-10 15:46:1215-16赛季CBA联赛之上海
日期:2017-03-18 10:14:5415-16赛季CBA联赛之青岛
日期:2017-03-18 22:00:44
8 [报告]
发表于 2016-10-12 12:34 |只看该作者

  1. st=`date +%Y%m%d -d "-3 days"`
  2. for i in `ls /tmp/abc*`; do
  3.     d=`sed -r 's/abc.//;s/_|.log$//g' <<< "$i"`
  4.     if [[ $d -le $st ]]; then
  5.         rm -rf "$i"
  6.     fi
  7. done
复制代码

论坛徽章:
1
数据库技术版块每日发帖之星
日期:2016-01-16 06:20:00
9 [报告]
发表于 2016-10-12 13:09 |只看该作者
回复 4# jason680

好厉害的样子,我慢慢研究,谢谢大神!

论坛徽章:
1
数据库技术版块每日发帖之星
日期:2016-01-16 06:20:00
10 [报告]
发表于 2016-10-12 13:10 |只看该作者
回复 8# moperyblue

谢谢大神,我研究研究看看
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

  

北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号:11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员  联系我们:huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP