免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
123下一页
最近访问板块 发新帖
查看: 5844 | 回复: 28
打印 上一主题 下一主题

[其他] 有这么个需求,不知用shell能否实现? [复制链接]

论坛徽章:
0
跳转到指定楼层
1 [收藏(0)] [报告]
发表于 2013-10-27 11:12 |只看该作者 |倒序浏览
mysql数据库有如下表
aa_201001 aa_201002 bb_201301 bb_201302 bb_201303 cc_201302_bak 这类,很多表

凡是名字带下划线后面有日期的,分析这一类表的表结构是否一致,一致就ok,不一致的话显示出该表
目前有n个库,每个库下面有n个表



不知用shell是否能实现?

论坛徽章:
1
技术图书徽章
日期:2013-09-25 21:06:29
2 [报告]
发表于 2013-10-27 11:15 |只看该作者
如果一直表结构应该是什么样的啊? 最好提供这个

论坛徽章:
0
3 [报告]
发表于 2013-10-27 11:22 |只看该作者
本帖最后由 o0o520 于 2013-10-27 11:24 编辑

我是用show create table like ‘表_%'; 这样方式获取的表结构信息, 因为查到的建表语句会包含表名,生成文件 ,最后把表名例如aa_201001 aa_201002,用sed 去掉  再用MD5值比对  这么1个思路

现在在多库逐层遍历 以及内容比对这块遇到了些问题,还望指点



论坛徽章:
39
辰龙
日期:2013-08-21 15:45:192015亚冠之广州富力
日期:2015-05-12 16:34:52亥猪
日期:2015-03-03 17:22:00申猴
日期:2015-03-03 17:21:37未羊
日期:2014-10-10 13:45:41戌狗
日期:2014-06-17 09:53:29巨蟹座
日期:2014-06-12 23:17:17双鱼座
日期:2014-06-10 12:42:44寅虎
日期:2014-06-09 12:52:172015亚冠之卡尔希纳萨夫
日期:2015-05-24 15:24:35黄金圣斗士
日期:2015-12-02 17:25:0815-16赛季CBA联赛之吉林
日期:2017-06-24 16:43:52
4 [报告]
发表于 2013-10-27 11:55 |只看该作者
本帖最后由 关阴月飞 于 2013-10-27 11:56 编辑
o0o520 发表于 2013-10-27 11:22
我是用show create table like ‘表_%'; 这样方式获取的表结构信息, 因为查到的建表语句会包含表名,生成文 ...


这样获取出来的表结构信息太多了吧,目测这是在取建表语句,如果你说的表结构,是指表的字段组成的话, 是不是可以考虑用 DESC dbname.tablename 这种方式会清晰一些

论坛徽章:
39
辰龙
日期:2013-08-21 15:45:192015亚冠之广州富力
日期:2015-05-12 16:34:52亥猪
日期:2015-03-03 17:22:00申猴
日期:2015-03-03 17:21:37未羊
日期:2014-10-10 13:45:41戌狗
日期:2014-06-17 09:53:29巨蟹座
日期:2014-06-12 23:17:17双鱼座
日期:2014-06-10 12:42:44寅虎
日期:2014-06-09 12:52:172015亚冠之卡尔希纳萨夫
日期:2015-05-24 15:24:35黄金圣斗士
日期:2015-12-02 17:25:0815-16赛季CBA联赛之吉林
日期:2017-06-24 16:43:52
5 [报告]
发表于 2013-10-27 12:28 |只看该作者
本帖最后由 关阴月飞 于 2013-10-27 12:32 编辑

回复 1# o0o520


    提供一个思路给你:

  1. #!/bin/bash
  2. #首先提取一个标准的表结构,作为判断的依据
  3. md5=$(mysql -NBe "DESC db_name.table_name" |md5sum)

  4. #取出所有符合要求的库做循环处理
  5. for db_name in $(mysql -NBe "SHOW databases")
  6. do
  7.         #取出所有符合要求的表循做环处理
  8.         for table_name in $(mysql $db_name -NBe "SHOW tables" |grep -E '.+_[0-9]{6}')
  9.         do
  10.                 #计算表结构md5值
  11.                 md5_table=$(mysql $db_name -NBe "DESC $table_name" |md5sum)
  12.                
  13.                 #对比md5值
  14.                 if [ "$md5" != "$md5_table" ];then
  15.                         echo "$db_name $table_name 表结构不一致"
  16.                 fi
  17.         done
  18. done
  19.                        
复制代码

论坛徽章:
0
6 [报告]
发表于 2013-10-27 12:54 |只看该作者
本帖最后由 o0o520 于 2013-10-27 13:00 编辑
关阴月飞 发表于 2013-10-27 12:28
回复 1# o0o520


多谢                 

论坛徽章:
0
7 [报告]
发表于 2013-10-28 13:03 |只看该作者
还有1个问题 能帮忙看下吗
abc_11.EventClick_201303    99a9b08c4a387af34155b576ba197a3d  -
abc_11.EventClick_201304    99a9b08c4a387af34155b576ba197a3d  -
abc_11.EventClick_201305    99a9b08c4a387af34155b576ba197a3d  -
abc_11.EventClick_201306    99a9b08c4a387af34155b576ba197a3d  -
abc_11.EventClick_201307    99a9b08c4a387af34155b576ba197a3d  -
abc_11.EventClick_201308    99a9b08c4a387af34155b576ba197a3d  -
abc_11.EventClick_201309    99a9b08c4a387af34155b576ba197a3d  -
abc_11.EventClick_201310    ae6aadd913c8a4d6e409e7921b19fc84  -
abc_11.EventClick_201311    99a9b08c4a387af34155b576ba197a3d  -
abc_11.EventClick_201312    d24327fef393ea33e662d362c96926bc  -
abc_11.IdeaRev_201306       318716f8b5a8d598b729a2fd8226686f  -
abc_11.IdeaRev_201307       318716f8b5a8d598b729a2fd8226686f  -
abc_11.IdeaRev_201308       318716f8b5a8d598b729a2fd8226686f  -
abc_11.IdeaRev_201309       318716f8b5a8d598b729a2fd8226686f  -
abc_11.IdeaRev_201310       318716f8b5a8d598b729a2fd8226686f  -
abc_11.IdeaRev_201311       318716f8b5a8d598b729a2fd8226686f  -
abc_11.IdeaRev_201312       318716f8b5a8d598b729a2fd8226686f  -
abc_11.Rev_201306        23fe872bcadc7549a71eedc7151bd7d5  -
abc_11.Rev_201307        23fe872bcadc7549a71eedc7151bd7d5  -
abc_11.Rev_201308        ae6aadd913c8a4d6e409e7921b19fc84  -
abc_11.Rev_201309        ae6aadd913c8a4d6e409e7921b19fc84  -
abc_11.Rev_201310        ae6aadd913c8a4d6e409e7921b19fc84  -
abc_11.Rev_201311        ae6aadd913c8a4d6e409e7921b19fc84  -
abc_11.Rev_201312        ae6aadd913c8a4d6e409e7921b19fc84  -
abc_11.K_W_201101        b6c1ba230fe87d13ed2f291698d008fd  -
abc_11.K_W_201102        b6c1ba230fe87d13ed2f291698d008fd  -


如何匹配第1列的相同规则的如abc_11.K_W 后面带(_日期的) 这样的行,第二列md5相同重复5次以上的全部去掉。留下内容不同的或者重复不到5次的。

论坛徽章:
39
辰龙
日期:2013-08-21 15:45:192015亚冠之广州富力
日期:2015-05-12 16:34:52亥猪
日期:2015-03-03 17:22:00申猴
日期:2015-03-03 17:21:37未羊
日期:2014-10-10 13:45:41戌狗
日期:2014-06-17 09:53:29巨蟹座
日期:2014-06-12 23:17:17双鱼座
日期:2014-06-10 12:42:44寅虎
日期:2014-06-09 12:52:172015亚冠之卡尔希纳萨夫
日期:2015-05-24 15:24:35黄金圣斗士
日期:2015-12-02 17:25:0815-16赛季CBA联赛之吉林
日期:2017-06-24 16:43:52
8 [报告]
发表于 2013-10-28 13:10 |只看该作者
本帖最后由 关阴月飞 于 2013-10-28 13:12 编辑

回复 7# o0o520

第一列是指: abc_11.K_W_201102   还是指(不带日期)的:  abc_11.K_W   

论坛徽章:
15
2015年辞旧岁徽章
日期:2015-03-03 16:54:15双鱼座
日期:2015-01-15 17:29:44午马
日期:2015-01-06 17:06:51子鼠
日期:2014-11-24 10:11:13寅虎
日期:2014-08-18 07:10:55酉鸡
日期:2014-04-02 12:24:51双子座
日期:2014-04-02 12:19:44天秤座
日期:2014-03-17 11:43:36亥猪
日期:2014-03-13 08:13:51未羊
日期:2014-03-11 12:42:03白羊座
日期:2013-11-20 10:15:18CU大牛徽章
日期:2013-04-17 11:48:45
9 [报告]
发表于 2013-10-28 13:16 |只看该作者
本帖最后由 rdcwayx 于 2013-10-28 15:17 编辑

猜一下
  1. awk '{str=$1;gsub(/_[^_]*$/,"",str)}NR==FNR{a[str FS $2]++;next} a[str FS $2]<5 ' infile infile

  2. abc_11.EventClick_201310    ae6aadd913c8a4d6e409e7921b19fc84  -
  3. abc_11.EventClick_201312    d24327fef393ea33e662d362c96926bc  -
  4. abc_11.Rev_201306        23fe872bcadc7549a71eedc7151bd7d5  -
  5. abc_11.Rev_201307        23fe872bcadc7549a71eedc7151bd7d5  -
  6. abc_11.K_W_201101        b6c1ba230fe87d13ed2f291698d008fd  -
  7. abc_11.K_W_201102        b6c1ba230fe87d13ed2f291698d008fd  -
复制代码

论坛徽章:
0
10 [报告]
发表于 2013-10-28 13:21 |只看该作者
本帖最后由 o0o520 于 2013-10-28 13:23 编辑
rdcwayx 发表于 2013-10-28 13:16
猜一下


对 就是这样的效果
我执行没有输出啊
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

  

北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号:11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员  联系我们:huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP