忘记密码   免费注册 查看新帖 | 论坛精华区

ChinaUnix.net

  平台 论坛 博客 认证专区 大话IT 视频 徽章 文库 沙龙 自测 下载 频道自动化运维 虚拟化 储存备份 C/C++ PHP MySQL 嵌入式 Linux系统
最近访问板块 发新帖
查看: 270 | 回复: 2

[文本处理] 去掉文本内的特殊字符 [复制链接]

论坛徽章:
0
发表于 2017-03-16 17:36 |显示全部楼层
有一个文本文件,
在vim下面编辑的话,显示如下:
  ---- More ----^[[42D                                          ^[[42D local-user xxx privilege level 15
  ---- More ----^[[42D                                          ^[[42D arp-fake expire-time 30
  ---- More ----^[[42D                                          ^[[42D  #
  ---- More ----^[[42D                                          ^[[42D  #
  ---- More ----^[[42D                                          ^[[42D port link-type access
  ---- More ----^[[42D                                          ^[[42D interface GigabitEthernet0/0/19
  ---- More ----^[[42D                                          ^[[42D stp disable
  ---- More ----^[[42D                                          ^[[42D description lingdao-server
  ---- More ----^[[42D                                          ^[[42D user-interface vty 0 4   

用cat打开,显示如下:
local-user xxx privilege level 15      
arp-fake expire-time 30                  
#                                         
#                                         
port link-type access                    
interface GigabitEthernet0/0/19           
stp disable                              
description lingdao-server               
user-interface vty 0 4


用shell该怎么去掉” ---- More ----^[[42D                                          ^[[42D“ 这些无用的字符呢?

尝试过 :
while read line
do
  #sed -i -e "s/*$line/ $line/" source.txt
done < teefile


报错:
+ read line
/' source.txtr xxx privilege level 15      
sed:-e 表达式 #1,字符 210:未终止的“s”命令
+ read line
/' source.txtexpire-time 30                  
sed:-e 表达式 #1,字符 188:未终止的“s”命令
+ read line
/' source.txt                                
sed:-e 表达式 #1,字符 142:未终止的“s”命令
+ read line
/' source.txt                                
sed:-e 表达式 #1,字符 142:未终止的“s”命令
+ read line
/' source.txt-type access                    
sed:-e 表达式 #1,字符 184:未终止的“s”命令
+ read line
...
...
...
...
...



vim所得

vim所得

论坛徽章:
104
技术图书徽章
日期:2013-10-01 15:32:13戌狗
日期:2013-10-25 13:31:35金牛座
日期:2013-11-04 16:22:07巳蛇
日期:2014-05-09 16:43:18巨蟹座
日期:2014-10-23 17:48:38子鼠
日期:2013-11-18 18:48:57白羊座
日期:2013-11-29 10:09:11狮子座
日期:2013-12-12 09:57:42白羊座
日期:2013-12-24 16:24:46辰龙
日期:2014-01-08 15:26:12技术图书徽章
日期:2014-01-17 13:24:40巳蛇
日期:2014-02-18 14:32:59
发表于 2017-03-16 18:13 |显示全部楼层
本帖最后由 jason680 于 2017-03-16 19:41 编辑

回复 1# unandy

$ hexdump -C FILE
00000000  2d 2d 2d 2d 20 4d 6f 72  65 20 2d 2d 2d 2d 1b 5b  |---- More ----.[|
00000010  34 32 44 20 20 20 20 20  20 20 20 20 20 20 20 20  |42D             |
00000020  20 20 20 20 20 20 20 20  20 20 20 20 20 20 20 20  |                |
00000030  20 20 20 20 20 20 20 20  20 20 20 20 20 1b 5b 34  |             .[4|
00000040  32 44 20 6c 6f 63 61 6c  2d 75 73 65 72 20 78 78  |2D local-user xx|
00000050  78 20 70 72 69 76 69 6c  65 67 65 20 6c 65 76 65  |x privilege leve|
00000060  6c 20 31 35 0a                                    |l 15.|
00000065

$ perl -pe '{while(s/^([^\x1b]+)\x1b\[(\d+)D//){$l=length($1);if($l>$2){$_=substr($1,0,$l-$2).$_}}}' FILE
local-user xxx privilege level 15

$ perl -pe '{while(s/^([^\x1b]+)\x1b\[(\d+)D//){$l=length($1);if($l>$2){$_=substr($1,0,$l-$2).$_}}}' FILE |hexdump -C
00000000  20 6c 6f 63 61 6c 2d 75  73 65 72 20 78 78 78 20  | local-user xxx |
00000010  70 72 69 76 69 6c 65 67  65 20 6c 65 76 65 6c 20  |privilege level |
00000020  31 35 0a                                          |15.|
00000023


论坛徽章:
0
发表于 2017-03-16 20:26 |显示全部楼层
@jason680 的方式可行,谢谢。

还有shell的处理方式吗?
您需要登录后才可以回帖 登录 | 注册

本版积分规则

久等啦!10张门票开启你的DTCC2017之旅

2017中国数据库技术大会将于2017年5月11-13日如约而至,本届大会以“数据驱动•价值发现”为主题,共设定2大主场和21个技术专场,云集海内外120+位技术大牛,共同探讨Oracle、MySQL、NoSQL、云端数据库、区块链、深度学习等领域的前瞻性热点话题。
即日起,填写DTCC2017会前调查问卷,即有机会赢取价值2600元的大会门票1张!仅限10张!
----------------------------------------
活动截止时间:2017年5月5日统一公布

问卷入口>>
  

北京皓辰网域网络信息技术有限公司. 版权所有 京ICP证:060528号 北京市公安局海淀分局网监中心备案编号:1101082001
广播电视节目制作经营许可证(京) 字第1234号 中国互联网协会会员  联系我们:
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP