免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
最近访问板块 发新帖
查看: 6347 | 回复: 5
打印 上一主题 下一主题

关于检测文本文件的编码方式的问题 [复制链接]

论坛徽章:
0
跳转到指定楼层
1 [收藏(0)] [报告]
发表于 2004-12-09 19:20 |只看该作者 |倒序浏览
我又一批文本文件,编码方式是shift-jis,想它转换成utf-8。
iconv -f shift-jis -t utf-8 filename
但是如果其中某些文件已经是utf-8编码方式,那么我执行上述的命令就会出现文本中的内容乱码。
我想请教一下:unix下是否有命令或者简单的用shell处理一下就可以得到文本的编码方式。
需要用perl或者python的BOM读取文件才能知道吗?

论坛徽章:
1
荣誉会员
日期:2011-11-23 16:44:17
2 [报告]
发表于 2004-12-09 20:27 |只看该作者

关于检测文本文件的编码方式的问题

先file一下当前目录下的文件,将已经是utf格式的剔出后再convert!

论坛徽章:
0
3 [报告]
发表于 2004-12-11 16:02 |只看该作者

关于检测文本文件的编码方式的问题

file能看到编码信息吗?
#file tmp.txt
tmp.txt: ASCII text
#file test.sh
test.sh:Bourne shell script text executable
我man file|grep encoding看了一下,确实有关编码的信息,但是不知道具体接什么参数查看编码

论坛徽章:
0
4 [报告]
发表于 2007-04-10 11:25 |只看该作者
提示: 作者被禁止或删除 内容自动屏蔽

论坛徽章:
0
5 [报告]
发表于 2012-10-10 13:31 |只看该作者
直接使用file 就可以查看的到!

论坛徽章:
0
6 [报告]
发表于 2012-10-11 17:15 |只看该作者
刚试了一下,file命令果然可以得到编码类型。
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

  

北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号:11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员  联系我们:huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP