[新手上路]批处理新手入门导读[视频教程]批处理基础视频教程[视频教程]VBS基础视频教程[批处理精品]批处理版照片整理器
[批处理精品]纯批处理备份&还原驱动[批处理精品]CMD命令50条不能说的秘密[在线下载]第三方命令行工具[在线帮助]VBScript / JScript 在线参考
返回列表 发帖
freesoft00

Rank: 4

帖子
352 
积分
486 
技术
12  
捐助
0  
注册时间
2009-4-5 
1楼 跳转到 » 倒序看帖
打印
tT
发表于 2014-5-28 10:55 | 只看该作者

sed或者awk两个软件是否可以处理unicode文本

具体这两个软件的使用区别我也不知道。比较外行，我想处理一个文本，删除其中指定字符的行。或者替换指定字符的行。但文本是unicode格式的，批处理处理不了。
我按照网上给的sed命令删除这个文本中的符合指定字符的行，处理后的文本像乱码形式的一样。不知道这连个软件是否可以处理这个格式的。
另外，我的具体需求，是使用sed呢，还是使用awk。
比如我删除的字符行是
232342test

比如要替换的字符行是
test123456
替换为
test789123
收藏 分享

PowerShell

Rank: 5Rank: 5

帖子
437 
积分
1319 
技术
27  
捐助
0  
注册时间
2013-6-30 
2楼
发表于 2014-5-28 11:55 | 只看该作者
本帖最后由 PowerShell 于 2014-5-28 12:47 编辑

记住这一点，linux和linux下的东西，是以英文为基础的，处理多字符集的，容易乱码。
想要修正，至少20年。---口说无凭，你在linux，win分别建立个账户【张三】然后top试试。
另外默认的sed貌似有win回车识别问题。

win，从win2000开始，本身基于大字符集。java，。net是真正的unicode处理语言。python3，只部分是
所以powershell是世界上最好的编码处理脚本语言。

怎么个好法，详见拙作：
http://www.bathome.net/thread-26673-1-1.html
http://www.bathome.net/thread-25683-1-1.html

再说了，最好的脚本语言我都不想用，嫌麻烦，
虽然脚本强大，但大多数我们不需要这么强大，我们的需求很简单，
我们就可以用【图形界面的编辑软件+正则+宏】来处理啊，这多傻瓜化。
而且有专门的，图形界面的，搜索替换软件。如 search & replace
脚本是写给人看的,是写给用户看的,而不是写给机子看的
用户能看懂、会修改的脚本,才是好脚本。
写易懂的powershell脚本帮人解决问题,进而让用户学会自渔,吾所愿也

TOP

freesoft00

Rank: 4

帖子
352 
积分
486 
技术
12  
捐助
0  
注册时间
2009-4-5 
3楼
发表于 2014-5-28 13:23 | 只看该作者
本帖最后由 freesoft00 于 2014-5-28 13:26 编辑

感谢，我也知道powershell比较强大，但是因为它来到比较晚，dos先了解了，不想再费精力去研究这个新的东西了，虽然它很好，但是我不是专业人士，只是偶尔处理东西想方便些。没有那个精力去深入了解。
图像界面因为我处理的文本不算大，记事本就可以手工完成。我只是看是否有命令行当程序，可以自动花完成这些操作。
谢谢了

TOP

DAIC

Rank: 8Rank: 8

帖子
2874 
积分
7021 
技术
336  
捐助
0  
注册时间
2011-6-2 
4楼
发表于 2014-5-28 16:45 | 只看该作者
本帖最后由 DAIC 于 2014-5-28 16:47 编辑 
  1. type 1.txt | sed "s/test123456/test789123/" > 2.txt
复制代码
从这里下载 sed.exe
http://code.google.com/p/gnu-on-windows/downloads/list
sed.exe  gawk.exe  grep.exe  下载地址

TOP

freesoft00

Rank: 4

帖子
352 
积分
486 
技术
12  
捐助
0  
注册时间
2009-4-5 
5楼
发表于 2014-5-29 15:39 | 只看该作者
本帖最后由 freesoft00 于 2014-5-29 16:04 编辑

这样不可以，处理后的文件就不是unicode编码了，而变为了ansi码

TOP

Tuberose

Rank: 1

帖子
34 
积分
52 
技术
0  
捐助
0  
注册时间
2010-11-24 
6楼
发表于 2014-5-29 16:04 | 只看该作者
你把 unicode文本 打包发上来
我们看看

TOP

freesoft00

Rank: 4

帖子
352 
积分
486 
技术
12  
捐助
0  
注册时间
2009-4-5 
7楼
发表于 2014-5-29 16:07 | 只看该作者
是xp系统光盘中的inf文件，在i386目录中，一搜就搜到了。这个时候不方便上传，如果能找到最好，如果找不到我晚上传上来。

TOP

CrLf

Rank: 8Rank: 8

帖子
6388 
积分
18837 
技术
980  
捐助
100  
注册时间
2010-10-9 
8楼
发表于 2014-5-29 20:43 | 只看该作者
回复 5# freesoft00 
  1. type 1.txt | cmd /u /c sed "s/test123456/test789123/" > 2.txt
复制代码
不过如果要文件头得多一步
而且，unicode 转 ansi 可能会丢字符
链接：在线第三方命令行工具下载   bat、vbs、js 原生混编

TOP

返回列表