[已解决]求助批处理如何实现文件查重复行？

BingjianREMIX · 发表于 2023-7-9 22:50:18

本帖最后由 BingjianREMIX 于 2023-7-10 16:36 编辑

一个文件中有多行文本,不确定那一行与那一行相同,需要留下一行唯一的,直到文件中没有任何一行相同,这个脚本怎么搞,谢谢

qixiaobin0715 · 发表于 2023-7-10 08:18:57

回复 1# BingjianREMIX
要善用搜索。

hfxiang · 发表于 2023-7-10 08:37:08

回复 1# BingjianREMIX
用第3方工具gawk（ http://bcn.bathome.net/tool/4.1.0/gawk.exe ）比较简单:

复制代码

Batcher · 发表于 2023-7-10 12:01:53

BingjianREMIX · 发表于 2023-7-10 16:34:58

感谢大佬们,已经解决了

BingjianREMIX · 发表于 2023-7-10 16:39:12

那大佬们帮我看看,这到底什么问题http://bbs.bathome.net/thread-66756-1-1.html

DAIC · 发表于 2023-7-12 15:17:42

回复 1# BingjianREMIX

去重-V1.bat

复制代码

DAIC · 发表于 2023-7-12 15:22:28

回复 1# BingjianREMIX

去重-V2.bat

powershell "$MyHash = @{}; Get-Content 'Old.txt' | ForEach-Object{if(!$MyHash.ContainsKey($_)){$_; $MyHash.Add($_ , 1)}}" > "New.txt"

复制代码

		自动登录	找回密码
密码			注册

[新手上路]批处理新手入门导读	[视频教程]批处理基础视频教程	[视频教程]VBS基础视频教程	[批处理精品]批处理版照片整理器
[批处理精品]纯批处理备份&还原驱动	[批处理精品]CMD命令50条不能说的秘密	[在线下载]第三方命令行工具	[在线帮助]VBScript / JScript 在线参考

[文本处理] [已解决]求助批处理如何实现文件查重复行？