[新手上路]批处理新手入门导读[视频教程]批处理基础视频教程[视频教程]VBS基础视频教程[批处理精品]批处理版照片整理器
[批处理精品]纯批处理备份&还原驱动[批处理精品]CMD命令50条不能说的秘密[在线下载]第三方命令行工具[在线帮助]VBScript / JScript 在线参考
返回列表 发帖
zjeagle

Rank: 1

帖子
3 
积分
25 
技术
0  
捐助
0  
注册时间
2011-3-20 
1楼 跳转到 » 倒序看帖
打印
tT
发表于 2011-3-20 21:39 | 只看该作者

[文本处理] 批处理怎么删除文件里的空行和含指定字符串/关键字的行？

本帖最后由 pcl_test 于 2017-4-22 14:55 编辑

在论坛里学习了一下，下面这条语句已经做到可以把空行删除了
  1. @echo off&setlocal enabledelayedexpansion

  2. for /f "delims=" %%i in (a.txt) do (echo.%%i>>aa.txt)
复制代码
但我还有一些其他要求，请大侠们帮忙看看
1、速度，请问windows下上面那句for命令是不是最快了，我要处理大约三四百M的文本，我试了一下，非常慢，要好几分钟啊。unix下grep快多了。
2、最好能够再加上过滤掉含有某个字符串的行（比如所有含"records count”的行）
3、还要去掉文本中最开始的3行文本。
4、最重要的就是要能自动循环处理当前目录的所有文本文件。
5、处理后的文件名最好就是原文件名。
收藏 分享

CrLf

Rank: 8Rank: 8

帖子
6388 
积分
18837 
技术
980  
捐助
100  
注册时间
2010-10-9 
2楼
发表于 2011-3-20 22:41 | 只看该作者
本帖最后由 zm900612 于 2011-3-21 17:31 编辑

光光过滤空行确实首推for命令，但是要筛选关键词的时候还是要findstr出场：
  1. for /f "tokens=1* delims=:" %%a in ('findstr /v /c:"records count" *.txt^|findstr /v "^[^:]*:[1-3]:"') do echo>>"%%a" %%b

  2. ::适用于目录下有多个txt文件的情况
复制代码
原先没看到跳过前三行的要求，改下。
链接：在线第三方命令行工具下载   bat、vbs、js 原生混编

TOP

zjeagle

Rank: 1

帖子
3 
积分
25 
技术
0  
捐助
0  
注册时间
2011-3-20 
3楼
发表于 2011-3-21 13:21 | 只看该作者
光光过滤空行确实首推for命令，但是要筛选关键词的时候还是要findstr出场：
for /f "tokens=1* delims=:" %%a in ('findstr /v /c:"records count" *.txt') do echo>"%%a" %%b
::适用于目录下有多个txt文件的情况
...
zm900612 发表于 2011-3-20 22:41

先谢了，不过dos下的for处理速度有点慢，我再琢磨琢磨。

TOP

wc726842270

Rank: 7Rank: 7Rank: 7

帖子
1107 
积分
4218 
技术
37  
捐助
0  
注册时间
2010-6-8 
4楼
发表于 2011-3-21 13:29 | 只看该作者
DOS？LZ是想在DOS系统下做？:funk:
枫中残雪：风停了，我的心却在动，让我心中的寒意走向远方

TOP

qzwqzw

Rank: 8Rank: 8

帖子
508 
积分
1490 
技术
87  
捐助
0  
注册时间
2008-7-17 
5楼
发表于 2011-3-21 13:31 | 只看该作者
过滤空行和关键字可以使用findstr一次处理
过滤头几行可以用more +n
这些在处理大文件时速度比for要快很多
不过鉴于你这个已经是一个相对完整的case
在这就不提供具体的示例了
天的白色影子

TOP

Batcher

Rank: 12Rank: 12Rank: 12

帖子
14828 
积分
46009 
技术
849  
捐助
745  
注册时间
2008-6-9 
6楼
发表于 2011-3-21 14:06 | 只看该作者
3# zjeagle


可以去下载一个Windows版的grep或者gawk
http://bbs.bathome.net/thread-1114-1-1.html
我帮忙写的代码不需要付钱。如果一定要给，请在微信群或QQ群发给大家吧。
【微信公众号、微信群、QQ群】http://bbs.bathome.net/thread-3473-1-1.html
【支持批处理之家，加入VIP会员！】http://bbs.bathome.net/thread-67716-1-1.html

TOP

caruko

Rank: 6Rank: 6

帖子
643 
积分
2335 
技术
50  
捐助
0  
注册时间
2009-12-2 
7楼
发表于 2011-3-21 16:57 | 只看该作者
more /s +3 a.txt | findstr /v "records count" >temp.txt

TOP

zjeagle

Rank: 1

帖子
3 
积分
25 
技术
0  
捐助
0  
注册时间
2011-3-20 
8楼
发表于 2011-3-21 18:41 | 只看该作者
谢谢楼上诸位，我已经搞定了，还是直接在程序里写了。
dos下批处理速度比较慢，远远比不上unix下的那几个命令。

TOP

返回列表