[文本处理] 批处理怎样快速获取大文件倒数行？

娜美

获取倒数行,  想获取最后1000行巨慢    一个200mb文件要半天时间

@echo off
for /f "tokens=1* delims=:" %%i in ('type a.txt^|findstr /n "."') do (set n=%%i)
set /a n=%n%-1000
more +%n% a.txt
pause
复制代码

似乎需要使用倒数运算才能加快 获取最后1000行,  即从倒数开始,  而不是从头开始
使用type 如何才能加快倒数运算获取最后1000行呢 ? 谢谢指正

Five66

只知道用第三方程序sed之类的应该快点

pd1

Measure-Command{$a=[io.file]::ReadAllLines(".\in.txt");$b=($a.Length-1)..($a.Length-1000)|%{$a[$_]};[io.file]::WriteAllLines(".\out.txt",$b)}
复制代码

300M文件2秒多吧

娜美

回复 2# Five66
哦哦，用type不能快了吗
那如果用sed awk那个写法更快

wanghan519

用tail很快，它好像是seek文件末尾逐字节向前读文件，遇到回车就计数这种，平时无脑用，具体怎么实现真不会。。。

娜美

回复 3# pd1


    嗯嗯哥哥的确实很快,      似乎顺序存放倒转了, 获取到的1000行不是按原顺序输出,

pd1

回复 6# 娜美


    你是说要从最后一行开始吗？想反过来就把-1 和-1000换一下

Five66

回复 4# 娜美

type应该是从头开始的，不能从末尾开始
没用过akw，不知道谁快

娜美

回复 7# pd1


    Yeah..哥哥的写法很灵巧哦,  学习了

Batcher

回复 1# 娜美

@echo off
tail.exe -1000 a.txt
pause
复制代码

http://bcn.bathome.net/s/tool/index.html?key=tail

娜美

回复 8# Five66


    sed也很慢吧    应该没有3楼pd1哥哥的ps快

77七

@echo off
for /f "delims=" %%a in ('find /c /v "" ^<a.txt') do (
	set /a n=%%a-1000
)
(for /f "useback skip=%n% delims=" %%a in ("a.txt") do (
	echo %%a
))>b.txt
pause
复制代码

娜美

回复 10# Batcher


    这确实很快,,   但处理一些UTF16编码文件出来后会发生编码混乱字符

娜美

回复 12# 77七


    哥哥的用find比我那个快的多

Five66

回复 11# 娜美

知道总行数应该是sed快
不知道总行数ps快吧