设为首页收藏本站
切换到宽版

 找回密码
 注册
搜索
批处理之家»论坛 › 批处理专区: BAT CMD DOS › BAT求助&讨论 › [分享]批处理词频出现次数统计-词条统计-文本理顺 ...
[新手上路]批处理新手入门导读[视频教程]批处理基础视频教程[视频教程]VBS基础视频教程[批处理精品]批处理版照片整理器
[批处理精品]纯批处理备份&还原驱动[批处理精品]CMD命令50条不能说的秘密[在线下载]第三方命令行工具[在线帮助]VBScript / JScript 在线参考
返回列表 发新帖
查看: 2519|回复: 2

[文本处理] [分享]批处理词频出现次数统计-词条统计-文本理顺

[复制链接]
yakeyun
发表于 2025-8-6 12:33:04 | 显示全部楼层 |阅读模式
脚本会将1.txt中的文本，以一行为一个词条，进行筛选理顺排序，并统计词条出现的次数，对于工作中一些信息整理收集会用的上。
  1. @echo off
  2. setlocal enabledelayedexpansion

  4. :: 初始化总词条计数器
  5. set /a total=0

  7. :: 检查文件是否存在
  8. if not exist "1.txt" (
  9.     echo,词频统计工具>1.txt
  10.     notepad %~dp0%\1.txt
  11. )

  13. :: 生成排序后的临时文件
  14. sort 1.txt /O _sorted.txt >nul

  16. :: 初始化行计数器
  17. set "current="
  18. set "previous="
  19. set /a count=1

  21. :: 统计相同行出现次数
  22. for /f "usebackq delims=" %%a in ("_sorted.txt") do (
  23.     set "current=%%a"
  24.     if defined previous (
  25.         if "!current!"=="!previous!" (
  26.             set /a count+=1
  27.         ) else (
  28.             echo !previous! 出现次数：!count!
  29.             set /a total+=count
  30.             set /a count=1
  31.         )
  32.     )
  33.     set "previous=!current!"
  34. )

  36. :: 输出最后一条统计并累加
  37. if defined current (
  38.     echo !current! 出现次数：!count!
  39.     set /a total+=count
  40. )

  42. :: 显示总词条数
  43. echo.
  44. echo 全部词条数为：!total!

  46. :: 清理临时文件
  47. del _sorted.txt 2>nul

  49. endlocal

  51. pause
复制代码
比如原文本类容：
昂达_ONDA_B450S+B   
华硕_B760M-AYW_PRO_WIFI   
华硕_B760M-AYW_WIFI_D4   
华硕_B760M-D3H   
华硕_B760M-D3H_D4   
华硕_B760M-T_D4_R2.0   
华硕_B860M_AYW_GAMING_WIFI   
华硕_H610M-D3H_M.2_D4   
华硕_PRIME_A520M-K   
华硕_PRIME_B365M-K   
华硕_PRIME_B550M-K_ARGB   
华硕_PRIME_B760M-A_WIFI_D4   
华硕_PRIME_B760M-F   
华硕_PRIME_B760M-F_D4   
华硕_PRIME_H610M-F_WIFI_D4   
华硕_PRIME_Z890-P_WIFI   
华硕_PRIME_Z890M-PLUS_WIFI   
华硕_ROG_STRIX_B850-G_GAMING_WIFI_S   
华硕_TUF_GAMING_B760M-PLUS_WIFI_D4   
华硕_TUF_GAMING_B850M-E_WIFI   
华硕_TUF_GAMING_B850M-PLUS_WIFI   
华硕_TUF_GAMING_B860M-PLUS_WIFI   
技嘉_B760M_GAMING_AC_DDR4   
技嘉_H610M_K_DDR4   
技嘉_Z890M_AORUS_ELITE_WIFI7   
铭瑄_MS-B550M_GAMING_WIFI   
铭瑄_MS-B760M_GAMING_WIFI_ACE_D4   
铭瑄_MS-Challenger_B450M   
铭瑄_MS-Challenger_H610M-H_V1_WIFI   
七彩虹_BATTLE-AX_B450M-T_M.2_V14   
七彩虹_BATTLE-AX_B650M-E_PRO   
七彩虹_BATTLE-AX_B760M-D_PRO_   
七彩虹_BATTLE-AX_B760M-E_WIFI   
七彩虹_BATTLE-AX_B760M-G_WHITE_WIFI_D5   
七彩虹_BATTLE-AX_B760M-G_WIFI   
七彩虹_BATTLE-AX_B760M-PLUS_WIFI_   
七彩虹_BATTLE-AX_B760M-PLUS_WIFI_D5_   
七彩虹_BATTLE-AX_B760M-T_WIFI   
七彩虹_BATTLE-AX_B760M-WHITE_WIFI_   
七彩虹_BATTLE-AX_H610M-E_WIFI   
七彩虹_BATTLE-AX_H610M-G_WIFI   
七彩虹_CVN_B760M_FROZEN_WIFI_D5_   
七彩虹_H610M-Carry   
七彩虹_H610M-D   
微星_A520M-A_PRO__MS-7C96_   
微星_B650M_BOMBER_WIFI__MS-7E30_   
微星_B650M_GAMING_PLUS_WIFI__MS-7E24_   
微星_B760M_BOMBER_WIFI__MS-7D90_   
微星_B760M_GAMING_PLUS_WIFI__MS-7D99_   
微星_PRO_B760M-A_DDR4_II__MS-7D99_   
微星_PRO_B760M-B_DDR4__MS-7D90_   
微星_PRO_B760M-E_DDR4__MS-7D48_   
微星_PRO_H610M-S_DDR4__MS-7E44_   
微星_PRO_H610M-S_WIFI_DDR4__MS-7E44_   
微星_PRO_Z890-P_WIFI__MS-7E34_   
微星_Z790_GAMING_PLUS_WIFI__MS-7E06_   
微星_Z890_GAMING_PLUS_WIFI__MS-7E34_   
昂达_H610-VH
微星_PRO_B760M-E__MS-7D48_
铭瑄_MS-Challenger_B760M-F_WIFI
七彩虹_CH510M-K_M.2_EVO
铭瑄_MS-Terminator_B760M_D4
微星_B760M_GAMING_WIFI__MS-7D90_
华硕_B650M-AYW_WIFI
铭瑄_MS-Challenger_H610M-R
微星_PRO_H610M-E_DDR4__MS-7D48_
技嘉_Z790M_AORUS_ELITE_AX_ICE
微星_B760M_BOMBER_DDR4__MS-7D90_
七彩虹_BATTLE-AX_B760M-T_WIFI_
七彩虹_BATTLE-AX_B760M-PLUS_D5_
MS-Challenger_H610M-A
铭瑄_MS-Terminator_B760M_D5
微星_PRO_H610M-G_WIFI_DDR4__MS-7D46_
华硕_B760M-T_R2.0
铭瑄_MS-H610M_666_WIFI6_ARGB
七彩虹_BATTLE-AX_B650M-PLUS_WIFI
铭瑄_MS-Challenger_H610M-A
七彩虹_BATTLE-AX_B650M-GHA_WIFI
华硕_PRIME_Z790-V_AX
华硕_TX_GAMING_B760M_WIFI
微星_PRO_A620M-E__MS-7E28_
微星_B860M_GAMING_PLUS_WIFI__MS-7E42_
七彩虹_BATTLE-AX_B860M-GHA_WIFI
七彩虹_BATTLE-AX_H610M-A_WIFI
技嘉_Z890_AORUS_PRO_ICE
铭瑄_MS-Challenger_B650M
微星_MPG_Z790_EDGE_WIFI__MS-7D91_
技嘉_B850M_AORUS_ELITE_WIFI6E_ICE
微星_PRO_B760M-A_WIFI_DDR4_II__MS-7D99_
七彩虹_H610I_SMART_WIFI_V20
华硕_PRIME_B650M-K
微星_PRO_Z790-P_WIFI__MS-7E06_
华硕_TUF_GAMING_Z890-PLUS_WIFI
华硕_TUF_GAMING_B760M-PLUS_WIFI_II
铭瑄_MS-MoDT_12600HX_MATX_D4
七彩虹_CVN_Z890M_GAMING_FROZEN_V20
七彩虹_BATTLE-AX_B760M-GANK_WIFI
微星_MPG_X870E_CARBON_WIFI__MS-7E49_
技嘉_B650M_GAMING_WIFI
铭瑄_MS-Challenger_H610M-D
技嘉_B760M_POWER_DDR4
微星_PRO_B650M-E__MS-7E28_
华硕_PRIME_Z790-P_WIFI
华硕_PRIME_B650M-R
七彩虹_COLORFIRE_B850M-A_MEOW_WIFI_ORANGE_
华硕_PRIME_H610M-F_WIFI_D4
微星_B760M_BOMBER_WIFI_DDR4__MS-7D90_
铭瑄_MS_Terminator_B760M_GKD5
铭瑄_MS-eSport_H810M_GANK_WIFI
华硕_B760M-PRO_GAMING
华硕_PRIME_B650M-F
华硕_PRIME_B650M-A_WIFI_II
微星_MPG_X870E_EDGE_TI_WIFI__MS-7E59_
微星_MAG_B760M_MORTAR_WIFI_II__MS-7E13_
技嘉_B760M_GAMING_WIFI_PLUS
铭瑄_MS-B760M_GAMING_WIFI_ICE
七彩虹_H610M-D_EVO
微星_PRO_B760M-A__MS-7D99_
微星_PRO_X870-P_WIFI__MS-7E47_
七彩虹_BATTLE-AX_B760M-WHITE_WIFI_D5_
技嘉_B760M_AORUS_ELITE_WIFI6E-P_GEN5
华硕_B860M-BRO
技嘉_X870_GAMING_X_WIFI7
微星_B650M_GAMING_WIFI__MS-7E30_
微星_B850_GAMING_PLUS_WIFI__MS-7E56_
华硕_PRIME_X870-P_WIFI
技嘉_B760M_GAMING_X
七彩虹_BATTLE-AX_B860M-E_WIFI
七彩虹_BATTLE-AX_B660M-D_PRO_
七彩虹_BATTLE-AX_B650M-WHITE_WIFI
华擎_B450M-HDV_R4.0
七彩虹_COLORFIRE_B760M-A_MEOW_WIFI_D5_
微星_MAG_B650M_MORTAR_WIFI__MS-7D76_
_ =_
华硕_ROG_STRIX_B850-A_GAMING_WIFI_S
七彩虹_CVN_B650M_GAMING_FROZEN
微星_PRO_B650M-B__MS-7E28_
七彩虹_CVN_B760M-PLUS_PRO_WIFI_D5_
铭瑄_MS-Challenger_H510M-H

评分

参与人数 2技术 +2 收起 理由
Batcher + 1 感谢分享
zzz19760225 + 1 赞！

查看全部评分

回复

举报

yakeyun
 楼主| 发表于 2025-8-6 12:33:19 | 显示全部楼层
回复 1# yakeyun

整理后的显示结果：
_ =_  出现次数：1
MS-Challenger_H610M-A  出现次数：1
昂达_H610-VH  出现次数：1
昂达_ONDA_B450S+B    出现次数：1
华擎_B450M-HDV_R4.0  出现次数：1
华硕_B650M-AYW_WIFI  出现次数：1
华硕_B760M-AYW_PRO_WIFI    出现次数：1
华硕_B760M-AYW_WIFI_D4    出现次数：1
华硕_B760M-D3H    出现次数：1
华硕_B760M-D3H_D4    出现次数：1
华硕_B760M-PRO_GAMING  出现次数：1
华硕_B760M-T_D4_R2.0    出现次数：1
华硕_B760M-T_R2.0  出现次数：1
华硕_B860M-BRO  出现次数：1
华硕_B860M_AYW_GAMING_WIFI    出现次数：1
华硕_H610M-D3H_M.2_D4    出现次数：1
华硕_PRIME_A520M-K    出现次数：1
华硕_PRIME_B365M-K    出现次数：1
华硕_PRIME_B550M-K_ARGB    出现次数：1
华硕_PRIME_B650M-A_WIFI_II  出现次数：1
华硕_PRIME_B650M-F  出现次数：1
华硕_PRIME_B650M-K  出现次数：1
华硕_PRIME_B650M-R  出现次数：1
华硕_PRIME_B760M-A_WIFI_D4    出现次数：1
华硕_PRIME_B760M-F    出现次数：1
华硕_PRIME_B760M-F_D4    出现次数：1
华硕_PRIME_H610M-F_WIFI_D4  出现次数：1
华硕_PRIME_H610M-F_WIFI_D4    出现次数：1
华硕_PRIME_X870-P_WIFI  出现次数：1
华硕_PRIME_Z790-P_WIFI  出现次数：1
华硕_PRIME_Z790-V_AX  出现次数：1
华硕_PRIME_Z890-P_WIFI    出现次数：1
华硕_PRIME_Z890M-PLUS_WIFI    出现次数：1
华硕_ROG_STRIX_B850-A_GAMING_WIFI_S  出现次数：1
华硕_ROG_STRIX_B850-G_GAMING_WIFI_S    出现次数：1
华硕_TUF_GAMING_B760M-PLUS_WIFI_D4    出现次数：1
华硕_TUF_GAMING_B760M-PLUS_WIFI_II  出现次数：1
华硕_TUF_GAMING_B850M-E_WIFI    出现次数：1
华硕_TUF_GAMING_B850M-PLUS_WIFI    出现次数：1
华硕_TUF_GAMING_B860M-PLUS_WIFI    出现次数：1
华硕_TUF_GAMING_Z890-PLUS_WIFI  出现次数：1
华硕_TX_GAMING_B760M_WIFI  出现次数：1
技嘉_B650M_GAMING_WIFI  出现次数：1
技嘉_B760M_AORUS_ELITE_WIFI6E-P_GEN5  出现次数：1
技嘉_B760M_GAMING_AC_DDR4    出现次数：1
技嘉_B760M_GAMING_WIFI_PLUS  出现次数：1
技嘉_B760M_GAMING_X  出现次数：1
技嘉_B760M_POWER_DDR4  出现次数：1
技嘉_B850M_AORUS_ELITE_WIFI6E_ICE  出现次数：1
技嘉_H610M_K_DDR4    出现次数：1
技嘉_X870_GAMING_X_WIFI7  出现次数：1
技嘉_Z790M_AORUS_ELITE_AX_ICE  出现次数：1
技嘉_Z890_AORUS_PRO_ICE  出现次数：1
技嘉_Z890M_AORUS_ELITE_WIFI7    出现次数：1
铭瑄_MS-B550M_GAMING_WIFI    出现次数：1
铭瑄_MS-B760M_GAMING_WIFI_ACE_D4    出现次数：1
铭瑄_MS-B760M_GAMING_WIFI_ICE  出现次数：1
铭瑄_MS-Challenger_B450M    出现次数：1
铭瑄_MS-Challenger_B650M  出现次数：1
铭瑄_MS-Challenger_B760M-F_WIFI  出现次数：1
铭瑄_MS-Challenger_H510M-H  出现次数：1
铭瑄_MS-Challenger_H610M-A  出现次数：1
铭瑄_MS-Challenger_H610M-D  出现次数：1
铭瑄_MS-Challenger_H610M-H_V1_WIFI    出现次数：1
铭瑄_MS-Challenger_H610M-R  出现次数：1
铭瑄_MS-eSport_H810M_GANK_WIFI  出现次数：1
铭瑄_MS-H610M_666_WIFI6_ARGB  出现次数：1
铭瑄_MS-MoDT_12600HX_MATX_D4  出现次数：1
铭瑄_MS-Terminator_B760M_D4  出现次数：1
铭瑄_MS-Terminator_B760M_D5  出现次数：1
铭瑄_MS_Terminator_B760M_GKD5  出现次数：1
七彩虹_BATTLE-AX_B450M-T_M.2_V14    出现次数：1
七彩虹_BATTLE-AX_B650M-E_PRO    出现次数：1
七彩虹_BATTLE-AX_B650M-GHA_WIFI  出现次数：1
七彩虹_BATTLE-AX_B650M-PLUS_WIFI  出现次数：1
七彩虹_BATTLE-AX_B650M-WHITE_WIFI  出现次数：1
七彩虹_BATTLE-AX_B660M-D_PRO_  出现次数：1
七彩虹_BATTLE-AX_B760M-D_PRO_    出现次数：1
七彩虹_BATTLE-AX_B760M-E_WIFI    出现次数：1
七彩虹_BATTLE-AX_B760M-G_WHITE_WIFI_D5    出现次数：1
七彩虹_BATTLE-AX_B760M-G_WIFI    出现次数：1
七彩虹_BATTLE-AX_B760M-GANK_WIFI  出现次数：1
七彩虹_BATTLE-AX_B760M-PLUS_D5_  出现次数：1
七彩虹_BATTLE-AX_B760M-PLUS_WIFI_    出现次数：1
七彩虹_BATTLE-AX_B760M-PLUS_WIFI_D5_    出现次数：1
七彩虹_BATTLE-AX_B760M-T_WIFI    出现次数：1
七彩虹_BATTLE-AX_B760M-T_WIFI_  出现次数：1
七彩虹_BATTLE-AX_B760M-WHITE_WIFI_    出现次数：1
七彩虹_BATTLE-AX_B760M-WHITE_WIFI_D5_  出现次数：1
七彩虹_BATTLE-AX_B860M-E_WIFI  出现次数：1
七彩虹_BATTLE-AX_B860M-GHA_WIFI  出现次数：1
七彩虹_BATTLE-AX_H610M-A_WIFI  出现次数：1
七彩虹_BATTLE-AX_H610M-E_WIFI    出现次数：1
七彩虹_BATTLE-AX_H610M-G_WIFI    出现次数：1
七彩虹_CH510M-K_M.2_EVO  出现次数：1
七彩虹_COLORFIRE_B760M-A_MEOW_WIFI_D5_  出现次数：1
七彩虹_COLORFIRE_B850M-A_MEOW_WIFI_ORANGE_  出现次数：1
七彩虹_CVN_B650M_GAMING_FROZEN  出现次数：1
七彩虹_CVN_B760M-PLUS_PRO_WIFI_D5_  出现次数：1
七彩虹_CVN_B760M_FROZEN_WIFI_D5_    出现次数：1
七彩虹_CVN_Z890M_GAMING_FROZEN_V20  出现次数：1
七彩虹_H610I_SMART_WIFI_V20  出现次数：1
七彩虹_H610M-Carry    出现次数：1
七彩虹_H610M-D    出现次数：1
七彩虹_H610M-D_EVO  出现次数：1
微星_A520M-A_PRO__MS-7C96_    出现次数：1
微星_B650M_BOMBER_WIFI__MS-7E30_    出现次数：1
微星_B650M_GAMING_PLUS_WIFI__MS-7E24_    出现次数：1
微星_B650M_GAMING_WIFI__MS-7E30_  出现次数：1
微星_B760M_BOMBER_DDR4__MS-7D90_  出现次数：1
微星_B760M_BOMBER_WIFI__MS-7D90_    出现次数：1
微星_B760M_BOMBER_WIFI_DDR4__MS-7D90_  出现次数：1
微星_B760M_GAMING_PLUS_WIFI__MS-7D99_    出现次数：1
微星_B760M_GAMING_WIFI__MS-7D90_  出现次数：1
微星_B850_GAMING_PLUS_WIFI__MS-7E56_  出现次数：1
微星_B860M_GAMING_PLUS_WIFI__MS-7E42_  出现次数：1
微星_MAG_B650M_MORTAR_WIFI__MS-7D76_  出现次数：1
微星_MAG_B760M_MORTAR_WIFI_II__MS-7E13_  出现次数：1
微星_MPG_X870E_CARBON_WIFI__MS-7E49_  出现次数：1
微星_MPG_X870E_EDGE_TI_WIFI__MS-7E59_  出现次数：1
微星_MPG_Z790_EDGE_WIFI__MS-7D91_  出现次数：1
微星_PRO_A620M-E__MS-7E28_  出现次数：1
微星_PRO_B650M-B__MS-7E28_  出现次数：1
微星_PRO_B650M-E__MS-7E28_  出现次数：1
微星_PRO_B760M-A__MS-7D99_  出现次数：1
微星_PRO_B760M-A_DDR4_II__MS-7D99_    出现次数：1
微星_PRO_B760M-A_WIFI_DDR4_II__MS-7D99_  出现次数：1
微星_PRO_B760M-B_DDR4__MS-7D90_    出现次数：1
微星_PRO_B760M-E__MS-7D48_  出现次数：1
微星_PRO_B760M-E_DDR4__MS-7D48_    出现次数：1
微星_PRO_H610M-E_DDR4__MS-7D48_  出现次数：1
微星_PRO_H610M-G_WIFI_DDR4__MS-7D46_  出现次数：1
微星_PRO_H610M-S_DDR4__MS-7E44_    出现次数：1
微星_PRO_H610M-S_WIFI_DDR4__MS-7E44_    出现次数：1
微星_PRO_X870-P_WIFI__MS-7E47_  出现次数：1
微星_PRO_Z790-P_WIFI__MS-7E06_  出现次数：1
微星_PRO_Z890-P_WIFI__MS-7E34_    出现次数：1
微星_Z790_GAMING_PLUS_WIFI__MS-7E06_    出现次数：1
微星_Z890_GAMING_PLUS_WIFI__MS-7E34_    出现次数：1

全部词条数为：139
请按任意键继续. .
回复

举报

Five66
发表于 2025-8-6 20:11:37 | 显示全部楼层
感觉挺新奇的 ,感谢分享
回复

举报

返回列表 发新帖
高级模式
B Color Image Link Quote Code Smilies
您需要登录后才可以回帖 登录 | 注册

本版积分规则

Archiver|手机版|小黑屋|批处理之家 ( 渝ICP备10000708号 )

GMT+8, 2026-3-17 12:39 , Processed in 0.013665 second(s), 10 queries , File On.

Powered by Discuz! X3.5

© 2001-2026 Discuz! Team.

快速回复 返回顶部 返回列表