[已解决]批处理怎样把不以引号开头的行合并到上一行行尾?

qq253040425

回复 13# CrLf


不大可能出现错误的断行 - -

实际情况是 db2导出del文件，中间某个字段的某条记录中可能包含有换行符，然后就出现了我说的情况
本来应该在导出的时候，或者直接在数据库层面就能直接解决。但现在的实际情况是。。需要我们自己通过操作这个del文件来解决
0 0 蛋疼的不行

qq253040425

回复 15# 依山居

谢了~  可用~

遍历路径下所有的del文件我就自己百度好了~

依山居

回复 17# qq253040425


    自己学一学正则表达式式啦。sed 和fr都是支持正则找查替换的工具。

qq253040425

回复 18# 依山居


谢谢大神帮助，已搞定！虽然主体部分的逻辑完全看不懂！但是测试能用了！ 用百万级的.del文件测试过了，没啥问题的样子

1. 
   
2. import os
   
3. import time
   
4. import datetime
   
5. 
   
6. print (time.strftime("%Y-%m-%d %H:%M:%S %p", time.localtime()))
   
7. print ('Check start, remove the ok file ... ')
   
8. 
   
9. lst_last=datetime.date(datetime.date.today().year,datetime.date.today().month,1)-datetime.timedelta(1)
   
10. workdir='D:\\IMPDATA\\FTPFILE\\'+lst_last.strftime('%Y-%m-%d')+'\\cqcs\\817'
    
11. okfile=workdir+'\check.ok'
    
12. 
    
13. if os.path.exists(okfile):
    
14.     os.remove(okfile)
    
15. 
    
16. newtxt=[]
    
17. for dirpath,dirs,files in os.walk(workdir):
    
18.    
    
19.     for file in files:
    
20.         
    
21.         if os.path.splitext(file)[1] == '.del':
    
22.             
    
23.             vfname=os.path.join(dirpath,file)
    
24.             print ('Check file: ' + vfname)
    
25.             
    
26.             with open(vfname) as f:
    
27.                 txt=f.readlines()
    
28.                 txt=[r.rstrip() for r in txt]
    
29.                 rn=len(txt)
    
30.                 print("Rowscount:",rn)
    
31.                 newtxt=[txt[r-1][:]+txt[r][:] if ( ('"' not in txt[r][0]) )  else txt[r]  for r in range(rn) ]
    
32.                 newtxt=[r+"\n" for r in newtxt if r.count('"')%2==0]
    
33.                 f.close()
    
34.                
    
35.             nfname= vfname+'_new'            
    
36.             with open(nfname,"w+") as f:
    
37.                 f.writelines(newtxt)
    
38.                 f.close()
    
39.                
    
40.             os.remove(vfname)
    
41.             os.rename(nfname,vfname)
    
42. 
    
43. print ('Check over, touch the ok file ...')
    
44. with open(okfile,'w+') as f:
    
45.     f.writelines('')
    
46.     f.close()
    
47. print (time.strftime("%Y-%m-%d %H:%M:%S %p", time.localtime()))         
    

复制代码

依山居

你倒是真NB。

qq253040425

回复 20# 依山居


我在官网下载的64位的python3.5 = = 能不能教下如何封装exe

依山居

回复 21# qq253040425

其中我也不会。自己百度啦。
就是打包成EXE

你用python mini打包成exe也可以。

terse

外部命令可用不

1. sed -ni ":a;$!N;/\n[^"].*/s/\n//;ta;P;D" *.txt

复制代码

WHY

1. @if (0)==(0) echo off
   
2. cscript //nologo //e:jscript "%~0" < a.txt > b.txt
   
3. pause & exit
   
4. @end
   
5. 
   
6. var s = WSH.StdIn.ReadAll().replace(
   
7.     /("[^"]*?)[\r\n]+([^"]*")/g,
   
8.     function(s0,s1,s2){if (s1+s2=='""'){return s0}else return s1+s2}
   
9. )
   
10. WSH.Echo(s)

复制代码

依山居

从楼主给的例子看，我的代码可靠性差啊。我的代码判断的是不以“结尾的行与下一行连接。
第二行不以“开头，但是第一行”结尾。

qq253040425

回复 13# CrLf


不好意思 - - 真的出现这种断行了

但是数据是正常的数据，不是错误数据

qq253040425

回复 25# 依山居

大神！！
    出现问题了。。

数据中有
"LS81702201409060006659","20",,"817029700","817029700","2","9","",,,,,
不以“结尾，以,结尾的数据，这样的子的数据是正确的数据,

Traceback (most recent call last):
  File "F:\BAT\tt\check_del_here.py", line 29, in <module>
    newtxt=[txt[r][:]+txt[r+1][:] if ('\"' not in txt[r][-1]) else txt[r] for r in range(rn) ]
  File "F:\BAT\tt\check_del_here.py", line 29, in <listcomp>
    newtxt=[txt[r][:]+txt[r+1][:] if ('\"' not in txt[r][-1]) else txt[r] for r in range(rn) ]
IndexError: list index out of range

依山居

回复 27# qq253040425


    下次再提问传实际文件，敏感信息用其它字替换掉就行。

我不熟悉db2 的del文件格式。
导出的数据，固定是多少列？

qq253040425

回复 28# 依山居


    嗯 谢谢提醒

del文件的内容和我那个txt的内容是一样的，del其实也是文本文件

我觉得固定列数并不科学，我感觉

newtxt=[txt[r][:]+txt[r+1][:] if ('\"' not in txt[r][-1]) else txt[r] for r in range(rn) ]
newtxt=[r+"\n" for r in newtxt if '\"' in r[0]]

这一段修改一下，因为实际文件中的错误情况只有一种： n行的最后一个字段不以”结尾且n+1行不以”开头

依山居

回复 29# qq253040425

我直觉认为。这货要能正常工作必须固定列。