ivor

测试文件夹d:\1,d:\2
同文件名不重复的数据输出到d:\3文件夹
Python 3.5

import os

dic = {}
def extract(dirPath='.'):

    for i in os.listdir(dirPath):
        with open('%s\%s' % (dirPath, i), 'r') as file:
            for line in file:
                if i not in dic:
                    dic[i] = []
                if line not in dic[i]:
                    dic[i].append(line)
                    
def save(dirpath='.'):
    for i in dic:
        with open(r'%s\%s' % (dirpath, i), 'w') as file:
            file.writelines(dic[i])

#multiple source folder
for i in [r'D:\1',r'D:\2']:
    extract(i)

#save folder
save(r'D:\3')
#print(dic)
复制代码

ivor

#!/usr/bin/python
# -*- coding:utf-8 -*-
#在这几个文件夹中，在同名文件之间，若发现有相同的“行”内容，则全部删除不保留，在原始文件中只保留不重复的内容。

import os


dic = {}
def uniq(dirPath='.'):

    for i in os.listdir(dirPath):
        with open('%s\%s' % (dirPath, i), 'r+') as file:
            print("%s\n%s\n%s" % ('{:*<30}'.format(''), i, '{:*<30}'.format('')))
            f = file.readlines()
            file.seek(0)
            file.truncate()
            for line in f:
                if i not in dic:
                    dic[i] = []
                if line not in dic[i]:
                    dic[i].append(line)
                    file.write(line)
                    print(line)

#multiple source folders
for i in [r'D:\1',r'D:\2']:
    uniq(i)
复制代码

ivor

回复 5# 屡败屡战


    下载地址：https://www.python.org/ftp/python/3.6.4/python-3.6.4.exe

代码保存后缀    .py

ivor

回复 7# 屡败屡战

<# :
@echo off
rem 增强代码兼容性,代码保存为 ".bat"、".cmd"、".ps1"均可执行
powershell Set-ExecutionPolicy -ExecutionPolicy RemoteSigned
more +8 "%~f0" >"%~dpn0.ps1"
powershell -File "%~dpn0.ps1"
del "%~dpn0.ps1" & pause & exit /b
#>
dir *.txt | foreach {
    $con = get-content $_
    $n = 0
    del $_
    for ($i=$con.Count-1; $i -ge 0; $i-- -and $n++)
    {
        "【{0}】￥{1}" -f $n,$con[$i]
        "【{0}】￥{1}" -f $n,$con[$i] | out-file -FilePath $_ -Append
    }
}
复制代码