两个文件求差集

两个文件求差集

3 years ago

source link: https://segmentfault.com/a/1190000040955272
Go to the source link to view the article. You can view the picture content, updated content and better typesetting reading experience. If the link is broken, please click the button below to view the snapshot at that time.

在平常的做业务需求时会遇到这样一种情况，有两份文件A和B，存的是用户账号，需要在A文件中剔除B文件中已存在的账号，这种情况下应该如何处理呢？

一般这种情况下会选择采用脚本语言处理，比如shell或者python。接下来介绍两种语言的解决方法：

aaa
bbb
ccc
111
222

bbb
ccc
111

1.采用awk

$awk 'NR==FNR{ a[$1]=$1 } NR>FNR{ if(a[$1] == ""){ print $1}}' B A

2.采用python

#!/usr/bin/python
# -*- coding: utf-8 -*- 

import os

src = []
screen_data = []
dest_data = []

#原数据
for line in open("src.txt"):
    src.append(line.strip())

#筛选名单
for line in open("screen_data.txt"):
    screen_data.append(line.strip())

#目标数据    
for data in src:
    if data in screen_data:
        print data
        
print len(dest_data)

#导出到文件
with open("dest_data.txt","w") as f:
    for data in dest_data:
        f.write(data + '\n')

Recommend

192

Engadget 中国版 cn.engadget.com 7 years ago
Cache

两个月后，纯白版 Essential PH-1 终于开始出货了

Andy Rubin 的 Essential Phone 自发布伊始就收获了不少玩机人士的关注。但网站上列出的四种配色，在今天之前一直就仅有黑色可供选购。这种情况现在总算是有了变化，就在不久前官方终于宣布，白色的 PH-1 也已经能够通过官网或 Best Buy、亚马逊、Sprint 购买。不...