bash技巧:求集合的交集、并集僧凤、差集畜侦、對稱差集

網上轉的,不錯躯保,比使用awk容易點

給定兩個文件 a.txt 和 b.txt 旋膳,每行是一個記錄(假設沒有重復),要求輸出兩集合的交集途事、并集验懊、差集擅羞,輸出的結果只包括唯一項。交集定義為同時出現在兩個文件中的記錄項义图,并集定義為出現在任何一個文件中的記錄項减俏,差集(A-B)定義為出現在A中而且不出現在B中的記錄,對稱差集定義為只出現在一個文件中的記錄歌溉。

假設 a.txt 包括 a, c, b 三行垄懂。假設 b.txt 包括 d, e, c, b 四行。

交集痛垛,把兩個文件放到一起排序草慧,只輸出次數多于一次的項:
$ sort a.txt b.txt | uniq -d
b
c

并集,把兩個文件放到一起排序匙头,重復的項只算一次:
$ sort a.txt b.txt | uniq
a
b
c
d
e

差集(A-B)漫谷,把B的元素重復2份和A的元素放到一起排序,只輸出出現一次的項:
$ sort a.txt b.txt b.txt | uniq -u
a

對稱差蹂析,把兩個文件放到一起排序舔示,只輸出出現一次的項:
$ sort a.txt b.txt | uniq -u
a
d
e

?著作權歸作者所有,轉載或內容合作請聯系作者
  • 序言:七十年代末,一起剝皮案震驚了整個濱河市电抚,隨后出現的幾起案子惕稻,更是在濱河造成了極大的恐慌,老刑警劉巖蝙叛,帶你破解...
    沈念sama閱讀 207,113評論 6 481
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件俺祠,死亡現場離奇詭異,居然都是意外死亡借帘,警方通過查閱死者的電腦和手機蜘渣,發(fā)現死者居然都...
    沈念sama閱讀 88,644評論 2 381
  • 文/潘曉璐 我一進店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來肺然,“玉大人蔫缸,你說我怎么就攤上這事〖势穑” “怎么了拾碌?”我有些...
    開封第一講書人閱讀 153,340評論 0 344
  • 文/不壞的土叔 我叫張陵,是天一觀的道長加叁。 經常有香客問我倦沧,道長,這世上最難降的妖魔是什么它匕? 我笑而不...
    開封第一講書人閱讀 55,449評論 1 279
  • 正文 為了忘掉前任展融,我火速辦了婚禮,結果婚禮上豫柬,老公的妹妹穿的比我還像新娘告希。我一直安慰自己扑浸,他們只是感情好,可當我...
    茶點故事閱讀 64,445評論 5 374
  • 文/花漫 我一把揭開白布燕偶。 她就那樣靜靜地躺著喝噪,像睡著了一般。 火紅的嫁衣襯著肌膚如雪指么。 梳的紋絲不亂的頭發(fā)上酝惧,一...
    開封第一講書人閱讀 49,166評論 1 284
  • 那天,我揣著相機與錄音伯诬,去河邊找鬼晚唇。 笑死,一個胖子當著我的面吹牛盗似,可吹牛的內容都是我干的哩陕。 我是一名探鬼主播,決...
    沈念sama閱讀 38,442評論 3 401
  • 文/蒼蘭香墨 我猛地睜開眼赫舒,長吁一口氣:“原來是場噩夢啊……” “哼悍及!你這毒婦竟也來了?” 一聲冷哼從身側響起接癌,我...
    開封第一講書人閱讀 37,105評論 0 261
  • 序言:老撾萬榮一對情侶失蹤心赶,失蹤者是張志新(化名)和其女友劉穎,沒想到半個月后缺猛,有當地人在樹林里發(fā)現了一具尸體园担,經...
    沈念sama閱讀 43,601評論 1 300
  • 正文 獨居荒郊野嶺守林人離奇死亡,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內容為張勛視角 年9月15日...
    茶點故事閱讀 36,066評論 2 325
  • 正文 我和宋清朗相戀三年枯夜,在試婚紗的時候發(fā)現自己被綠了。 大學時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片艰山。...
    茶點故事閱讀 38,161評論 1 334
  • 序言:一個原本活蹦亂跳的男人離奇死亡湖雹,死狀恐怖,靈堂內的尸體忽然破棺而出曙搬,到底是詐尸還是另有隱情摔吏,我是刑警寧澤,帶...
    沈念sama閱讀 33,792評論 4 323
  • 正文 年R本政府宣布纵装,位于F島的核電站征讲,受9級特大地震影響,放射性物質發(fā)生泄漏橡娄。R本人自食惡果不足惜诗箍,卻給世界環(huán)境...
    茶點故事閱讀 39,351評論 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望挽唉。 院中可真熱鬧滤祖,春花似錦筷狼、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 30,352評論 0 19
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至汤求,卻和暖如春俏险,著一層夾襖步出監(jiān)牢的瞬間,已是汗流浹背扬绪。 一陣腳步聲響...
    開封第一講書人閱讀 31,584評論 1 261
  • 我被黑心中介騙來泰國打工竖独, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留,地道東北人勒奇。 一個月前我還...
    沈念sama閱讀 45,618評論 2 355
  • 正文 我出身青樓预鬓,卻偏偏與公主長得像,于是被迫代替她去往敵國和親赊颠。 傳聞我的和親對象是個殘疾皇子格二,可洞房花燭夜當晚...
    茶點故事閱讀 42,916評論 2 344

推薦閱讀更多精彩內容

  • 問題描述 對于兩個同處在一個集群的hive表顶猜,進行文件或者數據的對比是非常方便的,直接寫個關聯查詢就可以搞定痘括。然而...
    那只媛閱讀 6,592評論 0 5
  • 基礎命令 主要的命令和快捷鍵 Linux系統(tǒng)命令由三部分組成:cmd + [options]+[operation...
    485b1aca799e閱讀 1,086評論 0 0
  • 1. Java基礎部分 基礎部分的順序:基本語法长窄,類相關的語法,內部類的語法纲菌,繼承相關的語法挠日,異常的語法,線程的語...
    子非魚_t_閱讀 31,587評論 18 399
  • 第1章 小試牛刀 $ 是普通用戶翰舌,# 表示管理員用戶 root嚣潜。 shebang:#!。sharp / hash ...
    巴喬書摘閱讀 6,326評論 1 4
  • linux資料總章2.1 1.0寫的不好抱歉 但是2.0已經改了很多 但是錯誤還是無法避免 以后資料會慢慢更新 大...
    數據革命閱讀 12,135評論 2 34