[linux]大文件排序去重複

把大文件用split分割 再合併

split -b 200m [file] pre_ 

sort -m [file1] [file2]  -T [路徑] -u >[新名稱.txt]

-m:結合並排序
-T:決定暫存檔路徑，避免記憶體不足
-u:去重複