17下：Linux之sort、uniq 、head
深入探索Linux中的sort、uniq与head：强大实用的文本处理工具</
在Linux系统中，sort、uniq和head是三位不可或缺的好伙伴，它们各自擅长于数据的排序、重复值的处理和文本内容的浏览。接下来，我们将逐一了解它们的魔力，通过实战案例让你对它们的威力有更深刻的理解。
首先，让我们聚焦在sort上。sort是文本数据排序的神器，它默认按照字符串的第一个字符进行排序。通过添加参数，你可以定制排序方式。例如，sort -n</命令用于数值大小排序，而sort -r</则实现了倒序排列。实战中，如需对文件1.txt进行数值排序，可以这样操作：cat 1.txt | sort -n</，对于倒序，只需替换为cat 1.txt | sort -rn。
uniq则是处理重复数据的能手，它的核心功能是找出并移除相邻的重复行。通过使用-c</参数，我们可以得知重复行的具体数量，这对于文本去重后的分析非常有用。比如，cat 2.txt | sort -n | uniq -c</就能统计2.txt中数值的重复次数。
head则让我们轻松查看文件的开头部分，默认显示前10行。若需自定义行数，head -n</便是你的选择。例如，cat 3.txt | head -5</就展示了3.txt的前5行内容。在实际监控中，grep -oE "^([0-9]{1,3}\.){3}[0-9]{1,3}" /var/log/nginx/access.log | sort | uniq -c | sort -rn | head -10</这段命令则能统计nginx访问的前10个不同IP地址及其访问次数，直观呈现访问流量的分布。
当然，这些工具的强大还体现在它们的灵活性上。sort不仅可以用于文本，结合awk和wc等工具，还能处理更复杂的统计任务，如统计访问nginx的日志中访问人数。例如，通过grep -oE "^([0-9]{1,3}\.){3}[0-9]{1,3}" /var/log/nginx/access.log | awk '{arr[$0]++}END{print length(arr)}'，或者grep -oE "^([0-9]{1,3}\.){3}[0-9]{1,3}" /var/log/nginx/access.log | sort | uniq -c | wc -l，都可以实现这一目标。
总的来说，sort、uniq和head是Linux命令行中实用而强大的文本处理工具，通过巧妙组合和灵活运用，它们能够帮助我们高效地管理、分析和展示数据。掌握它们，你的数据处理能力将跃升一个新台阶。
绛旓細涓涓瘮杈冪粡鍏哥殑闂锛氬鏋滅嚎涓婃満鍣ㄧ殑纾佺洏鍗犵敤鐜囪秴绾ч珮锛屾庝箞鍔烇紵杩欐椂鍊欎紭鍏堟兂鍒扮殑鑲畾鏄紝瀹氫綅鍒板崰鐢ㄧ鐩樼┖闂存渶澶х殑閭ｄ簺鏂囦欢锛岀劧鍚庢妸鍙互鍒犵殑缁欏垹鎺夈傞偅涔堬紝闂鏉ヤ簡锛屽浣曞畾浣嶅埌鍗犵敤纾佺洏绌洪棿鏈澶х殑鏂囦欢锛熶竴涓姙娉曟槸鎵ц濡備笅鍛戒护锛氶噷闈㈡秹鍙婁笁涓寚浠わ細du銆sort銆乵ore 鏃㈢劧鐢ㄥ埌浜嗭紝灏遍『渚垮浜嗚В涓涓嬭繖涓変釜...
绛旓細Linux涓嬪父鐢ㄦ枃鏈鐞嗗懡浠ゅぇ鍏 Linux涓嬮潰鏈夊緢澶氱粡鍏哥殑闈炲父鏈夌敤鐨勫懡浠わ紝鍏朵腑澶勭悊鏂囨湰鐨勫懡浠ゅ氨鏈夊緢澶氥備笅闈㈠氨璁╂垜浠竴璧风湅鐪嬭繖浜涚粡鍏哥殑Linux鏂囨湰澶勭悊鍛戒护鏈夊摢浜涘惂銆備竴. sort 鏂囦欢鎺掑簭, 閫氬父鐢ㄥ湪绠￠亾涓綋杩囨护鍣ㄦ潵浣跨敤. 杩欎釜鍛戒护鍙互渚濇嵁鎸囧畾鐨勫叧閿瓧鎴栨寚瀹氱殑瀛楃浣嶇疆, 瀵规枃浠惰杩涜鎺掑簭. 浣跨敤-m閫夐」, 瀹冨皢浼...
绛旓細sort 鏄皢鏂囦欢鐨勬瘡涓琛屼綔涓轰竴涓崟浣嶏紝鐩镐簰姣旇緝锛屾瘮杈冨師鍒欐槸浠庨瀛楃鍚戝悗锛屼緷娆℃寜鐓SCII鐮佸艰繘琛屾瘮杈冿紝榛樿灏嗕粬浠寜鐓у崌搴忚緭鍑 闄嶅簭 鍦ㄨ緭鍑轰腑鍘婚噸 灏嗘帓搴忕粨鏋滆緭鍑哄埌鍘熸枃浠 sort鐨勯粯璁よ緭鍑烘槸杈撳嚭鍒版爣鍑嗚緭鍑猴紝濡傛灉鎯虫妸缁撴灉杈撳嚭鍒版枃浠讹紝闇瑕 sort file > newfile,浣嗘槸濡傛灉鎯虫妸缁撴灉杈撳嚭鍒板師鏂囦欢杩欐牱灏变笉琛屼簡...
绛旓細sort鎺掑簭鏄牴鎹粠杈撳叆琛屾娊鍙栫殑涓涓垨澶氫釜鍏抽敭瀛楄繘琛屾瘮杈冩潵瀹屾垚鐨勩傛帓搴忓叧閿瓧瀹氫箟浜嗙敤鏉ユ帓搴忕殑鏈灏忕殑瀛楃搴忓垪銆傜己鐪佹儏鍐典笅浠ユ暣琛屼负鍏抽敭瀛楁寜ASCII瀛楃椤哄簭杩涜鎺掑簭銆傛敼鍙樼己鐪佽缃殑閫夐」涓昏鏈夛細- m 鑻ョ粰瀹氭枃浠跺凡鎺掑ソ搴忥紝鍚堝苟鏂囦欢銆- c 妫鏌ョ粰瀹氭枃浠舵槸鍚﹀凡鎺掑ソ搴忥紝濡傛灉瀹冧滑娌℃湁閮芥帓濂藉簭锛屽垯鎵撳嵃涓涓嚭閿...
绛旓細Linux 涓嬮潰 sort 鍙互鎸夊垪鎺掑簭锛屽姛鑳藉己澶э紝浣嗘槸鍏舵帓搴忕殑璇存槑鏈変簺鏅︽订銆備妇渚嬩笅闈㈣繖涓懡浠わ細涓婇潰鐨勫懡浠よ〃绀 -k 琛ㄧず鎸囧畾鎺掑簭鐨勮鍒欙紝杩欓噷琛ㄧず浠庣涓鍒楃殑绗竴涓瓧绗﹀紑濮嬶紝鍒扮涓鍒楃殑绗叚涓瓧绗︾粨鏉燂紝浣滀负鎺掑簭鐨刱ey锛宺琛ㄧず鍙嶅悜鎺掑簭銆傚熀浜庝笂闈㈢殑鎺掑簭涔嬪悗锛屾寜绗簩鍒楀埌鏈鍚庝竴鍒楁帓搴忥紝鍏舵帓搴忚鍒欎负鏍规嵁鏁板瓧澶у皬...
绛旓細sort鐨-M鏄皢鍓嶉潰3涓瓧姣嶄緷鐓ф湀浠界殑缂╁啓杩涜鎺掑簭锛屼絾鏄敤鐨勫緢灏戙俿ort甯哥敤鍙傛暟锛-n 渚濈収鏁板肩殑澶у皬鎺掑簭銆-u 鎰忓懗鐫鏄敮涓鐨(unique)锛岃緭鍑虹殑缁撴灉鏄幓瀹岄噸浜嗙殑銆-r 浠ョ浉鍙嶇殑椤哄簭鏉ユ帓搴忋-t<鍒嗛殧瀛楃> 鎸囧畾鎺掑簭鏃舵墍鐢ㄧ殑鏍忎綅鍒嗛殧瀛楃銆俿ort浼佷笟妗堜緥瑙佽繛鎺 缃戦〉閾炬帴 ...
绛旓細鍔熻兘璇存槑锛氬皢鏂囨湰鏂囦欢鍐呭鍔犱互鎺掑簭銆傝娉锛歴ort [-bcdfimMnr] [-o<杈撳嚭鏂囦欢>][-t<鍒嗛殧瀛楃>][+<璧峰鏍忎綅>-<缁撴潫鏍忎綅>][--help] [--verison][鏂囦欢]琛ュ厖璇存槑锛歴ort鍙拡瀵规枃鏈枃浠剁殑鍐呭锛屼互琛屼负鍗曚綅鏉ユ帓搴忋+<璧峰鏍忎綅>-<缁撴潫鏍忎綅> 浠ユ寚瀹氱殑鏍忎綅鏉ユ帓搴忥紝鑼冨洿鐢辫捣濮嬫爮浣嶅埌缁撴潫鏍忎綅鐨勫墠...
绛旓細linuxsort鎺掑簭鍚庢庝箞淇濆瓨锛熼粯璁ゆ槸鎵撳嵃鎵撳嵃瀹屼簡灏遍鍑轰簡濡傛灉awk'{print$2}'|sort濡傛灉鏂逛究鍙互awk'{print$2}'|sort>abc.txt閲嶅畾鍚戝埌杩欎釜鏂囦欢锛屾煡鐪嬭繖涓枃浠跺氨鐭ラ亾鎺掑簭缁撴灉浜 linux濡備綍鏌ョ湅绯荤粺鍗犵敤纾佺洏绌洪棿鏈澶х殑鏂囦欢鍙婅鏂囦欢鎸夊ぇ灏忔帓搴忥紵find/-typef-size+10G 鍦Linux涓嬪浣曡鏂囦欢璁╂寜澶у皬鍗曚綅涓篗,G绛...
绛旓細man sort涓叧浜庡畠鐨勬弿杩版槸 sort - sort lines of text files 鎵浠ワ紝瀹冮粯璁ゆ槸浠ユ枃鏈帓搴忕殑銆備絾鏄畠鍙堟湁鍏跺畠鍙傛暟 -b, --ignore-leading-blanks ignore leading blanks -d, --dictionary-order consider only blanks and alphanumeric characters -f, --ignore-case fold lower case to upper case ...
绛旓細sort -u 鍙緭鍑虹涓娆″嚭鐜扮殑琛,鎵浠ュ緢澶氭椂鍊欎細鐢ㄦ潵绛涢夐噸澶嶈.
