shell-sort-wc-uniq

xiaoxiao2021-03-01  21

[b]1、准备数据[/b] 格式: pgj.trade.baidu.com chy.guoji.baidu.com ndd.trade.baidu.com cmt.trade.baidu.com .... [b]2、cut分割[/b] -d, --delimiter=DELIM use DELIM instead of TAB for field delimiter -f, --fields=LIST select only these fields; also print any line that contains no delimiter character, unless the -s option is specified cut -d. -f2 domain.txt [b]3、排序-sort[/b] -b 忽略每行前面开始出的空格字符。 -c 检查文件是否已经按照顺序排序。 -f 排序时,忽略大小写字母。 -M 将前面3个字母依照月份的缩写进行排序。 -n 依照数值的大小排序。 -o<输出文件> 将排序后的结果存入指定的文件。 -r 以相反的顺序来排序。 -t<分隔字符> 指定排序时所用的栏位分隔字符。 -k 选择以哪个区间进行排序。 cut -d. -f2 domain.txt |sort [b]4、取唯一值-uniq[/b] 默认输出唯一行 -c, --count prefix lines by the number of occurrences -d, --repeated only print duplicate lines -u, --unique only print unique lines cut -d. -f2 domain.txt |sort|uniq -c [b]5、再排序-sort[/b] -t, --field-separator=SEP 指定分隔符 use SEP instead of non-blank to blank transition -n, --numeric-sort 按数字格式排序 compare according to string numerical value -f, --ignore-case 不考虑大小写 fold lower case to upper case characters -r, --reverse 反转 reverse the result of comparisons -g, --general-numeric-sort compare according to general numerical value cut -d. -f2 domain.txt |sort|uniq -c|sort -ncut -d. -f2 domain.txt |sort|uniq -c|sort -nrcut -d. -f2 domain.txt |sort |uniq -c|sort -gcut -d. -f2 domain.txt |sort|uniq -c|sort -nr|head -2sort domain.txt -t. -k2 -k:指定排序的字符开始和结束位置 -k, --key=POS1[,POS2] start a key at POS1, end it at POS2 (origin 1) data: 12.12.45.4 36.415.545.45 9.45.15.15 154.45.45 sort a.txt -t. -k2 output: 12.12.45.4 36.415.545.45 9.45.15.15 154.45.45 sort a.txt -t. -k1 output: 12.12.45.4 154.45.45 36.415.545.45 9.45.15.15 case: atnodes "zgrep validateOrder.jsp /server/tts/logs/tts.log.2014-10-30-1*.gz" l-ttsi[1-10].f.cn1 |grep "RequestError"|awk -F '&id=' '{print $2}'|awk -F'&' '{print $1}'|sort|uniq|wc
转载请注明原文地址: https://www.6miu.com/read-4049929.html

最新回复(0)