コマンドライン上ã§ãƒ’ã‚¹ãƒˆã‚°ãƒ©ãƒ å€¤ï¼ˆé »åº¦æ•°ï¼‰ã‚’æ±‚ã‚ã‚‹ - QiitaDeleted articles cannot be recovered. Draft of this article would be also deleted. Are you sure you want to delete this article?
斉藤 åšæ–‡ã«ã¤ã„ã¦
CodeZine編集部ã§ã¯ã€ç¾å ´ã§æ´»èºã™ã‚‹ãƒ‡ãƒ™ãƒãƒƒãƒ‘ーをスターã«ã™ã‚‹ãŸã‚ã®ã‚«ãƒ³ãƒ•ã‚¡ãƒ¬ãƒ³ã‚¹ã€ŒDevelopers Summitã€ã‚„ã€ã‚¨ãƒ³ã‚¸ãƒ‹ã‚¢ã®ç”Ÿãã–ã¾ã‚’ブーストã™ã‚‹ãŸã‚ã®ã‚¤ãƒ™ãƒ³ãƒˆã€ŒDevelopers Boostã€ãªã©ã€ã•ã¾ã–ã¾ãªã‚«ãƒ³ãƒ•ã‚¡ãƒ¬ãƒ³ã‚¹ã‚’ä¼ç”»ãƒ»é‹å–¶ã—ã¦ã„ã¾ã™ã€‚
Man page of GAWK
Section: Utility Commands (1) Updated: May 17 2000 Index JM Home Page roff page å称 gawk - パターン検索・処ç†è¨€èªž æ›¸å¼ awk [ POSIX or GNU style options ] -f program-file [ -- ] file ... gawk [ POSIX or GNU style options ] [ -- ] program-text file ... 解説 gawk 㯠GNU プãƒã‚¸ã‚§ã‚¯ãƒˆãŒå®Ÿè£…ã—㟠プãƒã‚°ãƒ©ãƒŸãƒ³ã‚°è¨€èªž AWK ã®å‡¦ç†ç³»ã§ã™ã€‚ 本処ç†ç³»ã¯ POSIX 1003.2 コマンド言語ã¨ãƒ¦ãƒ¼ãƒ†ã‚£ãƒªãƒ†ã‚£è¦ç´„ã«å®šã‚られ㟠言語ã®å®šç¾©ã«é©åˆã—ã¦ã„ã¾ã™ã€‚ 本ãƒãƒ¼ã‚¸ãƒ§ãƒ³ã¯ã¾ãŸã€Aho, Kernighan, Weinberger ã®è‘—書 The AWK Programmi
フィルタ言語 AWK (3)
02 月 06 日（月） フィルタ言語 AWK (3) AWK ã®é…列をã†ã¾ã使ãˆã°ï¼Œè¤‡é›‘ãªå‡¦ç†ã‚’ç°¡å˜ã«è¨˜è¿°ã§ãã‚‹å ´åˆãŒã‚る． AWK ã®ç¬¬ä¸€æ© ã‚„ gawk 日本語マニュアル ç‰ã‚’å‚考ã«ã—ãªãŒã‚‰ï¼Œ 作æ¥ã‚’進ã‚ã¦è¡Œã“ã†ï¼Ž AWK ã®é…列 AWK ã®é€£æƒ³é…列 本日ã®èª²é¡Œ AWK ã®é…列 AWK ã§ã¯ï¼Œå¤‰æ•°ã¨åŒæ§˜ã«ï¼Œé…列ã«ã¤ã„ã¦ã‚‚宣言ã›ãšã«åˆ©ç”¨ã§ãる． ã¤ã¾ã‚Šï¼ŒAWK ã®é…列ã¯ï¼Œ å‹•çš„é…列（è¦ç´ æ•°ãŒå¯å¤‰ã®é…列）ã¨ã„ã†ã“ã¨ã ． ï¼£ã®é…列ã¯ï¼ŒåŸºæœ¬çš„ã«ã¯å›ºå®šé…列ã ã£ãŸï¼Ž å‹•çš„é…列を使ã†ã“ã¨ã‚‚ã§ããŸãŒï¼Œ 準備㮠malloc( ) 㨠片付ã‘ã® free() ã¨ãŒå¿…è¦ã§ï¼Œ é¢å€’ã ã£ãŸï¼Ž
awkã§é‡è¤‡è¡Œã‚’高速削除ã™ã‚‹ã€‚ - 忘れãªã„よã†ã«ãƒ¡ãƒ¢ã£ã¨ã
awkã§é‡è¤‡è¡Œã‚’高速削除ã™ã‚‹ã€‚ è¡Œã®é‡è¤‡å‰Šé™¤ã§èª¿ã¹ã‚‹ã¨ã‚ˆã出ã¦ãã‚‹ã®ãŒã€sort & uniqを使ã£ãŸã‚³ãƒžãƒ³ãƒ‰ã€‚ ソートã¯ãƒ•ã‚¡ã‚¤ãƒ«ãŒå¤§ãããªã‚‹ã¨ã€å®Ÿè¡Œã«ã‹ãªã‚Šæ™‚é–“ãŒã‹ã‹ã£ã¦ã—ã¾ã„ã¾ã™ã。 ソートã›ãšã«é«˜é€Ÿå®Ÿè¡Œã§ãã‚‹ã®ãŒã€æ¬¡ã®awkコマンド。 awk '!colname[$1]++{print $1}' ã“ã†ã„ã†ãƒ•ã‚¡ã‚¤ãƒ«ãŒã‚ã£ã¦ã€ä¸€åˆ—ç›®ã®åå‰ã‚’å–å¾—ã—ãŸã„ã¨ãã€!colname[$1]ã¯ã€ãƒ‡ãƒ¼ã‚¿ã‚’ã‚ーã«ã—ãŸé€£æƒ³é…列ã§ã€ã‚¤ãƒ³ã‚¯ãƒªãƒ¡ãƒ³ãƒˆã•ã‚Œã‚‹ã€‚ ボブ ã‚Šã‚“ã” | colname["ボブ"] → 0 {print $1} マイケル ã¾ã‚“ãŒã€€ | colname["マイケル"] → 0 {print $1} マイケル ã¾ã‚“㌠| colname["マイケル"] → 1 サブãƒãƒ¼ PC 　 | colname["サブãƒãƒ¼"] → 0 {print $1} サブãƒãƒ¼ ã‚ーボード | colname["サブ
awkã§åˆ—ã®ç¨®é¡žã”ã¨ã«é›†è¨ˆã™ã‚‹ã€‚ - 忘れãªã„よã†ã«ãƒ¡ãƒ¢ã£ã¨ã
連想é…列ã®ã‚ーã«ã‚°ãƒ«ãƒ¼ãƒ—ã®åå‰ã‚’使ãˆã°ãŠk。 集計ã™ã‚‹ãƒ•ã‚¡ã‚¤ãƒ«â†“↓ hoge.txt ã‚Šã‚“ã” 230 ã‚Šã‚“ã” 300 ã°ãªãª 190 ã°ãªãª 190 ã¿ã‹ã‚“ 110 ã‚Šã‚“ã” 310 ã°ãªãª 190 ã¿ã‹ã‚“ 110 ã¿ã‹ã‚“ 130 awkファイル↓↓ sum.awk { sum[$1]+=$2 }; END { for (key in sum) { print key, sum[key] } } スクリプトã®å®Ÿè¡Œã¨çµæžœã€‚ awk -f sum.awk hoge.txt ã°ãªãª 570 ã¿ã‹ã‚“ 350 ã‚Šã‚“ã” 840
Awkワンライナー (最å°å€¤ã€æœ€å¤§å€¤ã€åˆè¨ˆã€å¹³å‡ã€ä¸å¤®å€¤) - 雨ã®æŒã‚’ã„ã¤ã‹æ›¸ã
ç°¡å˜ãªè§£æžã¯ãƒ¯ãƒ³ãƒ©ã‚¤ãƒŠãƒ¼ã§ã‚„ã£ã¡ã‚ƒãŠã†ã€‚ã¨ã„ã†ã“ã¨ã§ã¾ãšã¯ç°¡å˜ã«æœ€å°å€¤ã¨æœ€å¤§å€¤ã¨å¹³å‡ã‚’求ã‚ã‚‹Awkワンライナーを書ãã¾ã™ã€‚ ãŸã¨ãˆã°ä»¥ä¸‹ã®ã‚ˆã†ãªãƒã‚°ãƒ•ã‚¡ã‚¤ãƒ«ãŒã‚ã‚‹ã¨ã™ã‚‹ã€‚僕ã¯ã„ã¾ã€3列目ã®æ•°å€¤ã«å¯¾ã—ã¦çµ±è¨ˆå€¤ã‚’出ã—ãŸã„ã®ã 。 0 0 147.086 0 10 141.269 0 20 10000 0 30 2805.22 0 40 152.003 0 50 144.762 0 60 144.926 最大値 cat test.log | awk '{if(m<$3) m=$3} END{print m}' { if(m<$3) m=$3 } END { print m } $3ã£ã¦ã®ãŒç¬¬3番目ã®åˆ—ã¨ã„ã†æ„味ãªã®ã§ã€ã“ã“を変ãˆã‚Œã°åˆ¥ã®ã¨ã“ã‚ã‚‚å‚ç…§å¯èƒ½ã€‚BEGINã®ä¸ã§åˆæœŸå€¤ã‚’è¨å®šã™ã‚‹å¿…è¦ãŒã‚ã‚‹ã®ã‹ãªã¨æ€ã£ã¦ã„ãŸã‘ã©ã€ã„ããªã‚Šif(m>$3)を実際ã«ã‚„ã£ã¦ã¿ãŸã‚‰å¤§ä¸ˆå¤«ã ã£ãŸã€‚ 最å°å€¤ 基本的ã«ã¯åŒ
jq
jq is a lightweight and flexible command-line JSON processor. jq is like sed for JSON data - you can use it to slice and filter and map and transform structured data with the same ease that sed, awk, grep and friends let you play with text. jq is written in portable C, and it has zero runtime dependencies. You can download a single binary, scp it to a far away machine of the same type, and expect
Pythonã§grepã‚„awkã®ã‚ˆã†ãªè¡Œã®æŠ½å‡ºã‚’行ㆠ| 俺的備忘録 〜ãªã‚“ã‹ã„ã‚ã„ã‚〜
最近ã¡ã‚‡ã“ã¡ã‚‡ã“Pythonを触る機会ãŒå¤šããªã£ã¦ããŸã®ã ãŒã€å‡¦ç†ã®ä¸ã§grepã‚„awkã®ã‚ˆã†ã«è¡Œã®æŠ½å‡ºã‚’ã•ã›ãŸã„ã“ã¨ãŒã‚る。 Subprocessã§grepã¨ã‹awkを呼ã³å‡ºã™ã®ã¯ã‹ã£ã“悪ã„ã—ã€Python内ã§å‡¦ç†ã‚’完çµã•ã›ãŸã„ã¨ã„ã†ã®ã‚‚ã‚ã£ãŸã®ã§å°‘ã—調ã¹ã¦ã¿ãŸã€‚ 1.指定ã—ãŸæ–‡å—列をå«ã‚€è¡Œã‚’抽出 1-1.基本的ãªæŠ½å‡ºæ–¹æ³• Pythonã§grepã®ã‚ˆã†ãªå‡¦ç†ã‚’è¡Œã†ã«ã¯ã€find('æ–‡å—列')を用ã„ã¦ãã®æ–‡å—列をå«ã‚€æ•°ã‚’指定ã™ã‚‹ã“ã¨ã§æŠ½å‡ºãŒå¯èƒ½ã 。 以下ã€è¨˜è¿°ä¾‹ã€‚ # -*- coding: utf-8 -* import sys ld = open(sys.argv[1]) lines = ld.readlines() ld.close() for line in lines: if line.find("æ–‡å—列") >= 0: print line[:-1] [root@BS-PUB-
ターミナルã§ç°¡å˜ã«ã‚°ãƒ©ãƒ•ã‚’æãツール termeter - Qiita
ターミナル上ã§ç°¡å˜ã«ã‚°ãƒ©ãƒ•ã‚’æããŸã‚ã«termeterã¨ã„ã†ãƒ„ールを作æˆã—ã¦ã¿ã¾ã—ãŸã€‚ Getting Started termeterã¯é€šå¸¸ã®ã‚³ãƒžãƒ³ãƒ‰ãƒ©ã‚¤ãƒ³ãƒ„ールã¨ã—ã¦ä½¿ç”¨ã™ã‚‹ã“ã¨ãŒã§ãã¾ã™ã€‚タブ区切りやカンマ区切りã®ãƒ‡ãƒ¼ã‚¿ã‚’標準入力ã‹ãƒ•ã‚¡ã‚¤ãƒ«ã§ã‚ãŸãˆã‚‹ã“ã¨ã§ã‚°ãƒ©ãƒ•ã‚’æã事ãŒã§ãã¾ã™ã€‚ 例ã¨ã—ã¦ä»¥ä¸‹ã®ã‚ˆã†ãªä¸‰è§’関数ã®ã‚¿ãƒ–区切りã®ãƒ‡ãƒ¼ã‚¿ã‚’考ãˆã¾ã™ã€‚ $ seq 100 | awk 'BEGIN{OFS="\t"; print "x","sin(x)","cos(x)"}{x=$1/10; print x,sin(x),cos(x)}' | head x sin(x) cos(x) 0.1 0.0998334 0.995004 0.2 0.198669 0.980067 0.3 0.29552 0.955336 0.4 0.389418 0.921061 0.5 0.479426 0.877
大é‡ã®ãƒ•ã‚¡ã‚¤ãƒ«ã‚’シェルã®ã‚³ãƒžãƒ³ãƒ‰ã§ä¸€æ‹¬ãƒªãƒãƒ¼ãƒ ã™ã‚‹ | DevelopersIO
コマンド $ ls | sed -e s/\.txt// | awk '{print $1 ".txt " $1 "_document.md"}' | xargs -n 2 mv 戦略ã«ã¤ã„㦠ã¾ãšå‰æã¨ã—ã¦ã€ãƒ•ã‚¡ã‚¤ãƒ«ã®ãƒªãƒãƒ¼ãƒ ã‚’è¡Œã†ã«ã¯ã€ xargs -n 2 mv ã«ãƒ‘イプ㧠元ファイルå リãƒãƒ¼ãƒ 後ã®ãƒ•ã‚¡ã‚¤ãƒ«å ã®ã‚ˆã†ãªãƒ•ã‚©ãƒ¼ãƒžãƒƒãƒˆã®æ–‡å—列を渡ã›ã° OK ã§ã™ã€‚ $ ls before.txt $ echo "before.txt after.txt" before.txt after.txt $ echo "before.txt after.txt" | xargs -n 2 mv $ ls after.txt ã“ã®æ–‡å—列ãŒè¤‡æ•°è¡Œã‚ã‚‹å ´åˆã€ xargs -n 2 mv ã¯1è¡Œãšã¤é †æ¬¡å‡¦ç†ã—ã¾ã™ã€‚ $ ls 1.txt 2.txt $ echo "1.txt 11.txt\n2.tx
Effective AWK Programming A User's Guide for GNU Awk
Effective AWK Programming A User's Guide for GNU Awk Edition 1.0.4 April, 1999 Arnold D. Robbins ã¯ã˜ã‚ã« awkã¨gawkã®æ´å² The GNU Project and This Book Acknowledgements Introduction Using This Book Dark Corners Typographical Conventions 例ã§ä½¿ç”¨ã™ã‚‹ãƒ‡ãƒ¼ã‚¿ãƒ•ã‚¡ã‚¤ãƒ« Getting Started with awk A Rose By Any Other Name awkプãƒã‚°ãƒ©ãƒ ã®å®Ÿè¡Œã®ä»•æ–¹ 使ã„æ¨ã¦ã®ä¸€ç™ºawkプãƒã‚°ãƒ©ãƒ 入力ファイルãªã—ã®awkã®å®Ÿè¡Œ é•·ã„プãƒã‚°ãƒ©ãƒ を実行ã™ã‚‹ 実行å¯èƒ½ãªawkプãƒã‚°ãƒ©ãƒ awkプãƒã‚°ãƒ©ãƒ ä¸ã®ã‚³ãƒ¡ãƒ³ãƒˆ éžå¸¸ã«å˜ç´”ãªä¾‹ 二ã¤ã®ãƒ«ãƒ¼ãƒ«ã‚’æŒã¤ä¾‹
よã使ã†awkコマンドã¾ã¨ã‚ - Qiita
ã“ã‚Œã£ã¦ãªã‚“㞠僕ã¯è¨˜æ†¶åŠ›ãŒã‚ˆã‚ã—ããªã„ã®ã§ã€awkã®ã‚³ãƒžãƒ³ãƒ‰ã‚’ã“ã“ã«ãƒ¡ãƒ¢ã—ã¦ã„ãã¾ã™ã€‚ 変数ã®å–り扱ㄠ$0 = 行全体 $1 = 1列目 ã¨ã„ã†é †ã«ç¶šã。 #抽出 列åã ã‘指定 cat data.txt | awk '{print $1, $2, $4}' > hogehoge.txt ##æ¡ä»¶ä»˜ã 第n列ãŒm以上ã®ã¨ãを抽出 n = 3, m = 10ã¨ã™ã‚‹ã€‚ cat data.txt | awk '$3 > 10 {print}' > hogehoge.txt #最大値・最å°å€¤ 第3列ã«ãŠã‘る例ã¨ã—ã¦ã€‚ 最大値 cat data.txt | awk '{if(m<$3) m=$3} END{print m}' 最å°å€¤ cat data.txt | awk 'BEGIN{m=100000}{if(m>$3) m=$3} END{print m}' é‡è¤‡ é‡è¤‡è¡Œã‚’削除 cat data
Unix :: コマンド / awk [Tipsã¨ã„ã†ã‹ãƒ¡ãƒ¢]
2行目ã¨3行目を表示ã™ã‚‹ (パイプ経由) % cat hoge.txt | awk 'NR==2,NR==3 { print }' 2行目ã¨3行目を表示ã™ã‚‹ (ファイルã‹ã‚‰èªã¿è¾¼ã‚€) % awk 'NR==2,NR==3 { print }' < hoge.txt æ¡ä»¶åˆ†å² (if else) % grep 'needle' hoge.txt \ | awk '{if($2==OK) ok++; else ng++}; END {print ok; print ng}' 第２フィールドã®ã€ŒOKã€ã‚’カウントã—ã€åŒæ™‚ã«ã€ŒOK以外ã€ã‚‚カウントã™ã‚‹ã€‚ 演算å && || % some_command | awk '{if($1==A && $2==B) print}' % some_command | awk '{if($1==A || $2==B) print}' 第２フィールドãŒã€Œ1以上ã€ã®è¡Œ
awkガナス - 組ã¿è¾¼ã¿å¤‰æ•°NF(フィールド数) NR(行番å·)
2 åˆè¨ˆ 9496 9 -rwxr-xr-x 1 root root 986672 9月 27 2014 bash 9 -rwxr-xr-x 3 root root 30240 10月 21 2013 bunzip2 9 -rwxr-xr-x 1 root root 1713424 11月 15 2013 busybox 9 -rwxr-xr-x 3 root root 30240 10月 21 2013 bzcat 11 lrwxrwxrwx 1 root root 6 10月 21 2013 bzcmp -> bzdiff 9 -rwxr-xr-x 1 root root 2140 10月 21 2013 bzdiff ..
awkを使ã£ã¦ã€ãƒ‡ã‚£ãƒ¬ã‚¯ãƒˆãƒªã®ä¸€è¦§ã‚’å–å¾—ã™ã‚‹
<IT技術ã®å‡¦æ–¹ç®‹ï¼šawkを使ã£ã¦ã€ãƒ‡ã‚£ãƒ¬ã‚¯ãƒˆãƒªã®ä¸€è¦§ã‚’å–å¾—ã™ã‚‹> awkを使ã†ã¨ã€å¼•ã渡ã•ã‚ŒãŸãƒ‡ãƒ¼ã‚¿ã‚’é…列ã¨ã—ã¦èªã¿å–ã‚Šã¾ã™ã€‚ 以下ã®ä¾‹ã ã¨ã€ls -la ã®3番目ã®è¦ç´ を抽出ã—ã¾ã™ã€‚ ls -l |awk '{print $3}' ã“ã®æ€§è³ªã‚’使ã£ã¦ã€ãƒ‡ã‚£ãƒ¬ã‚¯ãƒˆãƒªä¸€è¦§ã‚’å–å¾—ã—ã¾ã—ょã†ã€‚ å…ˆé ãŒ'd'ã®ã‚‚ã®ã¯ã€ãƒ‡ã‚£ãƒ¬ã‚¯ãƒˆãƒªã§ã™ã。 $ls -l -rw-r--r-- 16:16 bbb -rw-r--r-- 16:16 cccc drwxr-xr-x 12:58 dir/ drwxr-xr-x 09:26 from/ awkを応用ã—ã¦è€ƒãˆã‚‹ã¨ãƒ»ãƒ»ãƒ»ãƒ»ãƒ» ディレクトリã®ä¸€è¦§ã®æ–‡å—列ã ã‘å–å¾—ã§ãã¾ã™ã€‚ $ls -l | awk '$1 ~ /d/ {print $9 }' dir from ※解説 $1（最åˆã®æ–‡å—）ãŒdã§å§‹ã¾ã‚‹ã®ã¯ã€dirã¨fromã ã‘ã§ã™ã‹ã‚‰ 上記ã®ã‚ˆã†ãªçµæžœã«ãªã‚Šã¾ã™ã€‚
リリースã€éšœå®³æƒ…å ±ãªã©ã®ã‚µãƒ¼ãƒ“スã®ãŠçŸ¥ã‚‰ã›
最新ã®äººæ°—エントリーã®é…ä¿¡
j次ã®ãƒ–ックマーク
kå‰ã®ãƒ–ックマーク
lã‚ã¨ã§èªã‚€
eコメント一覧を開ã
oページを開ã
AWKã‹ã‚‰Perlã¸ã®å¤‰æ›ã§å›°ã£ã¦ã„ã¾ã™
åˆã‚ã¦ã®AWK 使ã„æ–¹ã¨ä½¿ç”¨ä¾‹ 56é¸ - Qiita
AIX ã®å¤ã„ãƒãƒ¼ã‚¸ãƒ§ãƒ³
メモã¨ã‹:gnuplot ã§å¤–部コマンドを実行ã™ã‚‹
{{#tags}}- {{label}}
{{/tags}}