カテゴリー
【Sed活用講座】文字列中の特定の記号を一括削除する方法
※ 当ページには【広告/PR】を含む場合があります。
2021/04/04
2021/04/07
$0--slurp
はじめに
Sedで使う基本的な正規表現
Gnu sedBSD sed-e/--expression-r/--regexp-extended-r用途 | Sed(-rオプション) | sed(-eオプション) |
|---|---|---|
文字エスケープ | \ | \ |
任意の1文字 | . | . |
数字1文字 | \d か [0-9] | \d か [0-9] |
数字以外の1文字 | \D か [^0-9] | \D か [^0-9] |
アルファベットか数字かアンダーバーの１文字 | \w か [a-zA-Z_0-9] | \w か [a-zA-Z_0-9] |
アルファベットか数字かアンダーバー以外の1文字 | \W か [^a-zA-Z_0-9] | \W か [^a-zA-Z_0-9] |
空白文字 | \s か [ \n\r\f\t] | \s か [ \n\r\f\t] |
空白文字以外 | \S か [^ \n\r\f\t] | \S か [^ \n\r\f\t] |
パターンどれかにマッチ | パターンA｜パターンB｜パターンC | パターンA\｜パターンB\｜パターンC |
グループ化 | (パターン) | \(パターン\) |
...とグループ化でキャプチャした値の取得 | \1 | \1 |
パターンが先頭 | ^パターン | ^パターン |
パターンが末尾 | パターン$ | パターン$ |
パターンが0または1回 | パターン? | パターン\? |
パターンが0回以上 | パターン* | パターン* |
パターンが1回以上 | パターン+ | パターン\+ |
パターンがm回 | パターン{m} | パターン\{m\} |
パターンがm回以上 | パターン{m,} | パターン\{m,\} |
パターンがn回以下 | パターン{,n} | パターン\{,n\} |
パターンがm回以上、n回以下 | パターン{m,n} | パターン\{m,n\} |
呼び出し | 定義 |
|---|---|
[:alpha:] | アルファベット |
[:alnum:] | アルファベットと数字 |
[:digit:] | 数字 |
[:xdigit:] | 数字(十六進数も含む) |
[:lower:] | アルファベットの小文字 |
[:upper:] | アルファベットの大文字 |
[:blank:] | 空白文字(スペース/タブ等) |
[:graph:] | 非空白文字(表示可能文字) |
[:cntrl:] | 制御文字 |
[:print:] | 表示可能文字(制御文字以外) |
[:space:] | スペース/タブ/改行文字 |
[:punct:] | 句読点(通常文字/数字/制御文字/スペース文字以外) |
#👇スペースを全部消去
$ echo 'a b c d e f g' | sed -r 's/[[:space:]]//g'
abcdefg
#👇16進数(0-9a-fA-F)を全部消去
$ echo 'HEX: 01 2e 24 a5 8c 2f de' | sed -r 's/[[:xdigit:]]//g'
HX:
実践例① ~ 囲い文字の全消去
"
$ sed -r 's/"//g' <<EOF
"aaa"
"100","9"
"1 2 3 4 5",,,41,"冷麦"
EOF
#👇出力
aaa
100,9
1 2 3 4 5,,,41,冷麦
"'
$ sed -r "s/\"|'//g" << EOF
"aaa",'bbb'
"100",'rgb',"9"
"1 2 3 4 5",'3','8',41,"冷麦"
EOF
#👇出力
aaa,bbb
100,rgb,9
1 2 3 4 5,3,8,41,冷麦
$ sed -r "s/[\"']//g" << EOF
"aaa",'bbb'
"100",'rgb',"9"
"1 2 3 4 5",'3','8',41,"冷麦"
EOF
#👇出力
aaa,bbb
100,rgb,9
1 2 3 4 5,3,8,41,冷麦
"\"''...'スコープ外'....'
$ sed -r 's/"|'"'"'//g' << EOF
"aaa",'bbb'
"100",'rgb',"9"
"1 2 3 4 5",'3','8',41,"冷麦"
EOF
#👇出力
aaa,bbb
100,rgb,9
1 2 3 4 5,3,8,41,冷麦
EOF
's/"|'"'"'//g'デリミタを変える
////
$ sed -r 's@"@@g' <<EOF
"aaa"
"100","9"
"1 2 3 4 5",,,41,"冷麦"
EOF
aaa
100,9
1 2 3 4 5,,,41,冷麦
実践例② ~ 全角の数字やアルファベットを半角へ一括変換
y/置換前文字リスト/置換後文字リスト/
$ echo 'AＢcdｅｆg０1２３4５67８９' | sed '
y/０１２３４５６７８９/0123456789/;
y/ａｂｃｄｅｆｇｈｉｊｋｌｍｎｏｐｑｒｓｔｕｖｗｘｙｚ/abcdefghijklmnopqrstuvwxyz/;
y/ＡＢＣＤＥＦＧＨＩＪＫＬＭＮＯＰＱＲＳＴＵＶＷＸＹＺ/ABCDEFGHIJKLMNOPQRSTUVWXYZ/
'
ABcdefg0123456789
locate
#👇マルチバイト文字未対応の環境
$ echo 'AＢcdｅｆg０1２３4５67８９' | sed '
y/０１２３４５６７８９/0123456789/;
y/ａｂｃｄｅｆｇｈｉｊｋｌｍｎｏｐｑｒｓｔｕｖｗｘｙｚ/abcdefghijklmnopqrstuvwxyz/;
y/ＡＢＣＤＥＦＧＨＩＪＫＬＭＮＯＰＱＲＳＴＵＶＷＸＹＺ/ABCDEFGHIJKLMNOPQRSTUVWXYZ/
'
A01Fcd0bo0brg012101801�401�6701�01�
echo 'AＢcdｅｆg０1２３4５67８９' | sed -e '
s/０/0/g;s/１/1/g;s/２/2/g;s/３/3/g;s/４/4/g;s/５/5/g;s/６/6/g;s/７/7/g;s/８/8/g;s/９/9/g;
s/ａ/a/g;s/ｂ/b/g;s/ｃ/c/g;s/ｄ/d/g;s/ｅ/e/g;s/ｆ/f/g;s/ｇ/g/g;s/ｈ/h/g;s/ｉ/i/g;s/ｊ/j/g;s/ｋ/k/g;s/ｌ/l/g;s/ｍ/m/g;s/ｎ/n/g;s/ｏ/o/g;s/ｐ/p/g;s/ｑ/q/g;s/ｒ/r/g;s/ｓ/s/g;s/ｔ/t/g;s/ｕ/u/g;s/ｖ/v/g;s/ｗ/w/g;s/ｘ/x/g;s/ｙ/y/g;s/ｚ/z/g;
s/Ａ/A/g;s/Ｂ/B/g;s/Ｃ/C/g;s/Ｄ/D/g;s/Ｅ/E/g;s/Ｆ/F/g;s/Ｇ/G/g;s/Ｈ/H/g;s/Ｉ/I/g;s/Ｊ/J/g;s/Ｋ/K/g;s/Ｌ/L/g;s/Ｍ/M/g;s/Ｎ/N/g;s/Ｏ/O/g;s/Ｐ/P/g;s/Ｑ/Q/g;s/Ｒ/R/g;s/Ｓ/S/g;s/Ｔ/T/g;s/Ｕ/U/g;s/Ｖ/V/g;s/Ｗ/W/g;s/Ｘ/X/g;s/Ｙ/Y/g;s/Ｚ/Z/g;
'
ABcdefg0123456789
まとめ
記事を書いた人
ナンデモ系エンジニア
主にAngularでフロントエンド開発することが多いです。 開発環境はLinuxメインで進めているので、シェルコマンドも多用しております。 コツコツとプログラミングするのが好きな人間です。
カテゴリー