シェルスクリプトでの正規表現は難しくて、疎かになっていないでしょうか？

便利そうだけど理解が出来ずに、手を付けずにここまで来たあなたの為に、今回シェルスクリプトでの正規表現についてまとめます。

正規表現を極めることでシェルスクリプトの質が上がる事は間違いありません。

理解しやすいように表にしてまとめたり、シェルスクリプトの例文を使用して現役エンジニアの筆者が教えます。

今まで避けてきた正規表現を極めて、効率よいシェルスクリプトを作成できるようになりましょう！

シェルスクリプトで正規表現についての詳細解説

シェルスクリプトの正規表現の種類について

シェルスクリプトの正規表現について2種類あります。

基本正規表現と拡張正規表現とどちらを学べば良いでしょうか？

結論は拡張正規表現を学べば良いです。少し違いがあるだけで基本はコマンドにオプションをつけるだけで拡張正規表現になるので楽です。

基本の方を学びたくなる気持ちもわかりますが、対応していない文字などもあるので拡張正規表現だけでも問題ありません。

正規表現で重要になってくるメタ文字とは

また正規表現を使用するにあたり重要になってくるのが、メタ文字です。

メタ文字とは正規表現を使用する上で、普通の文字列ではないある効果を持っている文字です。

このメタ文字がややこしいので、表でわかりやすいようにまとめます。

正規表現はシェルスクリプトのどのような所で使用されるのか

シェルスクリプトでよく正規表現が使用されるのは主に「文字検索」と「置換」です。あとは条件分岐のifでたまに正規表現が出てくるくらいです。

シェルスクリプトの「文字検索」で使用されるコマンドは主に「grep」コマンドです。

あわせて読みたい

【シェルスクリプト】grepで文字列を抽出する方法！正規表現も使用します Linuxでシェルスクリプトのgrepのやり方がよくわかりません。オプションや正規表現を使用した文字列抽出を行いたいです。 そういった声が多いので今回はシェルスクリプ…

シェルスクリプトの「置換」で使用されるコマンドは主に「sed」コマンドです。

あわせて読みたい

【シェルスクリプト】sedで置換する方法！変数や正規表現も使用する シェルスクリプトでよく使うものに置換があります。「sed s」コマンドを使用しますが、書き方など難しいと思った事はないでしょうか？ 記述の仕方が難しいのでとっつき…

シェルスクリプトで正規表現を使う方法

ではシェルスクリプトの正規表現を実際に見ていきます。

一気に見るとややこしいので、正規表現に使用するメタ文字を用途に分けてまとめます。

正規表現の文字や文字の位置を示すメタ文字

正規表現の文字や文字の位置を示すメタ文字

実際のメタ文字を使用した正規表現例

正規表現の文字の繰り返しを示すメタ文字

正規表現の文字の繰り返しを示すメタ文字

実際に繰り返しのメタ文字使用例

正規表現の補助的なメタ文字

正規表現の補助的なメタ文字

実際の補助的メタ文字の使用例

正規表現をシェルスクリプトで使用した詳細結果

それぞれ実際にシェルスクリプトで実行した結果については以下の記事で詳細にまとめております。

シェルスクリプトの「文字検索」で使用される「grep」コマンド結果

あわせて読みたい

【シェルスクリプト】grepで文字列を抽出する方法！正規表現も使用します Linuxでシェルスクリプトのgrepのやり方がよくわかりません。オプションや正規表現を使用した文字列抽出を行いたいです。 そういった声が多いので今回はシェルスクリプ…

シェルスクリプトの「置換」で使用される「sed」コマンド実行結果

あわせて読みたい

【シェルスクリプト】sedで置換する方法！変数や正規表現も使用する シェルスクリプトでよく使うものに置換があります。「sed s」コマンドを使用しますが、書き方など難しいと思った事はないでしょうか？ 記述の仕方が難しいのでとっつき…

シェルスクリプトでよく使うものに置換があります。「sed s」コマンドを使用しますが、書き方など難しいと思った事はないでしょうか？

記述の仕方が難しいのでとっつきにくく、今まで置換を避けてきたエンジニアの方も多いです。

そこで今回は現役エンジニアの筆者がsedの置換について例文付きでわかりやすくご説明いたします。

変数や正規表現を使用しての置換などよく出てくるので、ここでやり方を抑えておきたいです。

シェルスクリプトのsedで置換する方法

シェルスクリプトで置換のsedの使い方の基礎は以下です。

sed 's/置き換え前/置き換え後/フラグ' ファイル名

sedで置換する基礎

置換のコマンドは「sed s」コマンドとして覚えておきましょう！

/置換したい文字列/置換後の文字列/で指定します。

フラグは以下の2点を覚えておきましょう！2つ同時に指定する事もできます。

フラグは何も指定しなければ各行の最初にマッチした文字列しか置換されません。全部置換したい時は「g」フラグを指定しましょう！

「i」フラグは大文字小文字を区別しなくなります。

実際にsedで置換してみる

では実際のシェルスクリプトで置換してみます。まずは置換前のファイルを表示します。

head -n 3 /etc/passwd

「head -n 3」は頭から3行まで表示するコマンドです。

このシェルスクリプトを実行します。

あわせて読みたい

【シェルスクリプト基礎】コマンドを実行する様々な方法をご紹介！ シェルスクリプトを実行する時に困った事はありませんか？ シェルスクリプトのコマンド実行での失敗メッセージ一覧 「実行権限がありません」 「コマンドが見つかりませ…

root:x:0:0:root:/root:/bin/bash
bin:x:1:1:bin:/bin:/sbin/nologin
daemon:x:2:2:daemon:/sbin:/sbin/nologin

sedでこのファイルの「:」を空白に置換してみます。

sed s/://g /etc/passwd | head -n 3

「/etc/passwd」の全ての「:」を空白に置換するシェルスクリプトです。実行します。

rootx00root/root/bin/bash
binx11bin/bin/sbin/nologin
daemonx22daemon/sbin/sbin/nologin

全ての「:」が空白に置換されています。

シェルスクリプトのsedで指定した行を対象に置換する方法

置換対象の行数を指定したい場合もあると思います。

sed '行数s/置き換え前/置き換え後/フラグ' ファイル名

「s」の前に数字を付ける事で、対象行数を指定できます。

sed 2s/://g /etc/passwd | head -n 3

対象を2行目だけにしています。シェルスクリプトを実行します。

root:x:0:0:root:/root:/bin/bash
binx11bin/bin/sbin/nologin
daemon:x:2:2:daemon:/sbin:/sbin/nologin

2行目の「:」だけが空白に置換されています。

sed '2,5s/://g' /etc/passwd | head -n 7

2行目から5行目まで範囲指定したい場合は、「s」の前に「始まりの行数,終わりの行数」として指定できます。

root:x:0:0:root:/root:/bin/bash
binx11bin/bin/sbin/nologin
daemonx22daemon/sbin/sbin/nologin
admx34adm/var/adm/sbin/nologin
lpx47lp/var/spool/lpd/sbin/nologin
sync:x:5:0:sync:/sbin:/bin/sync
shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown

2行目から5行目までの「:」だけが空白に置換されています。

sedのフラグの使い方

setで置換する時の基礎は以下でした。フラグを試していきましょう！

sed 's/置き換え前/置き換え後/フラグ' ファイル名

フラグは以下の2点を覚えておきましょう！2つ同時に指定する事も可能。

置換sedの「g」フラグを試す

sed s/:// /etc/passwd | head -n 3

フラグは何も指定しなければ各行の最初にマッチした文字列しか置換されません。

rootx:0:0:root:/root:/bin/bash
binx:1:1:bin:/bin:/sbin/nologin
daemonx:2:2:daemon:/sbin:/sbin/nologin

各行の初めの「:」だけが空白に置換されています。

「g」フラグをつけると行の先頭から末尾まで複数マッチした場合でも対象になります。

sed 's/://g' /etc/passwd | head -n 3

シェルスクリプトを実行して確認します。

rootx00root/root/bin/bash
binx11bin/bin/sbin/nologin
daemonx22daemon/sbin/sbin/nologin

各行全ての「:」が空白に置換されています。

置換sedの「i」フラグを試す

「i」フラグは大文字小文字を区別しなくなります。

sed 's/Root/user1/i' /etc/passwd | head -n 3

「Root」と「root」で大文字小文字が区別されない時しか置換できません。

user1:x:0:0:root:/root:/bin/bash
bin:x:1:1:bin:/bin:/sbin/nologin
daemon:x:2:2:daemon:/sbin:/sbin/nologin

各行で初めの「root」の文字列が「user1」に置換されています。

sed 's/Root/user1/gi' /etc/passwd | head -n 3

「g」と「i」フラグを両方つけて実行します。

user1:x:0:0:user1:/user1:/bin/bash
bin:x:1:1:bin:/bin:/sbin/nologin
daemon:x:2:2:daemon:/sbin:/sbin/nologin

各行のすべての「root」が「user1」に置換されました。

sedのエスケープシークエンスの使い方

「\」（バックスラッシュ）を使用してエスケープする

エスケープシークエンスとは特別な文字列の効果を消して、普通の文字として扱う事が出来る文字です。

sed 's/://g' /etc/passwd | head -n 3

「/etc/passwd」の「/」を「☆」に置換したいですが、sedでは「/」は特別な意味を持つ文字です。

sed 's/\//☆/g' /etc/passwd | head -n 3

変更前の「/」は区切りを表す特別な意味のある文字なので、その前に「\」（バックスラッシュ）をつけて効果を打ち消します。

root:x:0:0:root:☆root:☆bin☆bash
bin:x:1:1:bin:☆bin:☆sbin☆nologin
daemon:x:2:2:daemon:☆sbin:☆sbin☆nologin

特別な意味を持つ「/」が普通の文字として扱われて、☆に置換されました。

区切り文字を変更する

「/」を区切り文字として扱っていましたが、「%」や「!」で置き換えても大丈夫です。

sed 's%/%☆%g' /etc/passwd | head -n 3

区切り文字を「%」にして実行します。

root:x:0:0:root:☆root:☆bin☆bash
bin:x:1:1:bin:☆bin:☆sbin☆nologin
daemon:x:2:2:daemon:☆sbin:☆sbin☆nologin

普通に「/」が「☆」に置換されました。

sed 's!/!☆!g' /etc/passwd | head -n 3

同じく「!」を区切り文字にしているパターンです。

root:x:0:0:root:☆root:☆bin☆bash
bin:x:1:1:bin:☆bin:☆sbin☆nologin
daemon:x:2:2:daemon:☆sbin:☆sbin☆nologin

同じく普通に「/」が「☆」に置換されました。

sedのオプションの効果

sedで使用できるオプションをまとめます。

拡張正規表現を使用する「-r」オプション

正規表現については後述します。

複数の条件を指定する「-e」オプション

複数の置換条件がある場合に使用します。

sed -e 's/root/user1/g' -e 's/://g'  -e 's/\///g' /etc/passwd | head -n 3

「root」を「user1」に、「:」を空白に、「/」を空白に置換するシェルスクリプトです。

user1x00user1user1binbash
binx11binbinsbinnologin
daemonx22daemonsbinsbinnologin

「root」が「user1」に、「:」と「/」が空白に置換されています。

ファイルを編集して上書きする「-i」オプション

今までは標準出力に表示していただけで、ファイル自体の保存はできません。「-i」オプションを使用すればファイル自体を上書き保存できます。

シェルスクリプトと同階層に「sed_test.txt」があり内容が以下とします。

root:x:0:0:root:/root:/bin/bash

このファイルの文字列を置換して上書き保存します。元のファイルをバックアップする事も可能です。

sed -i -e 's/root/user1/g' -e 's/://g' sed_test.txt

「root」を「user1」に、「:」を空白に置換して上書き保存します。※バックアップはとりません。

user1x00user1/user1/bin/bash

「sed_test.txt」の内容を見ると上のようになっており、置換して上書き保存されています。

先程のコマンドではなく以下のように「-i」オプションの後すぐに名前を指定すればバックアップ出来ます。

sed -i.bk -e 's/root/user1/g' -e 's/://g' sed_test.txt

このシェルスクリプトを実行すると、同階層に「sed_test.txt」と「sed_test.txt.bk」ができています。それぞれの中身をみてみます。

user1x00user1/user1/bin/bash

「sed_test.txt」は置換されています。

root:x:0:0:root:/root:/bin/bash

「sed_test.txt.bk」は置換前のファイルの内容になっていて、バックアップがとれています。

sedで変数を使用して置換する方法

変数を使用して置換する方法も見ておきます。

moji=bin
sed "s/$moji/hensu/g" /etc/passwd | head -n 2

変数に値を入れています。sedの検索文字列に変数参照の「$変数」を入れて置換します。

root:x:0:0:root:/root:/hensu/bash
hensu:x:1:1:hensu:/hensu:/shensu/nologin

変数の「bin」の箇所が「hensu」に置換されています。

sedで変数を使用してエラーが出る時

変数で置換しようとして上手くいかない場合があります。

sed 's/$moji/hensu/g' /etc/passwd | head -n 2

このシェルスクリプトを実行します。

root:x:0:0:root:/root:/bin/bash
bin:x:1:1:bin:/bin:/sbin/nologin

変数の文字列の「bin」が置換されていません。

原因は「”」ではなく「’」で囲っている為です。変数参照する時は「”」でなくては展開できません。

sedで正規表現を使用して置換する方法

シェルスクリプトでsedの正規表現

シェルスクリプトで正規表現をよく使用するものに文字列検索する「grep」と置換する「sed」があります。

あわせて読みたい

【シェルスクリプト】grepで文字列を抽出する方法！正規表現も使用します Linuxでシェルスクリプトのgrepのやり方がよくわかりません。オプションや正規表現を使用した文字列抽出を行いたいです。 そういった声が多いので今回はシェルスクリプ…

sedでの正規表現についてまとめます。正規表現には基本正規表現と拡張正規表現があります。

基本的には拡張正規表現を使用していれば問題ありません。

正規表現で文字列を指定する特別な文字をメタ文字と言います。メタ文字がキーとなります。メタ文字とその効果をまとめます。

何かしらの文字列を表す「.」を使用します。

何かしらの文字列を表す「.」を使用します。

sed 's/roo./user1/g' /etc/passwd | head -n 3

「| head -n 3」はsedの結果の頭３行のみを抽出するコマンドです。

指定したファイルの中に「roo」と何らかの1文字の文字列があれば「user1」に置換します。

「’」で文字列を囲わなくても抽出できますが、エラーになる指定の仕方もあるので、全て「’」で囲う事を推奨します。

user1:x:0:0:user1:/user1:/bin/bash
bin:x:1:1:bin:/bin:/sbin/nologin
daemon:x:2:2:daemon:/sbin:/sbin/nologin

「roo」と何らかの文字の「t」が結合された「root」が置換られました。

最初の文字列を指定するには「^」を使用します。

最初の文字列を指定する場合です。

sed 's/^root/user1/g' /etc/passwd | head -n 3

指定したファイルの中で行の初めの「root」のみを「user1」に置換します。

user1:x:0:0:root:/root:/bin/bash
bin:x:1:1:bin:/bin:/sbin/nologin
daemon:x:2:2:daemon:/sbin:/sbin/nologin

行の初めの「root」のみが「user1」に置換されました。

最後の文字を指定するには「$」を使用します。

最後の文字を指定する場合です。

sed 's/nologin$/user1/g' /etc/passwd | head -n 3

指定したファイルの中で行の終わりの「nologin」のみを置換します。

root:x:0:0:root:/root:/bin/bash
bin:x:1:1:bin:/bin:/sbin/user1
daemon:x:2:2:daemon:/sbin:/sbin/user1

行終わりの「nologin」のみ「user1」に置換されました。

限定文字を指定するには[]を使用します。

限定文字を指定する場合です。

sed 's/roo[stu]/user1/g' /etc/passwd | head -n 3

指定したファイルの中で「roo」とあと「s」か「t」か「u」かで組み合わせる文字列があれば置換します。

user1:x:0:0:user1:/user1:/bin/bash
bin:x:1:1:bin:/bin:/sbin/nologin
daemon:x:2:2:daemon:/sbin:/sbin/nologin

「root」が「user1」に置換られました。

sed 's/roo[s-u]/user1/g' /etc/passwd | head -n 3

続き文字列であれば上のように指定もできます。数字であれば[1-3]のようにも指定できます。

限定文字以外を指定するには[^]を使用します。

限定文字以外を指定する場合です。

sed 's/roo[^abc]/shellscript/g' /etc/passwd | head -n 3

指定したファイルの中で「roo」とあと「a」か「b」か「c」以外の文字で組み合わせる文字列があれば置換します。

shellscript:x:0:0:shellscript:/shellscript:/bin/bash
bin:x:1:1:bin:/bin:/sbin/nologin
daemon:x:2:2:daemon:/sbin:/sbin/nologin

「root」が「shellscript」に置換されました。

次は繰り返しのメタ文字をまとめます。

直前の文字の0回以上の繰り返しするには「*」を使用します。

直前の文字の0回以上の繰り返しする場合です。拡張正規表現の場合は「-r」オプションを使用します。

echo 基本正規表現
sed 's/roo*t/shellscript/g' /etc/passwd | head -n 2
echo 拡張正規表現
sed -r 's/roo*t/shellscript/g' /etc/passwd | head -n 2

指定したファイルの中で「ro」とその後に「o」の０回以上の繰り返しがあり、その後に「t」が来る文字列を置換します。「rot」や「root」や「rooot」などが置換されます。

基本正規表現
shellscript:x:0:0:shellscript:/shellscript:/bin/bash
bin:x:1:1:bin:/bin:/sbin/nologin
拡張正規表現
shellscript:x:0:0:shellscript:/shellscript:/bin/bash
bin:x:1:1:bin:/bin:/sbin/nologin

どちらも「root」が「shellscript」に置換されました。

基本か拡張かであれば、拡張の方を使用する事を推奨します。

直前の文字の1回以上の繰り返しするには「+」を使用します。

直前の文字の1回以上の繰り返しする場合です。拡張正規表現のみ使用できます。

echo 基本正規表現
sed 's/roo+t/shellscript/g' /etc/passwd | head -n 2
echo 拡張正規表現
sed -r 's/roo+t/shellscript/g' /etc/passwd | head -n 2

指定したファイルの中で「ro」とその後に「o」の1回以上の繰り返しがあり、その後に「t」が来る文字列を置換します。「root」や「rooot」などが置換されます。今回「rot」などは対象外です。

基本正規表現
root:x:0:0:root:/root:/bin/bash
bin:x:1:1:bin:/bin:/sbin/nologin
拡張正規表現
shellscript:x:0:0:shellscript:/shellscript:/bin/bash
bin:x:1:1:bin:/bin:/sbin/nologin

基本正規表現は対応していないので置換されず、拡張の方は「root」が「shellscript」に置換されました。

直前の文字の0回もしくは1回の繰り返しするには「?」を使用します。

直前の文字の0回もしくは1回の繰り返しする場合です。拡張正規表現のみ使用できます。

echo 基本正規表現
sed 's/ro?t/shellscript/g' /etc/passwd | head -n 2
echo 拡張正規表現１
sed -r 's/ro?t/shellscript/g' /etc/passwd | head -n 2
echo 拡張正規表現２
sed -r 's/roo?t/shellscript/g' /etc/passwd | head -n 2
echo 拡張正規表現３
sed -r 's/rooo?t/shellscript/g' /etc/passwd | head -n 2

指定したファイルの中で「r」、「ro」、「roo」とその後に「o」の０回か1回の繰り返しがあり、その後に「t」が来る文字列を置換してみます。

基本正規表現
root:x:0:0:root:/root:/bin/bash
bin:x:1:1:bin:/bin:/sbin/nologin
拡張正規表現１
root:x:0:0:root:/root:/bin/bash
bin:x:1:1:bin:/bin:/sbin/nologin
拡張正規表現２
shellscript:x:0:0:shellscript:/shellscript:/bin/bash
bin:x:1:1:bin:/bin:/sbin/nologin
拡張正規表現３
shellscript:x:0:0:shellscript:/shellscript:/bin/bash
bin:x:1:1:bin:/bin:/sbin/nologin

拡張１は「rt」と「rot」、拡張２は「rot」と「root」、拡張３は「root」と「rooot」が抽出されます。

基本正規表現は対応していないので置換されず、拡張１は「rt」や「rot」がないので置換されず、拡張2と3は「root」が「shellscript」に置換されました。

直前の文字のm回の繰り返しするには{m}を使用します。

直前の文字の繰り返し回数を指定する場合です。基本正規表現を使用したい場合は「｛」や「｝」の前に「\」を付けます。

echo 基本正規表現
sed 's/ro\{2\}t/shellscript/g' /etc/passwd | head -n 2
echo 拡張正規表現
sed -r 's/ro{2}t/shellscript/g' /etc/passwd | head -n 2

指定したファイルの中で「ro」とその後に「o」の2回のみの繰り返しがあり、その後に「t」が来る文字列を置換します。「root」が置換されます。「rooot」や「roooot」などは対象外です。

基本正規表現
shellscript:x:0:0:shellscript:/shellscript:/bin/bash
bin:x:1:1:bin:/bin:/sbin/nologin
拡張正規表現
shellscript:x:0:0:shellscript:/shellscript:/bin/bash
bin:x:1:1:bin:/bin:/sbin/nologin

どちらも「root」が「shellscript」に置換されました。

直前の文字のm回以上の繰り返しするには{m,}を使用します。

直前の文字の繰り返し回数以上を指定する場合です。基本正規表現を使用したい場合は「｛」や「｝」の前に「\」を付けます。

echo 基本正規表現
sed 's/ro\{2,\}t/shellscript/g' /etc/passwd | head -n 2
echo 拡張正規表現
sed -r 's/ro{2,}t/shellscript/g' /etc/passwd | head -n 2

指定したファイルの中で「ro」とその後に「o」の2回以上の繰り返しがあり、その後に「t」が来る文字列を置換します。「root」や「rooot」や「roooot」などが置換されます。

基本正規表現
shellscript:x:0:0:shellscript:/shellscript:/bin/bash
bin:x:1:1:bin:/bin:/sbin/nologin
拡張正規表現
shellscript:x:0:0:shellscript:/shellscript:/bin/bash
bin:x:1:1:bin:/bin:/sbin/nologin

どちらも「root」が「「shellscript」に置換されました。

直前の文字のm回以上n回以下の繰り返しするには{m,n}を使用します。

直前の文字の繰り返し回数以上と以下を指定する場合です。基本正規表現を使用したい場合は「｛」や「｝」の前に「\」を付けます。

echo 基本正規表現
sed 's/ro\{2,3\}t/shellscript/g' /etc/passwd | head -n 2
echo 拡張正規表現
sed -r 's/ro{2,3}t/shellscript/g' /etc/passwd | head -n 2

指定したファイルの中で「ro」とその後に「o」の2回以上3回以下の繰り返しがあり、その後に「t」が来る文字列を置換します。「root」や「rooot」が置換されます。「roooot」などは対象外です。

基本正規表現
shellscript:x:0:0:shellscript:/shellscript:/bin/bash
bin:x:1:1:bin:/bin:/sbin/nologin
拡張正規表現
shellscript:x:0:0:shellscript:/shellscript:/bin/bash
bin:x:1:1:bin:/bin:/sbin/nologin

どちらも「root」が「shellscript」に置換されました。

最後に補助的なメタ文字をご紹介します。

文字列指定の補助的なメタ文字をまとめます。

補助的なメタ文字を試すにあたり環境を説明します。シェルスクリプトと同階層に「6_sed」というディレクトリがあり、その配下に「sed_test.txt」があるとします。

「sed_test2.txt」の内容は以下とします。

ro\{2\}t
root
abcc
abcbc
abcbcbc
123
12323
1232323
123123123
12333
abcabcabc

直後のメタ文字を普通の文字として扱うには「\」を使用します。

直後のメタ文字を普通の文字として扱う場合です。基本正規表現と拡張正規表現とどちらも使用できます。

echo 基本正規表現１　繰り返し
sed 's/ro\{2\}t/shellscript/g' 6_sed/sed_test2.txt | head -n 2

echo 基本正規表現２　直後のメタ文字を普通の文字として扱う
sed 's/ro\\{2\\}t/shellscript/g' 6_sed/sed_test2.txt | head -n 2

echo 拡張正規表現１　変化なし
sed -r 's/ro\{2\}t/shellscript/g' 6_sed/sed_test2.txt | head -n 2

echo 拡張正規表現２　直後のメタ文字を普通の文字として扱う
sed -r 's/ro\\\{2\\\}t/shellscript/g' 6_sed/sed_test2.txt | head -n 2

指定したファイルの中で「ro\{2\}t」という文字列を置換したいです。しかし「ro\{2\}t」は繰り返しで出てきたoを2回繰り返すメタ文字で「root」が置き換わります。

このままでは「root」が抽出されるので「\」を「\」で普通の文字列にエスケープします。これで「ro\{2\}t」という文字列が置換できます。

拡張正規表現においては「ro\{2\}t」の「\」はメタ文字と解釈されているので変化なしで置換されません。

「ro\{2\}t」の「\」と「{」と「}」を「\」で普通の文字列にエスケープします。これで拡張正規表現の方も「ro\{2\}t」という文字列が置換できます。

基本正規表現１　繰り返し
ro\{2\}t
shellscript
基本正規表現２　直後のメタ文字を普通の文字として扱う
shellscript
root
拡張正規表現１　変化なし
ro\{2\}t
root
拡張正規表現２　直後のメタ文字を普通の文字として扱う
shellscript
root

基本正規表現は「ro\\{2\\}t」拡張正規表現は「ro\\\{2\\\}t」とすることで「ro\{2\}t」という文字列が「shellscript」に置換されました。

指定する文字列をクループ化して扱うには()を使用します。

指定する文字列をクループ化して扱う場合です。基本正規表現と拡張正規表現とどちらも使用できます。

echo 基本正規表現１　単体文字繰り返し
sed 's/abc\{2\}/shellscript/g' 6_sed/sed_test2.txt | head -n 5

echo 基本正規表現２　グループで繰り返し
sed 's/a\(bc\)\{2\}/shellscript/g' 6_sed/sed_test2.txt | head -n 5

echo 拡張正規表現１　単体文字繰り返し
sed -r 's/abc{2}/shellscript/g' 6_sed/sed_test2.txt | head -n 5

echo 拡張正規表現２　グループで繰り返し
sed -r 's/a(bc){2}/shellscript/g' 6_sed/sed_test2.txt | head -n 5

基本正規表現１は指定したファイルの中で「abc」の一つ前の「c」を2回繰り返すというシェルスクリプトでした。しかし「bc」の繰り返しにしたい場合は、基本正規表現２のように該当文字列を\(\)で囲いグループ化します。

拡張正規表現１も同様です。「bc」の繰り返しにしたい場合は、拡張正規表現２のように該当文字列を()で囲いグループ化します。

基本正規表現１　単体文字繰り返し
ro\{2\}t
root
shellscript
abcbc
abcbcbc
基本正規表現２　グループで繰り返し
ro\{2\}t
root
abcc
shellscript
shellscriptbc
拡張正規表現１　単体文字繰り返し
ro\{2\}t
root
shellscript
abcbc
abcbcbc
拡張正規表現２　グループで繰り返し
ro\{2\}t
root
abcc
shellscript
shellscriptbc

どちらの１も「abcc」が、どちらの２も「abcbc」が「shellscript」に置換されました。

複数の正規表現をORで繋げるには「|」を使用します。

複数の正規表現をORで繋げる場合です。拡張正規表現しか対応していません。

指定したファイルの中で「abc」か「123」という文字列を置換したいです。

echo 拡張正規表現１
sed -r 's/abc|123/shellscript/g' 6_sed/sed_test2.txt

「abc|123」で可能です。シェルスクリプトを実行します。

拡張正規表現１
ro\{2\}t
root
shellscriptc
shellscriptbc
shellscriptbcbc
shellscript
shellscript23
shellscript2323
shellscriptshellscriptshellscript
shellscript33
shellscriptshellscriptshellscript

指定したファイルの中で「abc」か「123」という文字列をが「shellscript」に置換されました。

ではここで質問です。

したのシェルスクリプトを実行すると置換結果はどのようになるでしょうか？

sed -r ‘s/abc|123{3}/shellscript/g’ 6_sed/sed_test2.txt

ro\{2\}t
root
shellscriptc
shellscriptbc
shellscriptbcbc
123
12323
1232323
123123123
shellscript
shellscriptshellscriptshellscript

sed -r ‘s/abc|(123){3}/shellscript/g’ 6_sed/sed_test2.txt

ro\{2\}t
root
shellscriptc
shellscriptbc
shellscriptbcbc
123
12323
1232323
shellscript
12333
shellscriptshellscriptshellscript

sed -r ‘s/(abc|123){3}/shellscript/g’ 6_sed/sed_test2.txt

ro\{2\}t
root
abcc
abcbc
abcbcbc
123
12323
1232323
shellscript
12333
shellscript

管理人

シェルスクリプトのsedでの置換は非常によく使用するので、このページを何度も読んで是非マスターしてください。

Linuxでシェルスクリプトのgrepのやり方がよくわかりません。オプションや正規表現を使用した文字列抽出を行いたいです。

そういった声が多いので今回はシェルスクリプトのgrepについて教えます！

現役エンジニアの筆者もよく使用するので、実例などを用いて教示します。

shellscriptのgrepを使用して文字列を抽出する方法はよく使います。シェルスクリプトを使用するなら必須の項目です。

シェルスクリプトでgrepの使い方の基本

シェルスクリプトでgrepの使い方の基本

シェルスクリプトでのgrepは検索したい文字列を、指定したファイルから行全体を抽出します。

またデフォルトでは基本正規表現を使用するので、拡張正規表現を使用したい場合はオプションをつけます。

正規表現、grepのオプションについては後の項目で学習します。

検索文字列は大文字小文字を区別します。

grepの使い方の基本

シェルスクリプトでgrepの使い方の基本構文は以下です。

grep 検索文字列 検索ファイル（パス付き）

検索ファイルについては複数指定できます。半角スペースを区切りにしてファイルを指定していきます。

grep 検索文字列 検索ファイル1 検索ファイル2 . . .

実践：grepの基本

では実際にgrepを使用して文字列を抽出してみます。

grep root /etc/passwd

「root」という文字列を「/etc/passwd」のファイルから抽出しています。

このシェルスクリプトを実行してみます。

あわせて読みたい

【シェルスクリプト基礎】コマンドを実行する様々な方法をご紹介！ シェルスクリプトを実行する時に困った事はありませんか？ シェルスクリプトのコマンド実行での失敗メッセージ一覧 「実行権限がありません」 「コマンドが見つかりませ…

root:x:0:0:root:/root:/bin/bash
operator:x:11:0:operator:/root:/sbin/nologin

「/etc/passwd」のファイルで「root」が含まれる行全体が2行抽出されました。

今度は検索するファイルを複数にしてみます。

grep root /etc/passwd /etc/group

「root」という文字列を「/etc/passwd」と「/etc/group」のファイルから抽出しています。

このシェルスクリプトを実行してみます。

/etc/passwd:root:x:0:0:root:/root:/bin/bash
/etc/passwd:operator:x:11:0:operator:/root:/sbin/nologin
/etc/group:root:x:0:

「/etc/passwd」と「/etc/group」で「root」が含まれる行全体がファイル名付きで抽出されました。

複数のファイルを指定した場合は「ファイル名:対象の行」が表示されます。

grepの検索オプションについて

シェルスクリプトでgrepのオプションについて

grepの検索オプションについてまとめます。

拡張正規表現を使用したい時につけるのが「-E」オプションです。

シェルスクリプトの基本でデフォルトは基本正規表現を使用すると説明しました。拡張正規表現を使用したい時につけるのが「-E」オプションです。

正規表現を使用した検索は、後の項目で説明します。

正規表現を使用したくない場合には「-F」オプションを使用します。

正規表現を使用した検索は、後の項目で説明します。

検索文字列の大文字小文字を区別したくない場合は「-i」オプションを使用します。

echo オプションなし
grep Root /etc/passwd
echo オプションあり
grep -i Root /etc/passwd

-iオプションを使用する時としない時のシェルスクリプトを実行してみます。

オプションなし
オプションあり
root:x:0:0:root:/root:/bin/bash
operator:x:11:0:operator:/root:/sbin/nologin

オプションなしの場合Rootの大文字小文字が区別される為、何も表示されません。逆にオプションありの場合はrootが含まれる行が表示されました。

-iオプションで大文字小文字が区別されないので正解です。

検索文字列を指定する場合は「-e」オプションを使います。主に検索文字列を複数指定したい場合に使用します。

まずエラーが出るシェルスクリプトを実行してみます。

grep root postfix /etc/passwd

例えば複数の文字列を含むものを抽出したい時に、上のシェルスクリプトを実行してみます。

grep: postfix: そのようなファイルやディレクトリはありません
/etc/passwd:root:x:0:0:root:/root:/bin/bash
/etc/passwd:operator:x:11:0:operator:/root:/sbin/nologin

上のような実行結果となりエラーが出ました。

エラーの原因として「root」を含む文字列を「postfix」と「/etc/passwd」のファイルから抽出するシェルスクリプトと認識されているからです。

「postfix」というファイルがないとみなされエラーが出てきます。「/etc/passwd」には「root」があるので表示されています。

ファイル名も表示されているので、複数のファイルが指定されている動きなのがわかります。

エラーの解決法として-eオプションがあります。「postfix」は検索文字列と明示的に指定できます。

grep -e root -e postfix /etc/passwd

このシェルスクリプトのように検索文字列ごとに「-e」オプションを使います。

root:x:0:0:root:/root:/bin/bash
operator:x:11:0:operator:/root:/sbin/nologin
postfix:x:89:89::/var/spool/postfix:/sbin/nologin

「/etc/passwd」ファイルの中の「root」と「postfix」の文字列が含まれる行が表示されました。

ファイル名が表示されていないので、単体のファイルが指定されている動きなのがわかります。

指定した文字列が抽出されて、エラーが出ていないので成功です。

指定した結果を反転させるには「-v」オプションを使用します。

「/etc/passwd」から「root」がない行を表示させるシェルスクリプトです。

grep -v root /etc/passwd | head -n 5

「|」はgrepの結果を「|」の後のコマンドの引数にする事が出来るパイプというものです。「head -n 5」は頭から5行だけ表示するコマンドです。

「/etc/passwd」から「root」がない行は多いので５行だけ表示しています。

bin:x:1:1:bin:/bin:/sbin/nologin
daemon:x:2:2:daemon:/sbin:/sbin/nologin
adm:x:3:4:adm:/var/adm:/sbin/nologin
lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin
sync:x:5:0:sync:/sbin:/bin/sync

「/etc/passwd」から「root」がない行の先頭５行だけ表示されました。

grepの出力オプションについて

シェルスクリプトでgrepの出力オプションについて

grepの出力に関するオプションについてまとめます。

抽出された行番号を表示したい場合は「-n」オプションを使用します。

抽出した文字列がファイルの何行目にあるかを表示したい事はよくあります。

grep -n root /etc/passwd

「/etc/passwd」から「root」がある行を行番号付きで表示します。

1:root:x:0:0:root:/root:/bin/bash
10:operator:x:11:0:operator:/root:/sbin/nologin

１行目と１０行目に「root」がある事がわかります。

抽出されたファイルのファイル名も表示する場合は「-H」オプションを使用します。

抽出されたファイルのファイル名も表示したい場合です。

grep -H root /etc/passwd

「/etc/passwd」から「root」がある行をファイル名付きで表示します。

/etc/passwd:root:x:0:0:root:/root:/bin/bash
/etc/passwd:operator:x:11:0:operator:/root:/sbin/nologin

「root」があるファイル名「/etc/passwd」付で行が表示されました。

抽出されたファイルのファイル名は表示しない場合は「-h」オプションを使用します。

抽出されたファイルのファイル名は表示しない場合です。

grep -h root /etc/passwd /etc/group

複数のファイルを指定すればファイル名が表示されますが、不要な場合に使用します。

root:x:0:0:root:/root:/bin/bash
operator:x:11:0:operator:/root:/sbin/nologin
root:x:0:

ファイル名が表示されていない事がわかります。

抽出されたファイルのファイル名のみ表示する場合は「-l」オプションを使用します。

抽出されたファイルのファイル名のみ表示するしたい場合があります。

grep -l root /etc/passwd /etc/group

「-l」オプションを使用します。

/etc/passwd
/etc/group

ファイル名のみ表示されている事がわかります。

抽出されていないファイル名のみ表示する場合は「-L」オプションを使用します。

抽出されていないファイル名のみ表示する場合です。

grep -L root /etc/passwd /etc/group /etc/nsswitch.conf

指定した３ファイルの中で「root」が一つもないファイル名を表示するシェルスクリプトです。

/etc/nsswitch.conf

「root」が一つもないファイル名のみ表示されている事がわかります。

抽出された箇所のみ表示する場合は「-o」オプションを使用します。

抽出された箇所のみ表示する場合です。

echo '複数ファイルの場合'
grep -o root /etc/passwd /etc/group
echo '単体ファイルの場合'
grep -o root /etc/passwd

複数ファイルの場合と単体ファイルの場合で表示してみます。

複数ファイルの場合
/etc/passwd:root
/etc/passwd:root
/etc/passwd:root
/etc/passwd:root
/etc/group:root
単体ファイルの場合
root
root
root
root

ファイルの中に「root」がある数だけ表示されている事がわかります。

このシェルスクリプトは、後述する正規表現を含んだ検索で稀に使用します。

抽出された箇所を表示しない場合は「-q」オプションを使用します。

抽出された箇所を表示しない場合です。

grep -q root /etc/passwd /etc/group

指定したファイルの中に「root」があってもなくても表示しないシェルスクリプトです。

実行しても特になにも表示されません。文字列が存在する時としない時の違いは終了ステータスの違いです。

文字列が１つでも存在すれば終了ステータスは「正常」、しなければ「異常」となります。

文字列の存在可否だけが必要で、表示は不要な場合に使用されます。例えば「if」などの判定に「-q」オプションは使用します。

grepで正規表現を使用する

シェルスクリプトでgrepの正規表現

grepでの正規表現についてまとめます。正規表現には基本正規表現と拡張正規表現があります。

基本的には拡張正規表現を使用していれば問題ありません。

正規表現で文字列を指定する特別な文字をメタ文字と言います。メタ文字がキーとなります。メタ文字とその効果をまとめます。

何かしらの文字列を抽出する場合は「.」を使用します。

何かしらの文字列を抽出する場合です。

grep 'roo.' /etc/passwd

指定したファイルの中に「roo」と何らかの1文字の文字列があれば抽出します。

「’」で文字列を囲わなくても抽出できますが、エラーになる指定の仕方もあるので、全て「’」で囲う事を推奨します。

root:x:0:0:root:/root:/bin/bash
operator:x:11:0:operator:/root:/sbin/nologin

「roo」と何らかの文字の「t」が結合された「root」が抽出されました。

最初の文字列を指定するには「^」を使用します。

最初の文字列を指定する場合です。

grep '^root' /etc/passwd

指定したファイルの中で「root」から始まる行を抽出します。

root:x:0:0:root:/root:/bin/bash

「root」から始まる行のみが抽出されました。

最後の文字を指定するには「$」を使用します。

最後の文字を指定する場合です。

grep 'nologin$' /etc/passwd | head -n 3

指定したファイルの中で「nologin」で終わる行を抽出します。

grepの基本で前述しましたが「| head -n 3」はgrepの結果の頭３行のみを抽出するコマンドです。

bin:x:1:1:bin:/bin:/sbin/nologin
daemon:x:2:2:daemon:/sbin:/sbin/nologin
adm:x:3:4:adm:/var/adm:/sbin/nologin

「nologin」で終わる行のみが抽出されました。

限定文字を指定するには[]を使用します。

限定文字を指定する場合です。

grep 'roo[stu]' /etc/passwd

指定したファイルの中で「roo」とあと「s」か「t」か「u」かで組み合わせる文字列があれば抽出します。

root:x:0:0:root:/root:/bin/bash
operator:x:11:0:operator:/root:/sbin/nologin

「root」が含まれる行が抽出されました。

grep 'roo[s-u]' /etc/passwd

続き文字列であれば上のように指定もできます。数字であれば[1-3]のようにも指定できます。

限定文字以外を指定するには[^]を使用します。

限定文字以外を指定する場合です。

grep 'roo[^abc]' /etc/passwd 

指定したファイルの中で「roo」とあと「a」か「b」か「c」以外の文字で組み合わせる文字列があれば抽出します。

root:x:0:0:root:/root:/bin/bash
operator:x:11:0:operator:/root:/sbin/nologin

「root」が含まれる行が抽出されました。

次は繰り返しのメタ文字をまとめます。

直前の文字の0回以上の繰り返しするには「*」を使用します。

直前の文字の0回以上の繰り返しする場合です。拡張正規表現の場合は「-E」オプションを使用します。

echo 基本正規表現
grep 'roo*t' /etc/passwd
echo 拡張正規表現
grep -E 'roo*t' /etc/passwd

指定したファイルの中で「ro」とその後に「o」の０回以上の繰り返しがあり、その後に「t」が来る文字列を抽出します。「rot」や「root」や「rooot」などが抽出されます。

基本正規表現
root:x:0:0:root:/root:/bin/bash
operator:x:11:0:operator:/root:/sbin/nologin
拡張正規表現
root:x:0:0:root:/root:/bin/bash
operator:x:11:0:operator:/root:/sbin/nologin

どちらも「root」が含まれる行が抽出されました。

基本か拡張かどちらを使用する方が良いかですが、拡張の方を使用する事を推奨します。

直前の文字の1回以上の繰り返しするには「+」を使用します。

直前の文字の1回以上の繰り返しする場合です。拡張正規表現のみ使用できます。

echo 基本正規表現
grep 'roo+t' /etc/passwd
echo 拡張正規表現
grep -E 'roo+t' /etc/passwd

指定したファイルの中で「ro」とその後に「o」の1回以上の繰り返しがあり、その後に「t」が来る文字列を抽出します。「root」や「rooot」などが抽出されます。今回「rot」などは非対象ですね。

基本正規表現
拡張正規表現
root:x:0:0:root:/root:/bin/bash
operator:x:11:0:operator:/root:/sbin/nologin

基本正規表現は対応していないので抽出されず、拡張の方は「root」が含まれる行が抽出されました。

直前の文字の0回もしくは1回の繰り返しするには「?」を使用します。

直前の文字の0回もしくは1回の繰り返しする場合です。拡張正規表現のみ使用できます。

echo 基本正規表現
grep 'ro?t' /etc/passwd
echo 拡張正規表現１
grep -E 'ro?t' /etc/passwd
echo 拡張正規表現２
grep -E 'roo?t' /etc/passwd
echo 拡張正規表現３
grep -E 'rooo?t' /etc/passwd

指定したファイルの中で「r」、「ro」、「roo」とその後に「o」の０回か1回の繰り返しがあり、その後に「t」が来る文字列を抽出しまみます。

基本正規表現
拡張正規表現１
rtkit:x:172:172:RealtimeKit:/proc:/sbin/nologin
拡張正規表現２
root:x:0:0:root:/root:/bin/bash
operator:x:11:0:operator:/root:/sbin/nologin
拡張正規表現３
root:x:0:0:root:/root:/bin/bash
operator:x:11:0:operator:/root:/sbin/nologin

拡張１は「rt」と「rot」、拡張２は「rot」と「root」、拡張３は「root」と「rooot」が抽出されます。

基本正規表現は対応していないので抽出されず、拡張１は「rt」が拡張2と3は「root」が含まれる行が抽出されました。

直前の文字のm回の繰り返しするには{m}を使用します。

直前の文字の繰り返し回数を指定する場合です。基本正規表現を使用したい場合は「｛」や「｝」の前に「\」を付けます。

echo 基本正規表現
grep 'ro\{2\}t' /etc/passwd
echo 拡張正規表現
grep -E 'ro{2}t' /etc/passwd

指定したファイルの中で「ro」とその後に「o」の2回のみの繰り返しがあり、その後に「t」が来る文字列を抽出します。「root」が抽出されます。「rooot」や「roooot」などは非対象ですね。

基本正規表現
root:x:0:0:root:/root:/bin/bash
operator:x:11:0:operator:/root:/sbin/nologin
拡張正規表現
root:x:0:0:root:/root:/bin/bash
operator:x:11:0:operator:/root:/sbin/nologin

どちらも「root」が含まれる行が抽出されました。

直前の文字のm回以上の繰り返しするには{m,}を使用します。

直前の文字の繰り返し回数以上を指定する場合です。基本正規表現を使用したい場合は「｛」や「｝」の前に「\」を付けます。

echo 基本正規表現
grep 'ro\{2,\}t' /etc/passwd
echo 拡張正規表現
grep -E 'ro{2,}t' /etc/passwd

指定したファイルの中で「ro」とその後に「o」の2回以上の繰り返しがあり、その後に「t」が来る文字列を抽出します。「root」や「rooot」や「roooot」などが抽出されます。

基本正規表現
root:x:0:0:root:/root:/bin/bash
operator:x:11:0:operator:/root:/sbin/nologin
拡張正規表現
root:x:0:0:root:/root:/bin/bash
operator:x:11:0:operator:/root:/sbin/nologin

どちらも「root」が含まれる行が抽出されました。

直前の文字のm回以上n回以下の繰り返しするには{m,n}を使用します。

直前の文字の繰り返し回数以上と以下を指定する場合です。基本正規表現を使用したい場合は「｛」や「｝」の前に「\」を付けます。

echo 基本正規表現
grep 'ro\{2,3\}t' /etc/passwd
echo 拡張正規表現
grep -E 'ro{2,3}t' /etc/passwd

指定したファイルの中で「ro」とその後に「o」の2回以上3回以下の繰り返しがあり、その後に「t」が来る文字列を抽出します。「root」や「rooot」が抽出されます。「roooot」などは対象外ですね。

基本正規表現
root:x:0:0:root:/root:/bin/bash
operator:x:11:0:operator:/root:/sbin/nologin
拡張正規表現
root:x:0:0:root:/root:/bin/bash
operator:x:11:0:operator:/root:/sbin/nologin

どちらも「root」が含まれる行が抽出されました。

最後に補助的なメタ文字をご紹介します。

文字列指定の補助的なメタ文字をまとめます。

補助的なメタ文字を試すにあたり環境を説明します。シェルスクリプトと同階層に「5_grep」というディレクトリがあり、その配下に「grep_test.txt」があるとします。

「grep_test.txt」の内容は以下とします。

ro\{2\}t
root
abcc
abcbc
abcbcbc
123
12323
1232323
123123123
12333
abcabcabc

直後のメタ文字を普通の文字として扱うには「\」を使用します。

直後のメタ文字を普通の文字として扱う場合です。基本正規表現と拡張正規表現とどちらも使用できます。

echo 基本正規表現１　繰り返し
grep 'ro\{2\}t' 5_grep/grep_test.txt

echo 基本正規表現２　直後のメタ文字を普通の文字として扱う
grep 'ro\\{2\\}t' 5_grep/grep_test.txt

echo 拡張正規表現１　繰り返し
grep -E 'ro\{2\}t' 5_grep/grep_test.txt

echo 拡張正規表現２　直後のメタ文字を普通の文字として扱う
grep -E 'ro\\{2\\}t' 5_grep/grep_test.txt

指定したファイルの中で「ro\{2\}t」という文字列を抽出したいです。しかし「ro\{2\}t」は繰り返しで出てきたoを2回繰り返すメタ文字です。

このままでは「root」が抽出されるので「\」を「\」で普通の文字列にエスケープします。これで「ro\{2\}t」という文字列が抽出できます。

拡張正規表現においては「ro\{2\}t」の「\」はメタ文字と解釈されているので何も表示されません。

同じく「ro\{2\}t」の「\」を「\」で普通の文字列にエスケープします。これで拡張正規表現の方も「ro\{2\}t」という文字列が抽出できます。

基本正規表現１
root
基本正規表現２
ro\{2\}t
拡張正規表現１
拡張正規表現２
ro\{2\}t

どちらも「ro\\{2\\}t」とすることで「ro\{2\}t」という文字列が抽出されました。

指定する文字列をクループ化して扱うには()を使用します。

指定する文字列をクループ化して扱う場合です。基本正規表現と拡張正規表現とどちらも使用できます。

echo 基本正規表現１　単体文字繰り返し
grep 'abc\{2\}' 5_grep/grep_test.txt

echo 基本正規表現２　グループで繰り返し
grep 'a\(bc\)\{2\}' 5_grep/grep_test.txt

echo 拡張正規表現１　単体文字繰り返し
grep -E 'abc{2}' 5_grep/grep_test.txt

echo 拡張正規表現２　グループで繰り返し
grep -E 'a(bc){2}' 5_grep/grep_test.txt

基本正規表現１は指定したファイルの中で「abc」の一つ前の「c」を2回繰り返すというシェルスクリプトでした。しかし「bc」の繰り返しにしたい場合は、基本正規表現２のように該当文字列を\(\)で囲いグループ化します。

拡張正規表現１も同様です。「bc」の繰り返しにしたい場合は、拡張正規表現２のように該当文字列を()で囲いグループ化します。

基本正規表現１
abcc
基本正規表現２
abcbc
abcbcbc
拡張正規表現１
abcc
拡張正規表現２
abcbc
abcbcbc

どちらも「a」とその後に「bc」が2回以上繰り返す文字列が抽出されました。

複数の正規表現をORで繋げるには「|」を使用します。

複数の正規表現をORで繋げる場合です。拡張正規表現しか対応していません。

指定したファイルの中で「abc」か「123」という文字列を抽出したいです。

echo 拡張正規表現１
grep -E 'abc|123' 5_grep/grep_test.txt

「abc|123」で可能です。シェルスクリプトを実行します。

abcc
abcbc
abcbcbc
123
12323
1232323
123123123
12333
abcabcabc

指定したファイルの中で「abc」か「123」という文字列を含む行が抽出されました。

ではここで質問です。

したのシェルスクリプトを実行すると取得できる文字列は何になるでしょうか？

grep -E ‘abc|123{3}’ 5_grep/grep_test.txt

abcc
abcbc
abcbcbc
12333
abcabcabc

grep -E ‘abc|(123){3}’ 5_grep/grep_test.txt

abcc
abcbc
abcbcbc
123123123
abcabcabc

grep -E ‘(abc|123){3}’ 5_grep/grep_test.txt

123123123
abcabcabc

管理人

シェルスクリプトのgrepは非常によく使用するので、このページを何度も読んで是非マスターしてください。

シェルスクリプトの変数の文字列を切り出して抽出したいエンジニア

shellscriptで変数の少し違う文字列を別の変数を作成して使用していると、変数管理が複雑化するので何とかしたい

管理人

そういった時に変数の文字列を切り出して抽出する事で解決します。

変数が変化すれば切り出し抽出した文字列も変化するので、管理も運用も楽です。

ということで今回は、シェルスクリプトの変数の文字列を切り出して抽出する方法を、現役エンジニアの筆者がまとめます。

シェルスクリプトの変数で文字列を切り出して抽出する方法

今回紹介するshellscriptの変数で文字列を切り出して抽出する方法は以下の2本です。

数字で指定して文字列を切り出して抽出する

シェルスクリプトの変数を数字で指定して、文字列を切り出して抽出する方法の基礎は以下です。

記述がややこしいですが、下の表のように追加するコードを意識していくと分かりやすくなります。

※２の開始位置を後方から指定する場合の「:」と「-」の間に半角スペースが必要になる事が注意する点です。

開始位置を前方から指定する文字列切り出し

では開始位置を前方から指定する文字列切り出しを行います。

以下のような変数を指定します。

suuji=0123456789

１を開始位置に指定して表示してみます。

echo ${suuji:1}

このシェルスクリプトを実行してみます。

あわせて読みたい

【シェルスクリプト基礎】コマンドを実行する様々な方法をご紹介！ シェルスクリプトを実行する時に困った事はありませんか？ シェルスクリプトのコマンド実行での失敗メッセージ一覧 「実行権限がありません」 「コマンドが見つかりませ…

123456789

結果は上記になりました。

シェルスクリプトで１番目を指定するのは「0」になります。今回は1を指定したので２番目の1から末尾までが表示されています。

2番目から末尾までがきちんと表示されています。

開始位置を後方から指定する文字列切り出し

次に開始位置を後方から指定する文字列切り出しを行います。

１を開始位置に指定して表示してみます。

echo ${suuji: -3}

このシェルスクリプトを実行してみます。

789

結果は上記になりました。

後方始まりで３つ目から末尾までがきちんと表示されています。

開始位置と個数を指定する文字列切り出し

次に開始位置と個数を指定する文字列切り出しを行います。

開始位置を３、個数を６に指定して表示してみます。

echo ${suuji:3:6}

このシェルスクリプトを実行してみます。

345678

結果は上記になりました。

開始位置が３で個数が６つきちんと表示されています。

開始位置と末尾を指定する文字列切り出し

次に開始位置と末尾を指定する文字列切り出しを行います。

開始位置を３、末尾を-3に指定して表示してみます。

echo ${suuji:3:-3}

このシェルスクリプトを実行してみます。

3456

結果は上記になりました。

開始位置が３で後方から3番目の6までが、きちんと表示されています。

補足：配列に格納されている文字列を切り出して抽出

同じ様に配列に格納されている文字列も部分的に切り出して抽出できます。

あわせて読みたい

【シェルスクリプト】配列の使い方！宣言、格納、参照のやり方を教えます shellscriptで配列を使いたいけど、どうやって扱えば良いかわかりません。 などと言ったシェルスクリプトの配列について難しいという声が多いです。 なので配列の宣言か…

配列で指定する文字列切り出し

では同じ様に配列で指定する文字列切り出しを行います。以下のような配列があるとします。

array=(000 111 222 333 444 555)

１を開始位置に指定して表示してみます。

echo ${array[@]:1}
echo ${array[@]: -3}
echo ${array[@]:1:3}

このシェルスクリプトを実行してみます。

111 222 333 444 555
333 444 555
111 222 333

結果は上記になりました。

変数の文字列切り出しと同様に、配列の中身が切り出されています。

変数ではできて配列では出来ない切り出し

変数ではできていた開始位置と後方位置を指定して切り出す方法だけは配列ではできません。

echo ${array[@]:1:-1}

上のシェルスクリプトを実行してみます。

-bash: -1: substring expression < 0

配列の「開始位置と後方位置を指定して切り出す方法」はエラーで切り出しできませんでした。

パターンで文字列を切り出して抽出する

シェルスクリプトの変数をパターンで指定して、文字列を切り出して抽出する方法です。2パターンあります。

パターンで指定する時のコードも纏めておきます。

パターンマッチなので「*（アスタリスク）」が使用できます。アスタリスクは任意の文字列として扱えます。

文字列の先頭からパターンマッチする

では文字列の先頭からパターンマッチする時のシェルスクリプトを何個か記述してみます。

まず以下のような変数を指定しておきます。

mojiretsu=shellscript.sh.zp

文字列の先頭からパターンマッチ１：先頭文字指定

以下のシェルスクリプトで先頭が「shell」の文字列であれば、指定した文字列を切り取って抽出します。

echo ${mojiretsu#shell}

上のシェルスクリプトを実行してみます。

script.sh.zp

結果は指定した「shell」を切り取って抽出できています。

文字列の先頭からパターンマッチ２：最短マッチ

以下のシェルスクリプトで先頭が任意の文字列（*）で「.」の文字列があれば、最短マッチで指定した文字列を切り取って抽出します。

echo ${mojiretsu#*.}

上のシェルスクリプトを実行してみます。

sh.zp

結果は最初に「.」があった文字列までを切り取って抽出できています。

文字列の先頭からパターンマッチ３：最長マッチ

先程と同じ条件で「.」の文字列があれば、最長マッチで指定した文字列を切り取って抽出します。

echo ${mojiretsu##*.}

上のシェルスクリプトを実行してみます。

zp

結果は最後に「.」があった文字列までを切り取って抽出できています。

文字列の末尾からパターンマッチ１：先頭文字指定

今度は文字列の末尾からパターンマッチする時のシェルスクリプトを何個か記述してみます。

以下のシェルスクリプトで末尾が「zp」の文字列であれば、指定した文字列を切り取って抽出します。

echo ${mojiretsu%zp}

上のシェルスクリプトを実行してみます。

shellscript.sh.

結果は指定した「zp」を切り取って抽出できています。

文字列の末尾からパターンマッチ２：最短マッチ

以下のシェルスクリプトで末尾が任意の文字列（*）で「.」の文字列があれば、最短マッチで指定した文字列を切り取って抽出します。

echo ${mojiretsu%.*}

上のシェルスクリプトを実行してみます。

shellscript.sh

結果は末尾から見て最初に「.」があった文字列までを切り取って抽出できています。

文字列の末尾からパターンマッチ３：最長マッチ

先程と同じ条件で「.」の文字列があれば、最長マッチで指定した文字列を切り取って抽出します。

echo ${mojiretsu%%.*}

上のシェルスクリプトを実行してみます。

shellscript

結果は末尾から見て最後に「.」があった文字列までを切り取って抽出できています。

まとめ：シェルスクリプトの変数で文字列を切り出して抽出する方法

shellscriptの変数で文字列を切り出して抽出する方法は以下の2本でした。

数字で指定して文字列を切り出して抽出する

※２の開始位置を後方から指定する場合の「:」と「-」の間に半角スペースが必要になる事が注意する点です。

配列に格納されている文字列を切り出して抽出

変数をパターンで指定して、文字列を切り出して抽出する方法

パターンマッチなので「*（アスタリスク）」が使用できます。アスタリスクは任意の文字列として扱えます。

管理人

このようにシェルスクリプトの変数の文字列を切り出しする事で変数管理が楽になります。

シェルスクリプトで配列については理解したけど、連想配列についてわからないといった悩みはないでしょうか？

基本的には配列と同じですが、連想配列と配列の違いなども教えます。

連想配列ならではの設定や格納や参照など、１つ１つを例のshellscriptを用いて現役エンジニアの筆者が教示いたします。

この記事を１つ１つ理解すれば、読み終わる頃には連想配列についてマスターできます。

シェルスクリプトの配列と連想配列の違い

シェルスクリプトで配列と連想配列の違いとして、配列のインデックスが数字に対して、連想配列のインデックスはキーで指定します。

シェルスクリプトの配列についてまだ理解していない人は、以下にまとめていますので参照ください。

あわせて読みたい

【シェルスクリプト】配列の使い方！宣言、格納、参照のやり方を教えます shellscriptで配列を使いたいけど、どうやって扱えば良いかわかりません。 などと言ったシェルスクリプトの配列について難しいという声が多いです。 なので配列の宣言か…

キーは自分で好きにつける事が可能な文字列です。

一般的なスクリプトではマップや辞書などと呼ばれる事もあります。

では連想配列の基礎から行っていきます。

シェルスクリプトの連想配列の基礎

連想配列の宣言のやり方

まずは連想配列を作成する時に宣言をします。シェルスクリプトで連想配列の宣言は下のコマンドで可能です。

declare -A 連想配列名

配列の時は宣言は必須ではありませんでしたが、連想配列では宣言は必須です。ここが配列との違いですので気を付けてください。

連想配列の確認方法

連想配列の値やキーを確認する方法を知っておきましょう！以下にまとめます。

連想配列を初期化する方法

以前使用した連想配列があれば、予期せぬ結果になりかねませんので連想配列を初期化する方法も覚えておきます。

declare -A 連想配列名=()

空白の連想配列を作成するイメージです。

連想配列での値の格納方法

では連想配列に値を格納する方法を教えます。シェルスクリプト構文は以下です。

連想配列名=([キー1]=値1 [キー2=値2 ...)

連想配列名の後に「=」を記入して、その後に「（）」を記入します。※すべてスペースなしで記入

その中にキーと値を入力します。

キーは[]で囲みます、そこに「=」を入力して値を記入します。※スペースなしで記入

複数格納する場合はスペースで区切り、同じ様に格納していきます。

実践：連想配列で値をの格納してみる

では実際に連想配列に値を格納してみます。

declare -A my_association_array1=([id]=5 [name]=yamada)

このように宣言と連想配列の値格納を1行で行う事も可能です。

my_association_array1が連想配列という宣言と、それに値を格納しました。

下のシェルスクリプトを実行して確認してみます。

あわせて読みたい

【シェルスクリプト基礎】コマンドを実行する様々な方法をご紹介！ シェルスクリプトを実行する時に困った事はありませんか？ シェルスクリプトのコマンド実行での失敗メッセージ一覧 「実行権限がありません」 「コマンドが見つかりませ…

declare -A my_association_array1=([id]=5 [name]=yamada)
echo ${my_association_array1[@]}
echo ${!my_association_array1[@]}

シェルスクリプトの実行結果は以下となりました。

yamada 5
name id

1行目で値が、2行目でキーが全て表示されました。

表示の順序は入力した順とは限らないので注意です。

連想配列での値の参照方法

では連想配列に入れた値を参照する方法です。

${連想配列名[キー]}

これでキーに対する値を参照する事ができます。

実践：連想配列で値を参照してみる

では実際に連想配列の値を参照してみます。

declare -A my_association_array1=([id]=5 [name]=yamada)
echo ${my_association_array1[name]}

my_association_array1の連想配列にキー「id」と「name」に対する値を格納し、キーが「name」の値を参照します。

シェルスクリプトを実行して確認してみます。

yamada

キーが「name」の値の「yamada」が表示され、連想配列の参照ができています。

連想配列に新規キーと値を格納する

連想配列に新規のキーと値を入れる方法です。

連想配列名[新規キー]=新規値

これで新規にキーと値を格納できます。

実践：連想配列に新規キーと値を格納してみる

では実際に連想配列の値を参照してみます。

declare -A my_association_array1=([id]=5 [name]=yamada)
my_association_array1[country]=Japan
echo ${my_association_array1[@]}
echo ${!my_association_array1[@]}

my_association_array1の連想配列に新規キー「country」と値「Japan」を格納します。

シェルスクリプトを実行して確認してみます。

yamada 5 Japan
name id country

新規キー「country」と、新規値の「Japan」が、追加表示されている事がわかります。

連想配列の値を修正する

連想配列の値を修正する方法です。既存のキーに対して値を格納すると上書き保存されます。

実践：連想配列の値を修正してみる

では実際に連想配列の値を修正してみます。

declare -A my_association_array1
my_association_array1=([id]=1 [name]=yamada)
echo ${my_association_array1[name]}

my_association_array1の連想配列の「name」キーに「yamada」という値が格納されています。

シェルスクリプトを実行して確認してみます。

yamada

下のように既存キー「name」に新規値の「tanaka」を格納しています。

my_association_array1[name]=tanaka
echo ${my_association_array1[name]}

更にシェルスクリプトを実行して確認してみます。

tanaka

「yamada」から「tanaka」に値が修正されました。

連想配列のキーの値を削除する

連想配列のキーを削除する方法です。

unset 連想配列名[キー]

実践：連想配列のキーの値を削除してみる

では実際に連想配列のキーを削除してみます。

declare -A my_association_array1
my_association_array1=([id]=1 [name]=yamada)
echo ${my_association_array1[@]}

my_association_array1の連想配列に「id」と「name」キーがあります。

シェルスクリプトを実行して確認してみます。

yamada 1

キーに対応する値の「yamada」と「1」が表示されています。

下のように「name」キーを削除してみます。

unset my_association_array1[name]
echo ${my_association_array1[@]}

更にシェルスクリプトを実行して確認してみます。

1

キー「name」の値の「yamada」が削除されているのがわかります。

連想配列の要素数を数える

連想配列の要素数を数える方法です。

${#連想配列名[@]}

連想配列名の前に「#」をつけるだけで、要素数を数える事ができます。

実践：連想配列の要素数を数えてみる

では実際に連想配列の要素数を数えてみます。

declare -A my_association_array1
my_association_array1=([id]=1 [name]=yamada)
echo ${#my_association_array1[@]}

my_association_array1の連想配列に「id」と「name」キーがあります。

シェルスクリプトを実行して確認してみます。

2

連想配列の要素数「2」が表示されています。

まとめ：シェルスクリプトの連想配列

配列と連想配列の違いはキーも自分で決めた文字列で指定する。また明示的に連想配列と宣言する事です。

連想配列の宣言のやり方

declare -A 連想配列名

連想配列の宣言と格納を一気にする方法

declare -A 連想配列名=([キー1]=値1 [キー2=値2 ...)

連想配列の全要素数を表示する方法

連想配列を参照する方法

${連想配列名[キー]}

連想配列に新規キーと値を格納する方法

連想配列名[新規キー]=新規値

連想配列の値を修正する方法

連想配列名[既存キー]=新規値

連想配列のキーの値を削除する方法

unset 連想配列名[キー]

連想配列の要素数を数える方法

${#連想配列名[@]}

連想配列を理解した人

連想配列のやり方とまとめました。

shellscriptで配列を使いたいけど、どうやって扱えば良いかわかりません。

などと言ったシェルスクリプトの配列について難しいという声が多いです。

なので配列の宣言から格納や参照などの基本をまずまとめます。

その後には要素数を数えたり、配列のコピーのやり方など使えるテクニックを現役エンジニアの筆者が教えます。

この記事でシェルスクリプトの配列についての基礎知識や、実際の使い方などを習得する事ができます。

シェルスクリプトで配列の宣言をする

まずは配列の宣言のやり方を見ていきます。

シェルスクリプトで配列の宣言をする方法は「declare -a 配列名」です。

今回は「my_array1」という箱を作成して、配列と宣言します。

declare -a my_array1

シェルスクリプトで配列以外の宣言をする場合は以下を参照下さい。

シェルスクリプトでの配列の基礎

配列の初期化

まずは配列を初期化します。配列=()とすることで初期化できます。

my_array1=()

これで配列に値が格納されていたとしても、初期化して新しい配列として使用する事ができます。

配列に値を格納する方法

では配列に値を格納します。配列=(値1 値2 値3 . . .)という風に値を入れていきます。

配列に値を格納するには配列の後にスペースなしで「=（）」を入力して、（）の中に値をスペース区切りで格納していきます。

my_array1=(0 1 2)

今回は「my_array1」という配列に0と1と2を格納しました。

配列の値を参照する方法

では先程、配列に格納した値を参照してみます。

配列の値を参照するには${配列名[インデックス番号]}で可能です。

インデックスとは配列の値を参照できる番号です。シェルスクリプトでは0からになります。一番目に入っている値はインデックス0で参照できます。

${my_array1[0]}

これで配列の１番目（インデックス0）の値を参照できます。

実践：配列の値を参照してみる

実際に配列のインデックス0の値をechoコマンドで表示してみます。

あわせて読みたい

【シェルスクリプト基礎】echoコマンドの使い方！ シェルスクリプトのechoコマンドの使い方で疑問に思っている事などないでしょうか？ 思い通りに文字列を表示できなかったりしないでしょうか？ シェルスクリプトでecho…

my_array1=(0 1 2)
echo ${my_array1[0]}

上のシェルスクリプトを実行してみます。

あわせて読みたい

【シェルスクリプト基礎】コマンドを実行する様々な方法をご紹介！ シェルスクリプトを実行する時に困った事はありませんか？ シェルスクリプトのコマンド実行での失敗メッセージ一覧 「実行権限がありません」 「コマンドが見つかりませ…

実行結果は「0」が表示されます。

配列の値を全て参照する方法

配列にどのような値がはいっているか、一括で表示できたら楽だと思いませんか？

配列に入っている値を一括参照するには以下のシェルスクリプトで可能です。

${my_array1[@]}
または
${my_array1[*]}

このスクリプトで配列の全ての値を参照できます。

実践：配列の値を全て参照してみる

実際に配列の全ての値をechoコマンドで表示してみます。

my_array1=(0 1 2)
echo ${my_array1[@]}

上のシェルスクリプトを実行してみます。

0 1 2

結果は全ての値が参照できています。

配列の途中から参照する方法

配列の基礎で全ての値を参照する方法がありましたが、途中から参照する方法もあります。

${my_array1[@]:2}

上のシェルスクリプトの場合は、配列の2番目から後ろの値を参照できます。

実践：配列の途中から参照してみる

実際に配列の途中からの値をechoコマンドで表示してみます。

my_array1=(0 1 2 3 4)
echo ${my_array1[@]:2}

上のシェルスクリプトを実行してみます。

2 3 4

結果は指定した2以降の全ての値が参照できています。

配列のインデックスを参照する方法

配列で値ではなくインデックスを表示する方法もあります。

${!my_array1[@]}

配列名の前に「!」を付ける事でインデックスを参照できます。

配列名[@]は配列の全てを参照するという意味でしたが、配列名の前に「！」を付ける事で全てのインデックスを参照する事が可能です。

実践：配列のインデックスを参照してみる

実際に配列のインデックスをechoコマンドで表示してみます。

my_array1=(zero iti ni)
echo ${!my_array1[@]}

上のシェルスクリプトを実行してみます。

0 1 2

結果は全てのインデックスが参照できています。

実践：配列のインデックスを途中から参照してみる

おまけで配列のインデックスを途中からechoコマンドで表示してみます。

my_array1=(zero iti ni)
echo ${!my_array1[@]:2}

上のシェルスクリプトを実行してみましたが、何も表示されません。

0 1 2

結果的にインデックスは途中から参照する事はできません。

インデックスを使用して配列に値を格納する

インデックスを使用して順番に配列に値を格納する

では配列の好きなインデックスに値を格納してみます。配列名=([0]=値 [1]=値 [2]=値)で可能です。

my_array1=([0]=0 [1]=1 [2]=2)

インデックス0に「0」をインデックス1に「1」を、インデックス2に「2」を入れています。

実践：インデックスを使用して順番に配列に値を格納してみる

実際に配列のインデックスに値を格納してみます。その結果をechoコマンドで表示してみます。

my_array1=([0]=0 [1]=1 [2]=2)
echo ${my_array1[@]}

上のシェルスクリプトを実行してみます。

0 1 2

インデックスに値を格納できています。

インデックスをいくつか飛ばして配列に値を格納する

インデックスをいくつか飛ばして配列に値を格納することもできます。

my_array1=([0]=0 [2]=2 [4]=4)

インデックス0に「0」をインデックス2に「2」を、インデックス4に「4」を入れています。

この時はインデックス1,3には空白が入る事に注意しましょう！

実践：インデックスをいくつか飛ばして配列に値を格納してみる

実際に配列のインデックスにとびとびで値を格納してみます。その結果をechoコマンドで表示してみます。

my_array1=([0]=0 [2]=2 [4]=4)
echo ${my_array1[0]}
echo ${my_array1[1]}
echo ${my_array1[2]}
echo ${my_array1[3]}
echo ${my_array1[4]}

上のシェルスクリプトを実行してみます。

0

2

4

インデックスに値を格納できています。飛ばしたインデックスは空白になっています。

配列の値を上書き格納する方法

配列の値を修正したい場合は、インデックスを指定して値を上書きできます。

実践：配列の値を上書き格納してみる

配列に値を入れています。

my_array1=()
my_array1=([1]=1 [2]=3 [4]=4)
echo ${my_array1[@]}

入っている値を${my_array1[@]}で全表示してみます。

1 3 4

インデックス「2」の値「3」を2に上書き格納します。

my_array1[2]=2
echo ${my_array1[@]}

配列を全表示してみます。

1 2 4

インデックス「2」の値が「3」から「2」に上書き格納されています。

配列の値を削除する方法

配列の値を削除するには「unset 配列[インデックス]」で可能です。

実践：配列の値を削除してみる

my_array1=([0]=0 [1]=1 [2]=2 [3]=fuyo)
echo ${my_array1[@]}

上のシェルスクリプトの配列を全表示してみます。

0 1 2 fuyo

インデックス3に格納している値「fuyo」を削除してみます。

unset my_array1[3]
echo ${my_array1[@]}

配列を全表示してみます。

0 1 2

インデックス3に格納している値「fuyo」が削除されている事がわかります。

配列の要素数を数える方法

配列にはいくつの要素がはいっているか数えたい時がよくあります。

そんな時は${#配列名[@]}で取得できます。

${#my_array1[@]}

実践：配列の要素数を数えてみる

実際に配列の要素数を数えてみます。その結果をechoコマンドで表示してみます。

my_array1=(0 1 2)
echo ${#my_array1[@]}

上のシェルスクリプトを実行してみます。

3

配列の要素数の「3」が表示されています。

少し変わった配列の参照方法

インデックスを指定しない場合は0の値が表示されます。値を参照する方法は「${配列名[インデックス]}」でした。

my_array1=([0]=0 [1]=1 [2]=2)
${my_array1}

インデックスを指定しない${my_array1}には「0」が参照されます。

インデックス0を参照する時にない場合は空白になります。

my_array1=([2]=2 [3]=3 [4]=4)
echo ${my_array1}

インデックス0の値が格納されていないので、${my_array1}は空白になります。

配列の要素をコピーして使用する方法

配列をコピーして別の配列として扱いたい場合もあります。そんな場合は下のシェルスクリプトで可能です。

配列名2=("&{配列名1[@]}")

ややこしいですが、下のように考えたら整理がつきやすいです。

配列の要素をコピーして使用する時の注意点

配列の要素をコピーして使用する時の注意点として、コピーした後はインデックスに空白があればつめられるという事です。

したの例のようにインデックス2は空白の配列があります。

my_array1=([0]=0 [1]=1 [3]=3)
echo ${my_array1[0]}
echo ${my_array1[1]}
echo ${my_array1[2]}
echo ${my_array1[3]}

このシェルスクリプトを実行すると結果は以下です。

0
1

3

インデックス2の値が空白の配列です。

この配列「my_array1」をコピーして配列「my_array2」にコピーします。

my_array2=("${my_array1[@]}")
echo ${my_array2[0]}
echo ${my_array2[1]}
echo ${my_array2[2]}
echo ${my_array2[3]}

今度はこのシェルスクリプトを実行すると結果は以下です。

0
1
3

コピー前の配列のインデックス2の「空白」がコピー後の配列では「3」になっています。

つまり配列の要素をコピーして使用する時はインデックスに空白があれば、つめられるという事です。

配列の要素をコピーし値を追加して配列を作る方法

配列のコピーをして、その配列に値を入れたいです。そのような時は下のシェルスクリプトで可能です。

my_array1=(0 1 2)
my_array2=("${my_array1[@]}" 3 4 5)

先程の配列のコピーのカッコの中に、空白を区切りとして値を格納しています。

実践：配列のコピーをして、その配列に値を入れてみる

実際に配列のコピーをして、その配列に値を入れて、その値をechoコマンドで表示してみます。

my_array1=(0 1 2)
my_array2=("${my_array1[@]}" 3 4 5)
echo ${my_array2[@]}

上のシェルスクリプトを実行してみます。

0 1 2 3 4 5

結果はコピーした配列の要素0,1,2の後に、指定した3,4,5が追加された配列になっています。

同じ配列に値を格納したいのであれば、下のシェルスクリプトで可能です。

my_array1=(0 1 2)
my_array1=("${my_array1[@]}" 3 4 5)
echo ${my_array1[@]}

上のシェルスクリプトを実行してみます。

0 1 2 3 4 5

結果は同じ配列にでも同じやり方で値をコピーして追加格納できています。

また単純に配列に値を入れたいのであれば、下のように「+=」を使用すれば簡単です。

my_array1=(0 1 2)
my_array1+=(3 4 5)
echo ${my_array1[@]}

上のシェルスクリプトを実行してみます。

0 1 2 3 4 5

結果は同じ配列に簡単に追加格納できています。

まとめ：シェルスクリプトで配列の使い方について

シェルスクリプトで配列の宣言をする方法

declare -a 配列名

配列を初期化する方法

配列名=()

配列に値を格納する方法

配列名=(値0 値1 値2 ...)

配列の値を参照する方法

${配列名[インデックス番号]}

配列の値を全て参照する方法

${配列名[@]}
または
${配列名[*]}

配列の値を途中から全て参照する方法

${配列名[@]:位置}

配列のインデックス値を全て参照する方法

${!配列名[@]}

インデックスは途中から参照する事はできません。

インデックスを使用して順番に配列に値を格納する方法

配列名=([インデックス値0]=値0 [インデックス値1]=値1 [インデックス値2]=値2 ...)

インデックス値をとびとびにした場合は、とんだインデックスの値は空白になる

指定したインデックスに値が格納されている時は、上書き格納される

配列の値を削除する方法

unset 配列名[インデックス値]

配列の要素数を数える方法

${#配列名[@]}

配列の要素をコピーして使用する方法

配列名2=("&{配列名1[@]}")

配列の要素をコピーして使用する時はインデックスに空白があれば、つめられる。

配列の要素をコピーし値を追加して配列を作る方法

新配列名=("${旧配列名[@]}" 追加する値1 追加する値2 追加する値3 ...)

同じ配列に値を格納したい

配列名=("${配列名[@]}" 追加する値1 追加する値2 追加する値3 ...)
または
配列名+=(追加する値1 追加する値2 追加する値3 ...)

管理人

配列は覚える事が沢山ありますが、シェルスクリプトでは必須項目のうちの一つなので、何度も読み直してマスターしてください。

シェルスクリプトを実行していて「-bash: [: q: 整数の式が予期されます」のエラーがでました。

解決方法がわかりましたので、覚書しておきます。

-bash: [: q: 整数の式が予期されますのエラーの対処法

‘[‘などのテストコマンドを使用している時に出たエラー

解決策は’[’を’[[’に変更するだけです。

実際のシェルスクリプト

実際にエラーが出たシェルスクリプトです。

while :
 do
 read -p "ファイルの何行目を表示させますか？" my_row
  if [ $row_count -lt $my_row ]; then
   echo $my_row行目に文字はありません
   continue
  elif [ $my_row == q ]; then
   echo 終了します
   break
  else
   sed -n ${my_row}p $file
  fi
 done

このテストコマンドを[[ ]]に変更しただけで、エラーが出なくなりました。

これからの対策として[]は使用せずに[[]]に統一しようと思います。

シェルスクリプトを実行していて「[[: 9 while_read.txt: 構文エラー: 無効な計算演算子です (エラーのあるトー クンは “.txt”)」のようなエラーが出ました。

その原因と対処法がわかりましたので、記述しておきます。

構文エラーの原因

原因は[[などのテストコマンドで変な値が入っている事によるエラーでした。

今回は変数展開するとif [[ 9 while_read.txt -lt 10 ]]といった構文になりエラーが起こっていました。

なぜこんな値が入っていたかというと「wc -l」コマンドの仕様が原因でした。

構文エラーの解決策

解決策は[[などのテストコマンドの値を修正する事でした。

「wc -l ファイル名」はファイルの行数とファイル名まで変数にいれてしまいます。

なので下のように変更したら解決しました

これで変数には行数のみの値が入ります。

実際のシェルスクリプト

file='while_read.txt'
row_count=$(wc -l $file)
echo 終了するにはqを押してください

while :
 do
 read -p "ファイルの何行目を表示させますか？" my_row
  if [[ $row_count -lt $my_row ]]; then
   echo $my_row行目に文字はありません
   continue
  elif [[ $my_row == q ]]; then
   echo 終了します
   break
  else
   sed -n ${my_row}p $file
  fi
 done

このシェルスクリプトでの原因は2行目の「wc -l ファイル名」のコマンドでファイルの行数を数えるものです。

数えた値を変数に入れると思っていましたが、実際は「値 ファイル名」とファイル名が入ってきます。

8行目でこの数字を使用して場合分けしたかったですが、変数に数字と不要なファイル名もはいっていた為に起こったエラーでした。

シェルスクリプトでユーザーが入力したものを使用したいと思った事はありませんか？

ユーザーの入力したものを使用する事で、非常にインタラクティブなスクリプトが完成します。

シェルスクリプトではreadを使用すれば可能です。

入力したものによって場合分けなども出来ます。そういった事を今回行います。

最後に業務でも使用できるシェルスクリプトも紹介するので、最後までご覧ください。

シェルスクリプトのreadでユーザーが入力したものを使用する方法

readコマンドの基礎

シェルスクリプトのreadコマンドの基礎を以下に示します。

read 変数

readの後に変数名を指定します。この行に来るとユーザーの入力待ちになります。

入力された文字列などが変数に格納されて、続きのスクリプトが実行されます。

readを使用したスクリプト説明

では実際のシェルスクリプトでreadを使用してみましょう！

echo 文字列を入力してください
read string
echo あなたが入力した文字は$stringです。

echoで入力を促します。そして2行目で「read string」にしてユーザーが入力したものを変数stringに入れるようにしまう。

あわせて読みたい

【シェルスクリプト基礎】echoコマンドの使い方！ シェルスクリプトのechoコマンドの使い方で疑問に思っている事などないでしょうか？ 思い通りに文字列を表示できなかったりしないでしょうか？ シェルスクリプトでecho…

3行目で変数stringに$をつけて変数展開しています。

あわせて読みたい

【シェルスクリプト】「$」の意味を詳しく解説！実例あり シェルスクリプトで「$」はよく出てきますが、どういう意味なのかわからないと言った事はないでしょうか？ シェルスクリプトで「$」はよく出てきますが、どういう意味な…

表示させる文字列と変数を結合する方法は、そのままくっつけて記述すればOKです。

あわせて読みたい

【シェルスクリプト基礎】文字列を結合するには？改行、スペースなども結合 シェルスクリプトで文字列を結合したい場合などのやり方をまとめます。 変数と文字列の結合や改行、スペース、空白などを含めた結合、また引数と文字列なども結合してい…

read基礎を実践

ではこのreadを使用したシェルスクリプトを実行してみます。

シェルスクリプトを実行するやり方は様々ありますが、「. シェルスクリプト名」で実行します。

あわせて読みたい

【シェルスクリプト基礎】コマンドを実行する様々な方法をご紹介！ シェルスクリプトを実行する時に困った事はありませんか？ シェルスクリプトのコマンド実行での失敗メッセージ一覧 「実行権限がありません」 「コマンドが見つかりませ…

文字列を入力してください

1行目の文字列が表示されています。2行目でユーザーの入力待ちになっています。今回は「test」と入力してエンターします。

あなたが入力した文字はtestです。

きちんと入力した値が入った文字列が表示されています。

readとifを使用して場合分けをしてみる

ではreadとifを使用して、ユーザーが入力したもので処理を分けてみます。

シェルスクリプトでifを使用して複数条件を指定する基礎は以下です。

if 条件１
 条件１にマッチした処理
elif 条件２
 条件２にマッチした処理
else その他
 どれにも当てはまらなかった処理
fi

です。「elif」を増やしていく事で更なる条件分岐が出来ます。

ではreadとifを組み合わせて、以下のシェルスクリプトを作成してみます。

echo 1,2,3のうちどれかを入力してください
read input
 if [[ $input == 1 ]]; then
  echo 1を選んだ処理を書く
 elif [[ $input == 2 ]]; then
  echo 2を選んだ処理を書く
 elif [[ $input == 3 ]]; then
  echo 3を選んだ処理を書く
 else
  echo その他の処理を書く
fi

readとifのシェルスクリプト説明

1行目のechoで説明文を表示して入力を促しています。2行目のreadでユーザーの入力したものを変数「input」に入れます。

3行目からifとreadで入力した数字で処理を分けています。1なら初めの処理、２なら次の処理、３なら3番目の処理、それ以外を選べばその他の処理が実行されます。

readとifのシェルスクリプト実行

ではこのread,ifのシェルスクリプトを実行します。

1,2,3のうちどれかを入力してください

ここで入力待ちになります。1を入力してみます。

1を選んだ処理を書く

１の処理が実行されてシェルスクリプトが終わりました。

では次は「test」と文字列を入力してみます。

その他の処理を書く

どの条件にも当てはまらずelseの処理が表示されました。

実践：readとwhileを使用した実務でも使えるシェルスクリプト

では最初のシェルスクリプトをwhileと関数を使用して、実践でも使用できる業務レベルまで引き上げます。

最初に実行したシェルスクリプトは入力した文字を表示するものでした。

echo 文字列を入力してください
read string
echo あなたが入力した文字は$stringです。

しかし何も入力しないでも「あなたが入力した文字はです。」と表示されます。

これでは実務では使用できません。

実践でも使用できる業務レベルのシェルスクリプト

これをユーザーが入力するまで繰り返しヒアリングするシェルスクリプトに変更してみましょう！

#関数を使用します
function string_input(){
echo 文字列を入力してください
read string
}
#whileで変数の値が0の場合は関数に戻り続けます。変数が入力されたら抜けます。
while [[ -z $string ]]
do
 string_input
done
 echo あなたが入力した文字は$stringです。

業務で使用するシェルスクリプトは、後から誰が見てもわかるようにコメントアウトして説明文をつけましょう！

あわせて読みたい

【シェルスクリプト基礎】コメントアウトのやり方！ シェルスクリプトでコメントを入れたいけど入れ方がわからない。 また複数行コメントアウトできればやりたいといった要望はあると思います。 そこで今回はシェルスクリ…

業務レベルのシェルスクリプト説明

functionで関数を作成しています。｛｝で囲った処理を呼び出す事が出来ます。

function名を「string_input」として文字列を入力させる処理を記述しています。

whileで変数「string」の文字列が0の場合は関数「string_input」を呼び出すようにしています。

これでユーザー入力が空白であれば、入力処理に戻る事が可能です。

入力されればwhileの繰り返しを抜けて、文字列を表示してシェルスクリプトが終了します。

業務レベルのシェルスクリプト実行

ではこのシェルスクリプトを実行して、何も入力せずにエンターを何回か押してみます。その後「test」と入力してみます。

文字列を入力してください

文字列を入力してください

文字列を入力してください
test
あなたが入力した文字はtestです。

何度も入力を促されて、文字を入力すると想定の文字列が表示されました。

シェルスクリプトでreadを自分のモノにすれば、一層楽しくなるので極めてみてください。

シェルスクリプトの繰り返しでforを使用する時に、ループする回数の指定方法をまとめます。

シェルスクリプトのforで繰り返し回数の指定方法を知りたい犬

シェルスクリプトでfor文を使いたいけど、回数の指定方法がわかりません。

そういった疑問に答えます。

シェルスクリプトのfor文で回数の指定方法

シェルスクリプトのfor文の基本構文と使い方

シェルスクリプトのfor文を使った繰り返しの基礎は以下になります。

for 変数 in 変数に入れるリストなど
 do
  繰り返す処理
 done

for文を使ったカウントアップの方法

for文の回数指定の基本は以下です

for 変数 in {1..9}
 do
  繰り返す処理
 done

｛1..9｝は1から9まで順番に変数に入れていきます。この場合の回数は9になります。

forの回数指定の基本実践

以下のfor文のシェルスクリプトを記述してください。

for i in {1..9}
do
 echo 回数指定で$i回繰り返しています
done

＄iで変数iに入った値を展開しています。

あわせて読みたい

【シェルスクリプト】「$」の意味を詳しく解説！実例あり シェルスクリプトで「$」はよく出てきますが、どういう意味なのかわからないと言った事はないでしょうか？ シェルスクリプトで「$」はよく出てきますが、どういう意味な…

echoで文字列を表示します。

あわせて読みたい

【シェルスクリプト基礎】echoコマンドの使い方！ シェルスクリプトのechoコマンドの使い方で疑問に思っている事などないでしょうか？ 思い通りに文字列を表示できなかったりしないでしょうか？ シェルスクリプトでecho…

変数や文字列などを結合する場合は、特に何もせず文字などをつなげれば問題ありません。

あわせて読みたい

【シェルスクリプト基礎】文字列を結合するには？改行、スペースなども結合 シェルスクリプトで文字列を結合したい場合などのやり方をまとめます。 変数と文字列の結合や改行、スペース、空白などを含めた結合、また引数と文字列なども結合してい…

forの回数指定の基本実践結果

ではこのシェルスクリプトを実行してみます。今回は「. シェルスクリプト名」で実行します。

あわせて読みたい

【シェルスクリプト基礎】コマンドを実行する様々な方法をご紹介！ シェルスクリプトを実行する時に困った事はありませんか？ シェルスクリプトのコマンド実行での失敗メッセージ一覧 「実行権限がありません」 「コマンドが見つかりませ…

結果は9回実行されています。

シェルスクリプトで日本語が文字化けする場合

シェルスクリプトを実行した結果、文字化けする場合があります。

この場合は文字コードが「SJIS」などになっています。「UTF-8」に変更しましょう。

seqコマンドを使った回数指定の方法

「seq」でも回数指定可能です。

for i in `seq 1 9`
do
 echo seqで$i回繰り返しています
done

seqコマンドを使った回数指定の方法実践

seqを使用して実行してみます。

seqコマンドを使った時のエラー結果

seqを使用する時のよくあるエラーを紹介しておきます。

以下のシェルスクリプトを実行して見て下さい。

for i in seq 1 9
do
 echo seqで$i回繰り返しています
done

「`」が抜けていて「seq」「1」「9」と3つの文字を順番にいれています。

意図しない結果です。「`」をつけ忘れないようにしましょう！

「`」はキーボードのShift＋＠で入力できます。

回数指定を(())で行う方法

最後は(())を使用して回数を指定します。

for ((i=1; i<9; i++))
do
 echo "(())"で$i回繰り返しています
done

このシェルスクリプトは((初期値; 条件; 次の値))で指定しており、初期値が1で「i++」がiに1を加算していき、iが9になれば終了となります。

これで回数を8回にすることができます。ではシェルスクリプトを実行します。

結果回数は想定通り８回となっています。

回数指定を配列で行う方法

配列の使い方と書き方

配列の基本的な書き方は以下です。

array=(1 2 3 4 5 6 7 8 9)

配列名に「=()」をつけて、その中に配列に入れたい文字などを順に入れていきます。

回数指定を配列で行う時の構文

forで回数を指定するのに配列を使用する時の構文

for i in ${array[@]}

シェルスクリプトのfor文で配列を使用する方法は、下の記事で詳しく説明しています。

あわせて読みたい

【シェルスクリプト】for文のループ処理を配列で行う方法 シェルスクリプトのループでfor文を使用しますが、順に入れる文字列が複雑なので配列で指定したい事はないでしょうか？ そういった場合の処理のやり方を、実践していき…

回数指定を配列で行う実践

では回数指定を配列で行う以下のシェルスクリプトを実行します。

array=(1 2 3 4 5 6 7 8 9)
for i in ${array[@]}
do
 echo 配列で$i回繰り返しています
done

回数指定を配列で行った結果

回数指定を配列で行い成功しています。

回数指定をファイルを使用して行う方法

ファイルの中身を取得して回数指定してみます。以下のシェルスクリプトを記述します。

for i in `cat shellscript-for-count.txt`
do
 echo ファイルから取得$i回目
done

同階層に「shellscript-for-count.txt」を作成して中身を以下のように記述します。

1
2
3
4
5
6
7
8
9

これで先程のシェルスクリプトを実行して見ます。

きちんと回数指定をファイルから取得しています。

応用編：回数をループの制御で行う方法

では回数を指定するが途中で制御を行ってみます。

continueやbreakコマンドでループをスキップしたり終了する方法

for i in {1..9}
do
 if [[ $i -eq 5 ]]; then
  continue
 elif [[ $i -eq 8 ]]; then
  break
 fi
 echo $i回目：5は飛ばす、8なら終了
done

forの回数指定で9回繰り返します。その中でif文により場合分けしています。

5回目の時は「continue」でスキップし、8回目の時は「break」で処理を抜けています。

実行した結果、5番目がスキップされ、7番目までで終了しています。

まとめ：シェルスクリプトのfor文で回数の指定方法

シェルスクリプトのfor文の基本構文と使い方

シェルスクリプトのfor文を使った繰り返しの基礎は以下になります。

for 変数 in 変数に入れるリストなど
 do
  繰り返す処理
 done

for文を使ったカウントアップの方法

for 変数 in {1..9}

seqコマンドを使った回数指定の方法

for i in `seq 1 9`

「`」をつけ忘れないよう気を付ける。

回数指定を(())で行う方法

for ((i=1; i<9; i++))

回数指定を配列で行う時の構文

for i in ${array[@]}

回数指定をファイルを使用して行う方法

for i in `cat shellscript-for-count.txt`

continueやbreakコマンドでループをスキップしたり終了する方法

for i in {1..9}
do
 if [[ $i -eq 5 ]]; then
  continue
 elif [[ $i -eq 8 ]]; then
  break
 fi
 echo $i回目：5は飛ばす、8なら終了
done

シェルスクリプトのforで繰り返し回数を指定する方法を、実践し画像を使用してわかりやすく説明しました！