bash

grep


`grep` は、テキストファイルや標準入力から指定したパターンに一致する行を検索するコマンドです。以下は `grep` の基本文法です。

```bash
grep [オプション] パターン [ファイル名]
```

- オプション: 検索の挙動を変えるためのオプションを指定します。例えば、大文字と小文字を区別しない、正規表現を使用するなどのオプションがあります。
  - 以下はいくつかの一般的なオプションの例です。
    - -i: 大文字と小文字を区別せずに検索します。
    - -v: パターンに一致しない行を表示します。
    - -n: 行番号を表示します。
    - -r: ディレクトリを再帰的に検索します。
    - -w: パターンと完全に一致する単語のみを検索します。
    - -c: パターンに一致する行の数を表示します。
    - -l: パターンに一致する行を含むファイル名を表示します。
    - -q: 結果を表示せずに検索を行います。スクリプト内で条件判断に使用する際などに便利です。
    - -E: 拡張正規表現（Extended Regular Expression）を使用します。
    - -F: パターンを文字列として扱い、正規表現を無効にします。
- パターン: 検索したい文字列や正規表現パターンを指定します。
- ファイル名: 検索対象となるファイルの名前を指定します。省略した場合は標準入力を利用します。

例えば、次のコマンドはファイル example.txt から文字列 apple を検索します。

```bash
grep apple example.txt
```

example.txt に次のような内容がある場合：

```
apple
banana
orange
pineapple
```

`grep`` コマンドの結果は次のようになります：

```
apple
pineapple
```

また、 `grep` コマンドはパイプ( `|` )を使用して他のコマンドと組み合わせて使用することができます。例えば、次のようにして `grep` の結果を `wc` コマンドで行数を数えることができます：

```bash
grep apple example.txt | wc -l
```

これは example.txt 内の apple に一致する行の数を表示します。

さらに詳細なオプションやコマンドの組み合わせについては、 `grep` コマンドのマニュアルを参照することをおすすめします。ターミナルで以下のコマンドを実行すると、詳細なヘルプが表示されます：

```bash
man grep
```


grep基本文法


Bash の基本文法を使って応用問題をやっていきましょう！

まずは List を見ながら問題を解いていき、ある程度覚えたら Flash Card にチャレンジしてください！

各問には制限時間があり、時間内に答えを出してください。エディタを用意して実際に書いてみると記憶に残りやすいのでおすすめです！

# question

引数としてディレクトリ名を受け取り、そのディレクトリ内のすべてのファイルの合計サイズを計算して出力するスクリプトを作成してください。

## answer

```bash
directory=$1
total_size=0

find "$directory" -type f -exec du -b {} + | awk '{total+=$1} END {print total}'
```

# question

引数としてディレクトリ名を受け取り、そのディレクトリ内のファイルのうち、最も新しいファイルの名前と最も古いファイルの名前を出力するスクリプトを作成してください。

## answer

```bash
directory=$1

newest_file=$(find "$directory" -type f -printf '%T@ %p\n' | sort -n | tail -n 1 | awk '{print $2}')
oldest_file=$(find "$directory" -type f -printf '%T@ %p\n' | sort -n | head -n 1 | awk '{print $2}')

echo "Newest file: $newest_file"
echo "Oldest file: $oldest_file"
```

# question

引数としてディレクトリ名を受け取り、そのディレクトリ内のファイルを拡張子ごとに分類して、各拡張子ごとにファイル数を出力するスクリプトを作成してください。

## answer

```bash
directory=$1

find "$directory" -type f | awk -F . '{print $NF}' | sort | uniq -c
```

# question

引数としてディレクトリ名と数値を受け取り、そのディレクトリ内のファイルのうち、指定されたサイズ以上のファイルの一覧を出力するスクリプトを作成してください。

## answer

```bash
directory=$1
size_threshold=$2

find "$directory" -type f -size +"$size_threshold"c
```

# question

引数としてディレクトリ名と拡張子を受け取り、そのディレクトリ内のファイルのうち、指定された拡張子に一致するファイルのサイズの総和を計算して出力するスクリプトを作成してください。

## answer

```bash
directory=$1
extension=$2
total_size=0

find "$directory" -type f -name "*.$extension" -exec du -b {} + | awk '{total+=$1} END {print total}'
```

# question

引数としてファイル名とキーワードを受け取り、そのファイル内の行のうち、指定されたキーワードに一致する行のみを抽出して出力するスクリプトを作成してください。

## answer

```bash
file=$1
keyword=$2

grep "$keyword" "$file"
```

# question

引数としてディレクトリ名、拡張子、アウトプットファイル名を受け取り、そのディレクトリ内のファイルのうち、指定された拡張子に一致するファイルの内容を結合して新しいファイルを作成してください。

## answer

```bash
directory=$1
extension=$2
output_file=$3

find "$directory" -type f -name "*.$extension" -exec cat {} + > "$output_file"
```

# question

引数としてディレクトリ名、拡張子、アウトプットファイル名を受け取り、そのディレクトリ内のファイルのうち、指定された拡張子に一致するファイルを圧縮して新しい圧縮ファイルを作成してください。

## answer

```bash
directory=$1
extension=$2
output_file=$3

find "$directory" -type f -name "*.$extension" -exec tar -czvf "$output_file" {} +
```

# question

引数としてディレクトリ名、拡張子、検索文字を受け取り、そのディレクトリ内のファイルのうち、指定された拡張子に一致するファイルの中で、特定の文字列を含むファイルを検索して出力するスクリプトを作成してください。

## answer

```bash
directory=$1
extension=$2
search_string=$3

grep -r -l "$search_string" "$directory"/*. "$directory"/*."$extension"
```

# question

引数としてディレクトリ名、拡張子、検索文字を受け取り、そのディレクトリ内のファイルのうち、指定された拡張子に一致するファイルの中で、指定された文字列を含む行のみを抽出して出力するスクリプトを作成してください。

## answer

```bash
directory=$1
extension=$2
search_string=$3

find "$directory" -type f -name "*.$extension" -exec grep "$search_string" {} +
```


Bash スクリプトの応用問題です

Bash応用


Bash の基本文法を使って基礎問題をやっていきましょう！

まずは List を見ながら問題を解いていき、ある程度覚えたら Flash Card にチャレンジしてください！

各問には制限時間があり、時間内に答えを出してください。エディタを用意して実際に書いてみると記憶に残りやすいのでおすすめです！

# question

`echo "Hello, World!"` というコマンドを実行したときの出力は何ですか？

## answer

```bash
"Hello, World!"
```

# question

for ループを使用して、1 から 10 までの数字を出力するスクリプトを書いてください。

## answer

```bash
for i in {1..10} ; do
    echo $i
done
```

# question

ユーザーにパスワードを入力させ、そのパスワードが「password」と一致するかどうかを検証するスクリプトを書いてください。

## answer

```bash
read -s -p "Enter Password: " password
if [ $password = "password" ]
then
  echo "Access granted"
else
  echo "Access denied"
fi
```

# question

引数として 2 つの数字を受け取り、それらを掛け合わせた結果を出力するスクリプトを書いてください。

## answer

```bash
product=$(($1 * $2))
echo "Product of $1 and $2 is $product"
```

# question

引数としてディレクトリ名を受け取り、そのディレクトリ内のファイルの一覧を出力するスクリプトを書いてください。

## answer

```bash
dir=$1
for file in $dir/*
do
  echo $file
done
```

# question

引数として文字列を受け取り、その文字列をすべて大文字に変換した結果を出力するスクリプトを書いてください。

## answer

```bash
string=$1
upper=$(echo $string | tr '[:lower:]' '[:upper:]')
echo $upper
```

# question

ファイル file.txt に、1 から 10 までの数字を 1 行に 1 つずつ書いたものがあります。そのファイルから数字を読み取り、それらの合計を出力するスクリプトを書いてください。

## answer

```bash
sum=0
while read num
do
  sum=$((sum + num))
done < file.txt
echo "Sum is $sum"
```

# question

引数としてファイル名を受け取り、そのファイルの行数を出力するスクリプトを書いてください。

## answer

```bash
file=$1
lines=$(wc -l < $file)
echo "Number of lines in $file is $lines"
```

# question

引数としてファイル名を受け取り、そのファイル内で最も長い行の文字数を出力するスクリプトを書いてください。

## answer

```bash
file=$1
longest=$(wc -L < $file)
echo "Length of longest line in $file is $longest"

# L オプションがない場合
file="$1"
max_length=0

while IFS= read -r line; do
  length=${#line}
  if (( length > max_length )); then
    max_length=$length
  fi
done < "$file"

echo "最も長い行の文字数: $max_length"
```

# question

引数としてファイル名を受け取り、そのファイル内で最も頻繁に出現する単語を出力するスクリプトを書いてください。ただし、スペースで区切られた単語のみをカウントし、単語の出現頻度が同じ場合は、最初に出現した単語を優先します。

## answer

```bash
file=$1
awk '{for(i=1;i<=NF;i++){print $i}}' $file | sort | uniq -c | sort -nr | awk '{print $2; exit}'
```


Bash スクリプトの基本問題です

Bash基礎


Bash（Bourne Again SHell）は、Linux システムで一般的に使用されるシェルスクリプト言語です。以下に、Bash の基本的な文法要素を説明します。

- コメント: `#` を使用してコメントを追加できます。 `#` 以降のテキストは無視されます。

```bash
# これはコメントです
```

- 出力: `echo` コマンドを使用してテキストを出力できます。
  - エスケープ: 特殊文字をエスケープするために、バックスラッシュ `\` を使用します。

```bash
echo "Hello, World!"
echo "This is a \"quoted\" text."
```

- 変数: 変数を宣言し、値を割り当てることができます。変数名は英数字とアンダースコアで構成され、先頭は文字で始める必要があります。
  - 変数の展開: 変数を参照する場合、`$` を使って変数名を展開します。

```bash
name="John"
age=25

echo "Hello, $name!"
```

- 条件分岐: `if` 文を使用して条件分岐を行います。
  - 条件分岐の追加オプション: `elif` を使用して、複数の条件をチェックします。

```bash
if [ condition ]; then
  # 条件が真の場合に実行されるコマンド
else
  # 条件が偽の場合に実行されるコマンド
fi
```

- case 文: 複数のパターンに基づいて分岐するための `case` 文を使用します。

```bash
case 値 in
  パターン1)
    # パターン1に該当したときに実行されるコマンド
    ;;
  パターン2)
    # パターン2に該当したときに実行されるコマンド
    ;;
  ...
  パターンn)
    # パターンnに該当したときに実行されるコマンド
    ;;
esac
```

- ループ: `for` ループや `while` ループを使用して反復処理を行います。

```bash
for variable in list; do
  # 反復処理のコマンド
done

while condition; do
  # 条件が真の間、反復処理のコマンド
done
```

- 条件式: `test` コマンドまたは `[[...]]` 構文を使用して条件式を評価します。
  - 条件式の拡張: `[[ ... ]]` 構文を使用すると、より高度な条件式を作成することができます。例えば、文字列の比較やパターンマッチングが可能です。

```bash
# test コマンドを使用した条件式
if test $x -eq 5; then
  echo "x is equal to 5"
fi

# [[]] 構文を使用した条件式
if [[$x -eq 5]]; then
  echo "x is equal to 5"
fi
```

- 関数: 関数を定義して再利用可能なコードブロックを作成できます。

```bash
function my_function() {
  # 関数のコマンド
}

# 関数を呼び出す
my_function
```

- コマンド置換: コマンドの実行結果を変数に割り当てるために、バッククオート \` もしくは `$()` を使用します。

```bash
files=`ls`
count=$(wc -l file.txt)
```

- 配列: 配列を宣言し、要素にアクセスすることができます。
  - 配列の要素数を取得するには、 `${#array[@]}` を使用します。
  - 配列の要素をスライスするには、 `${array[@]:start:length}` を使用します。

```bash
my_array=("apple" "banana" "orange")
echo ${my_array[1]}  # "banana"
```

- リダイレクション: 標準入力や標準出力のリダイレクションを行うことができます。

```bash
command > output.txt # 標準出力をファイルにリダイレクト
command < input.txt # ファイルから標準入力にリダイレクト
```

- パイプ: パイプ `|` を使用して、コマンドの出力を別のコマンドの入力としてつなげることができます。

```bash
command1 | command2 # command1 の出力を command2 の入力として渡す
```

- リダイレクションの追加オプション:

  - `>>` : ファイルに追記するためのリダイレクト。既存の内容の後ろに出力を追加します。
  - `2>` : 標準エラー出力をファイルにリダイレクトします。
  - `2>>` : 標準エラー出力をファイルに追記します。
  - `&>` : 標準エラーと標準出力を同じファイルにリダイレクトします

- ヒアドキュメント: `<<` を使用して、インラインで複数行のテキストを指定します。

- コマンドの終了ステータスの確認: 直前に実行したコマンドの終了ステータスを確認するためには、`$?` 変数を使用します。

```bash
command
status=$?
echo "Exit status: $status"
```

- 文字列の操作:

  - 変数の値を連結するには、`${var1}${var2}` のように連結します。
  - 文字列の長さを取得するには、 `${#var}` を使用します。

- 数値演算:

  - 数値の計算には、`expr` コマンドや `$(( ... ))` 構文を使用します。
  - 数値の比較には、`-eq` （等しい）、 `-ne` （等しくない）、 `-lt` （より小さい）、 `-gt` （より大きい）などの比較演算子を使用します。

- プロセス制御:
  - バックグラウンド実行: コマンドの末尾に `&` を付けると、そのコマンドをバックグラウンドで実行します。
  - ジョブ制御: `fg` および `bg` コマンドを使用して、バックグラウンドジョブをフォアグラウンドまたはバックグラウンドに移動します。


Bash スクリプトの基本文法です

Bash基本文法


grep の基本文法を使って応用問題をやっていきましょう！

まずは List を見ながら問題を解いていき、ある程度覚えたら Flash Card にチャレンジしてください！

各問には制限時間があり、時間内に答えを出してください。エディタを用意して実際に書いてみると記憶に残りやすいのでおすすめです！

# question

ファイル emails.txt から.com ドメインのメールアドレスのみを抽出して表示するコマンドを書いてください。

## answer

```bash
grep -E '\b[A-Za-z0-9._%+-]+@[A-Za-z0-9.-]+\.[A-Za-z]{2,4}\b' emails.txt | grep '\.com$'
```

# question

ファイル words.txt から 3 文字の単語のみを表示するコマンドを書いてください。

## answer

```bash
grep -E '\b[A-Za-z]{3}\b' words.txt
```

# question

ファイル data.txt から行の先頭が数字の行のみを表示するコマンドを書いてください。

## answer

```bash
grep '^[0-9]' data.txt
```

# question

ファイル data.txt から空行を含む連続した行のブロック（1 つ以上の連続した空行から成る）を表示するコマンドを書いてください。

## answer

```bash
grep -Ez '\n\n+' data.txt
```

# question

ファイル data.txt から日付が `2023-07-16` の形式に一致する行のみを表示するコマンドを書いてください。

## answer

```bash
grep -E '2023-07-16' data.txt
```

# question

ファイル data.txt から apple または orange が含まれない行のみを表示するコマンドを書いてください。

## answer

```bash
grep -v -E 'apple|orange' data.txt
```

# question

ファイル data.txt から行の長さが 20 文字以上の行のみを表示するコマンドを書いてください。

## answer

```bash
grep -E '.{20,}' data.txt
```

# question

ディレクトリ files 内のファイルから文字列 search を含み、かつ行番号が 10 行目以上の行のみを表示するコマンドを書いてください。

## answer

```bash
grep -n -r -E 'search' files/ | awk -F':' '$1 > 9 {print}'
```

# question

ディレクトリ logs 内のファイルのうち、文字列 ERROR が含まれる行の前後 3 行を含むブロックを表示するコマンドを書いてください。

## answer

```bash
grep -B 3 -A 3 -r 'ERROR' logs/
```

# question

ディレクトリ files 内のすべてのファイルから文字列 search を含む行を表示し、各行のファイル名も表示するコマンドを書いてください。

## answer

```bash
grep -r -H 'search' files/
```

# question

ディレクトリ logs 内のファイルから ERROR と WARNING が同じ行に含まれる行のみを表示するコマンドを書いてください。

## answer

```bash
grep -E 'ERROR.*WARNING|WARNING.*ERROR' logs/\*
```

# question

ディレクトリ data 内のファイルのうち、文字列 apple が 3 回以上出現する行のみを表示するコマンドを書いてください。

## answer

```bash
grep -E '(apple._){3,}' data/_
```

# question

ディレクトリ files 内のファイルのうち、文字列 search を含む行を表示し、行番号も表示するコマンドを書いてください。ただし、行番号はファイルごとにリセットされるようにしてください。

## answer

```bash
grep -Hn 'search' files/\*
```

# question

ファイル data.txt の中で apple と orange が両方とも含まれる行を表示するコマンドを書いてください。

## answer

```bash
grep -E 'apple.*orange|orange.*apple' data.txt
```

# question

ディレクトリ logs 内のファイルから文字列 ERROR を含む行を表示し、ファイルごとに ERROR の出現回数も表示するコマンドを書いてください。

## answer

```bash
grep -r 'ERROR' logs/ | awk -F':' '{print $1, $2}' | sort | uniq -c
```


grep応用


grep の基本文法を使って基礎問題をやっていきましょう！

まずは List を見ながら問題を解いていき、ある程度覚えたら Flash Card にチャレンジしてください！

各問には制限時間があり、時間内に答えを出してください。エディタを用意して実際に書いてみると記憶に残りやすいのでおすすめです！

問題文中の data.txt は以下として考えてください

```
apple
banana

orange
pineapple

apple banana
orange pineapple
apple orange

banana pineapple
orange apple
```

# question

ファイル data.txt から文字列 apple を含む行をすべて表示するコマンドを書いてください。

## answer

```bash
grep "apple" data.txt
```

# question

ファイル data.txt から文字列 banana を含む行を除外して表示するコマンドを書いてください。

## answer

```bash
grep -v "banana" data.txt
```

# question

ファイル data.txt から文字列 orange が含まれる行の行数を表示するコマンドを書いてください。

## answer

```bash
grep -c "orange" data.txt
```

# question

ファイル data.txt から大文字と小文字を区別せずに文字列 Pineapple が含まれる行を表示するコマンドを書いてください。

## answer

```bash
grep -i "Pineapple" data.txt
```

# question

ファイル data.txt の中で apple または orange を含む行を表示するコマンドを書いてください。

## answer

```bash
grep "apple\|orange" data.txt
```

# question

ファイル data.txt の中で apple と orange を含む行を表示するコマンドを書いてください。

## answer

```bash
grep "apple.*orange\|orange.*apple" data.txt
```

# question

ファイル data.txt から行番号を含めて文字列 banana を含む行を表示するコマンドを書いてください。

## answer

```bash
grep -n "banana" data.txt
```

# question

ファイル data.txt の中で単語として apple を含む行を表示するコマンドを書いてください。

## answer

```bash
grep -w "apple" data.txt
```

# question

ファイル data.txt から空行を含む行を表示するコマンドを書いてください。

## answer

```bash
grep "^$" data.txt
```

# question

ディレクトリ documents 内のすべてのファイルから文字列 important を含む行を表示するコマンドを書いてください。

## answer

```bash
grep "important" documents/\*
```

# question

ディレクトリ documents 内のすべてのファイルから文字列 TODO を含む行を表示し、行番号も表示するコマンドを書いてください。

## answer

```bash
grep -n "TODO" documents/\*
```

# question

ディレクトリ logs 内のファイルのうち、拡張子が `.log` であり、文字列 ERROR を含む行を表示するコマンドを書いてください。

## answer

```bash
grep "ERROR" logs/\*.log
```

# question

ディレクトリ documents 内のファイルのうち、文字列 apple を含む行を表示し、その行の前後 5 行も一緒に表示するコマンドを書いてください。

## answer

```bash
grep -C 5 "apple" documents/\*
```

# question

ディレクトリ data 内のファイルのうち、文字列 apple を含まない行を表示するコマンドを書いてください。

## answer

```bash
grep -v "apple" data/\*
```

# question

ディレクトリ documents 内のファイルから文字列 important を含む行のみを抽出し、新しいファイル important.txt に保存するコマンドを書いてください。

## answer

```bash
grep "important" documents/\* > important.txt
```


grep基本文法

Related Posts

grep基本文法

grep基礎

grep応用