# 基本的なJSONデータの生成と加工例

echo '{"name": "Alice", "age": 30, "city": "Tokyo"}' | jq '.name'

# 出力: "Alice"

echo '[{"id": 1, "name": "Item A"}, {"id": 2, "name": "Item B"}]' | jq '.[].name'

# 出力:


# "Item A"


# "Item B"

# オブジェクトのキーを追加/変更

echo '{"name": "Alice", "age": 30}' | jq '.city = "Kyoto"'

# 出力: {"name": "Alice", "age": 30, "city": "Kyoto"}

# 配列の要素をフィルタリング

echo '[{"status": "ok"}, {"status": "error"}]' | jq '.[] | select(.status == "ok")'

# 出力: {"status": "ok"}

#!/bin/bash


# file: process_data.sh

# 1. 堅牢なシェルスクリプトの設定


# -e: コマンドが失敗した場合、即座に終了


# -u: 未定義の変数を参照した場合、エラーとして終了


# -o pipefail: パイプライン中の任意のコマンドが失敗した場合、パイプライン全体を失敗とする

set -euo pipefail

# 2. 一時ディレクトリの作成とクリーンアップ


# mktemp -d: 安全な一時ディレクトリを作成

tmp_dir=$(mktemp -d -t myapp-XXXXXXXXXX)

# trap: スクリプト終了時に一時ディレクトリを削除

trap 'echo "Cleaning up temporary directory: $tmp_dir"; rm -rf "$tmp_dir"' EXIT

echo "Temporary directory created: $tmp_dir"

# 3. jqを用いた具体的なJSON処理例


# 外部APIからデータを取得し、整形してファイルに保存するシナリオ

# ダミーAPIエンドポイント (実際はcurlで取得)


# 認証情報などは環境変数やシークレット管理システムから取得することを想定

API_URL="https://api.example.com/data"
API_TOKEN="YOUR_SECURE_TOKEN" # 環境変数などから取得

# APIからJSONデータを取得 (curlとの連携)


# 取得したデータを一時ファイルに保存

raw_json_file="$tmp_dir/raw_data.json"

# curlの安全な利用例:


# --silent: 進捗バー非表示


# --show-error: エラーメッセージを表示


# --fail-early: エラー時に即座に終了


# --connect-timeout 10: 接続タイムアウト (秒)


# --max-time 30: 全体タイムアウト (秒)


# --retry 3 --retry-delay 5: 3回リトライ、5秒間隔


# --output: 出力ファイル


# --cacert /etc/ssl/certs/ca-certificates.crt: 証明書検証 (システムデフォルトを使用する場合省略可)


# -H 'Authorization: Bearer ...': 認証ヘッダ

echo "Fetching data from API..."
curl \
  --silent --show-error --fail-early \
  --connect-timeout 10 --max-time 30 \
  --retry 3 --retry-delay 5 \
  --cacert /etc/ssl/certs/ca-certificates.crt \
  -H "Authorization: Bearer ${API_TOKEN}" \
  "${API_URL}" > "${raw_json_file}"

# curlの実行結果をチェック (set -e により自動で終了するが、明示的なチェックも可能)

if [ ! -s "${raw_json_file}" ]; then
  echo "Error: Failed to fetch data or data is empty." >&2
  exit 1
fi

echo "Raw data fetched successfully to ${raw_json_file}"

# jqでJSONデータを処理


# 例: idが偶数のアイテムのみ抽出し、nameとvalueを結合した新しいオブジェクトを作成


# jqの入力/出力:


# 入力: 標準入力 (ここではファイルからパイプ)


# 出力: 標準出力

processed_json_file="$tmp_dir/processed_data.json"
echo "Processing JSON data with jq..."
jq '[
  .[] |
  select(.id % 2 == 0) |
  {
    "item_id": .id,
    "combined_name": (.name + " - " + .value)
  }
]' "${raw_json_file}" > "${processed_json_file}"

echo "Processed data saved to ${processed_json_file}"

# 最終的な処理結果の表示 (任意)

echo "--- Final Processed Data ---"
cat "${processed_json_file}"
echo "----------------------------"

echo "Script finished successfully."

# このスクリプトは、スクリプト実行中にエラーが発生した場合、またはパイプラインが途中で失敗した場合でも、


# trapにより一時ディレクトリが確実にクリーンアップされます。

#


# 前提:


#   API_URLは有効なJSONを返す。


#   API_TOKENは環境変数などから安全に渡される。


# 計算量:


#   curl: ネットワークI/Oに依存。


#   jq: JSONデータのサイズに比例。O(N) (NはJSONデータのノード数)。


# メモリ条件:


#   jqは通常、処理するJSONデータをメモリにロードするため、大きなファイルでは注意が必要。


#   ストリーミング処理が必要な場合は `jq -n --stream` を検討。

# file: /etc/systemd/system/my-json-processor.service

[Unit]
Description=My JSON Data Processor Service
Documentation=https://example.com/docs/my-json-processor
After=network-online.target
Wants=network-online.target

[Service]
Type=oneshot # 一度実行して終了するタスク
User=myuser # 専用の非特権ユーザーを指定
Group=myuser # 専用の非特権グループを指定
WorkingDirectory=/opt/my-json-processor # スクリプトが存在するディレクトリ
ExecStart=/bin/bash /opt/my-json-processor/process_data.sh # 実行するスクリプトへのパス
Environment="API_TOKEN=YOUR_SECURE_TOKEN_FROM_ENV" # 環境変数を設定 (本番ではsecrets managerから取得)
StandardOutput=journal # 標準出力をsystemd journalへ
StandardError=journal  # 標準エラー出力をsystemd journalへ
Restart=on-failure # 失敗時に再起動を試みる
RestartSec=5s      # 再起動までの待機時間

[Install]
WantedBy=multi-user.target

# file: /etc/systemd/system/my-json-processor.timer

[Unit]
Description=Run My JSON Data Processor every 15 minutes
Requires=my-json-processor.service # サービスユニットに依存

[Timer]
OnCalendar=*:0/15:00 # 15分ごとに実行 (例: 00:00, 00:15, 00:30, ...)
Persistent=true # タイマーが停止している間に過ぎたイベントもキャッチする
Unit=my-json-processor.service # 実行するサービスユニット

[Install]
WantedBy=timers.target

# 2024年7月25日 時点での一般的なコマンド

sudo systemctl daemon-reload # systemd設定ファイルをリロード
sudo systemctl enable my-json-processor.service # サービスを永続化
sudo systemctl enable my-json-processor.timer   # タイマーを永続化
sudo systemctl start my-json-processor.timer    # タイマーを起動

# 2024年7月25日 時点での一般的なコマンド

journalctl -u my-json-processor.service -f # サービスのログをリアルタイムで追跡
journalctl -u my-json-processor.timer    # タイマーのログを確認