バックアップ・監視 統合運用

運用中 自動バックアップ + リアルタイム障害監視。 全通知 Telegram 連携済

パス: /usr/local/bin/wp-katuocloud-db-backup.sh
ログ: /var/log/wp-katuocloud-db-backup.log
実行: cron daily 02:30
保持: 14日 (find -mtime +14 -delete)
通知: 失敗 + サイズ異常 (前日比 50% 以上の増減) で Telegram

1. mysqldump --single-transaction --routines --triggers katuocloud_wp \
     | gzip > /mnt/data/backup/wp/katuocloud_wp/$(date +%F).sql.gz
2. サイズチェック (前日比 50% 以上の増減 → 警告)
3. 14日より古い .sql.gz を削除
4. Telegram 通知 (成功は無通知、 異常時のみ)

# 最新確認
ls -lt /mnt/data/backup/wp/katuocloud_wp/ | head -5

# 14日分揃ってるか
ls /mnt/data/backup/wp/katuocloud_wp/*.sql.gz | wc -l

# ログ確認
tail -50 /var/log/wp-katuocloud-db-backup.log

# 手動実行
sudo /usr/local/bin/wp-katuocloud-db-backup.sh

1. メンテナンスモード ON
     docker exec -u www-data nextcloud-stack-app-1 php occ maintenance:mode --on
2. MariaDB ダンプ
     docker exec nextcloud-stack-db-1 \
       mysqldump -u root -p*** nextcloud mikyun_cloud
3. config.php / custom_apps バックアップ
4. データは XFS スナップショット (検討中、 現状は rsync 差分)
5. メンテナンスモード OFF
6. 世代管理 (古いものを削除)
7. Telegram 通知

監視対象:
  - SAS×8 (megaraid 経由 smartctl)
  - NVMe×2 (smartctl 直接)
  - megaraid kernel ログ (driver event)

スクリプト: /usr/local/bin/perc-watch.sh
ログ: journalctl -u perc-watch.service
通知: SMART 警告 / Predict Failure / kernel megaraid event

監視対象:
  - md0 (OS RAID1)
  - /srv/storage 90% 超過
  - NFS export 状態
  - ATA エラー (dmesg)
  - LUKS×5 アンロック状態 (raid1-4 + storage-cache)

スクリプト: /usr/local/bin/supermicro-watch.sh
ログ: journalctl -u supermicro-watch.service

監視対象: /proc/mdstat md0 状態変化検知
通知: degraded / rebuild / failed 状態変化時

監視対象: IPMI SEL (Drive Fault / Rebuild イベント)
コマンド: ipmi-sel --interpret-oem-data
通知: 新規 SEL 発生時 (kernel ログ前にドライブ障害検知可能)

監視対象:
  - katuocloud.com (+ www)
  - admin.wan-secure.net
  - cloud.k2-o.net
  - office.k2-o.net
  - office.wan-secure.net
  (apt certbot 管理)

通知:
  - 残14日切ったら警告 (毎朝)
  - 失効後は immediate

監視対象:
  - admin.wan-secure.net
  - cloud.k2-o.net
  - office.k2-o.net
  - office.wan-secure.net
  (snap certbot 管理)

通知: 同上

# R640
df -h /mnt/data
sudo cryptsetup status data

# maguro
df -h /srv/storage
sudo cryptsetup status raid1
sudo cryptsetup status raid2
sudo cryptsetup status raid3
sudo cryptsetup status raid4
sudo cryptsetup status storage-cache
lsblk -f | head -40

# R640
ssh katuo@192.168.20.21
ls -lt /mnt/data/backup/wp/katuocloud_wp/ | head -3
sudo journalctl -u perc-watch.service --since "1 day ago" --no-pager | tail -10
sudo certbot certificates 2>/dev/null | grep -E "Certificate Name|Expiry"

# maguro
ssh maguro@192.168.70.30
sudo systemctl list-timers --all | grep -E "supermicro|mdadm|raid"
cat /proc/mdstat | head -10
df -h /srv/storage
sudo certbot certificates 2>/dev/null | grep -E "Certificate Name|Expiry"

# 1. メンテナンスモード相当 (nginx で 503 を返す等)
# 2. 最新バックアップ確認
LATEST=$(ls -t /mnt/data/backup/wp/katuocloud_wp/*.sql.gz | head -1)
echo "復元元: $LATEST"

# 3. DB リストア
zcat $LATEST | mysql -uroot -p*** katuocloud_wp

# 4. wp-content (uploads / themes / plugins) は別途復旧
#    (rsync ベース、 オフサイト未実装)

# 5. 動作確認
curl -sI https://katuocloud.com/ | head -5

ssh maguro@192.168.70.30

# 1. メンテナンスモード ON
sudo docker exec -u www-data nextcloud-stack-app-1 php occ maintenance:mode --on

# 2. 最新バックアップ確認
LATEST=$(ls -td /srv/storage/backup/nextcloud/202* | head -1)
echo "復元元: $LATEST"

# 3. DB リストア
sudo docker exec -i nextcloud-stack-db-1 \
  mariadb -u root -p*** nextcloud < $LATEST/nextcloud_db.sql

# 4. config.php
sudo docker cp $LATEST/config.php nextcloud-stack-app-1:/home/xs273132/wanchance.com/public_html/config/

# 5. custom_apps
sudo docker exec nextcloud-stack-app-1 rm -rf /home/xs273132/wanchance.com/public_html/custom_apps/*
sudo docker cp $LATEST/custom_apps/. nextcloud-stack-app-1:/home/xs273132/wanchance.com/public_html/custom_apps/

# 6. ユーザーデータ復元 (時間がかかる)
sudo rsync -avz --delete \
  $LATEST/data/ \
  /srv/storage/nextcloud-data/

# 7. 権限
sudo docker exec nextcloud-stack-app-1 chown -R www-data:www-data /home/xs273132/wanchance.com/public_html

# 8. メンテナンスモード OFF
sudo docker exec -u www-data nextcloud-stack-app-1 php occ maintenance:mode --off

# 9. 動作確認
curl -sI https://cloud.k2-o.net/status.php | head -3

• 候補: Backblaze B2 / wasabi / S3 互換 (rclone 経由)
• 対象: WP DB 全期間 + NC DB + 重要 NC データ抜粋
• 頻度: 月次 (フル) + 日次 (DB 増分)
• 暗号化: client-side (gocryptfs / age) でアップロード前に暗号化