History of EBUG勉強会/20060520_SAG (No. 8)

• History
• View the diff.
• View the diff current.
• View the source.
• Go to EBUG勉強会/20060520_SAG.
  • 1 (2006-05-06 (Sat) 23:02:40)
  • 2 (2006-05-06 (Sat) 23:03:32)
  • 3 (2006-05-07 (Sun) 10:57:08)
  • 4 (2006-05-07 (Sun) 15:28:49)
  • 5 (2006-05-15 (Mon) 14:20:16)
  • 6 (2006-05-15 (Mon) 16:38:24)
  • 7 (2006-05-15 (Mon) 23:29:06)
  • 8 (2006-05-16 (Tue) 12:12:52)
  • 9 (2006-05-16 (Tue) 12:38:35)
  • 10 (2006-05-16 (Tue) 23:14:35)
  • 11 (2006-05-17 (Wed) 02:46:37)
  • 12 (2006-05-18 (Thu) 08:48:51)
  • 13 (2006-05-20 (Sat) 06:56:56)
  • 14 (2006-05-20 (Sat) 14:43:52)
  • 15 (2006-05-21 (Sun) 18:45:45)
  • 16 (2006-05-21 (Sun) 18:45:45)

---

自作ツールでシステム管理†

主旨

システムの「常態」を知ろう。
... 異常を検知するためには、システムの通常の状態を知る → 一定期間にわたって測定を行い、傾向を把握。
... サーバ毎に特徴があり、特徴を把握
... 自作のツール / 一般のツールを組み合わせて使う。

SAGとは?†

System Activity Grapher ... 川俣の自作ツール

• 特徴
  • Perl script, Shell script, Gnuplot, NetPBM で構成
  • ロードアベレージ, プロセス生成回数, ネットワーク流量, 時刻同期, メモリ, ディスク使用量, ファン回転数, ケース内温度, etc...
  • データは、/proc/*, コマンド (sysctl, netstat, du ...)から取得 ... 一般ユーザ権限で動作
  • グラフ表示をカスタマイズできる ... gnuplotスクリプト
  • 伝送路は特に規定なし ... HTTPとかが手軽。scpとかでも可。
• 低いリソース消費 ... Linux/98 on 486/66MHz, 14MB mem, 320MB HDD
• 欠点
  • リアルタイム監視には向かない ... 毎時間更新
• 実装
  • 構成
    • データ取得 ..... 任意の間隔
    • データ集計 ..... パース + 集計 + グラフ集計
    • 日変わり処理 ... ローテート / キャッシュ再生成
  • 低プライオリティで動作 ... renice -15
  • 競合状態の排除 ... 同じタイミングでの動作は逐次実行される / ファイルローテート時の取得データ追加

運用例†

• LAN
  • pingscan, SAG
  • 内部サーバ
• DMZ
  • snort, ntop, SAG ... promiscモードで動作するソフトと併用するとトラフィック全体を計測できる
  • ntpd, SAG
• ISP
  • www, SAG

事例†

ルータトラブル†

• NTPのRTTが増大
• ネットワークの輻輳はなし
• 時刻誤差も
• ...原因は？

Squid Web Proxy Cacheのキャッシュ調整†

• オンメモリ・キャッシュの大きさは？
• ...スワップぎりぎりまで確保

スパム攻撃1†

• NTPのRTT増大
• 回線輻輳

スパム攻撃2†

• snortによる。「TCP port sweep / TCP port scan」増大

メールサーバ過負荷†

• 別図