Transcript 汎用データサーバ構想
汎用データサーバ構想 いつまで経っても仕事しない 高橋康人 クイズ！ • ep サーバ群のホスト名 – blue = ??? • 1stdns – orange = ??? • www – yellow = ??? • 2nddns – grey = ??? • mail – green = ??? • かつて epftp と呼ばれたサーバの悲しい悲しい物 語・・・ FTPサーバ • FTP(File Transfer Protocol) – もっとも初期からあるファイ ル転送用プロトコル – 詳しくは次回の INEX にて • FTPサーバの役割 – ファイルの配布 • オープン・クローズド問わず – オープンな FTP サーバへの ログイン • 慣例的に user ： anonymous, password : (メールアドレス) ミラーリングサーバ • メインサーバの負荷分散用の FTP サーバ – Debian の sources.list に載っているサーバなど epftp • ep サーバ群に属す るミラーリングサーバ • 配布パッケージ – ep サーバの構築に 関連するパッケージ – INEX で利用するパッ ケージ epftp で用いるソフトウェア • proftpd – ftp サーバデーモン • lftp – ファイルミラーリングコマンド – rsync より単純ゆえに高速 • ファイルのタイムスタンプのみに基づく差分アップデート 汎用データサーバ構想 • epftp サーバの形骸化 – 事実上ほとんど使われていなかった • 多機能化の試み – ミラーリングサーバ + ストレージサーバ • これらの機能を持つ新サーバの構築 ストレージサーバ • ≒オンラインの「ファイル置き場」 – 利用者に対して WWW よりも大容量なクォータを 割り当てる – 研究データの保存などに役立ててもらう • RAID の導入 – 大容量化と冗長性確保のため RAID • Redundant Arrays of Independent Disks – または RA Inexpensive D とも? • 複数ディスクの単一化 – 多数のディスクを仮想的に一つのディスクとして 認識させる • メリット – RAID レベルに応じた大容量化と冗長性の向上 RAID0 • 全ドライブに対して分散書き込み – ストライピングとも呼ばれる • メリット – 純粋な大容量化 – ドライブが増えるほど書き込み速度が上昇 • デメリット – 冗長性が皆無 RAID1 • 全ドライブに並列して書き込み – ミラーリングとも呼ばれる • メリット – 最高レベルの冗長性 • デメリット – 記憶領域は 1ディスク分のみ RAID5 • 1ディスク分に「パリティ」保存 • パリティ – データそのものではなく「他のデータとの関係」に関 する情報 • メリット – 冗長性と大容量化を 両立 • デメリット – 2つ以上ドライブが 破損するとアウト これまでの経過 • ～ 2009年4月 – FTPサーバ定常運用 • 2009年4月 – 再構築の際に FTP サーバ運用方法の見直し – 「ストレージサーバもやればいいんじゃね?」 – 馬場さん引き継ぎ、試行錯誤 • 2010年4月 – 高橋引き継ぎ • 2011年4月 – 林君引き継ぎ • 2011年7月 – ep サーバ群より除外、epnetfan 実技プロジェクトへ • 2012年3月 – 馬場さん卒業 • 2013年3月 – 林君卒業 • 現在に至る 試行と挫折 • lftp スクリプト作成 – 一から作成 – デッドリンク多数 • RAID 構築 – ソフトウェア RAID • 失敗：ソフトウェア RAID と RAID5 の相性? – ハードウェア RAID • 不安定：勝手にアンマウント、ラベル消失、 RAID カード仕様 上限 • モチベーション – あったら便利だけど無くてもさほど困らない・・・ 現状 • 必要な作業 – RAID の安定化 – lftp スクリプト再チェック – gate 導入 • 求む人材 – ストレージサーバがあると嬉しい人 参考 • RAIDの基礎知識：RAIDレベルを理解しよう (2/3) - ＠IT – http://www.atmarkit.co.jp/ait/articles/0102/27/news002_2.html • ASCII.jp：ハードディスクとRAIDの基礎を学ぼう (2/2)｜ゼロからはじ めるストレージ入門 – http://ascii.jp/elem/000/000/453/453971/index-2.html • lftpによるftp mirror（FTPミラー・ファイル同期） – rsyncを使わない 理由 « 【IT-rescue】 – http://memo.jj-net.jp/142 • rsyncとlftpを比較 - お天気SEの雑記帳 – http://d.hatena.ne.jp/nob-magnetman/20110206/1296986890 • EPnetFaN 座学 2009/12/18 新 FTP サーバ – http://www.ep.sci.hokudai.ac.jp/~epnetfan/zagaku/2009/1218/pub/