Transcript 計算機更新の報告 - Subaru Telescope

計算機更新の報告
能丸淳一
ハワイ観測所
内容
 計算機更新の経緯
 新システムの概要と運用状況
 今後の予定
計算機更新の経緯
 Subaru Telescope Network (STN)
 First generation (STN-I) 1997-2002
 Second generation (STN-II) 2002-2008
 Third generation (STN-III) 2008-2013
 January 2007 – Backup of STARS data started.
 May 2007 – Conversion of summit data tapes started.
 May to August 2007 – Specification, bidding and
contract
 September to December 2007 - Detailed design and
installation
 February 2008 – Operation of the Hilo system started.
 June 2008 – Operation of the Summit system (SOSS
computers) started.
2
Subaru Users Meeting
January 16, 2009
Computers at Subaru and STN-III
Summit
Telescope Control
System
Hale Pohaku
VPN
Observation Control
System
Instrument Control
System
Engineering/Env/
Terminals/User WS
Terminals
MKOCN
Core Switch
Hub
GBE
VoIP Router
Internet
GBE
Telcom-T1
Mitaka
Hilo
Telemetry
(STS)
STARS
DA server
Simulator
MKOCN
Remote
GBE
Core Switch
User WS
Remote
Printers
Web/mail/DNS
/LDAP servers
VoIP Router
3
Subaru Users Meeting
OC-9
Core Switch
MASTARS
VoIP Router
January 16, 2009
今回の計算機更新のハイライト
 機能制限によるコストダウン
 SOSS(観測統合制御システム)を新ハードウエアに移
行
 STARS機能・ユーザ管理をその他のコンピュータ資源
から独立させた
4
Subaru Users Meeting
January 16, 2009
Hawaii Functions
5
STN-II
2003-2007
STN-III
2008-2012
STARS (Data Archive System)


High Performance Processing

Data Processing Workstations

One server
Summit Simulation (mxxxx)


Hilo Remote Observation (hxxxx)


Development & Testing Environment

Summit (SOSS)


Hilo – Summit Network


Hilo – Japan Network


Internet


Subaru Users Meeting
January 16, 2009
Mitaka Functions
6
STN2
2003-2007
STN3
2008-2012
Mitaka Remote Observation System


MASTARS


Data Analysis Terminals


Development & Testing Environment

Subaru Users Meeting
January 16, 2009
High Performance Processing
 Mauna Kea Weather Center used our supercomputer until February
25, 2008.
 MKWC continues weather forecast using the computers it procured.
7
Subaru Users Meeting
January 16, 2009
Downgrade?
 Due to a serious restructuring of the budget by NAOJ, and due to
NAOJ’s support of the emerging new projects which are not fully
supported by the Government, such as ALMA, our computer
system will be drastically downsized and functions for observation
and data archive must be prioritized.
 Deep cut of computer budget for entire NAOJ as well as for
Subaru.
 But, computation performance of each workstation is upgraded
thanks to advancement of computers.
8
Subaru Users Meeting
January 16, 2009
Power Consumption
 Comparison of power consumption of Hilo base facility between STN-II
(April 2007) and STN-III (April 2008)
 With the current rate, we are saving $35,000 per month for electricity.
300000
kWh per month
250000
200000
Computer/AC
150000
Work station/PC
Other
100000
50000
0
STN-II
9
Subaru Users Meeting
STN-III
January 16, 2009
We got a space…
STN-III equipment
10
Subaru Users Meeting
STN-II equipment that will go
January 16, 2009
Positive thinking…
 We have successfully decreased CO2 emission by
93 tons per month!!
11
Subaru Users Meeting
January 16, 2009
SOSS(観測統合制御システム)の移行
 Observation Control System
provides observers/ operators with
the high-level interface for
observation control.
 One important function is to store,
back up and transfer observation
data. Data security is assured by the
8.7TB RAID and the Ultrium 3 tape
library with 28TB of total capacity.
 STN-III SOSS (Subaru Observation
Software System) is based on STN-II
SOSS.
 The major changes of STN-III SOSS
from STN-II are user management
using LDAP and software tunings to
run on Solaris 10.
12
Subaru Users Meeting
Hardware
• Fujitsu PRIMEPOWER 250
• Two SPARC64V CPU + 4GB of RAM
• Sun Ultra 45 employs
• Two UltraSparc IIIi CPU + 4GB of
RAM
January 16, 2009
STARS機能・ユーザ管理をその他の
コンピュータ資源から独立させた
SOSS
STARS 1.4
他システムとは独立のユーザ管理(LDAP
サーバ)
旧g-wsのような観測所の他の計算機資源
への依存なし
STARSとMASTARSのアカウントの共通化
メール/Web/DAサーバ
13
Subaru Users Meeting
January 16, 2009
Comparison of STARS data flow
between STN-II and STN-III
STARS new version has its own copy area = STN
account is not necessary to copy data from STARS.
 STARS new version needs one less copy of files.

STN2
Data copy
by STARS
PetaSite
Tape Library
Data copy by user
(ftp)
Data copy
by STARS
STARS Server w/
staging disk (RAID)
Scratch area
under STN
STARS Server w/ RAID
Data analysis on
g-ws, etc.
Users
Download by
user (http wget)
Data copy
by STARS
STN3
Mailing tapes upon request
Users
Scratch area
under STARS
Mailing tapes upon request
14
Subaru Users Meeting
January 16, 2009
運用状況
 2008年の計算機の移行後、ほぼダウンタイムなしで
運用中。
 トラブルに対してはできるだけ速やかに対応している。
 観測に関わるトラブルについては24/7で対応するが、
それ以外は翌ビジネス日に対応する。
15
Subaru Users Meeting
January 16, 2009
今後の予定
 STARSの更新
 HSC対応
 Gen2対応
 山頂・ドームネットワークの更新
 次期計算機システムの構想
16
Subaru Users Meeting
January 16, 2009
STARSの更新
 さらなるコスト削減 – 内製化とオープンソースの採用
 新しいハードウエア・OSへの対応
 ユーザのニーズにあった機能の追加と、それによる運用
の効率化
 データアーカイブ相互の役割分担・機能を整理し、必要な
機能の実現に資源を集中
STARS
MASTARS
VO
 HSC対応 – 大量に生成されるデータ(300GB/night?)をサ
ポートするシステム
 次期計算機リプレイス(2013年)の設計に間に合うように
設計・製作・運用開始
17
Subaru Users Meeting
January 16, 2009
今後の予定
 HSC対応
 大量データをサポート – ソフトウエアの更新、データハ
ンドリングの見直し、ネットワークの増強
 Gen2対応
 ネットワーク、ユーザ管理のサポート
 観測装置との接続インタフェース
 山頂・ドームネットワークの更新
 古いネットワーク機器(100Base-T, 10Base-T)を更新
 次期計算機システムの構想
 レンタル？買い取り？, etc.
18
Subaru Users Meeting
January 16, 2009
まとめ
 2008年の計算機移行後、新システムは順調に稼働
している。
 新観測装置が生成する大量データに対応したシステ
ムの設計・更新が必要である。
 老朽化したハードウエアやソフトウエアの更新を継続
的に実施する。
 システムの維持が可能であるという条件で、さらなる
コストダウンを追求する。
19
Subaru Users Meeting
January 16, 2009