2018/9/21 JVOの研究開発 国際連携と全体進捗 国立天文台　&　総合研究大学院大学 　　　 大石雅寿 2004/03/23

Presentation on theme: "2018/9/21 JVOの研究開発 国際連携と全体進捗 国立天文台　&　総合研究大学院大学 　　　 大石雅寿 2004/03/23"— Presentation transcript:

1 国立天文台 & 総合研究大学院大学 大石雅寿 masatoshi.ohishi@nao.ac.jp
2018/9/21 JVOの研究開発 国際連携と全体進捗 国立天文台　&　総合研究大学院大学 　　　 大石雅寿 2004/03/23 2004年 天文学会春季年会 V01a

2 Virtual Telescope/Observatory
Digital Universeを観測し，そのデータを 解析・処理することにより天文学的知見を生み出す抽象化された観測装置 いつでも，どこからでも，天候などに左右されずに観測することができる 2004/03/23 2004年 天文学会春季年会 V01a

3 世界のVOプロジェクト NVO (USA), AVO (EU), AstroGrid (UK)
Germany, Canada, Russia, Australia India, China, Italy, France, Hungary, Korea JAPAN VOを連携する標準方式の策定グループ →　International Virtual Observatory Alliance 　 　　　　　　　　　　(IVOA) 2004/03/23 2004年 天文学会春季年会 V01a

4 Working Groups in IVOA Registry : 計算資源のメタデータ形式 VOtable : VOの出力標準形式
VOQL : 連携DBの標準検索言語 （日本がまとめ役） フォーマットとしてXMLを採用 – マシン間の通信に適する UCD : Unified Column Description – 個別DBで内容は同じだが名称が異なるカラム名を統一的に扱う Data model : DB内のデータ記述法を標準化 Executive Committee were held twice 2004/03/23 2004年 天文学会春季年会 V01a

5 Interoperability Meetings
1年に2回，世界のVO関係者が集合 各WG毎にface-to-faceで議論し，標準化を議論 2003 May – Cambridge (UK) 2003 Oct – Strasbourg (France) 2004 May – Boston (US) 2004/03/23 2004年 天文学会春季年会 V01a

6 JVO Query Language(1) Catalog Query
2004/03/23 2004年 天文学会春季年会 V01a

7 SkyQL & ADQL JVOQL has been adopted as one of the basis for SkyQL (standard query language in IVOA) XML description of SkyQL = ADQL Astronomical Data Query Language 2004/03/23 2004年 天文学会春季年会 V01a

8 Select t. b, b. from Tab t, Bob b Where Avg(b. dd) < 4
Select t.b, b.* from Tab t, Bob b Where Avg(b.dd) < 4.56 order by b.dd <?xml version="1.0" encoding="utf-8" ?> <Select xmlns:xsd=" xmlns:xsi=" xmlns=" <SelectionList>   <Column Table="t" Name="b" />   <Column Table="b" Name="*" /> </SelectionList> <From>   <Table Name="Tab" Alias="t" />   <Table Name="Bob" Alias="b" /> </From> <Where> <Compare Comparison="<"> <Function>   <Aggregate>AVG</Aggregate>   <Column Table="b" Name="dd" />   </Function> <Atom>   <Real>4.56</Real>   </Atom>   </Compare> </Where> <OrderBy> <Item>   <Column Table="b" Name="dd" />   </Item> </OrderBy> 2004/03/23 2004年 天文学会春季年会 V01a

9 Resource Meta Data Identity metadata curation metadata
2018/9/21 Identity metadata curation metadata service metadata content metadata column metadata 2004/03/23 2004年 天文学会春季年会 V01a Catalog、Table Resourceはcolumn metadata 以外を持つ。 Column Resource はすべての metadata　をもてる。(省略化）

10 世界のVOの動向 太陽観測データのVO接続 UK, US等で具体的に検討中 日本はどうする? 理論シミュレーションDBのVO接続
　　日本はどうする? 理論シミュレーションDBのVO接続 　　シミュレーションと観測の対比をVO上で 　　行う 　　シミュレーションデータの標準フォーマット?? 2004/03/23 2004年 天文学会春季年会 V01a

11 Grid 技術の標準化 Global Grid Forum http://www.ggf.org/
OGSA (Open Grid Service Architecture)の仕様策定等 Research Groups : アプリからの要求を出す Astro-RG : 世界のVO関係からの要求を取りまとめる (Co-Chairs – UK & Japan) 2004/03/23 2004年 天文学会春季年会 V01a

12 Virtual Observatory → Common Infrastructure for Astronomy
2004/03/23 2004年 天文学会春季年会 V01a

13 Prototype1の問題点 Globus Tool Kit2は，認証等の際のオーバーヘッドが大きすぎる (GRAMの仕様) →
　　→　 　NMI (NSF Middleware Initiative)を導入し，認証時間を短縮し，かつ，GTK2のコードを変更してpolling intervalを短くし，オーバーヘッドを半分以下に短縮 2004/03/23 2004年 天文学会春季年会 V01a

14 JVOプロトタイプ2の開発方針 分散基盤 Globus Toolkit Ver.3 への移行 データへのアクセス方式 GT３のGRAM／
2018/9/21 分散基盤 Globus　Toolkit　Ver.3 への移行 データへのアクセス方式 GT３のGRAM／ GRIDサービス 利用者ごと機能 ①利用者管理の試作 ②データ保存　　　　　 メタデータ 登録情報（メタデータ） の管理、検索方式 解析処理 解析処理連携の検討 2004/03/23 2004年 天文学会春季年会 V01a

15 JSP JSP JSP JSP JSP Servlet Registry （XMLDB） ユーザーインターフェイス JVOシステム部
ユーザ登録 ユーザ認証 JVOQLエディタ リソースファインダによるDB検索 UCDファインダー 天体名レゾルバー 実行状況表示 VOTable Viewer Plotter 画像データ Viewer スペクトルデータ Viewer 複数カタログの重ね合わせプロット 異なる波長画像の重ね合わせ表示 シンプル解析機能 天体検出（Sextractor） HyperZ 画像演算 Photometry 特殊解析機能 重力レンズ 銀河ダスト 化学組成の進化 解析 interface ユーザ認証 検索 interface データ表示 JSP JSP JSP リソースファインダーによるDB検索　（白） JSP JSP DBナビゲータ Servlet JVOシステム部 検索指示 (JVOQL) 解析実行状況 状態確認 検索実行状況 DBメタデータ検索 解析指示 状態確認 検索文 (XPath) 検索結果 (XML) コントローラー JB コントローラー JB Grid サービス JVOQL Parsed JVOQL スケジューラ JB GSI-SFSによるデータ転送 JVOQLパーサ JB 観測指示書 Registry （XMLDB） Parsed JVOQL, 実績 GSI-SFSによるデータ転送 エクゼキュータ JB スケジューラ JB 観測指示書 実績 OAI-PMH エクゼキュータ JB 検索命令 SOAPによる 結果渡し 検索命令 SOAPによる 結果渡し 検索命令 SOAPによる 結果渡し DB・解析部 天文DB Grid サービス OAI-PMH メタDB 天文DB Grid サービス OAI-PMH メタDB ユーザDB Grid サービス OAI-PMH メタDB OAI-PMH Grid サービス GridFTP GridFTP 2004/03/23 2004年 天文学会春季年会 V01a

16 Resource Meta Data Identity metadata curation metadata
2018/9/21 Identity metadata curation metadata service metadata content metadata column metadata 2004/03/23 2004年 天文学会春季年会 V01a Catalog、Table Resourceはcolumn metadata 以外を持つ。 Column Resource はすべての metadata　をもてる。(省略化）

17 プロトタイプ2動作開始 プロト1に比べて，圧倒的に高速（各タスク起動時間は約1／100程度に） 理由：
　　　×GRAM　　◎Grid-Service ◎Kareareaの高速検索 スペクトルデータの検索可能に 詳細：田中他(V02a) デモ：本田他(V03c) サイエンス：白崎他(V04b) 解析パイプライン（野辺山）：立松他(V05b) 2004/03/23 2004年 天文学会春季年会 V01a

18 Road Map 2003年度 Prototype 2の開発 → 実用に向けたコンポーネントの開発 2004年度 実用システムの開発開始
　　　→　実用に向けたコンポーネントの開発 2004年度　実用システムの開発開始 　　年度後半??　　　試用開始 　　世界のVOとの接続試験 試験運用＆機能向上 　　　　　　宇宙研DBやMASTARS等の接続 2007　ALMA部分運用への対応を目指す 2004/03/23 2004年 天文学会春季年会 V01a

19 日本初の赤外線天文専用衛星 2004/03/23 2004年 天文学会春季年会 V01a

20 Collaborators NAOJ Mizumoto Yasuda Shirasaki Tanaka Honda
Ochanomizu U. Masunaga Fujitsu Ltd. Monzen Kawarai Ishihara Yanaka Yamaguchi Ishida Saito Abe Tsutsumi SEC Ltd. Morita Nakamoto Kobayashi Yoshida Ken Miura 2004/03/23 2004年 天文学会春季年会 V01a

21 http://www.ivoa.net/ Web Pages http://jvo.nao.ac.jp/ 2004/03/23
2004年 天文学会春季年会 V01a