高速ネットワーク技術、スーパーコンピュータ関連の国際会議にて受賞 家庭用PCで超高速Webアクセス環境を実現するUsadaFoxを用い、 遠距離Webアクセス性能を1000倍高速化 東京大学データレゼボワール実験グループ.

Slides:



Advertisements
Similar presentations
基礎知識1 783. 電子メールの内容 電子メールとは・・・インターネットなどコン ピューターネットワークの末端同士が送受信する 手紙のこと。 CC ・・・電子メールを本来の宛名の他にも送信す る同報送信機能のこと。 BCC ・・・同報送信機能として CC と同様の機能で あるが、電子メールのヘッダに.
Advertisements

Linuxを組み込んだマイコンによる 遠隔監視システムの開発
MPIを用いたグラフの並列計算 情報論理工学研究室 藤本 涼一.
IIS 4.0で開発をするコツ Webアプリケーション構築.
インターネット構成法 最終課題 環境情報学部3年 平野大輔 環境情報学部3年 小原知博 環境情報学部3年 野崎沙織.
LoadMaster 2400 LoadMaster2400は、安心サポートと一緒に当社からお届けします。
ATLAS実験データ解析に向けた、長距離広帯域ネットワークにおけるデータ転送
前回の授業への質問 質問:プロトコルアナライザで測定できる範囲はどこまでか?
Webプロキシサーバにおける 動的資源管理方式の提案と実装
ファイルキャッシュを考慮したディスク監視のオフロード
コンピュータプラクティス I 再現性 水野嘉明
榮樂 英樹 LilyVM と仮想化技術 榮樂 英樹
第1回.
Windows Azure 仮想マシン 入門.
仮想化システムを用いて 複数のOSを動かす
KVMにおけるIDSオフロードのための仮想マシン監視機構
インターネット構成法 最終課題 ~ネットワークデザイン~.
別紙2:利用料金(税別) 今回リリースする機能 利用料金 備考 初期料金 月額上限料金 分課金(概算) ライセンス データベース
「コンピュータと情報システム」 07章 インターネットとセキュリティ
FPGAを用いたMG3用 インターフェース回路の解説
OSが乗っ取られた場合にも機能するファイルアクセス制御システム
発表の流れ 研究背景 マルチテナント型データセンタ 関連研究 IPマルチキャスト ユニキャスト変換手法 提案手法 性能評価.
インターネット メールサーバ DNSサーバ WWWサーバ ファイアウォール/プロキシサーバ クライアント.
心理学情報処理法Ⅰ コンピュータネットワーク概論.
ネストした仮想化を用いた VMの安全な帯域外リモート管理
サーバ構成と運用 ここから私林がサーバ構成と運用について話します.
スパコンとJLDG HEPの計算環境 HEPnet-J
Dell Storage NX430シリーズ 2017年1月27日受注分まで NX430
サスペンドした仮想マシンの オフラインアップデート
プロユースな先進スペックを、だれでも手軽に。
平成21年度「新世代ネットワークサービス基盤構築技術に関する研究開発 〜ネットワーク『見える化』の実現にむけて〜」の開発成果について
MPIによる行列積計算 情報論理工学研究室 渡邉伊織 情報論理工学研究室 渡邉伊織です。
Linux搭載4ベイNAS スモールオフィスや部門サーバーに最適! 法人向けRAID5/6対応
ギガビットネットワークに対応する ネットワークべンチマークテスト機の試作と ギガビットルータの性能評価
コンピュータとネットワークの利用 国際経営学科 牧野ゼミ3年 足立龍哉.
型付きアセンブリ言語を用いた安全なカーネル拡張
SAccessor : デスクトップPCのための安全なファイルアクセス制御システム
中堅・中小企業様、部門・ワークグループに最適なNAS
共生第二 解析&ファイルサーバー taro , pochi , hanako ,tama のご紹介
特定ユーザーのみが利用可能な仮想プライベート・ネットワーク
分散IDSの実行環境の分離 による安全性の向上
他のプロセスに あたえる影響が少ない 実行時ミラーリングシステム
VM専用仮想メモリとの連携による VMマイグレーションの高速化
IaaS型クラウドにおける インスタンス構成の動的最適化手法
仮想メモリを用いた VMマイグレーションの高速化
複数ホストに分割されたメモリを用いる仮想マシンの監視機構
仮想計算機を用いたサーバ統合に おける高速なリブートリカバリ
端末およびサービス透過的な 情報閲覧支援システムの構築
宇宙科学統合解析環境の構築とAstro-E2解析支援
未使用メモリに着目した 複数ホストにまたがる 仮想マシンの高速化
VMMのソフトウェア若化を考慮した クラスタ性能の比較
LoadMaster 5300 LoadMaster5300は、安心サポートと一緒に当社からお届けします。
仮想環境を用いた 侵入検知システムの安全な構成法
Peer-to-Peerシステムにおける動的な木構造の生成による検索の高速化
Linux の世界に 触れてみよう! 情報実験 第 3 回 (2005/10/21)
アクセス集中時の Webサーバの性能に対する OSの影響
平成21年度「新世代ネットワークサービス基盤構築技術に関する研究開発 〜ネットワーク『見える化』の実現にむけて〜」の開発成果について
仮想マシンと物理マシンを一元管理するための仮想AMT
LoadMaster 3600 LoadMaster3600は、安心サポートと一緒に当社からお届けします。
LoadMaster 2600 LoadMaster2600は、安心サポートと一緒に当社からお届けします。
ゼロコピー・マイグレーションを 用いた軽量なソフトウェア若化手法
ユビキタスコンピューティングの ための ハンドオーバー機能付きRMIの実装
クラスタリングを用いた ベイズ学習モデルを動的に更新する ソフトウェア障害検知手法
MPIを用いた並列処理計算 情報論理工学研究室 金久 英之
強制パススルー機構を用いた VMの安全な帯域外リモート管理
Uni Directional Link Routing 片方向通信路に於ける経路制御
特定ユーザーのみが利用可能な仮想プライベート・ネットワーク
東大素セ 松本浩,田中純一, 上田郁夫,坂本宏,真下哲郎
ソケットの拡張によるJava用分散ミドルウエアの高信頼化
強制パススルー機構を用いた VMの安全な帯域外リモート管理
Presentation transcript:

高速ネットワーク技術、スーパーコンピュータ関連の国際会議にて受賞 家庭用PCで超高速Webアクセス環境を実現するUsadaFoxを用い、 遠距離Webアクセス性能を1000倍高速化 東京大学データレゼボワール実験グループ

データレゼボワール開発の歴史 遠距離・超高速のディスク間データ共有システム 第5世代 – 1 CPU PC, 6 SSDで10Gbps 第1世代 – 26 サーバ, 26 ディスクで 500Mbps 第2世代 – 16 サーバ, 64 ディスクで 10Gbps 第3世代 – 8 サーバ, 32 ディスクで 10Gbps 第4世代 – 1 サーバ, 32 ディスクで 10Gbps 第5世代 – 1 CPU PC, 6 SSDで10Gbps 第5世代 2009 第4世代 2006 第1世代 2001 第2世代 2003 第3世代 2005

小型、安価、ローカルシステムと同じ使い方 第5世代データレゼボワール 私たちの夢のシステム(2001年) 誰もが10ギガビットを享受できるためのキーテクノロジー 小型、安価、ローカルシステムと同じ使い方 航空機の機内持ち込み荷物で運べる小ささ 普通のPCと同程度の価格 10ギガビットネットワークを1台でフルに活用 シェアード・ネットワークで使える安定性 1個のファイルから使え、1個のTCPストリームで通信 ファイルシステムとしてのインタフェース ウェブシステムとしてのインタフェース

ウェブインタフェース 超高速のウェブサービス実現 Apache サーバ (同じ小型PC上に実現、東京大学に設置) Firefox改造 ウェブブラウザ (ポートランドに設置) Linux OS, SSD(フラッシュディスク)を6個使用 (RAID 0) シングルTCPストリームを用いHttp プロトコルでデータ転送 ゼロコピー化した EXT3 ファイルシステム

データレゼボワール技術によるWebデータ転送 LFN Apache on normal Server Browser on normal PC : : ~1GB/s ~1GB/s

PCIe x8 マザーボード: ASUS Rampage II GENE (Micro ATX) SATA RAID 10 ギガビット ネットワーク Intel Core i7 940 DDR3 SDRAM 6GB 1333 MHz (8-8-8-20) PCIe x8 ネットワーク インタフェース Chelsio S310 Intel X58 マザーボード: ASUS Rampage II GENE (Micro ATX) Intel ICH10R ソフトウェア CentOS 5.3 linux-2.6.18-128.el5 EXT3 file system Apache FireFox Adaptec SATA RAID SSD ×6 Intel X25-E SATA RAID

ネットワーク経路 West Coast, US 西海岸、米国 Tokyo, Japan 東京、日本 Server (tama) Server (tama) the Univ. of Tokyo DR E600 DR E600 DR E600 DR E600 WIDE RX4 SCinet DR S7148SX Server (koro2) Server (koro3) NTT Otemachi T-LEX NI40G T-LEX NI40G NLR-FN Sunnyvalle JGN2plus GS4000 PacificWave Sunnyvalle PacificWave Los Angeles Tokyo, Japan 東京、日本 JGN2plus E300 Portland JGN2plus 10G TYO

SC09 ネットワーク・ダイアグラム 東京大学 サニーベール ポートランド koro2 Server T-LEX,東京 JGN2plus tama Server 東京大学 E600 DR Tokyo NLR Sunnyvale NLR FrameNet SCinet Portland サニーベール E600 DR Tokyo 6509 PWave Sunnyvale S7148SX DR Booth#759 Portland ポートランド RX-4 NEZU Tokyo PWave NI40G T-LEX Tokyo 6509 PWave LA koro2 Server T-LEX,東京 GS4K JGN2plus Tokyo E300 JGN2plus LA koro3 Server JGN2plus ロサンゼルス

用いた高速化技術 精密ペーシング技術 [Kamesawa+SC04] TCP通信最適化技術 (buffers, windows, 等) [Yoshino+SC08] Apache と Firefoxの改造 Apache の実装 不要なOptionを省略してビルド Firefox の実装 データ操作の最適化 メモリコピーの排除 Firefox内バッファサイズの最適化 I/O 最適化 mmap と madvice の利用 EXT3 を write backで使用 バックグラウンドで、頻繁なファイルキャッシュのフラッシュ

測定された性能(BWC公式測定)

本発表の意義 日本の超高速インターネット技術、インターネット利用技術の高さを世界に示した 10ギガビットのインターネットをパーソナルな環境で活用可能とした これまで、限られたスパコンセンターやネットワーク関連施設でしか活用できなかった 誰にでも遠距離・超高速データ転送が可能になった ファイルを1本のTCPストリームで送り、ウェブブラウザ経由のユーザインタフェースを用いる ローカルなデータアクセスと同じ環境を実現

今後の展開 UsadaFoxは、長距離・超高速インターネットを活用するツールとして、まだまだ荒削り 今後、システムとしての完成を目指す 長距離通信で優位性をもつシングルストリームTCP通信の特質を生かすウェブシステム構築 これまで得られなかったウェブシステムの実現により、コンピュータサイエンス分野や、大量データを扱うスーパーコンピューティング分野の発展に寄与したい