ストレージの最新動向 ITソリューション塾・第23期 2016年11月9日.

Slides:



Advertisements
Similar presentations
ストレージの最新動向 IT ソリューション塾・第 21 期 2016 年 3 月 17 日. 2.
Advertisements

Linuxを組み込んだマイコンによる 遠隔監視システムの開発
The Enterprise-class Monitoring Solution for Everyone
データベースとストレージ の最新動向 12.JUN.2014.
, all rights reserved by NetCommerce & applied marketing
情報検索概説II 第8回 パソコン組み立てと記憶装置 1999/11/25.
計算機工学III オペレーティングシステム #14 ファイル: より進んだファイルシステム 2006/07/21 津邑 公暁
CPU、記憶装置について 情報機器工学 2015年4月20日 Ⅳ限目.
Ibaraki Univ. Dept of Electrical & Electronic Eng.
最新ファイルの提供を保証する代理FTPサーバの開発
NORWAY ENGLAND AMERICA FRANCE
SaaS (Software as a Service)
ストレージの最新動向 ITソリューション塾・第22期 2016年6月21日.
~補助記憶装置~  主記憶装置に記憶されるデータは,パソコンの電源を切ると記憶内容が消えてしまう。また,容量にも限界があるので,補助記憶装置にデータを記憶させる。補助記憶装置はパソコンの電源を切っても記憶内容は消えない。補助記憶装置の内容は主記憶装置上で利用することができる。 電源OFF 電源OFF.
分散コンピューティング環境上の Webリンク収集システムの実装
メモリのあれこれ 神戸大学 大学院 理学研究科 島津 通.
複数のコンピュータ(ノード)を一群にまとめて、信頼性や処理性能の向上を実現するシステム
別紙2:利用料金(税別) 今回リリースする機能 利用料金 備考 初期料金 月額上限料金 分課金(概算) ライセンス データベース
神奈川大学大学院工学研究科 電気電子情報工学専攻
Sarah Reese セールス・イネーブルメント・スペシャリスト
垂直統合システム / Converged System
データベースとストレージ の最新動向 12.MAR.2015.
, all rights reserved by NetCommerce & applied marketing
ネットワークの基礎技術.
第6章 トランザクション管理 6.1 トランザクションの概念 6.2 同時実行制御 6.3 障害回復.
シネックスインフォテック Microsoft Azure 相談センター
ストレージの最新動向 ITソリューション塾・第24期 2017年3月15日.
マイクロソフト株式会社 SAP/Microsoft コンピテンスセンター
拡張ボリューム 搭載NASのご紹介。 + の悩みを解決する データ管理 筐体台数の増加 全体の50% ディスク管理方法に見る
MPIによる行列積計算 情報論理工学研究室 渡邉伊織 情報論理工学研究室 渡邉伊織です。
明星大学 情報学科 2010年度後期     コンピュータ設計論  
メモリとHDD.
中堅・中小企業様、部門・ワークグループに最適なNAS
MPIによるwavからmp3圧縮の検証 情報論理工学研究室 04‐1‐47‐200 木村 惇一.
All IP Computer Architecture
Riakデータベース on SoftLayer
製品情報 Windows Server 2003のサポート終了をむかえ、ファイルサーバーの入れ替えを検討されていらっしゃる方も多いのではないでしょうか?既存のファイルサーバーをいきなりクラウド化するとインターネット回線の影響で、エクセルやワードのようなサイズの小さなファイルでさえ、開くまでに時間がかかってしまうことがあります。
序章 第2節 教育機器とコンピュータ 1 パーソナルコンピュータ
データベースとストレージの最新動向 ITソリューション塾・福岡 2017年8月21日.
NASのアクセス履歴を記録・検索できる! マイナンバー制度対応のファイルサーバー(NAS)ログ管理ソフト
新たなバックアップソリューション「クローン機能」はここがスゴイ 新たなバックアップ方法「クローン機能」なら全て解決!
2009年度卒業論文発表 CDNコンテンツサーバの動的負荷分散
FPGAでSATAを実現 SATAのニーズの高まりとFPGA
ERPとグローバル展開 © , all rights reserved by NetCommerce & applied marketing.
ストレージの最新動向 ITソリューション塾・第20期 2015年11月10日.
新たなバックアップソリューション「クローン機能」はここがスゴイ 新たなバックアップ方法「クローン機能」なら全て解決!
VM専用仮想メモリとの連携による VMマイグレーションの高速化
IaaS型クラウドにおける インスタンス構成の動的最適化手法
ユーザ毎にカスタマイズ可能な Webアプリケーションの 効率の良い実装方法
データベースとストレージの最新動向 ITソリューション塾・第28期 2017年6月20日.
仮想メモリを用いた VMマイグレーションの高速化
仮想計算機を用いたサーバ統合に おける高速なリブートリカバリ
Ibaraki Univ. Dept of Electrical & Electronic Eng.
私の立場 OSカーネルを手がけるエンジニア 大阪市立大学 創造都市研究科の学生
オープンソース開発支援のための ソースコード及びメールの履歴対応表示システム
1億円 45%OFF HP Enterprise Data Warehouse Appliance 2012年6月まで
ストレージの最新動向 ITソリューション塾・第25期 2017年6月20日.
オブジェクトストレージ(SDS)と ネットワークの仮想化技術(SDN)の 活用方法について
x550 デビューキャンペーン(2017/12/28出荷分まで) 3つの特長で10/40G導入を推進!この機会に是非ご検討下さい
コンピュータの仕組み 〜ハードウェア〜 1E15M009-3 伊藤佳樹 1E15M035-2 柴田将馬 1E15M061-1 花岡沙紀
第5回 メモリ管理(2) オーバレイ方式 論理アドレスとプログラムの再配置 静的再配置と動的再配置 仮想記憶とメモリ階層 セグメンテーション
ISO23950による分散検索の課題と その解決案に関する検討
ユビキタスコンピューティング環境 を構築するための 小型無線ネットワークコンピュータの開発
SpectreとMeltdown ITソリューション塾・第27期 2018年3月20日 株式会社アプライド・マーケティング 大越 章司
MPIを用いた並列処理計算 情報論理工学研究室 金久 英之
データの圧縮.
Sicoob 堅牢、安全で、効率のよい IBM テクノロジーが急速な事業の成長をサポート
情報ネットワーク 岡村耕二.
Ibaraki Univ. Dept of Electrical & Electronic Eng.
Presentation transcript:

ストレージの最新動向 ITソリューション塾・第23期 2016年11月9日

データ量の爆発的増大 Data Lake アナリティクス BI AI ETL 全てのデータを収集 DWH 業務アプリケーション Webアプリケーション IoTアプリケーション ETL 解析に必要なデータ を選別・抽出 全てのデータを収集 Data Lake 非構造化データ/オブジェクトストア DWH Data Warehous Data Lake(Big Data)を解析し 規則や構造、関係性を探索 アナリティクス BI Business Intelligence AI Artificial Intelligence

アーキテクチャーから見るストレージの違い 性能 スケールアップ・アーキテクチャ 性能 スケールアウト・アーキテクチャ コントローラー性能が ボトルネック コントローラー CTL CTL CTL CTL CTL CTL コントローラー CTL CTL CTL CTL コントローラー CTL CTL 容量 容量 密結合型スケールアウトアーキテクチャー サーバー・アクセス 共有メモリー CTL CTL CTL CTL CTL CTL 「基礎から学べる!最新ストレージ技術と選択ガイド」を参考に作成 http://itpro.nikkeibp.co.jp/atclact/active/14/100700086/

アーキテクチャーから見るストレージの違い  要件/方式 スケールアップ スケールアウト 密結合型 疎結合型 拡張方式 ディスクドライブの増設 ノード単位の増設(*1) 容量と性能が同時に拡張可能 ノード単位の増設 容量と性能が同時に拡張可能 性能上限 コントローラ性能が上限 ノード数の上限 性能特性 レスポンスタイムが短い ランダムI/Oに強い レスポンスタイムが長い シーケンシャルI/Oに強い コントローラー 障害時影響 50%の性能低下 1/Nの性能低下 (N=コントローラ数) 1/Nの性能低下 (N=ノード数) 容量規模 中規模(目安:数百テラバイト) 大規模の対応が可能 適用シーン データベース、仮想環境、ファイルサーバー、グループウェアなど多目的での利用が可能 ミッションクリティカル基幹業務 大規模ファイルサーバー、デジタルメディアコンテンツ保管、ビデオサーベランスなど 「基礎から学べる!最新ストレージ技術と選択ガイド」を参考に作成 http://itpro.nikkeibp.co.jp/atclact/active/14/100700086/

サーバー・ベースド・ストレージ 専用デバイスによる共有ストレージ サーバーベースド・ストレージ 高価だが高速 安価で低速だが拡張性が高い 論理 ストレージ デバイス ストレージ・アレイなどの専用デバイスで 共有ストレージを実現する 汎用サーバーのストレージを束ねて ひとつの共有ストレージとして扱う 高価だが高速 安価で低速だが拡張性が高い 「基礎から学べる!最新ストレージ技術と選択ガイド」を参考に作成 http://itpro.nikkeibp.co.jp/atclact/active/14/100700086/

アクセス方式の違いから見るストレージ ブロック・ストレージ ファイル・ストレージ オブジェクト・ストレージ ストレージの拡張性:〇 ブロック単位 ファイル単位 オブジェクト単位 FC,FCoE,iSCSI NFS,CIFS,SMB HTTP/HTTPS 高速ネットワーク (SANなど) IPネットワーク IPネットワーク ID ID ID ID ストレージの拡張性:〇 レスポンスタイム :◎ 主な用途 : データベース 仮想環境 基幹業務システムなど ストレージの拡張性:〇 レスポンスタイム :〇 主な用途 : ファイルサーバー(NAS) 仮想環境 データアーカイブなど ストレージの拡張性:◎ レスポンスタイム :△ 主な用途 : デジタルコンテンツ保存 オンライン・ストレージ データアーカイブなど 「基礎から学べる!最新ストレージ技術と選択ガイド」を参考に作成 http://itpro.nikkeibp.co.jp/atclact/active/14/100700086/

HTTP/HTTPSでオブジェクトをストレージへ送信 アクセス方式の違いから見るストレージ ブロック・ストレージ ファイル・ストレージ オブジェクト・ストレージ ファイル・システム 認証サーバー介し権限を確認 プロトコルの違いを変換 HTTP/HTTPSでオブジェクトをストレージへ送信 ファイル名 ファイルサイズ 作成日付 患者名 患者ID 診療科 主治医など オブジェクトID メタデータ ブロック単位(4KB/8KB)で区分し、ファイル・システムでファイルとブロックを紐付け。 ローカル・ストレージと同様に高速でアクセスできることを目的とする。 ブロック・ストレージに比べオーバーヘッドが大きくアクセスに時間はかかる。 複数ユーザーとのファイル共有(NAS)を目的に使われる。 ノード追加により容易に容量を追加でき、非常に拡張性が高い。階層構造がないため制限なく無数のコンテンツを保管することができる。変更頻度が少ないデータや膨大なデータ保管に向いている。アーカイブ(長期保存)には最適。 「基礎から学べる!最新ストレージ技術と選択ガイド」を参考に作成 http://itpro.nikkeibp.co.jp/atclact/active/14/100700086/ 7

HDDの出荷台数は減少傾向、一方で容量は今後とも拡大する。 ストレージの市場動向(1) HDDの出荷台数は減少傾向、一方で容量は今後とも拡大する。

ストレージの市場動向(2)

ストレージ性能の推移 T byte 10 容量  倍 9 8 7 6 20 5 4 速度 4 倍 15000 rpm 3 2 アクセス性能 1.2倍 1 3600 rpm 5MB 1980 2005 2006 2007 2008 2009 2010 2011 2012 2013 2014

CPUとストレージのパフォーマンス パフォーマンス・ギャップ CPU性能×100倍 フラッシュ・ストレージ ストレージ性能×1.2倍 100 T byte 100 パフォーマンス・ギャップ 90 CPU性能×100倍 80 70 両者のギャップを埋める手段として注目される フラッシュ・ストレージ 60 50 40 30 20 ストレージ性能×1.2倍 10 2005 2006 2007 2008 2009 2010 2011 2012 2013 2014

フラッシュ・ストレージ/今後の展開とその分類 高速IO性能 フラッシュ・ストレージ サーバーサイド・フラッシュ (PCIeフラッシュ) サーバー内のPCIe(PCI Express)ポートに直接接続する、ボード型のフラッシュストレージ製品。「ホストフラッシュ」と呼ばれることも。サーバー内のPCIeポートに直接接続するので、他のサーバーとの共用はできない。 大容量化の限界 高速化の限界 低消費電力化の限界 オールフラッシュ・ストレージ・アレイ HDD互換・PC ストレージアレイ内の記憶装置が、すべてフラッシュメモリで構成されたフラッシュストレージ製品。 ハイブリッド・ストレージ・アレイ ストレージアレイ内の記憶装置が、フラッシュメモリとHDDの混在状態で構成されたフラッシュストレージ製品。HDDと混在することでオールフラッシュアレイよりもデータ容量を増やせる。 長期・大容量保存

フラッシュ・ストレージ/性能比較と用途 仮想化 (サーバーやデスクトップ) データ分析 デーベース処理 メモリー速度に近いIO速度 SRAM キャッシュ DRAM ミリ秒(10-3) マイクロ秒(10-6) ナノ秒(10-9) 3桁の違い 百IOPS 数万IOPS 数百万IOPS メモリー速度に近いIO速度 仮想化 (サーバーやデスクトップ) データ分析 デーベース処理

高速接続: PCIe,InfiniBand,FCなど フラッシュ・ストレージ/提供される価値 大量アクセス+高速応答 フラッシュストレージによる対応 メモリー フラッシュ・ストレージ アレイ DBサーバー集約により台数の大幅削減 ソフトウェア・ライセンスの削減 メンテナンスの簡素化 高速接続: PCIe,InfiniBand,FCなど CPU 現状のHDDストレージによる対応 CPU メモリー 分散キャッシュ シャーディング 大規模分散処理 (NoSQL) HDD HDD HDD HDD HDD HDD HDD HDD HDD HDD サーバー台数増加 ライセンス増加 保守負担増大 HDD HDD HDD HDD HDD HDD HDD HDD HDD HDD

フラッシュ・ストレージ/ 普及の背景 大量アクセス+高速応答 フラッシュの容量当たり単価が高くHDDとの差がなかなか縮まらなかった。 フラッシュストレージの特性に起因する信頼性が問題視された。 HDDのIF(ATA,SATAなど)が普及しフラッシュの特性を活かした仕組みの普及が阻害されていた。 エラー訂正や障害対策の機能がソフトウェア、ファームウェアで対応できるようになり、書き換え回数上限や耐障害性の懸念がほぼ払拭 コンシューマー市場での普及により容量当たり単価が大きく低下(普及の基準とされていた「1GB当たり単価1ドル未満」を2012年に達成) 業務アプリケーションやDBのインメモリー技術などストレージ以外でも進化 高速 (HDDの1000倍) 高密度 (設置面積) 低消費電力

Oracle TimeTen, Altibase インメモリー・データベース SAP HANA, IBM solidDB Oracle TimeTen, Altibase ・・・ DRAMなどの揮発性メモリーの 一次記憶(主記憶装置)に データを保持・処理 揮発性メモリー(DRAM) DBMS データ スナップ ショット ログ データ更新 定期的 セーフ ポイント ハードディスクなどの不揮発性媒体である 二次記憶(ストレージ)にリアルタイムで データの永続化を行わない リセットや電源が切断されても ログとスナップショットからデータを復元 ソフトウェアとして提供される場合と アプライアンスとして提供される場合

デュアル・フォーマット・データベース データ データ OLTP OLAP リアルタイム統合データベース DBMS In-Memory DB 業務トランザクション処理 OLTP (Online Transaction Processing) 頻繁にデータを追加・更新 分析・レポーティング処理 OLAP (Online Analytic Processing) 大量にデータを検索・集計 列単位で処理 行単位で処理 列指向 データベース (DWH) 行指向 データベース (一般的なRDB) 揮発性メモリー(DRAM) DBMS データ In-Memory DB 自動同期 データ ストレージ Database 12c リアルタイム統合データベース 基幹業務(ERP)+分析業務(BI)