NICTサイエンスクラウドによる大規模シミュレーションデータ分散可視化処理

• 資料種別: 文書・図像類
• タイトル: NICTサイエンスクラウドによる大規模シミュレーションデータ分散可視化処理
• 著者・編者: 村田, 健史; 磯田, 総子; 渡邉, 英伸; 深沢, 圭一郎; 山本, 和憲; 建部, 修見; 田中, 昌宏; 木村, 映善; Murata, Ken T.; Isoda, Fusako; Watanabe, Hidenobu; Fukazawa, Keiichiro; Yamamoto, Kazunori; Tatebe, Osamu; Tanaka, Masahiro; Kimura, Eizen
• 著者標目: 村田, 健史; 磯田, 総子; 渡邉, 英伸; 深沢, 圭一郎; 山本, 和憲; 建部, 修見; 田中, 昌宏; 木村, 映善; Murata, Ken T.; Isoda, Fusako; Watanabe, Hidenobu; Fukazawa, Keiichiro; Yamamoto, Kazunori; Tatebe, Osamu; Tanaka, Masahiro; Kimura, Eizen
• 出版事項: 宇宙航空研究開発機構(JAXA)
• 出版年月日等: 2014-03-31
• 出版年（W3CDTF）: 2014-03-31
• 並列タイトル等: High Performance Visualization Processing of Large-Scale Computer Simulation Data via NICT Science Cloud
• タイトル（掲載誌）: 宇宙航空研究開発機構研究開発報告: 宇宙科学情報解析論文誌: 第3号 = JAXA Research and Development Report: Journal of Space Science Informatics Japan: Volume 3
• 巻号年月日等（掲載誌）: JAXA-RR-13-010
• 掲載巻: JAXA-RR-13-010
• 掲載ページ: 57-70
• ISSN（掲載誌）: ISSN : 1349-1113
• 本文の言語コード: jpn
• 件名標目: Science Cloud; Gfarm; Pwrake; Big data; Magnetospheric MHD simulation; I/O parallelization
• 対象利用者: 一般
• 一般注記: 現在，欧米や日本において，科学研究向けクラウドとしてサイエンスクラウドが提案され，システムや利活用についての議論が進められている．サイエンスクラウドはビッグデータ時代のデータ指向型科学研究基盤として提案されている．クラウド上でのビッグデータ処理では，CPU の並列分散化だけではなくネットワークやI/O の並列分散が重要である．本研究ではクラウド環境で高い計算効率を得るための基礎研究として，CPU およびI/O を同時に分散処理するシステムを提案する．8 コアを有する6 台のクラスタ計算機で基礎実験を行った結果，ノード内のプロセス数が少ない場合はほぼ100％の並列化効率が達成され，100 台を超える大規模クラスタ環境でも高いスケーラビリティーが予測された．一方，ノード内で複数プロセスが処理を行う場合にはディスクアクセスの輻輳が発生し，必ずしも高いスケーラビリティーを得ることができない．8 コアを有する6 台の計算サーバで最も高い並列化効率を得たのは6 プロセス並列の場合であり，高速化率は20.6 であった．今後は，同ノード内のI/O 処理を分散化することで，並列化効率をさらに向上させることが期待される．; Science cloud is a cloud system designed for scientific researches, and expected as a new infrastructure for big data sciences. Not only parallelization of CPU as in super-computers, but I/O and network throughput parallelization are crucial for the big data sciences. One of the typical structures of science cloud is a scalable cluster in which multiple clusters in a cloud are connected with high-speed network. In the present study, we examine performance of parallelization of both CPU and I/O in a cloud system as the first step to high performance scalable clusters. In case with few processes executed on each computational node (server), parallelization efficiency is almost 100%. This high efficiency is expected to maintain in larger-scale cluster systems such as those with 100 servers. On the condition of multi-processes on each node, the present parallelization does not show good performance due to the congestions of I/O. Parallelization efficiency (speed-up) is as low as 20.6%. New techniques of decentralization of I/O within each node are required in the next step.; 形態: カラー図版あり; Physical characteristics: Original contains color illustrations; 資料番号: AA0062302007; レポート番号: JAXA-RR-13-010
• 一次資料へのリンクURL: https://jaxa.repo.nii.ac.jp/?action=repository_action_common_download&item_id=1957&item_no=1&attribute_id=31&file_no=1
• オンライン閲覧公開範囲: 限定公開
• 連携機関・データベース: 国立情報学研究所 : 学術機関リポジトリデータベース（IRDB）（機関リポジトリ）; https://irdb.nii.ac.jp
• 提供元機関・データベース: 宇宙航空研究開発機構 : 宇宙航空研究開発機構リポジトリ