並列タイトル等Introduction of the Multi-Source Composer that compiles many huge tabular data on the network into one huge service tabular data
タイトル(掲載誌)宇宙航空研究開発機構研究開発報告: 宇宙科学情報解析論文誌: 第12号 = JAXA Research and Development Report: Journal of Space Science Informatics Japan: Volume 12
一般注記UNION やJOIN などで得られる表形式データは元の表形式データが持つ値だけからできている。そこでそれらの処理結果を、値を保持する実表形式データたちからの写像で作るアプローチが考えられる。このとき処理結果は値を持たない仮想表形式データとなる。その仮想表形式データの実態は写像を定義したスクリプトであり、写像が規則的であるほどスクリプトはコンパクトになる。この仮想表形式データはそれが巨大なデータであってもスクリプトをロードするだけでデータの表示ができ、そのスクリプトを渡すだけで授受が行える。また写像元の実表形式データがネットワーク上に分散していても構わないし、日次データ、週次データ、月次データのような仮想表形式データの階層を構成することもできる。そしてなにより仮想表形式データが全単射の条件を満たして作られていれば、その任意のカラムをリアルタイムにソート・検索・集計できるインデックスが自動的に付いている。すると貴重な表形式観測データをネットワーク上で様々に組み合わせ目的別の多種多様な表現形態で提供することが可能になり、それらの活用が飛躍的に進むことが期待できる。この実巨大表形式データと仮想巨大表形式データからなる写像のネットワークシステムをマルチソースコンポーザ(MSC)と呼び、本稿で紹介する。
The tabular data obtained by UNION, JOIN, etc. is made up of only the values that original tabular data have. Therefore, an approach to create the result of UNION, JOIN, etc. by mapping from the real tabular data that holds the values is considered. In this case, the processing results are virtual tabular data without values. The reality of the virtual tabular data is a script that defines the mapping, and the more regular the mapping, the more compact the script. This virtual tabular data, even if the data is huge, can be displayed by simply loading a script and can be exchanged by simply passing the script. It is also acceptable if the real tabular data from which the data is mapped is distributed on the network, and a hierarchy of virtual tabular data such as daily data, weekly data, and monthly data can be constructed also. Above all, if the virtual tabular data is created with all the conditions of bijection, it should automatically have an index that allows sorting, searching, and aggregation of any column in real time. This makes it possible to combine precious tabular observation data on the network in various ways and provide them in a wide variety of forms for each purpose, and is expected to dramatically advance their utilization. This network system of mappings consisting of real big tabular data and virtual big tabular data is called a multi-source composer (MSC) and is presented in this paper.
表題の誤記: Introduction of the Multi-Source Composer that compiles many huge tablular data on the network into one huge service tabular data
形態: カラー図版あり
The clerical error of title: Introduction of the Multi-Source Composer that compiles many huge tablular data on the network into one huge service tabular data
Physical characteristics: Original contains color illustrations
資料番号: AA2230028003
レポート番号: JAXA-RR-22-009
一次資料へのリンクURLhttps://jaxa.repo.nii.ac.jp/?action=repository_action_common_download&item_id=49186&item_no=1&attribute_id=31&file_no=1
連携機関・データベース国立情報学研究所 : 学術機関リポジトリデータベース(IRDB)(機関リポジトリ)
提供元機関・データベース宇宙航空研究開発機構 : 宇宙航空研究開発機構リポジトリ