Microsoftは米国時間2020年6月24日、Apache Sparkのインデックスを作成する「Hyperspace」をOSS(オープンソースソフトウェア)として公開した。公式ブログによれば、Apache Sparkで扱うデータにインデックスを作成し、マルチユーザーコンカレンシーコントロールによるインデックス管理や、Apache Sparkによるインデックス活用機能を提供する。
Microsoftが7ノードのAzure E8 V3クラスターと1TBのデータ、Apache Spark 2.4を使用してTPCベンチマーク(Test-HおよびTest-DS)を実行したところ、Hyperspaceは個々のクエリパフォーマンスが最大11倍まで向上。全体的にはTest-Hで2倍、Test-DSで1.8倍の高速化を確認している。具体的な導入方法はクイックスタートガイドを参照してほしい。
阿久津良和(Cactus)
"インデックス" - Google ニュース
June 25, 2020 at 12:39PM
https://ift.tt/2VfQPz2
Apache Sparkのインデックスを作成するHyperspaceがOSS - マイナビニュース
"インデックス" - Google ニュース
https://ift.tt/2vnWR6n
Shoes Man Tutorial
Pos News Update
Meme Update
Korean Entertainment News
Japan News Update
No comments:
Post a Comment