アパッチ カイリン

アパッチ カイリン

開発者	Apache Kylin 委員会
初回リリース	2015年6月10日; 9年前[1] ( 2015-06-10 )
安定リリース	3.x 3.1.3 / 2022年1月5日; 2年前[2] ( 2022-01-05 ) 4.x 4.0.1 / 2022年1月5日; 2年前[2] ( 2022-01-05 )
リポジトリ	Kylin リポジトリ
書かれた	ジャワ
ライセンス	Apache ライセンス 2.0
Webサイト	kylin.apache.org

Apache Kylin は、非常に大規模なデータセットをサポートするHadoopおよびAlluxio上でSQLインターフェイスと多次元分析 (OLAP)を提供するように設計されたオープン ソースの分散分析エンジンです。

もともとはeBayによって開発され、現在はApache Software Foundationのプロジェクトとなっている。^[3]

Kylinプロジェクトは2013年に中国上海のeBayの研究開発部門で開始されました。2014年10月、Kylin v0.6が「KylinOLAP」という名前でgithub.comでオープンソース化されました。^[4]

2014 年 11 月、Kylin は Apache Software Foundation インキュベータに参加しました。

2015年12月、Apache Kylinはトップレベルプロジェクトに昇格しました。^[3]

2016年3月、Apache Kylinの開発者らによってKyligence, Inc.が設立されました。^{[5] [6]} Kyligenceは、オンプレミスおよびクラウドベースのデータセット向けにApache Kylinをベースにした商用分析プラットフォームを提供しています。^[7]

Apache Kylinは、Apache Hadoop、Apache Hive、Apache HBase、Apache Parquet、Apache Calcite、Apache Sparkなどの技術をベースに構築されています。^[8]これらの技術により、Kylinは簡単に拡張でき、大量のデータロードに対応できます。^[9]

Kylinには以下のコアコンポーネントがあります: ^{[10] [8]}

• REST サーバー: ユーザーまたは API リクエストを受信して​​応答する
• メタデータ: 永続的かつ管理システム、特にキューブ メタデータ。
• クエリ エンジン: SQL クエリを実行プランに解析し、ストレージ エンジンと通信します。
• ストレージ エンジン: 基礎となるキューブ ストレージをプッシュダウンしてスキャンします (HBase のデフォルト)。
• ジョブ エンジン: MapReduce または Spark ジョブを生成して実行し、ソース データをキューブに組み込みます。

Apache Kylin は、多くの企業で実稼働の OLAP プラットフォームとして採用されています。代表的なユーザーには、eBay、Meituan、XiaoMi、NetEase、Beike、Yahoo! Japan などがあります。

Apache Kylinロードマップ（Kylinウェブサイト^[11]より）：

• Hadoop 3.0 サポート (Erasure Coding) - 完了 (v2.5)
• Spark Cube エンジンに完全対応 - 完了 (v2.5)
• より多くのデータソース（MySQL、Oracle、SparkSQL など）を接続 - 完了（v2.6）
• Lambda アーキテクチャによるリアルタイム分析 - 完了 (v3.0)
• クラウドネイティブ ストレージ (Parquet) - 進行中 (v4.0.0-alpha)
• キュービングなしのアドホッククエリ