Loading article…
| 開発者 | Apache ソフトウェア財団 |
|---|---|
| 初回リリース | 2009年6月1日 |
| 最終リリース | 1.4.7 / 2017年12月6日 |
| リポジトリ | Sqoop リポジトリ |
| 書かれた | ジャワ |
| オペレーティング·システム | クロスプラットフォーム |
| タイプ | データ管理 |
| ライセンス | Apache ライセンス 2.0 |
| Webサイト | Apache の |
SqoopはリレーショナルデータベースとHadoop間でデータを転送するためのコマンドラインインターフェースアプリケーションです。[1]
Apache Sqoopプロジェクトは2021年6月に廃止され、Apache Atticに移行されました。[2]
説明
Sqoop は、単一のテーブルまたは自由形式のSQL クエリの増分ロードをサポートするほか、保存されたジョブもサポートします。保存されたジョブは、最後のインポート以降にデータベースに加えられた更新をインポートするために複数回実行できます。インポートは、HiveまたはHBaseのテーブルを作成するためにも使用できます。[3]エクスポートは、Hadoop からリレーショナル データベースにデータを入れるために使用できます。Sqoop の名前は「SQL-to-Hadoop」に由来しています。[4] Sqoop は、2012 年 3 月に トップレベルのApacheプロジェクトになりました。[5]
Informaticaはバージョン10.1から Sqoopベースのコネクタを提供しています。Pentahoはバージョン4.5以降のETLスイートPentaho Data IntegrationでオープンソースのSqoopベースのコネクタステップであるSqoop Import [6]とSqoop Export [7]を提供しています。 [8] MicrosoftはSqoopベースのコネクタを使用して、Microsoft SQL ServerデータベースからHadoopにデータを転送しています。[9] Couchbase, Inc.もSqoopを介してCouchbase Server -Hadoopコネクタを提供しています。 [10]
参照
参考文献
- ^ 「Hadoop: Apache Sqoop」。2012年9月8日閲覧。
- ^ 「Sqoop を Attic に移動する」。mail-archives.apache.org 。2021年 6 月 27 日閲覧。
- ^ 「Apache Sqoop - 概要」 。2012年9 月 8 日閲覧。
- ^ 「Sqoop の紹介」 。2019年1 月 1 日閲覧。
- ^ 「Apache Sqoop がインキュベーターを卒業」 。2012年9 月 8 日閲覧。
- ^ 「Sqoop Import」。Pentaho。2015-12-10。2015-12-10にオリジナルからアーカイブ。2015-12-10に取得。Sqoop
Import ジョブを使用すると、Apache Sqoop を使用してリレーショナル データベースから Hadoop Distributed File System (HDFS) にデータをインポートできます。
- ^ 「Sqoop エクスポート」。Pentaho。2015年12 月 10 日。2015 年 12 月 10 日にオリジナルからアーカイブ。2015年 12 月 10 日に取得。Sqoop
エクスポート ジョブを使用すると、Apache Sqoop を使用して Hadoop から RDBMS にデータをエクスポートできます。
- ^ 「ビッグデータ分析ベンダー Pentaho が Cloudera との緊密な統合を発表。ビジュアル インターフェースを拡張して Hadoop Sqoop と Oozie に対応」。データベース トレンドとアプリケーション (dbta.com)。2012 年 7 月 27 日。2015 年 12 月 8 日にオリジナルからアーカイブ。2015年 12 月 8 日に取得。Pentaho
の Business Analytics 4.5 は、Cloudera の最新リリースである Cloudera Enterprise 4.0 および CDH4 で認定されました。Pentaho はまた、ビジュアル デザイン スタジオの機能が Hadoop の Sqoop および Oozie コンポーネントに拡張されたことも発表しました。
- ^ 「Microsoft SQL Server Connector for Apache Hadoop」。Microsoft。2012年9 月 8 日閲覧。
- ^ 「Couchbase Hadoop Connector」。2012年8月25日時点のオリジナルよりアーカイブ。2012年9月8日閲覧。
文献
- White, Tom (2010)。「第 15 章: Sqoop」。Hadoop : 決定版ガイド(第 2 版)。O'Reilly Media。pp . 477–495。ISBN 978-1-449-38973-4。
外部リンク
- 公式サイト
- Sqoop ウィキ
- Sqoop ユーザー メーリング リスト アーカイブ
