データコモンズ

データコモンズ
	Data Commons のクエリの結果
創設者	ラマナサン・V・グハ
主要人物	プレム・ラマスワミ（データコモンズ責任者）
親	グーグル
メールアドレス	データコモンズ
発売	2018年5月; 6年前

データコモンズは、 Google ^[2]が作成したオープンソースプラットフォーム^[1]であり、経済、科学、その他の公開データセットを統合したオープンナレッジグラフを提供します。 ^[3]RDF ^[4]RSS、Schema.org ^[5]などのWeb標準の作成者であるRamanathan V. Guhaがこのプロジェクトを設立し、^[6]現在はPrem Ramaswamiが主導しています。^[7]

データコモンズのウェブサイトは、2018年5月に立ち上げられ、国際ファクトチェックネットワークの複数のファクトチェッカーによってSchema.orgの「ClaimReview」形式で公開されたファクトチェックデータで構成される最初のデータセットが含まれていました。^[8]^{[9] Googleは、}国連（UN）などのパートナーと協力してリポジトリを作成しており、^[2]これには、米国国勢調査、世界銀行、米国労働統計局、^[10]Wikipedia、米国海洋大気庁、連邦捜査局のデータも含まれています。^[11]

このサービスは2019年に拡張され、主に統計的なオープンデータセットから生成されたRDFスタイルのナレッジグラフが含まれるようになりました。このサービスは2019年に幅広いユーザー向けに発表されました。^[12] 2020年には、米国以外のデータセットのカバレッジが改善され、バイオインフォマティクスとコロナウイルスのカバレッジも拡大しました。^{[13] 2023年には、}大規模言語モデルを搭載した自然言語フロントエンドでサービスが再開されました。^[2]また、持続可能な開発目標データを備えた国連データポータルのバックエンドとしても開始されました。^[14]

特徴

データ・コモンズは、リンクト・データやナレッジグラフの取り組みで一般的であるよりも、統計データに重点を置いています。地理、人口統計、天気、不動産などのデータが他のカテゴリとともに含まれており、 ^[3]米国の州、選挙区、都市のほか、生物標本、発電所、 DNA要素百科事典（ENCODE）プロジェクトによるヒトゲノムの要素も記述されています。^[11]データは、それぞれが独自の来歴を持つことができるセマンティックトリプルとして表現されます。 ^{[3]さまざまな公開データセットからの統計的観察をエンティティ指向で統合することに重点を置いています。 W3C}SPARQLクエリ言語のサブセットをサポートしていますが、^[15]API ^[16]には、データサイエンス、統計、データ視覚化向けのツール（ Pandasデータフレームインターフェースなど）も含まれています。

Data Commons は統合型であり、多様なデータセットのホスティングプラットフォームを提供するのではなく、データセットが提供する情報の多くを 1 つのデータグラフに統合しようとします。

テクノロジー

Data Commonsはグラフデータモデルに基づいて構築されています。グラフにはブラウザインターフェースといくつかのAPI ^[3]^[11]からアクセスでき、データを読み込むことで拡張されます（通常はCSVとMCFベースのテンプレート）。^[17]グラフにはGoogle検索の自然言語クエリでアクセスできます。^[18] datacommons.orgグラフを定義するために使用されるデータ語彙はSchema.orgに基づいています。^[3]特に、Schema.orgの用語StatisticalPopulation ^[19] とObservation ^[20]は、datacommonsのようなユースケースをサポートするためにSchema.orgに提案されました。^[21]

このプロジェクトのソフトウェアはApache 2ライセンスの下でGitHubで入手可能である。^[22]

参考文献

^ 「Custom Data Commons」。Docs - Data Commons 。 2024年7月16日閲覧。
^ abc 「Data CommonsはAIを使用して、世界の公共データをよりアクセスしやすく役立つものにします」。Google 。 2023年9月13日。 2024年7月16日閲覧。
^ abcde フェンゼル、ディーター;シムシェク、ウムトチャン。アンジェル、ケビン。ファーマン、エルウィン。カール、エリアス。パナシウク、オレクサンドラ。トマ、イオアン。ウンブリッヒ、ユルゲン。 Wahler、Alexander (2020)、「 Introduction: What Is a Knowledge Graph?」、Knowledge Graphs、Cham: Springer International Publishing、pp. 1–10、doi :10.1007/978-3-030-37439-6_1、ISBN 978-3-030-37438-9, S2CID 213620389 , 2020-10-16取得
^ Guns, Raf (2013). 「セマンティックウェブの起源をたどる」アメリカ情報科学技術学会誌. 64 (10): 2173–2181. doi :10.1002/asi.22907. hdl : 10067/1111170151162165141 .
^ Funke, Daniel (2017年12月7日). 「このウェブサイトは、関連するファクトチェックを見つけるのに役立ちます。そして、それを作ったのは17歳の若者です」。ポインター。 2024年7月16日閲覧。
^ Guha, Ramanathan V. (2020年10月15日). 「Data Commons、Google 検索でアクセス可能に」. docs.datacommons.org . 2020年10月16日閲覧。
^ O'Donnell, James (2024年9月12日). 「Googleの新しいツールにより、大規模な言語モデルが応答をファクトチェックできる」. MITテクノロジーレビュー. 2024年9月17日閲覧。
^ 「ファクトチェック」。datacommons.org。2019年3月29日。 2020年10月14日閲覧。
^ Jiang, Shan; Baumgartner, Simon; Ittycheriah, Abe; Yu, Cong (2020-04-20). 「ファクトチェックのファクタリング: ファクトチェック記事からの構造化情報抽出」。Webカンファレンス 2020 の議事録。WWW '20。台北、台湾: ACM。pp. 1592–1603。doi : 10.1145 / 3366423.3380231。ISBN 978-1-4503-7023-3. S2CID 215882520。
^ Raghavan, Prabhakar (2020-10-15). 「AI が Google の役に立つ仕組み」. Google . 2020-10-16閲覧。
^ abc Sheth, Amit; Padhee, Swati; Gyrard, Amelie; Sheth, Amit (2019-07-01). 「ナレッジグラフとナレッジネットワーク：概要」. IEEEインターネットコンピューティング. 23 (4): 67–75. arXiv : 2003.03623 . doi :10.1109/MIC.2019.2928449. ISSN 1089-7801. S2CID 204820800.
^ Luong, Daphne; Chou, Charina (2019年3月5日). 「オープンデータを責任を持って共有するために私たちの役割を果たす」. The Keyword . 2020年10月14日閲覧。
^ Ramasubramanian、Sowmya (2020 年 9 月 21 日)。「Google のオープンソースデータを使って新型コロナウイルス感染症の影響を研究」。ヒンドゥー教。2020 年10 月 14 日に取得。
^ マニイカ、ジェームズ（2023年9月19日）。「データとAIを使用して国連グローバル目標の進捗状況を追跡する」Google 。 2024年7月22日閲覧。
^ 「SPARQL を使用して Data Commons Knowledge Graph をクエリする」。datacommons.org 。2020年10 月 14 日閲覧。
^ 「概要」. datacommons.org . 2020年10月14日閲覧。
^ 「データコモンズへの貢献 - データセットの追加」。datacommons.org。データコモンズ。
^ Guha, Ramanathan V. (2020年10月15日). 「Data Commons、Google 検索でアクセス可能に」. docs.datacommons.org . 2020年10月16日閲覧。
^ 「StatisticalPopulation type at Schema.org」。schema.org 。 2020年10月14日閲覧。
^ 「Schema.orgのObservation type」。schema.org 。 2020年10月14日閲覧。
^ 「集計統計データの表現に関する提案」。GitHub – Schema.org リポジトリ。2019 年 6 月 25 日。2020年10 月 14 日閲覧。
^ "datacommons.org GitHub". GitHub。

外部リンク

公式サイト
GitHub リポジトリ

[1] 「Custom Data Commons」。Docs - Data Commons 。 2024年7月16日閲覧。

[Google_0923-2] 「Data CommonsはAIを使用して、世界の公共データをよりアクセスしやすく役立つものにします」。Google 。 2023年9月13日。 2024年7月16日閲覧。

[:0-3] フェンゼル、ディーター;シムシェク、ウムトチャン。アンジェル、ケビン。ファーマン、エルウィン。カール、エリアス。パナシウク、オレクサンドラ。トマ、イオアン。ウンブリッヒ、ユルゲン。 Wahler、Alexander (2020)、「 Introduction: What Is a Knowledge Graph?」、Knowledge Graphs、Cham: Springer International Publishing、pp. 1–10、doi :10.1007/978-3-030-37439-6_1、ISBN 978-3-030-37438-9, S2CID 213620389 , 2020-10-16取得

[4] Guns, Raf (2013). 「セマンティックウェブの起源をたどる」アメリカ情報科学技術学会誌. 64 (10): 2173–2181. doi :10.1002/asi.22907. hdl : 10067/1111170151162165141 .

[5] Funke, Daniel (2017年12月7日). 「このウェブサイトは、関連するファクトチェックを見つけるのに役立ちます。そして、それを作ったのは17歳の若者です」。ポインター。 2024年7月16日閲覧。

[6] Guha, Ramanathan V. (2020年10月15日). 「Data Commons、Google 検索でアクセス可能に」. docs.datacommons.org . 2020年10月16日閲覧。

[7] O'Donnell, James (2024年9月12日). 「Googleの新しいツールにより、大規模な言語モデルが応答をファクトチェックできる」. MITテクノロジーレビュー. 2024年9月17日閲覧。

[8] 「ファクトチェック」。datacommons.org。2019年3月29日。 2020年10月14日閲覧。

[9] Jiang, Shan; Baumgartner, Simon; Ittycheriah, Abe; Yu, Cong (2020-04-20). 「ファクトチェックのファクタリング: ファクトチェック記事からの構造化情報抽出」。Webカンファレンス 2020 の議事録。WWW '20。台北、台湾: ACM。pp. 1592–1603。doi : 10.1145 / 3366423.3380231。ISBN 978-1-4503-7023-3. S2CID 215882520。

[10] Raghavan, Prabhakar (2020-10-15). 「AI が Google の役に立つ仕組み」. Google . 2020-10-16閲覧。

[:1-11] Sheth, Amit; Padhee, Swati; Gyrard, Amelie; Sheth, Amit (2019-07-01). 「ナレッジグラフとナレッジネットワーク：概要」. IEEEインターネットコンピューティング. 23 (4): 67–75. arXiv : 2003.03623 . doi :10.1109/MIC.2019.2928449. ISSN 1089-7801. S2CID 204820800.

[12] Luong, Daphne; Chou, Charina (2019年3月5日). 「オープンデータを責任を持って共有するために私たちの役割を果たす」. The Keyword . 2020年10月14日閲覧。

[13] Ramasubramanian、Sowmya (2020 年 9 月 21 日)。「Google のオープンソースデータを使って新型コロナウイルス感染症の影響を研究」。ヒンドゥー教。2020 年10 月 14 日に取得。

[14] マニイカ、ジェームズ（2023年9月19日）。「データとAIを使用して国連グローバル目標の進捗状況を追跡する」Google 。 2024年7月22日閲覧。

[15] 「SPARQL を使用して Data Commons Knowledge Graph をクエリする」。datacommons.org 。2020年10 月 14 日閲覧。

[16] 「概要」. datacommons.org . 2020年10月14日閲覧。

[17] 「データコモンズへの貢献 - データセットの追加」。datacommons.org。データコモンズ。

[18] Guha, Ramanathan V. (2020年10月15日). 「Data Commons、Google 検索でアクセス可能に」. docs.datacommons.org . 2020年10月16日閲覧。

[19] 「StatisticalPopulation type at Schema.org」。schema.org 。 2020年10月14日閲覧。

[20] 「Schema.orgのObservation type」。schema.org 。 2020年10月14日閲覧。

[21] 「集計統計データの表現に関する提案」。GitHub – Schema.org リポジトリ。2019 年 6 月 25 日。2020年10 月 14 日閲覧。

[22] "datacommons.org GitHub". GitHub。