Loading article…
DMOZ （またはDMoz 、ロゴではdmozと表記。以前のドメイン名directory.mozilla.orgに由来）は、ワールドワイドウェブのリンクを集めた多言語対応のオープンコンテンツディレクトリでした。このサイトと運営コミュニティは、オープンディレクトリプロジェクト（ODP ）としても知られていました。AOL（現在はYahoo! Inc.の一部）が所有していましたが、ボランティアの編集者コミュニティによって構築・維持されていました。
DMOZは、サイト一覧を整理するために階層的なオントロジー体系を採用した。類似のトピックに関する一覧はカテゴリにグループ化され、さらにそのカテゴリはより小さなカテゴリに分けられた。
DMOZは、AOLがプロジェクトのサポートを終了したため、2017年3月17日に閉鎖されました。[ 1 ] [ 2 ]その日、ウェブサイトは単一のランディングページとなり、DMOZの静的アーカイブへのリンクと、ディレクトリのリブランディングと再開の計画が議論されていたDMOZディスカッションフォーラムへのリンクが掲載されました。[ 2 ]
2017年9月現在 編集不可能なミラーは dmoztools.net で引き続き利用可能であり、[ 3 ] DMOZ URL は復活しないが、Curlieという名前のディレクトリの後継バージョンが提供されることが発表された。[ 4 ] [ 5 ] 2018 年までに、DMOZ、ODP、および Curlie は同義語とみなされるようになった。 [ 6 ] Curlie は、DMOZ の階層構造を使用して、2022 年までに十分に確立された。[ 7 ]
DMOZは、1998年にリッチ・スクレンタとボブ・トゥルーエルがサン・マイクロシステムズのエンジニアとして働いていた時に、米国でGnuHooとして設立されました。サン・マイクロシステムズでネットワークセキュリティ製品のマーケティング責任者を務めていたクリス・トールズも、ブリン・ドールとジェレミー・ウェノカーと共に、1998年にGnuhooの共同創設者として加わりました。スクレンタは、Unixシステム向けの人気のスレッド型Usenetニュースリーダーであるtinの祖先であるTASSを開発していました。Gnuhooディレクトリの当初のカテゴリ構造は、当時存在していたUsenetニュースグループの構造を大まかに参考にしていました。
Gnuhoo ディレクトリは 1998 年 6 月 5 日に公開されました。リチャード・ストールマンとフリー ソフトウェア財団が名前にGnuを使用することに異議を唱えた後、 GnuHoo はNewHooに変更されました。[ 8 ]その後、 Yahoo! が名前にHooを使用することに異議を唱え、 ZURLへの名前変更が提案されました。[ 9 ] ZURLに変更される前に、NewHoo は 1998 年 10 月にNetscape Communications Corporationに買収され、Open Directory Project になりました。Netscape は Open Directory データを Open Directory License の下で公開しました。Netscape はその後まもなくAOLに買収され、DMOZ は買収に含まれる資産の 1 つでした。
Netscapeが管理を引き継いだ時点で、Open Directory Projectには約4500人の編集者の貢献により約10万のURLがインデックス化されていました。1999年10月5日、DMOZによってインデックス化されたURLの数は100万に達しました。非公式の推定によると、2000年4月にはDMOZのURL数は160万に達し、Yahoo!ディレクトリのURL数を上回りました。[ 10 ] DMOZは、2000年8月14日に200万のURL、2001年11月18日に300万のリスト、2003年12月3日に400万のURLをインデックス化するというマイルストーンを達成しました。2013年4月現在、101万7500を超えるカテゴリに516万9995のサイトがリストされています。 2015年10月31日時点で、1,026,706のカテゴリに3,996,412のサイトが登録されていました。
2006 年 1 月、DMOZ はプロジェクトの開発状況を一般に知らせるためにオンライン レポートの公開を開始しました。最初のレポートは 2005 年を対象としていました。その後、2006 年 9 月まで月次レポートが発行されました。[ 11 ]これらのレポートは、ディレクトリのトップ ページで提供されている簡略化された統計よりも、ディレクトリの機能についてより深い洞察を与えました。トップ ページに記載されているリストとカテゴリの数には、「テスト」と「ブックマーク」カテゴリが含まれていましたが、これらはユーザーに提供されている RDF ダンプには含まれていませんでした。2006 年 8 月には、約 7330 人のアクティブな編集者がいました。[ 11 ] 2007 年 3 月 31 日時点で、75,151 人の編集者がディレクトリに貢献していました。 [ 12 ] 2013 年 4 月時点で、貢献している編集者の数は 97,584 人に達しました。[ 12 ]
2006 年 10 月 20 日、DMOZ のメイン サーバーが壊滅的な障害に見舞われ[ 13 ]、編集者は 2006 年 12 月 18 日までディレクトリの作業ができなくなりました。この期間中、ディレクトリの古いビルドが一般に公開されていました。2007 年 1 月 13 日、サイト提案およびリスト更新フォームが再び利用可能になりました。[ 14 ] 2007 年 1 月 26 日、RDF ダンプの週刊公開が再開されました。今後の障害を避けるため、それ以降、システムは 2 台の Intel ベースのサーバーの冗長構成で運用されています。[ 15 ]
このサイトのインターフェースは2016年に「DMOZ 3.0」という名称でアップグレードされたが、AOLは翌年、サイトを閉鎖した。
DMOZが広く知られるようになると、ボランティアによって編集され、Go.comとZealがスポンサーとなっている他の2つの主要なウェブディレクトリが登場したが、どちらも現在は閉鎖されている。これらのディレクトリは、コンテンツをオープンコンテンツとして配布するためのライセンスを付与していなかった。[ 16 ] [ 17 ]
大規模な編集者コミュニティを利用してオンラインコンテンツをコンパイルするというコンセプトは、他のタイプのプロジェクトにも成功裏に適用されています。DMOZ の編集モデルは、少なくとも他の 3 つのオープンコンテンツボランティアプロジェクトに直接影響を与えました。音楽サイトの MusicMoz、オープンコンテンツのレストランディレクトリである ChefMoz [ 18 ] 、および百科事典であるOpen Site [ 19 ]です。最後に、ラリー・サンガーによると、DMOZ は、 Wikipedia が発展したNupediaプロジェクトのインスピレーションの一部でした[ 20 ]。
Gnuhoo は、初期オントロジーの基本的な概要をUsenetから借用しました。1998 年に Rich Skrenta は、「私は長いグループのリストを取り、それを階層構造に手作業で編集しました」と述べています。[ 21 ]例えば、comp.ai.alife ニュースグループで扱われているトピックは、Computers/AI/Artificial_Life カテゴリで表されていました。元の区分は、Adult、Arts、Business、Computers、Games、Health、Home、News、Recreation、Reference、Regional、Science、Shopping、Society、Sports 、および「World」でした。これらの 16 の最上位カテゴリはそのまま残っていますが、第 2 位以下のカテゴリのオントロジーは徐々に進化してきました。重要な変更は、編集者間の議論によって開始され、合意に達したときに実装されます。
1998 年 7 月、ディレクトリにWorldというトップレベルカテゴリが追加され、多言語対応になりました。ディレクトリの残りの部分は英語のサイトのみを掲載しています。2005 年 5 月までに、75 言語が網羅されました。ディレクトリの非英語コンポーネントの成長率は、2002 年以降、英語コンポーネントよりも高くなっています。2003 年時点でディレクトリの英語コンポーネントがサイトの 75% 近くを占めていましたが、2005年 5 月時点ではWorldレベルが 150 万サイトを超え、ディレクトリの約 3 分の 1 を占めるまでに成長しました。非英語カテゴリのオントロジーは、言語の違いを反映した例外はよくありますが、概ね英語ディレクトリのオントロジーを反映しています。
最上位カテゴリのいくつかは独自の特性を持っています。アダルトカテゴリはディレクトリのホームページには表示されませんが、DMOZが提供するRDFダンプには完全に含まれています。ディレクトリの大部分は主にトピック別に分類されていますが、地域カテゴリは主に地域別に分類されています。このため、多くの人がDMOZを地域別とトピック別の2つの並行ディレクトリと見なしています。
2000年11月14日、DMOZ内に18歳未満の人を対象とした特別なディレクトリが作成されました。[ 22 ]この「子供とティーンエイジャー」エリアをメインディレクトリと区別する主な要素は次のとおりです。
2005年5月までに、DMOZのこのセクションには32,000件以上のサイト情報が掲載されていた。
2004年初頭から、サイト全体がUTF-8エンコーディングで運用されるようになりました。それ以前は、英語の言語カテゴリではISO 8859-1、その他の言語では言語固有の文字セットが使用されていました。RDFダンプは2000年初頭からUTF-8でエンコードされていました。
ディレクトリ一覧は編集者によって管理されていました。新規掲載に重点を置く編集者もいれば、既存掲載の維持管理に重点を置く編集者もおり、両方を行う編集者もいました。これには、スペルミスや文法ミスを修正するための個々の掲載情報の編集、リンク先のサイトのステータス監視などの作業が含まれていました。また、スパムや重複投稿を削除するために、サイト登録内容を精査する編集者もいました。
Robozillaは、DMOZに登録されているすべてのサイトのステータスをチェックするために作成されたWebクローラーでした。Robozillaは定期的に、移動または消失したと思われるサイトにフラグを立て、編集者がそれらのサイトをチェックして対応しました。このプロセスは、Webディレクトリにおけるリンク切れを減らすという、DMOZ設立当初からの目標の一つを達成する上で非常に重要でした。実行後まもなく、エラーがマークされたサイトは自動的に未レビューキューに移動され、編集者は時間のあるときにそれらを調査することができました。
DMOZの人気と、それが検索エンジンのランキングに与える影響（PageRankを参照）により、DMOZに掲載された登録期限切れのドメインはドメインハイジャックの標的となった。この問題に対処するため、期限切れのドメインを定期的にディレクトリから削除する措置が取られた。
DMOZへの企業からの資金提供やスタッフは時間とともに減少したが、ボランティアはRobozillaを補完するリンクチェッカー、カテゴリクローラー、スペルチェッカー、最新のRDFダンプを直接選別する検索ツール、一部の編集機能を自動化するブックマークレット、Mozillaベースのアドオン[ 24 ]、未レビューのキューを処理するのに役立つツールなどの編集ツールを作成した。
DMOZデータはこれまで、オープンディレクトリライセンスの条件に基づいて提供されていましたが、そのライセンスでは、データを使用するすべてのWebページに特定のDMOZ帰属表示表を掲載する必要がありました。
オープンディレクトリライセンスには、データの利用者がDMOZサイトを継続的にチェックして更新を確認し、更新があった場合はデータまたはデータから派生した作品の使用および配布を中止しなければならないという要件も含まれていました。この制限を受けて、フリーソフトウェア財団はオープンディレクトリライセンスを非フリーな文書ライセンスと呼び、特定のバージョンを再配布する権利が永続的なものではなく、ライセンスの変更を確認する必要があることを理由に挙げました。
2011年、DMOZはひっそりとライセンスをクリエイティブ・コモンズ表示ライセンスに変更した。これはフリーライセンス（GPL互換）である。[ 25 ]
DMOZ データは、ダウンロード サーバーに公開される RDF のようなダンプを通じて利用可能であり、古いバージョンもそこにアーカイブされています。[ 26 ]新しいバージョンは通常、毎週生成されます。DMOZ エディターは、DMOZ RDF ダンプで発生する多くのバグをカタログ化しており、最も重要なのはファイル形式が RDF ではないことです。[ 27 ]そのため、現在、いわゆる RDF ダンプは有効なXMLですが、有効なRDFではないため、DMOZ RDF ダンプを処理するソフトウェアは、DMOZ データ用に特別に作成する必要があります。
DMOZ データは、Netscape Search、AOL Search、 Alexaなど、Web の大手検索エンジンやポータルのコアディレクトリサービスを支えています。Google Directory は、2011 年 7 月に閉鎖されるまで DMOZ の情報を使用していました。[ 28 ]
DMOZデータは他にも様々な用途に利用されている。例えば、2004年春にOvertureは、Yahoo!ディレクトリの検索結果とDMOZのタイトル、説明、カテゴリメタデータを組み合わせたサードパーティ向けの検索サービスを発表した。検索エンジンGigablastは2005年5月12日に、検索可能なDMOZのコピーを発表した。この技術により、特定のカテゴリに分類されたウェブサイトを検索することが可能になり、「事実上、瞬時に50万を超える垂直検索エンジンが作成される」。[ 29 ]
2006年9月8日現在 DMOZは、DMOZデータを使用している英語のWebサイトを313件、その他の言語のサイトを238件リストアップしました。[ 30 ]しかし、これらの数字は使用状況の全体像を反映していません。DMOZライセンスの条件に従わずにDMOZデータを使用しているサイトはリストに含まれていないためです。
DMOZの編集者になれる人には制限が設けられています。主な選考基準は、編集者候補者が編集能力を実証し、利益相反につながる可能性のある所属を明らかにし、その他、応募者がDMOZの文化や使命にどれだけ適合するかを示す編集者応募プロセスです。[ 31 ]応募の大部分は却下されますが、再応募は許可されており、場合によっては推奨されます。同じ基準がすべてのカテゴリとサブカテゴリの編集者に適用されます。
DMOZの編集モデルは階層型です。編集者になった当初は、通常、限られたカテゴリのみの編集権限しか持ちません。編集ガイドラインに準拠した基本的な編集スキルを習得すれば、より広範なカテゴリ、あるいはディレクトリ内の別のカテゴリでの編集権限の拡大を申請できます。編集者同士のメンターシップ関係が推奨されており、内部フォーラムは新規編集者が質問できる場となっています。
DMOZには独自の内部フォーラムがあり、その内容は主に編集トピックについて編集者同士がコミュニケーションをとるためのものです。フォーラムへのアクセスには編集者アカウントが必要で、編集者はフォーラムの内容を非公開に保つことが求められます。[ 32 ]
時間の経過とともに、上級編集者には、編集経験と編集コミュニティ内でのリーダーシップを反映した追加の権限が付与されることがあります。最も分かりやすいのは、ディレクトリ内のすべてのカテゴリにアクセスできる「編集」権限です。メタ権限では、編集者は、編集者申請のレビュー、カテゴリ機能の設定、外部および内部の不正使用報告の処理などのタスクを実行できます。「カテゴリ編集」権限は「編集」権限に似ていますが、単一のディレクトリカテゴリのみに適用されます。同様に、「カテゴリ変更」権限は「メタ」権限に似ていますが、単一のディレクトリカテゴリのみに適用されます。 「カテゴリ移動」権限では、カテゴリの移動や名前変更によってディレクトリのオントロジーを変更できます。これらの権限はすべて、管理者とスタッフによって付与され、通常はメタ編集者との話し合いを経て付与されます。
2004 年 8 月に、 adminと呼ばれる新しい権限レベルが導入されました。管理者ステータスは、スタッフによって長年メタを務めてきた数名に付与されました。管理者は、他のエディターに editall+ 権限を付与したり、ディレクトリ全体の新しいポリシーを承認したりする権限を持ち、これらの権限は以前は root (スタッフ) エディターにのみ与えられていました。[ 33 ]
DMOZ のすべての編集者は、DMOZ の編集ガイドラインを遵守することが求められます。これらのガイドラインは、編集の基本事項を説明しています。掲載できるサイトの種類と掲載できないサイトの種類、サイト一覧のタイトルと説明を大まかに一貫性のある方法で付ける方法、カテゴリの命名と構築に関する慣例、編集者が所有または何らかの形で関係しているサイトの編集に関する利益相反の制限、およびコミュニティ内の行動規範です。[ 34 ]これらのガイドラインに違反したことが判明した編集者は、スタッフまたは上級編集者から連絡を受けたり、編集権限が制限されたり、編集権限を完全に失ったりする場合があります。DMOZ ガイドラインは、編集者フォーラムでの議論の後、定期的に改訂されます。
DMOZのボランティア編集者が、競合サイトの誠実な努力を妨害する一方で、自分のウェブサイトを優遇しているという疑惑が長らく持ち上がっている。[ 35 ]このような疑惑はODPのスタッフとメタ編集者によって処理され、彼らは不正な編集行為に関与している疑いのあるボランティア編集者に対して懲戒処分を行う権限を持っている。[ 36 ] 2003年、DMOZは、一般の人々がオンラインフォームを使用して不正な編集者行為の疑惑を報告および追跡できる新しい公開不正報告システムを導入した。 [ 37 ] DMOZの欠点とされるものについての遠慮のない議論は、主流のウェブマスターのディスカッションフォーラムでより一般的になっている。サイトのポリシーでは、個々のサイトは1つのカテゴリにのみ提出されるべきであると示唆されているが、[ 38 ] 2007年10月現在、DMOZの創設者であるリッチ・スクレンタが運営するニュース集約サイトTopix.comには17,000件以上のリストがある。[ 39 ]
DMOZの歴史の初期には、スタッフはローリングストーンやCNNなどの選ばれた企業の代表者に編集権限を与え、自社のウェブサイトの個々のページをリストに追加できるようにした。[ 40 ]個々のCNN記事へのリンクは2004年まで追加されていたが、内容が古く維持する価値がないと判断されたため、2008年1月にディレクトリから完全に削除された。 [ 41 ]それ以降、編集ポリシーに関して同様の試みは行われていない。
DMOZをめぐる論争の根底には、その所有権と経営体制がある。GnuHooの初期のボランティアの中には、商業企業に騙されて参加させられたと感じている者もいた。[ 8 ]程度の差こそあれ、こうした不満は現在まで続いている。
DMOZ の発足当初は、DMOZ をどのように管理すべきかについてはほとんど検討されておらず、公式のフォーラム、ガイドライン、FAQ も存在しなかった。[ 42 ]
時が経つにつれ、ODP の編集者フォーラムは事実上の DMOZ 議会となり、DMOZ のスタッフメンバーがフォーラムに意見を投稿すると、それは公式の決定とみなされるようになった。[ 32 ]それでも、DMOZ のスタッフは信頼できる上級編集者に追加の編集権限を与え始め、新しい編集者申請を承認する権限も与えた。その結果、DMOZ の編集者の間で職務と権限の階層構造が生まれ、DMOZ の有給スタッフが DMOZ の方針と手順について最終決定権を持つようになった。[ 33 ] [ 43 ]
ワシントン DC の Touchstone Consulting Group の代表である Robert Keating 氏は、2004 年より AOL の DMOZ プログラム マネージャーとして勤務しました。彼は 1999 年に AOL に入社し、AOL Search のシニア エディター、その後 AOL の DMOZ プログラムのマネージング エディター、そして AOL プロダクト マーケティングのメディア エコシステム マネージャーを務めました。[ 44 ] [ 45 ]
DMOZの編集者削除手続きは、DMOZのスタッフとメタエディターによって監督されています。DMOZの公式編集ガイドラインによると、編集者は、不適切な編集行為や非礼な行為を行った場合に削除されます。ボランティア編集者に対する懲戒処分につながる可能性のある議論は、DMOZのスタッフとメタエディターのみがアクセスできる非公開フォーラムで行われます。議論の対象となっているボランティア編集者には、そのような手続きが行われているという通知は行われません。[ 43 ]この仕組みを好ましく思わない人もおり、代わりに米国の司法制度で行われる裁判のような議論を望んでいます。[ 46 ]
「編集者削除の説明」という記事の中で、DMOZのメタ編集者であるArlarsonは、「DMOZからの編集者削除に関する多くの混乱は、元編集者による虚偽または誤解を招く発言に起因している」と述べている。[ 47 ]
DMOZの機密保持ガイドラインでは、特定の編集者の削除理由について知っている立場にあるDMOZの現編集者が議論することを禁じているが[ 43 ] 、ガイドラインには考えられる理由のリストが記載されている[ 48 ] 。過去には、このため、削除されたDMOZ編集者が、なぜDMOZにログインして編集作業を行うことができないのか疑問に思う事態が発生した[ 49 ] [ 50 ] 。
元 DMOZ 編集者の David F. Prenatt Jr.、netesq 、およびThe Cunctatorという別名で知られる別の元編集者は、ポリシーの変更、特に DMOZ の著作権ポリシーについてスタッフと意見が合わなかったために解雇されたと主張している。彼らの主張によれば、スタッフは迷惑な編集者を解雇する手段として、非礼な行為を口実にしているという。[ 46 ] [ 51 ] [ 52 ]
DMOZの上級編集者は、個々のドメインに「警告」または「掲載禁止」の注記を付ける権限を持っていますが、編集者は特定のサイトの掲載を一方的にブロックする権限を持っていません。これらの注記が付いたサイトは引き続き掲載される可能性があり、場合によっては議論の後で注記が削除されることもあります。[ 53 ]
DMOZの階層構造に対する批判は2005年頃から現れ始めた。階層型ディレクトリは複雑すぎると考える人が多かった。Web 2.0の出現に伴い、フォークソノミーが登場し始め、一部の編集者は、フォークソノミー、ネットワーク、有向グラフの方が階層よりも「自然」で管理しやすいと提案した。[ 54 ] [ 55 ] [ 56 ]
ODPSearchソフトウェアは、オープンソースであり、Mozilla Public Licenseの下でライセンスされているIsearchの派生バージョンです。[ 57 ]
ODPエディターフォーラムは当初、独自のUltimate Bulletin Boardシステムをベースにしたソフトウェアで運用されていました。2003年6月、オープンソースのphpBBシステムに移行しました。2007年現在、これらのフォーラムはphpBBの改良版によって運営されています。
ODPで使用されているバグ追跡ソフトウェアはBugzilla、WebサーバーはApacheです。以前はSquidというWebプロキシサーバーも使用されていましたが、ストレージサーバーの再編成に伴い2007年8月に削除されました。これらのアプリケーションはすべてオープンソースです。
DMOZデータベース/編集ソフトウェアはクローズドソースである（ただし、リチャード・スクレンタは1998年6月にGNU一般公衆利用許諾書の下でライセンスすることを検討していると述べている）。このため、前述のGNUプロジェクトから批判があり、その多くはDMOZコンテンツのライセンスも批判していた。その後、コンテンツはGNUライセンスと互換性のあるクリエイティブ・コモンズ・ライセンスの下で公開された。[ 58 ]
そのため、DMOZに代わる選択肢を提供しようとする試みがいくつか行われてきた。これらの代替案は、志を同じくする編集者のコミュニティが、独自のオープンソース／オープンコンテンツのWebディレクトリを立ち上げ、維持することを可能にするものだ。
Chef MozはDMOZの派生サイトで、レストランのウェブサイトへのリンクを集めたオープンコンテンツディレクトリでした。このウェブサイトはボランティア編集者のコミュニティによって構築・維持され、Netscapeが所有していました。
Chef Mozは、親会社であるDMOZと同様に、サイト一覧を整理するために階層的なオントロジー構造を採用している。類似のトピックに関する一覧はカテゴリに分類され、さらにそのカテゴリはより小さなカテゴリに分けられる。
2011年2月17日、DMOZ管理者「lisagirl」はChef Mozが死亡したことを確認した。[ 59 ]
ChefMozは2000年の開設から2009年11月（編集者がサイトにログインできなくなった時点）まで、インターネット上で世界最大のレストランディレクトリへと成長しました。2000年以降にインデックス化されたレストランの総数は、次の表に記録されています。[ 60 ]