Yandex 検索

Yandex 検索

英語版ロゴ
サイトの種類	ウェブ検索エンジン
利用可能	多言語
設立	2010年5月; 14年前 （2010年5月）
所有者	ヤンデックス
作成者	アルカディ・ヴォロシュ アルカディ ・ボルコフスキー イリヤ ・セガロヴィッチ
メールアドレス	ヤンデックス
コマーシャル	はい
登録	オプション
現在の状況	アクティブ

Yandex Search（ロシア語：Яндекс）は、ロシアに拠点を置くYandex社が所有する検索エンジンです。LiveInternet  [ru; uk]によると、2015年1月、Yandex Searchはロシアの検索トラフィック全体の51.2%を占めました。^[1]

2024年2月、ヤンデックスNVはロシアに拠点を置く資産の大部分をロシアに拠点を置く投資家のコンソーシアムに売却すると発表した。^{[2] [3]} 2024年7月に売却が完了し、クレムリンは事業に対するコントロールを強化した。^{[4] [5]}

この検索技術は、 1,400 以上の都市でローカル検索結果を提供します。Yandex Search には、メインの Web インデックスと、ニュース、ショッピング、ブログ、画像、ビデオなどの専門情報リ​​ソースの両方からの結果を 1 ページに表示する「並列」検索機能もあります。

Yandex Searchはリアルタイムのクエリに応答し、最新ニュースや特定のトピックに関するTwitterの最新の投稿など、クエリに最新の情報が必要な場合を認識します。また、追加情報（スポーツの結果など）を提供するウィザード回答、スペルチェッカー、入力時にクエリを提案するオートコンプリート、Webページ上のマルウェアを検出するウイルス対策などの追加機能も備えています。^[6]

2010年5月、Yandexは非ロシア語検索のベータテストと改善のためのプラットフォームであるYandex.comを立ち上げました。 ^[7]

検索製品は、パソコン、携帯電話、タブレット、その他のデジタル デバイスからアクセスできます。Yandex は、Web 検索に加えて、幅広い専門検索サービスを提供しています。

2009年、Yandexは、検索結果の関連性を大幅に向上させる新しい機械学習手法であるMatrixNetを導入しました。これにより、Yandexの検索エンジンは、検索結果の関連性を判断する際に、非常に多くの要素を考慮できるようになります。^[8]

2010年に発表されたもう1つの技術、Spectrumは、暗黙のクエリを推測し、一致する検索結果を返すことができます。このシステムは、ユーザーの検索を自動的に分析し、個人名、映画、車などのオブジェクトを識別します。さまざまなユーザーの意図に対応する検索結果の割合は、これらの結果に対するユーザーの需要に基づいています。^[9]

2017年7月21日の最初のリリースでは、Braveウェブブラウザはデフォルトの検索エンジンの1つとしてYandexを搭載しています。^[10]

2022年3月、ロシアのウクライナ侵攻中に、YandexとMail.ruはMozilla Firefoxブラウザからオプションの検索プロバイダーとして削除されました。^[11]

検索エンジンは3つの主要コンポーネントで構成されています。^[12]

1. エージェントは検索ロボットです。ネットワークをバイパスし、ドキュメントをダウンロードして分析します。サイト分析中に新しいリンクが見つかった場合、そのリンクはロボットの Web アドレスのリストに追加されます。検索ロボットには次の種類があります。スパイダー- ユーザーのブラウザーのようにサイトをダウンロードします。クローラー - 既知のドキュメントの分析に基づいて、新しい、まだ未知のリンクを検出します。インデクサー-検出された Web ページを分析し、データをインデックスに追加します。多くの圧縮されたドキュメントは、ばらばらの部分に分割され、マークアップから削除されます。
2. インデックスは、検索エンジンのインデックス作成ロボットによってコンパイルされたデータベースです。ドキュメントはインデックス内で検索されます。
3. 検索エンジン。 ユーザーからの検索要求は、検索システムの負荷を分析した後、最も負荷の少ないサーバーに送信されます。^{[13] [14]}このような機会を提供するために、Yandexサーバーはクラスター化されています。次に、ユーザー要求は「Metapoisk」と呼ばれるプログラムによって処理されます。^[14] Metapoiskは、要求をリアルタイムで分析します。ユーザーの地理的位置を特定し、言語分析などを行います。プログラムは、要求が最も人気のあるカテゴリまたは最近定義されたカテゴリに属しているかどうかも判断します。このような要求の発行は、しばらくの間、メタ検索のメモリ（キャッシュ）に保存され、一致する場合は、以前に保存された結果が表示されます。^[14]要求がまれで、キャッシュに一致するものがない場合、システムはそれを基本検索プログラムにリダイレクトします。システムインデックスを分析します。システムインデックスも、異なる重複サーバーに分割されます（これにより、手順が高速化されます）。次に、受信した情報は再びメタ検索に送られ、データがランク付けされ、最終的な形式でユーザーに表示されます。^[13]

一般的に、Yandexは次のファイルタイプをインデックスします：^[15] html、pdf、rtf、doc、xls、ppt、docx、odt、odp、ods、odg、xlsx、pptx。

検索エンジンは、Shockwave Flashオブジェクト内のテキスト（テキストが画像自体に配置されていない場合）をインデックスすることもできます。これらの要素は、MIMEタイプを持ちapplication/x-shockwave-flash、拡張子が.swfのファイルである別のページとして転送されます^[16]

Yandexには「メイン」と「高速」の2つのスキャンロボットがあります。メインはインターネット全体を担当し、2つ目は頻繁に変更や更新が行われるサイト（ニュースサイトや通信社）をインデックスします。2010年に、「高速」ロボットはYandexのカリフォルニア部門とモスクワ部門が共同で開発した「オレンジ」と呼ばれる新しい技術を搭載しました。^[16]

2009年以来、Yandexはサイトマップ技術をサポートしています。^[16]

サーバーログでは、Yandexロボットは次のように表されます。^[17]

• Mozilla/5.0 (compatible; YandexBot/3.0)メインのインデックス作成ボットです。
• Mozilla/5.0 (compatible; YandexBot/3.0; MirrorDetector)- サイトミラーを検出するボット。同じコンテンツを持つサイトが複数ある場合、検索結果には 1 つだけが表示されます。
• Mozilla/5.0 (compatible; YandexImages/3.0)- Yandex 画像インデクサー
• Mozilla/5.0 (compatible; YandexVideo/3.0)- Yandex ビデオインデクサー
• Mozilla/5.0 (compatible; YandexMedia/3.0)- マルチメディアデータインデクサー
• Mozilla/5.0 (compatible; YandexBlogs/0.99; robot)投稿コメントをインデックスする検索ボットです。
• Mozilla/5.0 (compatible; YandexAddurl/2.0)- 「 URLを追加」フォームを通じてページをインデックスする検索ボットです。
• Mozilla/5.0 (compatible; YandexDirect/2.0; Dyatel)- Yandex Directをチェック
• Mozilla/5.0 (compatible; YandexMetrika/2.0)- Yandex Metrics インデクサー
• Mozilla/5.0 (compatible; YandexCatalog/3.0; Dyatel)- Yandexカタログをチェック
• Mozilla/5.0 (compatible; YandexNews/3.0)- Yandex ニュース インデクサー
• Mozilla/5.0 (compatible; YandexAntivirus/2.0)- Yandex アンチウイルス ボット

設定には以下の演算子が使用されます。

• ""- 正確な引用
• |- 単語の1つを検索する必要がある場合は、単語の間に入力します
• *- 単語が抜けている場合は単語の間に入力します
• site:- 特定のサイトを検索する
• date:- 日付で文書を検索します。例: 日付: 2007
• +- 文書内にある単語の前に入力します

Yandexは、クエリの元の「正確な形式」に加えて、さまざまなバリエーションや表現を自動的に検索します。^[18]

Yandex 検索はロシア語の形態論を考慮しているため、検索クエリ内の単語の形態に関係なく、すべての単語の形態に対して検索が実行されます。形態論分析が望ましくない場合は、単語の前に感嘆符 (!) を付けることができます。この場合、検索では単語の特定の形態のみが表示されます。さらに、検索クエリでは、広く分布しているため、いわゆるストップワード、つまり前置詞、句読点、代名詞などは実質的に考慮されません^[12]

原則として、略語は自動的に開示され、スペルは修正されます。同義語（mobile - cellular）も検索されます。元のユーザーリクエストの拡張はコンテキストによって異なります。拡張は、高度に専門化された用語のセット、会社の固有名詞の名前（たとえば、OJSC「Hippo」- OJSC「Hippopotamus」）に「price」という単語を追加し、正確な引用符で囲んだ場合（これらはタイプライター引用符で強調表示されたクエリです）には発生しません。^[18]

各ユーザーの検索結果は、ユーザーの所在地、クエリの言語、興味、嗜好に基づいて、過去および現在の検索セッションの結果に基づいて個別に作成されます。ただし、検索結果のランキングの重要な要素は、検索クエリとの関連性です。^[19]関連性は、機械学習アルゴリズムに基づいて常に更新されるランキング式に基づいて決定されます。

検索は、ロシア語、英語、フランス語、ドイツ語、ウクライナ語、ベラルーシ語、タタール語、カザフ語で実行されます。

検索結果は、関連性と日付（検索結果の下のボタン）で並べ替えることができます。

検索結果のページは、短い注釈（「スニペット」）が付いた10個のリンクで構成されています。スニペットには、テキストコメント、リンク、アドレス、サイトの人気セクション、ソーシャルネットワークのページなどが含まれます。^[20] スニペットの代替として、Yandexは2014年に「アイランド」と呼ばれる新しいインターフェースを導入しました。^[21]

Yandexは、ウェブ検索と同時にカタログ、ニュース、マーケット、百科事典、画像などのYandexサービスで検索を実行する「並列検索」メカニズムを実装しています。その結果、ユーザーの要求に応じて、システムはテキスト情報だけでなく、ビデオファイル、画像、辞書エントリなどへのリンクも表示します。^[22]

検索エンジンの特徴的な機能は、問題を解決するための検索を意​​味する「インテント検索」の技術でもあります。^[23] インテント検索の要素は、あいまいな要求の場合のダイアログプロンプト、自動テキスト翻訳、要求された車の特性に関する情報などです。たとえば、「Boris Grebenshchikov - Golden City」をリクエストすると、システムはYandex Musicサービスからオンラインで音楽を聴くためのフォームを表示し、「st. Koroleva 12」をリクエストすると、マークされたオブジェクトを含む地図の一部が表示されます。

Yandex検索エンジンの検索結果は、国営メディアを含むロシアのメディアソースを優遇する傾向があり、Yandexが配信する広告は、6つ以上のロシア語ニュースサイトが作成した誤報やプロパガンダを宣伝する傾向がある。^{[24] [25]}

ある調査によると、ヤンデックスが配信した広告は、ウクライナの米国の生物兵器研究所に関する虚偽の記事、ウクライナのウォロディミル・ゼレンスキー大統領が麻薬使用者であるという主張、ウクライナに対する戦争は完全に計画通りに進んでいるというクレムリンの主張を繰り返し報じる記事と並んで掲載されていた。ヤンデックスの広告で宣伝された他のフェイクニュースは、クレムリンの論点を使ってロシアの侵攻に言及し、この戦争を「ウクライナの非ナチ化と非軍事化のための作戦」と呼んでいた。^[26]別の分析によると、ヤンデックスは世界中のロシア語話者を操作された情報、そしてしばしば完全に偽の情報に誘導している。^[27]

2013年、Yandexは当時最も安全な検索エンジンであり、すべてのウェブリソースの中で3番目に安全な検索エンジンであると考えられていました。^[28] 2016年までに、Yandexは3位に落ち、Googleが1位になりました。^[29]

ウェブページをチェックしてユーザーに警告する機能は、2009年にYandexに登場しました。それ以来、検索結果ページでは、危険なサイトの横に「このサイトはコンピューターのセキュリティを脅かす可能性があります」という注意書きが表示されるようになりました。^[30]脅威を検出するために、2つの技術が同時に使用されています。1つ目は、米国のウイルス対策会社Sophosから購入したもので、シグネチャアプローチに基づいています。つまり、ウェブページにアクセスすると、ウイルス対策システムは既知のウイルスとマルウェアのデータベースにもアクセスします。このアプローチは高速ですが、データベースにまだ入っていない新しいウイルスに対しては実質的に無力です。そのため、Yandexはシグネチャに加えて、動作要因の分析に基づいた独自のウイルス対策複合体も使用しています。 Yandex プログラムは、サイトにアクセスすると、ブラウザから追加のファイルを要求したか、外部のリソースにリダイレクトしたかなどをチェックします。したがって、サイトがユーザーの許可なしに特定のアクション (カスケーディング スタイル シート、JavaScriptモジュールの起動、完全なプログラム) を実行し始めたという情報が受信されると、「ブラック リスト」とウイルス シグネチャ データベースに登録されます。^[31]サイトの感染に関する情報は検索結果に表示され、Yandex.Webmaster サービスを通じてサイトの所有者に通知が送信されます。最初のチェックの後、Yandex は 2 回目のチェックを行い、2 回目の感染情報が確認されると、脅威が排除されるまでチェックの頻度が高くなります。Yandex データベース内の感染サイトの総数は 1% を超えません。^[30]

2013年、Yandexは毎日2,300万のウェブページをチェックし（4,300の危険なサイトを検出）、ユーザーに800万の警告を表示しました。^[32]毎月約10億のサイトがチェックされています。^[30]

長い間、Yandex にとって重要なランキング要因は、特定のサイトへのサードパーティ リンクの数でした。インターネット上の各ページには、科学論文の著者のインデックスに似た、一意の引用インデックスが割り当てられていました。リンクが多いほど良いというものです。同様のメカニズムが Yandex と Google のPageRankに実装されています。不正行為を防ぐために、Yandex は多変量解析を使用しており、800 の要因のうち 70 のみがサードパーティ リンクの数によって影響を受けます。今日では、サイトのコンテンツとキーワードの有無、テキストの読みやすさ、ドメイン名、その履歴、マルチメディア コンテンツの存在が、はるかに大きな役割を果たしています。

2013年12月5日、Yandexは今後リンク係数を考慮に入れないことを全面的に拒否すると発表した。^[33]

ユーザーが検索バーにクエリを入力すると、検索エンジンはドロップダウン リストの形でヒントを提供します。ヒントは検索結果が表示される前にも表示され、クエリを絞り込んだり、レイアウトやタイプミスを修正したり、探しているサイトに直接移動したりできます。各ユーザーに対して、My Finds サービスを使用した検索クエリの履歴に基づいてヒントが生成されます。2012 年には、いわゆる「スマート検索ヒント」が登場しました。これは、主要な定数 (赤道の長さ、光の速度など)、交通渋滞に関する情報を即座に提供し、計算機を内蔵しています。さらに、「ヒント」には翻訳機能が統合されました (「フランス語で love」というクエリを入力すると、amour、affection が即座に表示されます)。サッカーの試合のスケジュールと結果、為替レート、天気予報なども表示されます。「今何時ですか」と尋ねると、正確な時刻を知ることができます。2011 年には、Yandex の検索のヒントは、ロシアの 83 の地域に完全にローカルになりました。^[34]

実際の検索に加えて、Yandex 検索エンジンにはヒントが組み込まれています。「辞書」、「Yandex マーケット」、「Yandex マップ」、およびその他の Yandex サービス。

ヒント機能は、検索意図の技術の発展の結果であり、2007年8月にYandex.Barに初めて登場し、2008年10月に検索エンジンのメインページに導入されました。^[35]サイトのデスクトップ版とモバイル版の両方で利用可能で、Yandexはユーザーに1日あたり10億を超える検索ヒントを表示しています^[36]

検索エンジンの変更は長い間広く公表されず、名前も付けられていませんでした。そして、2008年の初めにアルゴリズム8 SP1のリリースが発表されてから、Yandexは、今後は新しいランキングアルゴリズムに都市名が付けられるようになる、と発表しました。^[37]

システムの名前である Yandex は、アルカディ・ヴォロージとイリヤ・セガロヴィチが共同で考案しました。^[38]この単語は、y et an other in dex er（または「私は（ロシア語で「ya」 ）であり、index ）」を意味します。アルテミー・レベデフの解釈によると、検索エンジンの名前は Yandeks の子音であり、yang は男性形の始まりを意味します。^[39]

yandex.ru検索エンジンは、CompTek社が1997年9月23日にSoftool展示会で発表した^[40]が、検索分野（聖書のインデックス作成、 CD-ROM上の文書の検索、サイト検索）のいくつかの開発は、それ以前にも同社によって行われていた。最初のインデックスには5000台のサーバーの情報が含まれており、4.5GBを占めていた^{[41] 。}

同じ1997年に、Yandexの検索がロシア語版Internet Explorer 4.0で利用され始めました。^{[42] [43]}自然言語で検索することが可能になりました。^[44]

1998年には、検索結果ごとに「類似文書を検索」する機能が登場した。^[45]

1998年時点での「Yandex. Search」は、ApacheのFreeBSD上で動作する3台のマシンで動作していた。1台のマシンはインターネットをクロールして文書をインデックス化し、1台のマシンは検索エンジンを、もう1台のマシンは検索エンジンを複製していた。^[46]

1999年には、検索エンジンとカタログを組み合わせた検索がカテゴリに登場しました。^[47]検索エンジンのバージョンが更新されました。^[48]

2000年6月6日、検索エンジンの2番目のバージョンが発表されました。^[49]並列検索メカニズムが導入され、発行と同時に大規模な情報源からの情報が提供されるようになりました。ユーザーは検索結果を選択したトピックに限定できるようになりました。検索を絞り込むための単語である「人気の検索」という見出しが登場しました。^[50]

2000年12月には、索引付けされた情報の量は355.22GBに達した。^[51]

2001年、Yandexはロシアの別の検索エンジンであるRamblerをアクセス数で追い抜き、Runetのトップ検索エンジンとなった。^{[52] [53]} Yandexは疑問形で尋ねられた自然言語の要求を理解し始めた。システムはタイプミスを認識し、修正を提案することを学習した。デザインが変更された。^[54]

Yandex検索エンジンへの毎日の検索数は200万件を超えた^[55]

.rtfおよび.pdf文書のインデックス作成が開始されました。 ^[56] XML形式を含む検索結果が発行されるようになりました。^[57]

ランキングアルゴリズムが変更されました。^[58]

Yandexは.swf（Flash）^[59]、xls、.ppt形式の文書のインデックス作成を開始しました。^[60]

年末には、「Yandexにおける全文検索とランキングのいくつかの側面」（著者：イリヤ・セガロヴィチ、ミハイル・マスロフ）という研究が発表され、検索エンジンにおける特定のランキングの詳細が明らかになった。^[61]

夏には、インデックス作成を目的とした実際のページと並行して動作する、いわゆる「高速」検索ロボットがリリースされました。「高速ロボット」のベースは1.5～2時間ごとに更新されます。^[62]

検索精度を高めるためにランキングアルゴリズムが改良されました。^[63]

検索機能は、「Yandex. Dictionaries」と「Yandex. Lingvo」の助けを借りて拡張されました。検索エンジンは、「スペイン語で[何か]は何ですか」などのクエリを理解し、自動的に翻訳することを学習しました。

地域別に検索結果を絞り込むことが可能になった。^[64]

2006年5月以降、検索結果にサイトアイコンが表示されるようになった。^[65]

12月初旬、検索結果の各リンクの横に「保存されたコピー」という項目が表示され、ユーザーはそれをクリックすると、特別なアーカイブデータベース（「Yandexキャッシュ」）にあるページの完全なコピーにアクセスできます。^[66]

ランキングアルゴリズムが再び変更されました。^[67]

2008年、ヤンデックスは初めて検索アルゴリズムの変更を公に発表し、その変更にロシアの都市名を付け始めました。^[68]後続の各アルゴリズムの「都市」の名前は、前のアルゴリズムの名前の末尾の文字で始まります。^[69]

2020年4月、検索エンジンはナワリヌイ氏に関する否定的なコメントを、同氏の名前の検索結果の上位に人為的に掲載し始めた。^[70]ヤンデックスはこれを「実験」の一環であると宣言し、オーガニック検索結果の表示に戻した。^{[71] [72] [73]}

メディア専門家のミハイル・グレヴィッチ氏によれば、ヤンデックスは「国宝」であり「戦略的な製品」である。^[74]

この事実はロシア連邦下院でも認められ、2012年5月にはヤンデックスとフコンタクテが戦略的企業によって国家情報翻訳者として認められる法案が提出された。 ^[75] 2009年、ロシアのドミトリー・メドベージェフ大統領は、重要な全国企業が外国の手に渡るのを避けるため、ズベルバンクによるヤンデックスの「黄金株」の購入を開始した。 ^[76] 2019年11月、ズベルバンクは黄金株を手放すと発表し、^[77]翌月、ヤンデックスの株主は、ロシア政府が支援する企業再編を承認した。この再編では、ズベルバンクが以前に黄金株を1ユーロで売却することに合意していた後、黄金株の支配権を新たな公益財団に投資し、2020年第1四半期末までに実施される予定である。^[78]

2012年、ヤンデックスは1日あたりの視聴者数でチャンネルワンを追い抜き、国内メディア市場のリーダーとなった。^[75] 2013年、ヤンデックスはこの地位を固め、収益でファーストを追い抜いた。^[79]

2008年、Yandexは世界で9番目の検索エンジンでした。^[80] 2009年には7番目、^[81] 2013年には4番目でした。^[82]

この状況の要素の一つは、ロシアには科学的直感を備えた数学に精通した専門家が十分に存在することである。^[83]

2002年までにYandexという言葉は非常に一般的になり、アルカディ・ヴォロジ氏の会社が第三者が購入したyandex.comドメインの返還を要求したとき、被告は「Yandex」という言葉はすでに検索と同義であり、ロシアではよく使われる言葉になっていると主張した。^[84]

2012年後半以降、ロシアではYandex検索エンジンがGoogle Chromeブラウザのユーザー数を上回っている。^{[85] [86]}

Yandex のロゴは、検索エンジン会社を識別するためにさまざまな場面で使用されています。Yandex は社名変更以来、いくつかのロゴを使用しています。最初のロゴはArkady Volozhによって作成され、Yandex 検索エンジンの発表前の 1997 年に Яndex.Site および Яn​​dex.CD 製品でデビューしました^[87]。このロゴは CompTek のロゴに類似して設計されました。

1997年以来、ロゴはArt. Lebedev Studiosによってデザインされており、4つのバージョンがデザインされています。現在のロゴはキリル文字を使用しています。^[88]

• 検索エンジンのリスト
• 検索エンジンの比較

公式サイト