Loading article…
 | |
 フォトシンセ技術でワシントン州中部のスパイダーメドウズを表現 | |
| 開発者 | マイクロソフト |
|---|---|
| 初回リリース | 2008年8月20日 |
| 最終リリース | 2.110.317.1042 / 2010年3月18日 |
| タイプ | 3Dモデリング、パノラマステッチ |
| Webサイト | フォトシンス |
Photosynth は、 Microsoft Live Labsとワシントン大学が開発した、現在は廃止されたアプリおよびサービスで、デジタル写真を分析して写真の3D モデルと撮影されたオブジェクトのポイント クラウドを生成します。[1]パターン認識コンポーネントは、画像の一部を比較してポイントを作成し、それらのポイントを比較して画像をモデルに変換します。ユーザーは、Photosynth Web サイトからダウンロードできるソフトウェア ツールを使用して、独自のモデルを表示および生成できます。
歴史
Photosynthは、ワシントン大学の大学院生ノア・スナベリーによる研究プロジェクト「Photo Tourism」に基づいています。[2] 2006年初頭にマイクロソフトがSeadragon を買収した直後、そのチームはSeadragonの創設者ブレイズ・アグエラ・イ・アルカスの指揮の下、Photosynthの開発を開始しました。[3]
マイクロソフトは2006年11月9日に無料のテクニカルプレビュー版をリリースした。ユーザーはマイクロソフトやBBCが作成したモデルを閲覧することはできたが、その時点では独自のモデルを作成することはできなかった。[4]マイクロソフトは2007年8月6日にNASAと提携し、スペースシャトルエンデバー号を映し出すPhotosynth技術をユーザーがプレビューできるようにした。2007年8月20日には、バックフリップ中のエンデバー号のタイルを映したプレビューが閲覧可能になった。
2008 年 8 月 20 日、Microsoft は Photosynth を正式に一般公開し、ユーザーが画像をアップロードして独自の Photosynth モデルを生成できるようになりました。
2010年3月、PhotosynthはMicrosoft ICEで合成されたギガピクセルの パノラマのサポートを追加しました。パノラマは、すでに合成機で使用されているシステムと同様のSeadragonベースの技術を使用しています。[5]
2015年7月、マイクロソフトはPhotosynthモバイルアプリの提供を終了すると発表した。Photosynthが2017年初頭にサービスを終了する準備を進める中、クラウドソーシングによるストリートレベル画像プラットフォームであるMapillaryは、Photosynth-to-Mapillaryブログ投稿でPhotosynthコミュニティに働きかけ、[6] Photosynth公式Twitterアカウントはユーザーに「チェックしてみてください」と呼びかけた。[7] 2017年2月6日、マイクロソフトはPhotosynthのウェブサイトとサービスを廃止した。[8]
2017年12月20日、PhotosynthはMicrosoft Pixアプリの機能として復活しました。[9]
Microsoft Flight Simulatorの開発では、Microsoft の Photosynth テクノロジが再び採用され、世界中の建物や地形を再現しました。
プロセス
Photosynth テクノロジは 2 つのステップで機能します。最初のステップでは、同じエリアで撮影された複数の写真を分析します。各写真は、Microsoft Researchによって開発された、 UBCのスケール不変特徴変換と機能的に類似した、関心点検出およびマッチング アルゴリズムを使用して処理されます。このプロセスでは、窓枠の角やドア ハンドルなどの特定の特徴を識別します。次に、1 枚の写真の特徴を他の写真の同じ特徴と比較し、マッチングします。このようにして、同じエリアの写真が識別されます。各写真内の一致する特徴の位置を分析することで、プログラムはどの写真が他の写真のどちら側に属するかを識別できます。特徴間の関係 (角度、距離など) の微妙な違いを分析することで、プログラムは各特徴の 3D 位置と、各写真が撮影された位置と角度を識別します。このプロセスは科学的にはバンドル調整と呼ばれ、写真測量の分野で一般的に使用されており、Imodeller や D-Sculptor などの同様の製品が利用可能です。この最初のステップは計算量が非常に多いですが、写真のセットごとに 1 回だけ実行する必要があります。
2 番目のステップでは、最初のステップで特定された特徴の 3D ポイント クラウドを表示し、ナビゲートします。これは、公開ダウンロード可能な Photosynth ビューアを使用して行われます。ビューアはクライアント コンピュータ上に常駐し、元の写真を保存しているサーバーとの接続を維持します。これにより、ユーザーは、他の機能の中でも、どの写真も元の視点から見ることができます。ビューアには、 Microsoft が 2006 年 1 月に Seadragon を買収して取得した DeepZoom テクノロジが組み込まれています。Seadragonテクノロジにより、高解像度の写真をユーザーのマシンにダウンロードせずにスムーズにズームできます。
Photosynth Direct 3Dベースの表示ソフトウェアは、Windows 7、Windows Vista、Windows XPオペレーティング システムでのみ使用できます。ただし、チームは、Photosynth を表示するための主なオプションとして D3D ビューアに代わる Silverlightバージョンのビューアをリリースしました。
モバイルアプリ
2009年3月時点で、ユーザーがアップロードしたPhotosynthコレクションは、iSynth（3D）またはSeadragon Mobile（2Dのみ）を使用してiPhoneで閲覧可能でした。Photosynthアプリケーションは、 App StoreからiPod TouchおよびiPhoneにダウンロードすることもできます。2012年5月、[10] MicrosoftはモバイルプラットフォームであるWindows Phone用のPhotosynthアプリをリリースしました。[11] 2015年7月10日、MicrosoftはPhotosynthモバイルアプリを廃止し、ストアから削除し、サポートや更新を行わないことを発表しました。[12]
Photosynth プラットフォームは 2017 年初頭にシャットダウンされましたが、その機能は秋に iOS 用の Microsoft Pix アプリ内で再登場しました。ただし、2020 年後半の時点で、Photosynth 機能は Microsoft Pix アプリの一部ではなくなったようです。
機能
最新世代のフォトシンスは、通常のデジタルカメラや携帯電話で撮影した写真をフォトシンスにアップロードできるため、撮影が簡単です。ユーザーは、Flickrなどのサイトでデジタル写真にジオタグを付け、オンラインのフォトシンス Web サービスにアップロードすることができます。フォトシンスにアップロードされた画像により、ランドマーク、公共スペース、オブジェクトをあらゆる角度からシームレスに見ることができます。
- シーン内を歩いたり飛んだりして、あらゆる角度から写真を見ることができます
- 写真を拡大または縮小する
- 写真がどこで撮影されたかを比較して確認する
- 近くの写真の視野角をスムーズに変更
- 高解像度の写真をスムーズにズームイン・ズームアウト
- 現在表示している写真に似た写真を探す
メディアで
- 2008年4月30日、フォトシンスはテレビ番組「CSI:ニューヨーク」のエピソード「Admissions」で紹介されました。 [13]
- CNNは、ユーザーが投稿したバラク・オバマの米国大統領就任式の3DビジョンにPhotosynthを活用しました。[14]
- 天使と悪魔の「光の道コンテスト」では、Photosynthが使用され、ウェブサイトでも宣伝されています。[15]
- MSNはイギリス空軍のバトル・オブ・ブリテン勝利70周年を報道し、この戦いで使用された戦闘機の一部を収めたフォトシンス格納庫を建設した。[16]また、ダックスフォード帝国戦争博物館向けにフォトシンスシリーズも製作され、ウェブユーザーが様々な角度から間近で戦闘機を体験できるようにした。[17]
参照
- Microsoft Image Composite Editor — 無料の高度なパノラマ合成システム
- シードラゴンソフトウェア
- Hugin (ソフトウェア) — クロスプラットフォームのオープンソースパノラマスティッチングシステム
- クイックタイムVR
- MeshLab — Photosynthで再構築されたポイントクラウドをインポートできるクロスプラットフォームのオープンソースメッシュ処理ツール
参考文献
- ^ Microsoft が 3D マルチフォトビューアの開発に着手 | CNET News.com
- ^ 「Photo Tourism」. phototour.cs.washington.edu . 2018年3月30日閲覧。
- ^ 「Photosynth の立役者、Blaise Aguera y Arcas 氏へのインタビュー」。ゲーム理論。2018 年 3 月 30 日閲覧。
- ^ 「マイクロソフト、消費者向けに驚異の3Dフォトシンスを発表」CNET 2008年8月20日2018年3月30日閲覧。
- ^ 「バターのように滑らかなギガピクセルパノラマ」。Photosynthブログ。2018 年 3 月 30 日閲覧。
- ^ 「Photosynth から Mapillary へ - 3D ビューの作成」www.mapillary.com。2018 年 10 月 13 日時点のオリジナルよりアーカイブ。2018 年 10 月 13 日閲覧。
- ^ 「Photosynth チームの Twitter - Mapillary… Photosynth とは異なる目標… ぜひチェックしてみてください」。Twitter。2018年 10 月 13 日閲覧。
- ^ Popa, Bogdan (2017 年 2 月 7 日)。「Microsoft が Photosynth を正式に終了」。Softpedia。SoftNews。
- ^ 「Microsoft Pix の新機能により、より大きく、よりワイドな写真を撮影し、動画をコミックに変換できます - Microsoft Research」。Microsoft Research。2017年 12 月 20 日。2018年 3 月 30 日閲覧。
- ^ パーセル、ケビン (2011 年 6 月 17 日)。「写真を次のレベルに引き上げる 8 つの iPhone カメラ アプリ」IntoMobile。
- ^ 「Photosynth App for Windows Phone」。1800PocketPC。2012年5月31日。2012年7月17日時点のオリジナルよりアーカイブ。
- ^ Photosynth モバイルアプリが廃止される
- ^ シアトル・ポスト・インテリジェンサー。マイクロソフトのPhotosynthが「CSI」のエピソードに登場
- ^ CNN CNN バラク・オバマ大統領就任式
- ^ MSN 天使と悪魔 - 光明の道コンテスト 2009-02-05ウェイバックマシンにアーカイブ
- ^ 「The Battle of Britain on MSN UK」。2010年9月16日時点のオリジナルよりアーカイブ。 2010年10月25日閲覧。
- ^ 「IWM Spitfire Photosynth - Shoothill」。2011年1月1日時点のオリジナルよりアーカイブ。2010年10月25日閲覧。
外部リンク
- ワシントン大学公式フォトツーリズムサイト