特許DVD裏

利用分野

2014-06-23T18:40:28+09:00

裏DVD・無修正DVDの販売情報利用分野【技術分野】【０００１】多くの実装形態が、一般的に、超解像イメージを生成する方法，装置，コンピュータプログラム製品に関する。裏DVD・無修正DVDの販売情報

【００４０】

2014-06-23T18:38:58+09:00

裏DVD・無修正DVDの販売情報一方又は両方から構築されてもよい。ある例において、領域６３０は、領域５１６と５２６の間のレジストレーション・マトリクスを用いて領域５１６及び５２６の超解像化を実行することと、領域５１６と５３６の間のレジストレーション・マトリクスを用いて領域５１６及び５３６の超解像化を実行することと、の一方又は両方から構築されてもよい。なお、図３－６の例示的実施形態において、超解像画像６００は、画像５１０、５２０、５３０の３つのみから生成されるように示されているが、このような表し方は、簡単な説明を提供するためのものに過ぎない。多くの例示的実施形態の実際の実装例においては、ライトフィールド画像から生成される複数の画像のうちの１つの超解像画像は、その画像を残りの画像の３つ以上と共に超解像化を行うことにより、作成されてもよい。例えば、一つのライトフィールド画像から、各々異なるビューを持つ画像が全部で２０個生成されるとき、そのうちの一つの画像の超解像画像は、各深度レベルに対応する複数のレジストレーション・マトリクスに基づいて、当該画像を残りの１９個と共に超解像化することにより、生成されてもよい。【００４０】ある例示的実施形態において、異なる画像の領域の超解像化は、その領域の解像度を改善するために適当な如何なる超解像化技術を用いて実行してもよい。ある例示的実施形態において、２つの領域間の超解像化は、ＳＲ（Super Resolving）再構成法に基づいて行われてもよい。ＳＲ再構成法の例は、等間隔補間法（uniform interpolation method）や不等間隔補間法（non-uniform interpolation method）、逆投影法（Back Projection Method）などを含む。なお、これは例を網羅的に示したものではない。図３－６を比較すると、画像３００に比べて画像６００はよく解像しており、解像度がかなり改善されていることがわかる。

【００３６】

2014-06-23T18:37:08+09:00

裏DVD・無修正DVDの販売情報ある例において、画像５１０の超解像画像は、画像５２０及び５３０を用いた画像５１０の超解像化によって生成されてもよい。ここで、それぞれ異なる深度レベルに対応する画像５１０の各領域についての超解像化は、画像５２０及び５３０の対応する領域と共に行われる。例えば、図５の例において、画像５１０は、ＡＢＣＤＥＡで囲まれた領域５１２、ＥＦＧＥで囲まれた領域５２４、ＧＨＩＣＤＥＦＧで囲まれた領域５１６を有し、これらはそれぞれ深度レベルｄ１、ｄ２、ｄ３に対応している。画像５２０は、Ａ'Ｂ'Ｃ'Ｄ'Ｅ'Ａ'で囲まれた領域５２２、Ｅ'Ｆ'Ｇ'Ｅ'で囲まれた領域５２４、Ｇ'Ｈ'Ｉ'Ｃ'Ｄ'Ｅ'Ｆ'Ｇ'で囲まれた領域５２６を有し、これらはそれぞれ深度レベルｄ１、ｄ２、ｄ３に対応している。画像５３０は、Ａ"Ｂ"Ｃ"Ｄ"Ｅ"Ａ"で囲まれた領域５３２、Ｅ"Ｆ"Ｇ"Ｅ"で囲まれた領域５３４、Ｇ"Ｈ"Ｉ"Ｃ"Ｄ"Ｅ"Ｆ"Ｇ"で囲まれた領域５３６を有し、これらはそれぞれ深度レベルｄ１、ｄ２、ｄ３に対応している。【００３７】ある例示的実施形態において、装置２００は、深度レベルｄ１、ｄ２、ｄ３に対応して、画像５１０，画像５２０，画像５３０との間のレジストレーション・マトリクスを個別に決定することにより、画像を５１０の超解像画像を生成するようにされる。ある例示的実施形態において、装置２００は、領域５１２と５２２との間のレジストレーション・マトリクスと、領域５１２と５１３との間のレジストレーション・マトリクスとに基づいて、領域５２２及び５３２を使って領域５１２の超解像化を行うことにより、画像５１０の超解像画像を生成するようにされる。【００３８】ある例示的実施形態において、２つの画像（例えば画像５１０及び５２０）の間の深度レベルに対応するレジストレーション・マトリクスは、当該深度レベルに関連して両方の画像から選択された領域から複数の特徴点を決定し、これらの画像の間の特徴点の一致度を

【００２９】

2014-06-23T18:34:54+09:00

裏DVD・無修正DVDの販売情報ある例示的実施形態において、装置２００は、選択された領域ｒ（Ｉ２，ｄ１）やｒ（Ｉ３，ｄ１）の中で、複数の特徴点を決定するようにされる。この画像特徴点の例には、コーナー（角部；corner）、フレーム中の一つ又は複数のオブジェクトのエッジ、ＳＩＦＴ（Scale Invariant Feature Transform）特徴量、画像の背景や前景のようなＲＯＩが含まれる。また、これら以外の特徴点も存在する。ある例示的実施形態において、装置２００は、特定の深度レベルに関連してある画像（Ｉ２）から選択された領域の特徴点と、当該深度レベルに関連して残りの別の画像（Ｉ３）から選択された領域の特徴点との間の一致の度合いに基づいて、当該深度レベルのためのレジストレーション・マトリクスを計算するようにされる。例えば、ある例示的実施形態においては、深度レベルｄ１に関する領域ｒ（Ｉ２，ｄ１）中の特徴点と領域ｒ（Ｉ３，ｄ１）中の特徴点との間の一致の度合いが計算されてもよい。ある例示的実施形態では、この一致の度合いに基づいて、レジストレーション・マトリクスＲｄ１（Ｉ２，Ｉ３）が計算されてもよい。ある例示的実施形態では、深度レベルｄ２に関連して領域ｒ（Ｉ２，ｄ２）及びｒ（Ｉ３，ｄ２）中の特徴点間の一致度が計算され、また、深度レベルｄ３に関連して領域ｒ（Ｉ２，ｄ３）及びｒ（Ｉ３，ｄ３）中の特徴点間の一致度が計算されてもよい。ある例示的実施形態では、領域ｒ（Ｉ２，ｄ２）及びｒ（Ｉ３，ｄ２）中の特徴点間の一致度に基づいてレジストレーション・マトリクスＲｄ２（Ｉ２，Ｉ３）が計算され、領域ｒ（Ｉ２，ｄ３）及びｒ（Ｉ３，ｄ３）中の特徴点間の一致度に基づいてレジストレーション・マトリクスＲｄ３（Ｉ２，Ｉ３）が計算されてもよい。【００３０】ある例示的実施形態において、装置２００は、ある画像の超解像画像を生成すべく、一つ又は複数のレジストレーション・マトリクスに基づいて、当該画像及

【００２４】

2014-06-23T18:33:19+09:00

裏DVD・無修正DVDの販売情報ある例示的実施形態において、プロセッサ２００は、メモリ２０４のコンテンツと共に、及び場合によっては本明細書に説明されるその他の要素と共に、ライトフィールド画像を受け取ることを装置２００に支援させるように構成される。ある例示的実施形態において、装置２００はライトフィールド画像をキャプチャするように構成されてもよい。別の例示的実施形態においては、ライトフィールド画像はあらかじめ記録されて装置２００に格納されていてもよく、又は、装置２００が外部のソースから受信するものであってもよい。ある例示的実施形態において、装置２００は、ＤＶＤやコンパクトディスク（ＣＤ）、フラッシュドライブ、メモリーカードのような外部ストレージメディアからライトフィールド画像を受け取るようにされてもよく、又は、インターネットやBluetooth（登録商標）のような外部の記憶場所からそれを受け取るようにされてもよい。様々な例示的実施形態において、「ライトフィールド画像」との語句は、同一のシーンについての複数のビューの情報を含む撮影画像を表す。撮影されたライトフィールド画像からは、それぞれ視差（パララックス）が少しずつ異なる複数の画像が生成されてもよい。例えば、ライトフィールド画像は、シーンの広い角度範囲（様々な視点）をカバーする。ある例示的なシナリオによれば、ライトフィールド画像から生成される様々な画像は、低解像度の入力画像となってもよく、このような入力画像の解像度が超解像処理によって改善されてもよい。ある例において、ライトフィールド画像はライトフィールドカメラによって撮影されてもよい。ライトフィールドカメラの例には、シーンについての四次元ライトフィールド情報を撮影するためにマイクロレンズ・アレイを用いるPlenopticカメラやマスクカメラ（mask based camera）が存在する。なおこの例は網羅的なものではない。ある例示的実施形態において、装置２００は、ライトフィール

【００１６】

2014-06-23T18:32:31+09:00

裏DVD・無修正DVDの販売情報、例示的実施形態に従って、ライトフィールドカメラでキャプチャしたイメージから、一つ又は複数の超解像画像を生成する装置２００を描いたものである。装置２００は、例えば、図１のデバイス１００によって採用されることができる。しかし、装置２００は、携帯式又は固定式に関わらず、その他の様々なデバイスによって採用されることができてもよいことは注意されたい。従って、実施形態は、図１のデバイス１００のようなデバイスへの応用に限られないことに注意されたい。場合によっては、実施形態は、複数のデバイスの組み合わせによって利用されうる。そのような複数のデバイスには、例えば上にリストされたものが含まれる。多くの実施形態が、（例えばデバイス１００やデバイスの組み合わせのような）単一のデバイスとして具現化される。さらに、以下に記述されるデバイスや要素は必ず必要であるというものではなくともよく、従って実施形態によっては、これらのうちいくつかが省略されてもよい。【００１７】装置２００は少なくとも一つのプロセッサ２０２及び少なくとも一つのメモリ２０４を備える。又はこれらと通信できるようにされている。少なくとも一つのメモリ２０４は、これらに限られるわけではないが、揮発性メモリ及び／又は不揮発性メモリを含む。揮発性メモリの例には、ランダムアクセスメモリやダイナミック・ランダムアクセスメモリ、スタティック・ランダムアクセスメモリのようなものが含まれる。また、これらに限定されない。不揮発性メモリの例には、ハードディスクや磁気テープ、光ディスク、プログラム可能なリードオンリーメモリ、プログラムを消去可能なリードオンリーメモリ、電気的に消去可能なプログラム可能リードオンリーメモリ、フラッシュメモリのようなものがある。様々な例示的実施形態に従う多くの機能を装置２００が実行することを可能にするべく、メモリ２０４は、情報やデータ、ファイル、アプリケーション、命令および同様のものを格納する

【発明の詳細な説明】

2014-06-23T18:30:49+09:00

裏DVD・無修正DVDの販売情報第４の側面によれば、ライトフィールド画像の受け取りを支援する手段と；前記ライトフィールド画像の一つ又は複数の深度レベルを決定する手段と；前記ライトフィールド画像から複数の画像を生成する手段と；前記複数の画像のある画像と一つ又は複数の残りの画像との間の一つ又は複数の深度レベルに対応して一つ又は複数のレジストレーション・マトリクスを決定する手段と；前記ある画像の超解像画像を生成すべく、前記一つ又は複数のレジストレーション・マトリクスに基づいて、前記ある画像及び前記一つ又は複数の残りの画像の超解像化を行う手段と；を備える装置が提供される。【０００８】第５の側面によれば、装置により実行されると該装置に、ライトフィールド画像の受け取りを支援することと；前記ライトフィールド画像の一つ又は複数の深度レベルを決定することと；前記ライトフィールド画像から複数の画像を生成することと；前記複数の画像のある画像と一つ又は複数の残りの画像との間の一つ又は複数の深度レベルに対応して一つ又は複数のレジストレーション・マトリクスを決定することと；前記ある画像の超解像画像を生成すべく、前記一つ又は複数のレジストレーション・マトリクスに基づいて、前記ある画像及び前記一つ又は複数の残りの画像の超解像化を行うことと；を実行させるように構成される、コンピュータプログラムが提供される。【図面の簡単な説明】【０００９】添付の図面には、多くの実施形態が例示されている。これらは例示を目的とするものであって、限定の目的のためのものではない。【図１】ある例示的実施形態に従うデバイスを描いたものである。【図２】ある例示的実施形態に従う、超解像画像を生成する装置を描いたものである。【図３】ある例示的実施形態に従うライトフィールド画像を表したものである。【図４】ある実施形態に従う深度マップ（ｄｅｐｔｈｍａｐ）の例示的な表現であり、ライトフィールド画像中の深度（ｄｅｐｔｈ）のレ

詳細な説明

2014-06-23T18:29:45+09:00

裏DVD・無修正DVDの販売情報発明の詳細な説明】【技術分野】【０００１】多くの実装形態が、一般的に、超解像イメージを生成する方法，装置，コンピュータプログラム製品に関する。【背景】【０００２】カメラや携帯電話などの様々な電子機器が、景色を撮影して画像を得るために用いられている。以前からあるカメラにおいては、画像の解像度はカメラに搭載されているセンサの画像と同じである。従って、高解像度の画像を得るには、対応する解像度のセンサが必要である。他に、ライトフィールドカメラというものも存在し、これは、１回の操作で景色の画像を複数撮影する。このカメラは、撮影後において、画像の中のオブジェクトに焦点合わせを行うことができる。しかし、このようなカメラは、撮影された画像の解像度が貧弱であるという制限を有している。これは、画像の細かい部分を記録するセンサが、複数の画像により共有されているからである。多くの例示的なシナリオにおいて、ライトフィールドカメラにより撮影された画像の解像度が、"超解像"技術によって改良される。【いくつかの実施形態の摘要】【０００３】例示的実施形態の多くの捉え方が、請求項に提示されている。【０００４】第１の側面によれば、ライトフィールド画像の受け取りを支援することと；前記ライトフィールド画像の一つ又は複数の深度レベルを決定することと；前記ライトフィールド画像から複数の画像を生成することと；前記複数の画像のある画像と一つ又は複数の残りの画像との間の一つ又は複数の深度レベルに対応して一つ又は複数のレジストレーション・マトリクスを決定することと；前記ある画像の超解像画像を生成すべく、前記一つ又は複数のレジストレーション・マトリクスに基づいて、前記ある画像及び前記一つ又は複数の残りの画像の超解像化を行うことと；を含む、方法が提供される。【０００５】第１の側面によれば、少なくとも一つのプロセッサと、コンピュータプログラムコードを含む少なくとも一つのメモリ

前記超解像化はＳＲ再構成

2014-06-23T18:29:10+09:00

裏DVD・無修正DVDの販売情報に基づいて行われる、請求項２２又は２４に記載のコンピュータプログラム製品。【請求項２６】前記装置が、前記ライトフィールド画像の前記一つ又は複数の深度レベルに関する深度マップを決定することを少なくとも部分的に行うようにされる、請求項２２に記載のコンピュータプログラム製品。【請求項２７】前記一つ又は複数のレジストレーション・マトリクスは、ＲＡＮＳＡＣアルゴリズムによって決定される、請求項２２から２４のいずれかに記載のコンピュータプログラム製品。【請求項２８】前記ある画像及び前記一つ又は複数の残りの画像の超解像化を行うことために、前記装置が不等間隔補間法を少なくとも部分的に実行するようにされる、請求項２２又は２４に記載のコンピュータプログラム製品。【請求項２９】前記ある画像及び前記一つ又は複数の残りの画像の超解像化を行うことために、前記装置が逆投影法を少なくとも部分的に実行するようにされる、請求項２２又は２４に記載のコンピュータプログラム製品。【請求項３０】前記超解像画像は前記ある画像よりも高い解像度を有する、請求項２２から２９のいずれかに記載のコンピュータプログラム製品。【請求項３１】ライトフィールド画像の受け取りを支援する手段と；前記ライトフィールド画像の一つ又は複数の深度レベルを決定する手段と；前記ライトフィールド画像から複数の画像を生成する手段と；前記複数の画像のある画像と一つ又は複数の残りの画像との間の一つ又は複数の深度レベルに対応して一つ又は複数のレジストレーション・マトリクスを決定する手段と；前記ある画像の超解像画像を生成すべく、前記一つ又は複数のレジストレーション・マトリクスに基づいて、前記ある画像及び前記一つ又は複数の残りの画像の超解像化を行う手段と；を備える装置。【請求項３２】前記ある画像と、前記一つ又は複数の残りの画像のうちのいずれかとの間の一つ又は複数の深度レベルのいずれかに対応して、前

【請求項１１】

2014-06-23T18:23:26+09:00

裏DVD・無修正DVDの販売情報請求項１０に記載の装置であって、前記ある画像と、前記一つ又は複数の残りの画像のうちのいずれかとの間の一つ又は複数の深度レベルのいずれかに対応して、前記一つ又は複数のレジストレーション・マトリクスのいずれかを決定することのために、前記装置は少なくとも部分的に：前記ある画像中から前記深度レベルに関連する領域を選択すると共に、前記一つ又は複数の残りの画像の前記いずれかからも、該深度レベルに関連する領域を選択することと；前記ある画像中の前記選択された領域内で複数の特徴点を決定すると共に、前記一つ又は複数の残りの画像の前記いずれかからも、前記選択された領域内で複数の特徴点を決定することと；前記ある画像中の前記選択された領域内の前記複数の特徴点と、前記一つ又は複数の残りの画像の前記いずれかの前記選択された領域内の前記複数の特徴点との一致度に基づいて、前記レジストレーション・マトリクスを計算することと；を行うようにされる、装置。【請求項１２】請求項１０又は１１に記載の装置であって、前記ある画像の超解像化を行うために、該装置は少なくとも部分的に：前記ある画像の一つ又は複数の深度レベルに関する領域及び前記一つ又は複数の残りの画像の前記一つ又は複数の深度レベルに関する領域の超解像化を、前記一つ又は複数の深度レベルに対応する前記レジストレーション・マトリクスに基づいて行うことと；前記ある画像の前記一つ又は複数の深度レベルに関する前記領域の超解像化を前記一つ又は複数の残りの画像の対応する領域と共に行うことに基づいて、前記超解像画像を生成することと；を行うようにされる、装置。【請求項１３】前記超解像化はＳＲ再構成アルゴリズムに基づいて行われる、請求項１０又は１２に記載の装置。【請求項１４】前記ライトフィールド画像の前記一つ又は複数の深度レベルに関する深度マップを決定することを少なくとも部分的に行うようにされる、請求項１０に記載の装置。【請求