37. !
!
#2! 201313095!
3D
3D
3D
3D
14 30
67
!
2.44
14 !
!
3D
• Mueller,!S.,!Kruck,!B.,!Baudisch,!P.!LaserOrigami:!Laser-
Cunng!3D!Objects.!Proc.!CHI’13,!2585-2592.
faBrickaEon:&Fast&3D&PrinEng&of&FuncEonal&Objects&by&IntegraEng&ConstrucEon&Kit&Building&Blocks&(CHI’14)&
Stefanie!Mueller,!Tobias!Mohr,!KersEn!Guenther,!Johannes!Frohnhofen,!Patrick!Baudisch
h]ps://www.youtube.com/watch?v=BlO6YRcLJjE
38. Touching
the
Void:
Direct-‐Touch
Interac4on
for
Intangible
Displays(CHI’10)
Li-Wei Chan Hui-Shan Kao Mike Y. Chen Ming-Sui Jane Yi-Ping Hung
201413109 久保勇貴 #2(鬼コース)
どんなもの?
空中像へのタッチのエラーに関する調
査及び影や音のフィードバックを付与
することによるパーフォーマンス向上
を示した研究
先行研究と比べてどこがすごい?
平面画像をタッチする際の奥行きに関
するエラーの正確な取得を初めて検
証。
技術や手法のキモはどこ?
2つの赤外線カメラを用いた正確な
タッチの検出
どうやって有効だと検証した?
タッチ時の奥行きの正確さに関する被
験者実験を実施。また、タッチする際
に影や音を付けた際の反応時間を被
験者実験で検証。
議論はある?
ユーザは慣れるまで、影や音のフィー
ドバックが必要だが、そのあとは必要
なくなる
次に読むべき論文は?
MirageTable
(CHI'12)
39. MirageTable:
Freehand
Interac4on
on
a
Projected
Augmented
Reality
Tabletop(CHI’12)
Hrvoje Benko Ricardo Jota Andrew D. Wilson
201413109 久保勇貴 #2(鬼コース)
どんなもの?
テーブル上においてバーチャルな物
体をリアルタイムで現実でものを動か
すことと同様な動作に操作可能なシス
テム
先行研究と比べてどこがすごい?
現実の物体をリアルタイムで画面に
取りこむことができ、質の高いフリー
ハンドインタラクションを実現した点
技術や手法のキモはどこ?
色、深度、前景、頭追跡、プロキシ
パーティクルを駆使したリアルタイム
メッシュの作成
どうやって有効だと検証した?
凹凸など例外な表面に対しての投影
した際の画像の質についての評価実
験。また、仮想物体の奥行き知覚に
関する実験も行った
議論はある?
前面のみしかキャプチャしていないた
め、差が生じる。握っている場所の再
現は未解決な課題である。
次に読むべき論文は?
Hirsch
et
al.
2014
(SIGGRAPH’14)
40. A
Compressive
Light
Field
Projec4on
System
(SIGGRAPH’14)
MaChew
Hirsch
Gordon
Wetzstein
Ramesh
Raskar
201413109 久保勇貴 #2(鬼コース)
どんなもの?
通常の3Dディスプレイに比べて、解像
度、輝度、コントラストを改善した圧縮
ライトフィードディスプレイ
先行研究と比べてどこがすごい?
多視点立体視を複数でなく1台のプロ
ジェクタを用いて実現した
技術や手法のキモはどこ?
受動的スクリーンと高速切り替えプロ
ジェクタによる新しい光学設計
どうやって有効だと検証した?
4つのシーン例を投影したものを示し
た。アニメーションの3D効果について
観察を行った。
議論はある?
光路長を広げると、観察できる画質が
大幅に制限され、他のライトフィード
ビューと混線が生じる。
次に読むべき論文は?
Butler
et
al.
2011
41. Vermeer:
Direct
Interac4on
with
a
360°
Viewable
3D
Display(UIST’11)
Alex Butler, Otmar Hilliges, Shahram Izadi, Steve Hodges, David Molyneaux, David Kim
201413109 久保勇貴 #2(鬼コース)
どんなもの?
映し出された3Dオブジェクトとインタラ
クションを行えるシステム
先行研究と比べてどこがすごい?
ディスプレイ内の画像とのインタラク
ションを提案。ボリュームディスプレイ
を支援する新しいセンシング法の提案
技術や手法のキモはどこ?
パラボラ鏡に取り付けた赤外線カメ
ラ・センサによる指先検出
どうやって有効だと検証した?
アプリケーション例を示した。
議論はある?
パラボラ鏡の大きさよりもディスプレイ
サイズが小さくなってしまう
次に読むべき論文は?
Hirsch
et
al.
2012
42. 8D:
Interac4ng
with
a
Relightable
Glasses-‐Free
3D
Display(CHI’12)
Li-Wei Chan Hui-Shan Kao Mike Y. Chen Ming-Sui Jane Yi-Ping Hung
201413109 久保勇貴 #2(鬼コース)
どんなもの?
ライトフィードによる入力とライトフィー
ルドによる表示を行うリアルタイム8D
ディスプレイ
先行研究と比べてどこがすごい?
リアルタイムでの8Dディスプレイの実
現(先行研究は7fps)
技術や手法のキモはどこ?
GPUにおけるレンダリング処理
どうやって有効だと検証した?
MRIデータを用いたディスプレイのデ
モを示した。
議論はある?
現在はグレースケールの入力のみだ
が、カラーでの入力できればより強力
になるだろう
次に読むべき論文は?
Sahoo
et
al.
2015
43. Control
of
Non-‐Solid
Diffusers
by
Electrosta4c
Charging
(CHI’15)
Deepak Ranjan Sahoo, Diego Martinez Plasencia, Sriram Subramanian
201413109 久保勇貴 #2(鬼コース)
どんなもの?
シャボン玉や霧などの非固体を電場
による制御を試みた研究
先行研究と比べてどこがすごい?
非固体の形や位置の制御法を提案し
た点
技術や手法のキモはどこ?
[Intra
et
al.
11]中の“wire-‐to-‐
Cylinde”を用いたエアゾール粒子の帯
電
どうやって有効だと検証した?
霧及びシャボン玉によるディスプレイ
のアプリケーション例で実際に制御し
て見せた。
議論はある?
風による影響を本手法は打ち消すこ
とができた
次に読むべき論文は?
Barnum
et
al.
2010
44. A
Mul4-‐Layered
Display
with
Water
Drops(SIGGRAPH’10)
Peter C. Barnum Srinivasa G. Narasimhan, Takeo Kanade
201413109 久保勇貴 #2(鬼コース)
どんなもの?
複数層の落下水滴にプロジェクション
マッピングを行いディスプレイとした研
究
先行研究と比べてどこがすごい?
水滴の制御を行うことで単一のプロ
ジェクタによって複数層の映像投影を
可能とした点。
技術や手法のキモはどこ?
[Ambravaneswaran
et
al.
2002]及び本
研究における実験結果に基づく水滴
生成
どうやって有効だと検証した?
複数のディスプレイ例を示した。
例)顔の投影、水槽シミュレータなど
議論はある?
本当の3Dディスプレイにするにはより
多くの水滴制御が必要。
次に読むべき論文は?
Lee
et
al.
2007
45. An
Immaterial
Depth-‐Fused
3D
Display(VRST’07)
Cha Lee, Stephen DiVerdi, Tobias H¨ollerer
201413109 久保勇貴 #2(鬼コース)
どんなもの?
2つのスクリーンを駆使し3Dディスプ
レイを実現するdepth-‐fused
3D(DFD)に
関する評価を行い、その結果よりディ
スプレイを提案した研究。
先行研究と比べてどこがすごい?
DFDが任意のスクリーン設定及び見る
位置に対して有効であることを示した。
技術や手法のキモはどこ?
6通りのスクリーン組合せから2つを
抽出し、見え方の違いを検証した点。
どうやって有効だと検証した?
6通りのスクリーンについて立体的に
見えるか被験者実験を実施。その後、
それぞれに有意差がみられるか調べ
た。
議論はある?
ステレオイメージを認めることができな
かったユーザに対しても強い3D効果
が見られた。
次に読むべき論文は?
Tokuda
et
al.
2010
56. Perception of Ultrasonic Haptic Feedback on the Hand:
Localisation and Apparent Motion
Graham Wilson , Tom Carter , Sriram Subramanian , Stephen Brewster
どのようなものか?
超音波を用いた触覚フィードバック。有効性の検討を
行う。
先行研究と比べてどこがすごいか?
超音波触覚フィードバックは比較的新しく、研究や操
作方法に関する知識が少ない。
腕を自由に動かすことができ、小さいものは着用可能
技術や手法のキモ
8*8のアレイ状に超音波発生器を設置。
有効性の確認
• 局所的な触感
25箇所に分割し、それぞれに超音波を当てる
触感を感じた:98.9%
場所の誤差:8.5mm
• 手のひらを動く触感
上下左右に動く
動いてると感じた:62.9%。
2015/05/22 橋爪智 #2 鬼
57. Friction Measurements on a Large Area TPaD
Nicholas D. Marchuk , J. Edward Colgate , Michael A. Peshkin
どのようなものか?
超音波の振動により触感を与える。
先行研究と比べてどこがすごいか?
ガラス板を使うので透明。後ろにディスプレイを配置
可能。
技術や手法のキモ
「Squeeze Film Effect(スクイズ膜効果)」
ガラス板に取り付けた圧電素子の円盤に、高周波信号
をかける。
実験
振動しない部分=摩擦が発生しない部分が発生。周波
数により場所が変わる。
→摩擦を大きさをかける力の大きさから計測。
→指の場所に合わせて複数の周波数を使い分ける。
関連論文
T-PaD[Winfield, et al. 2007]
2015/05/22 橋爪智 #2 鬼
58. STIMTAC, a Tactile Input Device with Programmable Friction
Michel Amberg , Frédéric Giraud , Betty Semail , Paolo Olivo , Géry Casiez , Nicolas Roussel
どのようなものか?
触感を与えられるタッチデバイス
先行研究と比べてどこがすごいか?
LATPaD : サイズ大きい。ノイズが大きい
TeslaTouch : 高い電圧付加が必要。GNDに接続しなけ
ればいけない
技術や手法のキモ
「Squeeze Film Effect」超音波を用いて、振動を与え
る。
圧電性セラミックを電極にコーディング。
指トラッキングは力センサを用いる
活用法
マウス。キーボード。絵を描く
関連論文
LATPaD[Vincent, et al. 2011]
TeslaTouch[Bau, et al. 2010]
2015/05/22 橋爪智 #2 鬼
59. Surround Haptics: Tactile Feedback for Immersive Gaming Experiences
Ali Israr , Seung-Chan Kim , Ivan Poupyrev , Jan Stec
どのようなものか?
ゲームに合わせて、高解像度の触覚フィードバックを
ユーザーに与える椅子
先行研究と比べてどこがすごいか?
荒く配置した安価な振動アクチュエータで高解像度の
触覚フィードバックを行える。
一点の振動、連続した動き、範囲の振動などを再現
技術や手法のキモ
仮想的な振動アクチュエータをいくつかの振動アク
チュエータを使って作り出す。
physical-physical,physical-virtual,virtual-virtual
ゲームにHaptics Engineを導入し、Haptics APIを用い
てHaptic Displayを操作する。
関連論文
Exploring Surround Haptics Displays[Israr, et al. 2010]
2015/05/22 橋爪智 #2 鬼
60. Audio-Haptic Feedback in Mobile Phones
Angela Chang , Conor O’Sullivan
どのようなものか?
haptics機能のついてない携帯電話に、オーディオ機能
を利用した触覚フィードバックを追加する。
先行研究と比べてどこがすごいか?
簡単に作れて、non-haptic mobile devicesでも大丈夫。
技術や手法のキモ
「MultiFunction Transducer(MFT)」
スピーカーから、音と信号の両方を出力できる。
• Haptic Inheritance
音を2つの周波数帯に分ける
• Synthesis and Matching
低周波数帯(20-300Hz)を使い、触感を伝える
有効性の検討
42人の人を対象に実験を行う。83%の人が触感を感じ
た
2015/05/22 橋爪智 #2 鬼
61. Resolution of Sleep Deprivation Problems using ZZZoo Pillows
Shunsuke Yanaka , Motoki Ishida
どのようなものか?
近年、不眠症の人が多い
→誰かと接していると、安心し睡眠に導入しやすくな
る
→まるで添い寝をしているような、リアルな抱きまく
らを使う。
技術や手法のキモ
breathing sensation : 風船を使って人の呼吸を再現。肺
の形の風船。弱く長い呼吸をする。
heating :お湯を使って人の体温を再現。45℃
有効性の確認
84人の人が実験
呼吸が睡眠を誘ったか→61%
体温が睡眠を誘ったか→85%
関連論文
The Impact of Sleep Disorders on Social Life[Komada,
et al. 2007]
2015/05/22 橋爪智 #2 鬼
65. なかの
Camouflaging an Object from Many Viewpoints3
どんなもの
先⾏行行研究と⽐比べてどこがすごい?
技術や⼿手法のキモはどこ?
どうやって有効性を⽰示した?
議論論はある?
多くの視点から三次元の物体をカモフラージュする.
カモフラージュによってオクルージョン部分の不不連
続がどの程度度⽣生じるか,他の視点ではどれほどにな
るかの検証.
MRF(Markov Random Fields)ベース
新しい三次元物体のカモフラージュモデルを構築
37種類のデータセットを作る
箱形の物体に対してカモフラージュ処理理を施し,
結果を評価する.
オクルージョン,不不連続,テクスチャの歪みが問題
照明や画像の貼りつけに制限あり.
66. なかの
Aliasing Detection and Reduction in Plenoptic Imaging4
どんなもの
先⾏行行研究と⽐比べてどこがすごい?
技術や⼿手法のキモはどこ?
どうやって有効性を⽰示した?
議論論はある?
次に読むべき論論⽂文は?
カメラアレイ撮影の⾓角度度のエイリアシングを除去す
る.エイリアシングの探索索と打ち消しを⾏行行う.
周波数領領域ではなく空間領領域で探索索を⾏行行う
先⾏行行研究がフィルタ,デモザイキング,再パラメー
タ調整などの前処理理でエイリアシング除去を⾏行行うの
に対し,エイリアシング探索索後にリフォーカスの段
階でエイリアシングを取り除く.
8×8の平⾏行行カメラアレイで検証する.カメラ間の
基線⻑⾧長は70mm
今回は基線⻑⾧長が⻑⾧長いデータセットを使った.
次はLytroなどのマイクロレンズアレイで検証する
Globally consistent multi-label assignment on the ray space of 4d light fields
[S. Wanner, C. Straehle, B. Goldluecke / CVPR2013]
Lineassisted light field triangulation and stereo matching.
[Z. Yu, X. Guo, H. Lin, A. Lumsdaine, J. Yu. / ICCV 2013]
67. なかの
Globally Consistent Multi-Label Assignment on the Ray Space of 4D Light Fields5
どんなもの
技術や⼿手法のキモはどこ?
次に読むべき論論⽂文は?
四次元ライトフィールドの光線情報において,
マルチラベルの領領域分割を⾏行行う.
深度度情報,光線情報を⽤用いて領領域分割することで,
⼆二次元(空間)情報だけでは分割が難しかった
領領域を分割可能とする.
The light field camera: Extended depth of field, aliasing, and superresolution.
[T. Bishop, P. Favaro / IEEE Transactions on Pattern Analysis and Machine Intelligence 2012]
68. なかの
Line Assisted Light Field Triangulation and Stereo
Matching
6
どんなもの
技術や⼿手法のキモはどこ?
次に読むべき論論⽂文は?
光線情報を利利⽤用してステレオマッチングの精度度を
向上させる⼿手法.三⾓角測量量の誤差を減らす.
Light Field Stereo Matchingとかいう⼿手法
グラフ構造を作成
Variational light field analysis for disparity estimation and super-resolution.
[S. Wanner and B. Goldl¨uecke/ 2013]
69. なかの
Adaptive stereo similarity fusion using confidence measures / 20157
どんなもの
先⾏行行研究と⽐比べてどこがすごい?
技術や⼿手法のキモはどこ?
どうやって有効性を⽰示した?
議論論はある?
次に読むべき論論⽂文は?
ステレオマッチングの新しい⽅方式,fusion weights
を提案.複数の⼿手法を組み合わせてコスト計算を⾏行行
う⼿手法.付録に既存⼿手法のコスト関数⼀一覧あり.
パラメータに依存する⼿手法を⽤用いないことで⾼高速化
を図っている.
⼀一つのアルゴリズムでは異異なる特性を持つ領領域全て
に対して適切切なマッチングはできない.複数を組み
合わせることでそれを補う.13種と多い.
middleburyとKITTIのデータセットで評価
⼀一枚あたり0.3sと⾼高速だが,0.01sとより⾼高速なアル
ゴリズムが存在する.
・Segment-based stereo matching using belief propagation and a self-adapting dissimilarity measure
[A. Klaus, M. Sormann, K. Karner / ICPR2006]
・On building an accurate stereo matching system on graphics hardware
[X. Mei, X. Sun, M. Zhou, S. Jiao, H. Wang, X. Zhang / ICCV2011]
・Similarity measures for depth estimation
[K. Wegner, O. Stankiewicz / 3DTV-CON2009]
・On accurate dense stereo-matching using a local adaptive multi-cost approach
[C. Stentoumis, L. Grammatikopoulos, I. Kalisperakis, G. Karras / ISPRS2014]
・A quantitative evaluation of confidence measures for stereo vision
[X. Hu, P. Mordohai / PAMI2012]
70. なかの
SIMILARITY MEASURE FOR DEPTH ESTIMATIOM / 20098
どんなもの
技術や⼿手法のキモはどこ?
どうやって有効性を⽰示した?
次に読むべき論論⽂文は?
4種類の視差推定アルゴリズムを組み合わせている.
類似度度の選択性の解析.
Belief Propagationの枠組みを⽤用いる.
名古屋⼤大学の多視点データベースを利利⽤用
・HHI Test Material for 3D Video
[I. Feldmann, M. Muller, F. Zilly, R. Tanger, A. Smolic,P. Kauff, T. Wiegand / 2008]
・ Multiview Video Test Sequence and Camera Parameters
[Yo-Sung Ho, Eun-Kyung Lee, and Cheon Lee / 2008]
・ 1D Parallel Test Sequences for MPEG-FTV
[M. Tanimoto, T. Fujii, N. Fukushima / 2008]
・Non-parametric Local Transforms for Computing Visual Correspondence
[R. Zabih, J. Woodfill / 1994]
71. なかの
Spatiotemporal Stereo via Spatiotemporal Quadric Element (Stequel) Matching9
どんなもの
技術や⼿手法のキモはどこ?
新しいマッチング⼿手法を提案,動き考慮することな
く時間情報を取り込むことができる.
時間⽅方向のエピ線を考える.
オプティカルフロー推定は3D境界や低テクスチャ
で弱いが提案⼿手法はロバストである.
72. なかの
Depth Video Enhancement Based on Weighted Mode Filtering10
どんなもの
議論論はある?
ノイズを含んだ低解像度度のデプスマップの質を⾼高め
る⼿手法(超解像度度とデノイズ).時間⽅方向も使⽤用,
簡単なオプティカルフローを計算し利利⽤用する.
⾮非反復復アルゴリズムのためGPUに載せやすく,⾼高速
化が考えられる.
73. なかの
Fast Bilateral-Space Stereo for Synthetic Defocus11
どんなもの
先⾏行行研究と⽐比べてどこがすごい?
技術や⼿手法のキモはどこ?
議論論はある?
次に読むべき論論⽂文は?
⾼高速な⾃自由焦点ぼけ画像の作成.
Bilateral-spaceを提案
従来研究よりも10から100倍速く,ぼけ具合の精度度
も良良い.
ぼけを作成するというアプリケーションに利利⽤用する
距離離という⾯面では提案⼿手法が有益であるが,実測的
な距離離という⾯面での精度度は悪い.背景と前景が同じ
⾊色で近くにある場合,同⼀一ととらえてしまう.
・Efficient high-resolution stereo matching using local plane sweeps.
[S. N. Sinha, D. Scharstein, and R. Szeliski./CVPR2014]
・Bilateral filtering-based optical flow estimation with occlusion detection.
[J. Xiao, H. Cheng, H. Sawhney, C. Rao, and M. Isnardi./ECCV2006]
・Efficient nonlocal regularization for optical flow.
[P. Kr¨ahenb¨uhl and V. Koltun./ECCV2012]
・Real-time spatiotemporal stereo matching using the dual-cross-bilateral grid
[C. Richardt, D. Orr, I. Davies, A. Criminisi, and N. A. Dodgson./ECCV2010]
どうやって有効性を⽰示した?
視差推定の精度度はmiddlebury,KITTI
75. なかの
Spacetime Stereo: A Unifying Framework for Depth from Triangulation13
どんなもの
先⾏行行研究と⽐比べてどこがすごい?
space time stereoを提案.ステレオカメラの視差推
定でも構造光を⽤用いた視差推定でも利利⽤用可能.
動的なシーンでの利利⽤用も可能.
フレームごとマッチングを取っていたが,複数フ
レームでのマッチングを可能とした.
76. なかの
Learning to Select and Order Vacation Photographs (Disney research)14
技術や⼿手法のキモはどこか?
どんなもの?
先⾏行行研究と⽐比べてどこがすごい?
次に読む論論⽂文は?
どうやって有効性を⽰示した?
あまりにもたくさん撮影した写真たちから⾃自動的に
フォトアルバムを作成する研究.
複雑な視覚での区別を試みたのはこの論論⽂文が初.
5つの異異なるトピックから63の個⼈人的な写真コレク
ションのデータセットを利利⽤用し定量量的に評価する.
写真間の差別かを定義する.顔、全体の絵、何が
写っているか/写っていないかを評価する.
・Jointly aligning and segmenting multiple web photo streams for the inference of collective
photo storylines [G. Kim and E. P. Xing. / CVPR2013]
・Photo sequencing.
[T. Basha, Y. Moses, and S. Avidan.. / CVPR2012]
77. なかの
A Taxonomy and Evaluation of Dense Two-Frame Stereo
Correspondence Algorithms15
どんなもの
どうやって有効性を⽰示した?
次に読むべき論論⽂文は?
ステレオマッチングに関する分類を⾏行行う.
新たなデータセットを作成する.
というよりも他の⼿手法が有効性を⽰示すことができる
ようにデータセットを作成した.
今ではmiddleburyのデータセットと⾔言えばステレオ
業界では超有名
High-resolution stereo datasets with subpixel-accurate ground truth.
78. なかの
Discriminability Limits in Spatio-Temporal Stereo Block Matching1
どんなもの
先⾏行行研究と⽐比べてどこがすごい?
技術や⼿手法のキモはどこ?
どうやって有効性を⽰示した?
次に読むべき論論⽂文は?
spatio-temporal disparity estimationの根本的な前提
の正当性を解析し,マッチング処理理の際に動きが助
けとなる程度度を決定する.
時空間マッチングのエラーを分析し,誤りの原因を
確率率率で導出する(フレーム数,動きの分散,画像特
徴,ノイズの関数).
[3,4,24,33,34]は時空間マッチングの利利点を指摘し
ていたが本論論⽂文はマッチング精度度の向上のために動
きを⽤用いる⼿手法の程度度や性質を研究する.
6つのステレオビデオを⽤用いて検証を⾏行行った.
・Spacetime stereo: Shape recovery for dynamic scenes
[L. Zhang, B. Curless, and S. Seitz / CVPR2003]
・ Spatiotemporal stereo and scene flow via stequel matching
[M. Sizintsev and R. Wildes / PAMI2012]
・ Temporally consistent disparity and optical flow via efficient spatio-temporal filtering
[A. Hosni, C. Rhemann, M. Bleyer, and M. Gelautz / PRCAIVT2012]
・ Spacetime stereo: A unifying framework for depth from triangulation
[PAMI2005]
・ Dynamic depth recovery from multiple synchronized video streams
[H. Tao, H. Sawhney, and R. Kumar / CVPR2001]
・ Spatiotemporal descriptor for wide-baseline stereo reconstruction of non-rigid and
ambiguous scenes
[ECCV2003]
80. なかの
Fast Semi-dense Surface Reconstruction from
Stereoscopic Video in Laparoscopic Surgery3
どんなもの
⼿手法の流流れ
次に読むべき論論⽂文は?
腹腔内⼿手術の際にステレオビデオから⾼高速に物体の
三次元再構成を⾏行行う研究.
Evaluation of stereo matching costs on images with radiometric differences
[Hirschmueller, H., Scharstein, D / PAMI2008]
スコープカメラから画像取得,GPUで演算する.
視差を算出し,フィルタにかける.距離離に変換.
点群を再びフィルタにかけて三次元再構成.
81. なかの
3D Reconstruction from Accidental Motion4
どんなもの
技術や⼿手法のキモはどこ?
議論論はある?
数秒のビデオ(単眼)から三次元再構成を⾏行行う.
⼿手ぶれなどの動きから再構成が可能で,特定の動き
や機材を必要としない.
短い基線⻑⾧長でも再構成が可能(3mmの基線⻑⾧長)
基線⻑⾧長が短いため,背景の精度度が低くなる.
リフォーカス画像作成には⼗十分.
練習では上⼿手く動作したが,検証がまだ必要.
82. なかの
Panoramic Video from Unstructured Camera Arrays5
どんなもの
技術や⼿手法のキモはどこ?
議論論はある?
複数のカメラを⽤用いたパノラマ撮影を⾏行行う.
その際に不不⾃自然さがないような動画を作成する.
不不⾃自然さを感じる感覚特性を提⽰示し,それにのっ
とって対策を講じている.
⼀一つのカメラの解像度度と品質を向上させるよりも複
数台のカメラを組み合わせることがはるかに簡単で
有益である.専⾨門家でなくてもGoProのカメラセッ
トを組み合わせることは容易易.
カメラの配置は厳密に決められていない.完璧な時
間同期やローリングシャッターの不不⾜足のような実撮
影での問題もクリアしている.
先⾏行行研究と⽐比べてどこがすごい?
どうやって有効性を⽰示した?
左のシステムは14台のカメラを使⽤用.
右のシステムはGoProを5台使⽤用.
Disney 2015/5/8
84. なかの
A Super Resolution Reconstruction Scheme for Mixed Spatio-Temporal
Stereo Video
7
どんなもの
技術や⼿手法のキモはどこ?
ビデオ超解像アルゴリズム
⼆二台のカメラを使⽤用.
⼀一台は低解像度度で⾼高速,⼀一台は⾼高解像度度で低速.
HHI 3DV ftp siteのBookarrivalとbeergadenを使⽤用
どうやって有効性を⽰示した?
85. なかの
What Is a Good Day for Outdoor Photometric Stereo?8
どんなもの
先⾏行行研究と⽐比べてどこがすごい?
議論論はある?
次に読むべき論論⽂文は?
屋外における照度度差があるステレオの研究.
屋外でステレオを⾏行行う際に有利利or不不利利な⽇日照条件を
明らかにする.
点光源を⽤用いた研究は⾏行行われていたが,屋外での研
究はされていなかった.
晴れより曇りの⽅方が精度度が良良い.雲があるから特徴
量量を取りやすい.雑⾳音を⽩白⾊色ガウスモデルを想定.
季節ごとのデータセットを利利⽤用してみても良良い
Time-lapse photometric stereo and applications.
[F. Shen, K. Sunkavalli, N. Bonneel, S. Rusinkiewicz, H. Pfister,and X. Tong./
2014]
Outdoor photometric stereo
[L.-F. Yu, S.-K. Yeung, Y.-W. Tai, D. Terzopoulos, and T. F.Chan /ICCP2013]
どうやって有効性を⽰示した?
屋外の照明に関するHDR環境マップのデータベース
を利利⽤用.
Disney 2015/4/24
86. なかの
COLORBRUSH: ANIMATED DIFFUSION FOR INTUITIVE
COLORIZATION SIMULATING WATER PAINTING9
どんなもの
アニメを⽔水彩画で描いたように変換する.
⽔水彩画を描くには経験が必要であるが,それを作成
するアルゴリズムを考案.絵具が⽔水によりどうにじ
むかシュミレーションしている.
Disney 2014/10/27 ICIP2014
次に読むべき論論⽂文は?
・Gabor-space geodesic active contours,” In Algebraic Frames for the Perception-Action
Cycle [C. Sagiv, N.A. Sochen, and Y.Y. Zeevi ./2000]
・Practical temporal consistency for image-based graphics applications
[M. Lang, O. Wang, T. Aydin, A. Smolic and M. Gross /SIGGRAPH2012]
・Computer-Generated Watercolor
[C.J. Curtis, S.E. Anderson, J.E. Seims, K.W. Fleischer, and D.H. Salesin, /SIGGRAPH1997]
87. なかの
From Sound to Sight: Using Audio Processing to enable Visible Light Communication10
どんなもの
光に情報を載せる技術.プロジェクトページがあって光関係の研究が8個載っている
http://www.disneyresearch.com/project/visible-light-communication/
ビデオのURL
http://www.disneyresearch.com/wpcontent/
uploads/
Pub_̲InvisibleLightCommunication_̲Siggraph14_̲video.
mp4