201211106 河原圭佑 2 (鬼)

SmartSkin An Infrastructure for Freehand Manipulation on Interactive Surfaces

Jun Rekimoto

何をしたか

静電容量センサーを用いて 複数の人の手や

指を認識するセンサーアーキテクチャやイン

タラクションの提案

CHI2002

何が新しいか

今までのマウスは1点のカーソルだったが そ

れを複数にして 手で操作できるようにした

静電容量の手のセンシングの方法は テルミ

ンやZimerrmans氏らによって既にあったが

本研究はそれらを用いたインタラクションの

設計などについて

やりのこしたこと

平面じゃないところの面のインタラクション

触覚フィードバック

透明な静電容量計測素子

静電容量を用いたデバイス間の通信

実装方法

httpswwwyoutubecomwatchv=waSXkJBKT1s

静電容量のメッシュを用いた

検出した静電容量をbicubic補完して 手

の位置をメッシュの細かさ以上に検出

201211106 河原圭佑 2 (鬼)

CyberCode Designing Augmented Reality Environmentswith Visual Tags

Jun Rekimoto Yuji Ayatsuka

何をしたか

DARE 2000

Augmented Realty に適用可能な二次元コード

(現在で言うARマーカ)を提案

他のシステム

RFタグ

2次元バーコード

赤外線IDコード

メリット

印刷できる

カメラの解像度が低い モバイル端末でも使用可能

カメラからの3次元的な位置が計測可能

アプリケーション

物理的なものにリンクを埋め込む

屋内ナビゲーション

映像に 注釈情報を重畳させる

Direct manipulation device for physical environments

テレビにARマーカを表示する

ユビキタスコンピューティング

紙から三次元的に像を映し出す

201211106 河原圭佑 2 (鬼)

Pinwheels Visualizing Information Flow in an Architectural Space

Hiroshi Ishii Sandia Ren and Phil Frei CHI 2001

何をしたか

風車を使って 情報世界のbitsの風を現実で

表現している

なぜ風車なのか

風自体の制御や 情報化は大変だが 風車が

回るというメタファーを通じて 情報の流れ

を物理的情報的に可視化できるから

要件

1 スケーラビリティがある風車のシステム

2 コンテンツの模索

3 時空間的にコンテンツがいろんな模索ができる

アプリケーション

a 人の存在

b 原子的な 宇宙的な現象

c 巨大なシステムの状態表示

道の混み具合 地下鉄の人の量 エレベータの位置

情報空間からの通知

添付ファイルが大きいメールが来ると強く回って

小さいメッセージだと一瞬だけ回る

時間軸があるrarr風が通るのを再現

201211106 河原圭佑 2 (鬼)

PegBlocks a Learning Aid for the Elementary Classroom

Ben Piper and Hiroshi Ishii CHI 2002

何をしたか

PegBlockという初等教育の物理を教えるの

に良い教育的おもちゃを作った

主張

物理を教えるのに 抽象的な概念からスター

トする場合が多いが PegBlockを用いて 具

体的なモノで遊びながら勉強を初められる

実装

9つのペグがついており すべてにピニオンとラッ

クとモータが入っている

一つを押すと モータで発電されて 他のPegBlock

のペグに電気的に信号が伝わる

評価

小学校に実際に導入はしていないが 多くの子供が

遊んだ

物理法則

バッテリーが入ってると思いこんだ子供が バッテ

リーが入っていないと聞かされて 驚いたようだっ

た

このPegBlocksはエネルギーの変換を子どもたちに

実感させるのに適している

次

Intouch [CHI97]

201211106 河原圭佑 2 (鬼)

inTouch A Medium for Haptic Interpersonal Communication

Scott Brave and Andrew Dahley CHI 1997

何をしたか

遠隔にいる人と触覚的なフィードバックを

介して コミュニケーションできるinTouch

というコミュニケーションツールを試作し

た 触覚的なテレポーテーションを目指す

目標

他の触覚系の研究と違ってこの研究では物

理的な形の知覚にこだわっていない

だが 人の存在感を感じられる

触れるということは親密なコミュニケーショ

ンの場面で多い

デザイン

ローラを使うことで 前後どっちの方向に

でも回転することができ また アクティブ

にもパッシブにも切り替えることができる

将来

この論文ではメカニカルな柔らかいシャフ

トで接続されているが 電気的な接続をする

ものを構築中である

201211106 河原圭佑 2 (鬼)

Facial Performance Sensing Head-Mounted DisplayHao Li　　Laura Trutoiu　　Kyle Olszewski　　Lingyu Wei

Tristan Trutna　　Pei-Lun Hsieh　　Aaron Nicholls　 Chongyang Ma

何をしたか

SIGGRAPH2015

httpswwwyoutubecomwatchv=rgKkEnaaSDc

HMDを装着していても表情を計測できる

システムの提案 構築

実装方法

HMDで隠れる部分

　rarr ひずみゲージ8つから機械学習

隠れていない部分(口など)

　rarr RGB-Dカメラ(Intel Realsense)で認識

処理

教師データ ディスプレイを外して 3D計測特徴量ベクトル ひずみゲージの値 + 口元の3D計測

線形回帰モデルを用いて 下式のT Cを計算

x = T ( sb)+ c

Future work

ひずみゲージの数を増やして より表現力を増やす EyeTrackerと組み合わせて より表情らしく

201211106 河原圭佑 2 (鬼)

Pinwheels Visualizing Information Flow in an Architectural Space

Hiroshi Ishii Sandia Ren and Phil Frei CHI 2001

何をしたか

風車を使って 情報世界のbitsの風を現実で

表現している

なぜ風車なのか

風自体の制御や 情報化は大変だが 風車が

回るというメタファーを通じて 情報の流れ

を物理的情報的に可視化できるから

要件

1 スケーラビリティがある風車のシステム

2 コンテンツの模索

3 時空間的にコンテンツがいろんな模索ができる

アプリケーション

a 人の存在

b 原子的な 宇宙的な現象

c 巨大なシステムの状態表示

道の混み具合 地下鉄の人の量 エレベータの位置

情報空間からの通知

添付ファイルが大きいメールが来ると強く回って

小さいメッセージだと一瞬だけ回る

時間軸があるrarr風が通るのを再現

201211106 河原圭佑 2 (鬼)

PegBlocks a Learning Aid for the Elementary Classroom

Ben Piper and Hiroshi Ishii CHI 2002

何をしたか

PegBlockという初等教育の物理を教えるの

に良い教育的おもちゃを作った

主張

物理を教えるのに 抽象的な概念からスター

トする場合が多いが PegBlockを用いて 具

体的なモノで遊びながら勉強を初められる

実装

9つのペグがついており すべてにピニオンとラッ

クとモータが入っている

一つを押すと モータで発電されて 他のPegBlock

のペグに電気的に信号が伝わる

評価

小学校に実際に導入はしていないが 多くの子供が

遊んだ

物理法則

バッテリーが入ってると思いこんだ子供が バッテ

リーが入っていないと聞かされて 驚いたようだっ

た

このPegBlocksはエネルギーの変換を子どもたちに

実感させるのに適している

次

Intouch [CHI97]

201211106 河原圭佑 2 (鬼)

inTouch A Medium for Haptic Interpersonal Communication

Scott Brave and Andrew Dahley CHI 1997

何をしたか

遠隔にいる人と触覚的なフィードバックを

介して コミュニケーションできるinTouch

というコミュニケーションツールを試作し

た 触覚的なテレポーテーションを目指す

目標

他の触覚系の研究と違ってこの研究では物

理的な形の知覚にこだわっていない

だが 人の存在感を感じられる

触れるということは親密なコミュニケーショ

ンの場面で多い

デザイン

ローラを使うことで 前後どっちの方向に

でも回転することができ また アクティブ

にもパッシブにも切り替えることができる

将来

この論文ではメカニカルな柔らかいシャフ

トで接続されているが 電気的な接続をする

ものを構築中である

201211106 河原圭佑 2 (鬼)

Facial Performance Sensing Head-Mounted DisplayHao Li　　Laura Trutoiu　　Kyle Olszewski　　Lingyu Wei

Tristan Trutna　　Pei-Lun Hsieh　　Aaron Nicholls　 Chongyang Ma

何をしたか

SIGGRAPH2015

httpswwwyoutubecomwatchv=rgKkEnaaSDc

HMDを装着していても表情を計測できる

システムの提案 構築

実装方法

HMDで隠れる部分

　rarr ひずみゲージ8つから機械学習

隠れていない部分(口など)

　rarr RGB-Dカメラ(Intel Realsense)で認識

処理

教師データ ディスプレイを外して 3D計測特徴量ベクトル ひずみゲージの値 + 口元の3D計測

線形回帰モデルを用いて 下式のT Cを計算

x = T ( sb)+ c

Future work

ひずみゲージの数を増やして より表現力を増やす EyeTrackerと組み合わせて より表情らしく

201211106 河原圭佑 2 (鬼)

PegBlocks a Learning Aid for the Elementary Classroom

Ben Piper and Hiroshi Ishii CHI 2002

何をしたか

PegBlockという初等教育の物理を教えるの

に良い教育的おもちゃを作った

主張

物理を教えるのに 抽象的な概念からスター

トする場合が多いが PegBlockを用いて 具

体的なモノで遊びながら勉強を初められる

実装

9つのペグがついており すべてにピニオンとラッ

クとモータが入っている

一つを押すと モータで発電されて 他のPegBlock

のペグに電気的に信号が伝わる

評価

小学校に実際に導入はしていないが 多くの子供が

遊んだ

物理法則

バッテリーが入ってると思いこんだ子供が バッテ

リーが入っていないと聞かされて 驚いたようだっ

た

このPegBlocksはエネルギーの変換を子どもたちに

実感させるのに適している

次

Intouch [CHI97]

201211106 河原圭佑 2 (鬼)

inTouch A Medium for Haptic Interpersonal Communication

Scott Brave and Andrew Dahley CHI 1997

何をしたか

遠隔にいる人と触覚的なフィードバックを

介して コミュニケーションできるinTouch

というコミュニケーションツールを試作し

た 触覚的なテレポーテーションを目指す

目標

他の触覚系の研究と違ってこの研究では物

理的な形の知覚にこだわっていない

だが 人の存在感を感じられる

触れるということは親密なコミュニケーショ

ンの場面で多い

デザイン

ローラを使うことで 前後どっちの方向に

でも回転することができ また アクティブ

にもパッシブにも切り替えることができる

将来

この論文ではメカニカルな柔らかいシャフ

トで接続されているが 電気的な接続をする

ものを構築中である

201211106 河原圭佑 2 (鬼)

Facial Performance Sensing Head-Mounted DisplayHao Li　　Laura Trutoiu　　Kyle Olszewski　　Lingyu Wei

Tristan Trutna　　Pei-Lun Hsieh　　Aaron Nicholls　 Chongyang Ma

何をしたか

SIGGRAPH2015

httpswwwyoutubecomwatchv=rgKkEnaaSDc

HMDを装着していても表情を計測できる

システムの提案 構築

実装方法

HMDで隠れる部分

　rarr ひずみゲージ8つから機械学習

隠れていない部分(口など)

　rarr RGB-Dカメラ(Intel Realsense)で認識

処理

教師データ ディスプレイを外して 3D計測特徴量ベクトル ひずみゲージの値 + 口元の3D計測

線形回帰モデルを用いて 下式のT Cを計算

x = T ( sb)+ c

Future work

ひずみゲージの数を増やして より表現力を増やす EyeTrackerと組み合わせて より表情らしく

201211106 河原圭佑 2 (鬼)

inTouch A Medium for Haptic Interpersonal Communication

Scott Brave and Andrew Dahley CHI 1997

何をしたか

遠隔にいる人と触覚的なフィードバックを

介して コミュニケーションできるinTouch

というコミュニケーションツールを試作し

た 触覚的なテレポーテーションを目指す

目標

他の触覚系の研究と違ってこの研究では物

理的な形の知覚にこだわっていない

だが 人の存在感を感じられる

触れるということは親密なコミュニケーショ

ンの場面で多い

デザイン

ローラを使うことで 前後どっちの方向に

でも回転することができ また アクティブ

にもパッシブにも切り替えることができる

将来

この論文ではメカニカルな柔らかいシャフ

トで接続されているが 電気的な接続をする

ものを構築中である

201211106 河原圭佑 2 (鬼)

Facial Performance Sensing Head-Mounted DisplayHao Li　　Laura Trutoiu　　Kyle Olszewski　　Lingyu Wei

Tristan Trutna　　Pei-Lun Hsieh　　Aaron Nicholls　 Chongyang Ma

何をしたか

SIGGRAPH2015

httpswwwyoutubecomwatchv=rgKkEnaaSDc

HMDを装着していても表情を計測できる

システムの提案 構築

実装方法

HMDで隠れる部分

　rarr ひずみゲージ8つから機械学習

隠れていない部分(口など)

　rarr RGB-Dカメラ(Intel Realsense)で認識

処理

教師データ ディスプレイを外して 3D計測特徴量ベクトル ひずみゲージの値 + 口元の3D計測

線形回帰モデルを用いて 下式のT Cを計算

x = T ( sb)+ c

Future work

ひずみゲージの数を増やして より表現力を増やす EyeTrackerと組み合わせて より表情らしく

201211106 河原圭佑 2 (鬼)

Facial Performance Sensing Head-Mounted DisplayHao Li　　Laura Trutoiu　　Kyle Olszewski　　Lingyu Wei

Tristan Trutna　　Pei-Lun Hsieh　　Aaron Nicholls　 Chongyang Ma

何をしたか

SIGGRAPH2015

httpswwwyoutubecomwatchv=rgKkEnaaSDc

HMDを装着していても表情を計測できる

システムの提案 構築

実装方法

HMDで隠れる部分

　rarr ひずみゲージ8つから機械学習

隠れていない部分(口など)

　rarr RGB-Dカメラ(Intel Realsense)で認識

処理

教師データ ディスプレイを外して 3D計測特徴量ベクトル ひずみゲージの値 + 口元の3D計測

線形回帰モデルを用いて 下式のT Cを計算

x = T ( sb)+ c

Future work

ひずみゲージの数を増やして より表現力を増やす EyeTrackerと組み合わせて より表情らしく

2 201313095

body-centric

digitalwallet

14inpublic

socialacceptance

bull  TsukadaKandYasumuraMAcEvebeltBelt-typewearabletacEledisplayfordirecEonalnavigaEonInProcofUbiCompSpringer2004384ndash399

bull  RekimotoJGesturewristandgesturepadUnobtrusivewearableinteracEondevicesInProcofISWCIEEE(2001)21ndash27

BeltampAnampUnobtrusiveampTouchampInputampDeviceampforampHeadwornampDisplaysamp(CHIrsquo15)

DavidDobbelsteinPhilippHockEnricoRukzio

h]pswwwyoutubecomwatchv=y8Ub3u2IhsA

2 201313095

Poke

Poke

25Poke 3

noEceability 3

bull  HarrisonCLimBYShickAampHudsonSE(2009April)WheretolocatewearabledisplaysreacEonEmeperformanceofvisualalertsfromEptotoeInProcCHIrsquo09ACM941-944

bull  CampbellCSampTarasewichPDesigningvisualnoEficaEoncuesformobiledevicesInCHIEA04ACM1199-1202

NoERingampAampComparaEveampStudyampofampNoEficaEonampChannelsampforampWearableampInteracEveampRingsamp(CHIrsquo15)

ThijsRoumenSimonTPerraultShengdongZhao

h]pswwwyoutubecomwatchv=kOaphlSryf4

2 201313095

7 2 3

on-body

bull  GemperleFKasabachCSEvoricJBauerMandMarEnRDesignforWearabilityInProcISWCrsquo98116-122

WhereamptoampLocateampWearableampDisplaysampReacEonampTimeampPerformanceampofampVisualampAlertsampfromampTipamptoampToeamp(CHIrsquo09)

ChrisHarrisonBrianYLimAubreyShickSco]EHudson

2 201313095

FingerReader

4

939

34 5

bull  NanayakkaraSShilkrotRYeoKPandMaesPEyeRingafinger-worninputdeviceforseamlessinteracEonswithoursurroundingsInProcofAugmentedHuman(2013)13-20

FingerReaderampAampWearableampDeviceamptoampExploreampPrintedampTextamponamptheampGoamp(CHIrsquo15)

RoyShilkrotJochenHuberMengEeWongPaneMaesSurangaNanayakkara

h]psvimeocom86912300

2 201313095

Cyclops

1

360degMHI RDF

20 20MHI

79 RDF92

bull  MorrisDSaponasTSGuilloryAandKelnerIRecofitUsingawearablesensortofindrecognizeandcountrepeEEveexercisesInProcampACMampCHIamprsquo14amp(2014)3225ndash3234

CyclopsampWearableampandampSinglePieceampFullBodyampGestureampInputampDevicesamp(CHIrsquo15)amp

LiweiChanChi-HaoHsiehYi-LingChenShuoYangDa-YuanHuangRong-HaoLiangBing-YuChen

h]pswwwyoutubecomwatchv=JYm_3oNUGIk

2 201313095

Muehlbaueretal[24]

SVM

114 94 3020

9599 4 98 7 96 13

93

bull  MuehlbauerMBahleGLukowiczPWhatcananarmholsterwornsmartphonedoforacEvityrecogni-EonProcIEEEISWC2011

RecoFitampUsingampaampWearableampSensoramptoampFindampRecognizeampandampCountampRepeEEveampExercisesamp(CHIrsquo14)

DanMorrisTSco]SaponasAndrewGuilloryIlyaKelner

h]pswwwyoutubecomwatchv=zpa4rVGlO68

2 201313095

2

31 2

15-20 90-95

Hambone

bull  BAmentoWHillandLTerveenThesoundofonehandawrist-mountedbio-acousEcfingerEpgestureinterfaceInCHIrsquo02CHIrsquo02extendedabstractsonHumanfactorsincompuEngsystemspages724ndash725NewYorkNYUSA2002ACMPress

HamboneampAampBioAcousEcampGestureampInterfaceamp(ISWCrsquo07)

TravisDeyleSzabolcsPalinkoErikaShehanPooleandThadStarner

h]pswwwyoutubecomwatchv=Uxj-vyal84M

2 201313095

bull  RabinerLR(1989)ATutorialonHiddenMarkovModelsandSelectedApplicaEonsinSpeechRecogni-EonProcIEEEVol77257-28

TheampSoundampofampOneampHandampAampWristmountedampBioacousEcampFingerEpampGestureampInterfaceamp(CHIrsquo02)

BrianAmentoWillHillLorenTerveen

2 201313095

Non-linearSpaEalSampling

SVM

12

948

15cm

bull  NakatsumaKShinodaHMakinoYSatoKandMaenoTTouchinterfaceonbackofthehandInprocofSIGGRAPHrsquo11(2011)391ndash391

bull  ButlerAIzadiSandHodgesSSidesightmulE-touchinteracEonaroundsmalldevicesInProcofUISTrsquo08(2008)201ndash204

zSenseampEnablingampShallowampDepthampGestureampRecogniEonampforampGreaterampInputampExpressivityamponampSmartampWearablesamp(CHIrsquo15)

AnushaWithanaRoshanPeirisNipunaSamarasekaraSurangaNanayakkara

h]pswwwyoutubecomwatchv=fQobwL8eSU4

2 201313095

bull  HARRISONCTANDANDMORRISD2010Skinputap-propriaEngthebodyasaninputsurfaceInProceedingsofthe28thinternaEonalconferenceonHumanfactorsincompuEngsystemsACMNewYorkNYUSACHIrsquo10453ndash462

Touchampinterfaceamponampbackampofamptheamphandamp(SIGGRAPH11)

KeiNakatsumaHiroyukiShinodaYasutoshiMakinoKatsunariSatoTakashiMaeno

h]pswwwyoutubecomwatchv=tKNLxh9Yw2M

2 201313095

Pose-IO EMS

Pose-IO

EMS

EMS58deg

46 5 be]er

bull  RoudautARauASterzCPlauthMLopesPandBaudischPGestureoutputeyes-freeoutputusingaforcefeedbacktouchsurfaceProcCHI1325472556

PropriocepEveampInteracEonamp(CHIrsquo15)amp

PedroLopesAlexandraIonWilliMuellerDanielHoffmannPatrikJonellPatrickBaudisch

h]pswwwyoutubecomwatchv=KMxIw7zhlw

2 201313095

EMS

AR EMSEMS

GPS

bull  TamakiEMiyakiTandRekimotoJPossessedHandAhandgesturemanipulaEonsystemusingelectricalsEmuliInProcampAHrsquo10amp(2010)21ndash25

CruiseampControlampforampPedestriansampControllingampWalkingampDirecEonampusingampElectricalampMuscleampSEmulaEonamp(CHIrsquo15)amp

MaxPfeifferTimDunteStefanSchneegassFlorianAltMichaelRohs

h]pswwwyoutubecomwatchv=JSfnm_HoUv4

2 201313095

EMS

EMS

EMS 16automaEccalibraEonsystem

auto-calibraEonsystems 16

8875g

bull  KruijffESchmalsEegDandBeckhausSUsingneuromuscularelectricalsEmulaEonforpseudo-hapEcfeedbackInProceedingsoftheACMsymposiumonVirtualrealitysoywareandtechnologyVRSTrsquo06ACM(NewYorkNYUSA2006)316ndash319

PossessedHandampTechniquesampforampControllingampHumanampHandsampusingampElectricalampMusclesampSEmuliamp(CHIrsquo11)amp

EmiTamakiTakashiMiyakiJunRekimoto

h]psvimeocom27044937

2 201313095

EMS

EMS

RFIDEMS

1276

bull  KruijffESchmalsEegDandBeckhausDUsingneuromuscularelectricalsEmulaEonforpseudo-hapEcfeedbackProcVRST06316mdash319

Affordance++ampallowingampobjectsamptoampcommunicateampdynamicampuseamp(CHIrsquo15)

PedroLopesPatrikJonellPatrickBaudisch

h]pswwwyoutubecomwatchv=d0J7V37zQjY

2 201313095

EMS

EMS

EMS

ReacEonloss

EMS

UsingampNeuromuscularampElectricalampSEmulaEonampforampPseudoHapEcampFeedbackamp(VRSTrsquo06)

ErnstKruijffDieterSchmalsEegSteffiBeckhaus

2 201313095

SVM

106 Per-User

863 13

712

13

bull  SatoMPoupyrevIandHarrisonCToucheenhancingtouchinteracEononhumansscreensliquidsandeverydayobjectsInCHIrsquo12483ndash492

bull  TimCollinsAcEveacousEctouchinterfaceElectronicsLe]ersVol45No20pp1055ndash1056242009

TouchampampampAcEvateampAddingampInteracEvityamptoampExisEngampObjectsampusingampAcEveampAcousEcampSensingamp(UISTrsquo13)

MakotoOnoBuntarouShizukiJiroTanaka

h]pswwwyoutubecomwatchv=XgxXi6w8IQc

2 201313095

13

13

SVM

on-body

per-user 5 967 4987

bull  HarrisonCBenkoHWilsonAOmniTouchwearablemulEtouchinteracEoneverywhereinUIST11441-450

bull  MatsushitaNandRekimotoJHoloWalldesigningafingerhandbodyandobjectsensiEvewallUIST97209-210

ToucheampEnhancingampTouchampInteracEonamponampHumansampScreensampLiquidsampandampEverydayampObjectsamp(CHIrsquo12)

MunehikoSatoIvanPoupyrevChrisHarrison

h]pswwwyoutubecomwatchv=E4tYpXVTjxA

2 201313095

SVM

9 9TapSense 4

95 99

TapSenseDelete

bull  HarrisonCTanDandMorrisDSkinputappropriat-ingthebodyasaninputsurfaceInProcCHI10453-462

TapSenseampEnhancingampFingerampInteracEonamponampTouchampSurfacesamp(UISTrsquo11)

ChrisHarrisonJuliaSchwarzSco]EHudson

h]pswwwyoutubecomwatchv=-oN96cucBr4

2 201313095

13

13

22 SVM

13 FingersWholeArmForearm 876 Fingers877 WholeArm 955

883 Forearm 815

833

GUI

bull  SaponasTSTanDSMorrisDandBalakrishnanRDemonstraEngthefeasibilityofusingforearmelectromyographyformuscle-computerinterfacesInProcCHIrsquo09515-24

SkinputampAppropriaEngamptheampBodyampasampanampInputampSurfaceamp(CHIrsquo10)

ChrisHarrisonDesneyTanDanMorris

h]pswwwyoutubecomwatchv=g3XPUdW9Ryg

2 201313095

Fiberio

10 330 150

148 2

Fiberio

bull  MatsushitaNandRekimotoJHoloWallDesigningaFingerHandBodyObjectSensiEveWallProcUIST97209ndash210

FiberioampAampTouchscreenampthatampSensesampFingerprintsamp(UISTrsquo13)

ChrisEanHolzPatrickBaudisch

h]pswwwyoutubecomwatchv=p1a5yLzuTqA

2 201313095

3D

3D

bull  GeigerMVollertsenFTheMechanismsofLaserFormingCIRPANNALSlsquo93421301-304

bull  WillisKDDXuCWuJKLevinGGrossMDInteracEvefabricaEonnewinterfacesfordigitalfabricaEonProcTEI11pp69-72

LaserOrigamiampLaserCugngamp3DampObjectsamp(CHIrsquo13)

StefanieMuellerBasEanKruckPatrickBaudisch

h]pswwwyoutubecomwatchv=arjRtCjI9AQ

2 201313095

bend

bull  HyunyoungSongFranccediloisGuimbreEegravereChangHuHodLipsonModelCraycapturingfreehandannotaEonsandeditsonphysical3DmodelsProceedingsofthe19thannualACMsymposiumonUserinterfacesoywareandtechnologyOctober15-182006MontreuxSwitzerland

InteracEveampConstrucEonampInteracEveampFabricaEonampofampFuncEonalampMechanicalampDevicesamp(UISTrsquo12)

StefanieMuellerPedroLopesPatrickBaudisch

h]pdlacmorgcitaEoncfmid=23801162380191

2 201313095

3D

3D

bull  SavageVSchmidtRGrossmanTFitzmauriceGandHartmannBAseriesoftubesAddinginteracEvityto3dprintsusinginternalpipesInProcUIST14(2014)

3DampPrinEngampPneumaEcampDeviceampControlsampwithampVariableampAcEvaEonampForceampCapabiliEesamp(CHIrsquo15)amp

MarynelVazquezEricBrockmeyerRutaDesaiChrisHarrisonSco]EHudson

h]pswwwyoutubecomwatchv=-4gFYvhkz0Y

2 201313095

OpenFab 3D

fablets

3 3

bull  CHENDMATUSIKWSITTHI-AMORNPDIDYKPANDLEVIND2013Spec2FabAreducer-tunermodelfortranslat-ingspecificaEonsto3DprintsACMTransGraph324(July)

OpenFabampAampProgrammableampPipelineampforampMulEMaterialampFabricaEonamp(SIGGRAPHrsquo13)

KirilVidimcˇeSzu-PoWangJonathanRagan-KelleyWojciechMatusik

2 201313095

3D

3D

3D

3D14 30 13 67

244

14

3D

bull  MuellerSKruckBBaudischPLaserOrigamiLaser-Cunng3DObjectsProcCHIrsquo132585-2592

faBrickaEonampFastamp3DampPrinEngampofampFuncEonalampObjectsampbyampIntegraEngampConstrucEonampKitampBuildingampBlocksamp(CHIrsquo14)amp

StefanieMuellerTobiasMohrKersEnGuentherJohannesFrohnhofenPatrickBaudisch

h]pswwwyoutubecomwatchv=BlO6YRcLJjE

Touching13 the13 Void13 Direct-shy‐Touch13 Interac4on13 for13 Intangible13 Displays(CHIrsquo10)Li-Wei Chan Hui-Shan Kao Mike Y Chen Ming-Sui Jane Yi-Ping Hung

201413109　久保勇貴 2（鬼コース）13

どんなもの13

空中像へのタッチのエラーに関する調査及び影や音のフィードバックを付与することによるパーフォーマンス向上を示した研究13

先行研究と比べてどこがすごい13

平面画像をタッチする際の奥行きに関するエラーの正確な取得を初めて検証13

技術や手法のキモはどこ13

２つの赤外線カメラを用いた正確なタッチの検出13

どうやって有効だと検証した13

タッチ時の奥行きの正確さに関する被験者実験を実施またタッチする際に影や音を付けた際の反応時間を被験者実験で検証13

議論はある13

ユーザは慣れるまで影や音のフィードバックが必要だがそのあとは必要なくなる13

次に読むべき論文は13

MirageTable13 （CHI12） 13

MirageTable13 Freehand13 Interac4on13 on13 a13 Projected13 13 Augmented13 Reality13 Tabletop(CHIrsquo12)

Hrvoje Benko Ricardo Jota Andrew D Wilson

201413109　久保勇貴 2（鬼コース）13

どんなもの13

テーブル上においてバーチャルな物体をリアルタイムで現実でものを動かすことと同様な動作に操作可能なシステム13

先行研究と比べてどこがすごい13

現実の物体をリアルタイムで画面に取りこむことができ質の高いフリーハンドインタラクションを実現した点13

技術や手法のキモはどこ13

色深度前景頭追跡プロキシパーティクルを駆使したリアルタイムメッシュの作成13

どうやって有効だと検証した13

凹凸など例外な表面に対しての投影した際の画像の質についての評価実験また仮想物体の奥行き知覚に関する実験も行った13

議論はある13

前面のみしかキャプチャしていないため差が生じる握っている場所の再現は未解決な課題である13

次に読むべき論文は13

Hirsch13 et13 al13 201413 (SIGGRAPHrsquo14)13

A13 Compressive13 Light13 Field13 Projec4on13 System13 (SIGGRAPHrsquo14)MaChew13 Hirsch13 Gordon13 Wetzstein13 Ramesh13 Raskar

201413109　久保勇貴 2（鬼コース）13

どんなもの13

通常の3Dディスプレイに比べて解像度輝度コントラストを改善した圧縮ライトフィードディスプレイ13

先行研究と比べてどこがすごい13

多視点立体視を複数でなく１台のプロジェクタを用いて実現した13

技術や手法のキモはどこ13

受動的スクリーンと高速切り替えプロジェクタによる新しい光学設計13

どうやって有効だと検証した13

4つのシーン例を投影したものを示したアニメーションの3D効果について観察を行った13

議論はある13

光路長を広げると観察できる画質が大幅に制限され他のライトフィードビューと混線が生じる13

次に読むべき論文は13

Butler13 et13 al13 201113

Vermeer13 Direct13 Interac4on13 with13 a13 360deg13 Viewable13 3D13 Display(UISTrsquo11) Alex Butler Otmar Hilliges Shahram Izadi Steve Hodges David Molyneaux David Kim

201413109　久保勇貴 2（鬼コース）13

どんなもの13

映し出された3Dオブジェクトとインタラクションを行えるシステム13

先行研究と比べてどこがすごい13

ディスプレイ内の画像とのインタラクションを提案ボリュームディスプレイを支援する新しいセンシング法の提案13

技術や手法のキモはどこ13

パラボラ鏡に取り付けた赤外線カメラセンサによる指先検出13

どうやって有効だと検証した13

アプリケーション例を示した13

議論はある13

パラボラ鏡の大きさよりもディスプレイサイズが小さくなってしまう13

次に読むべき論文は13

Hirsch13 et13 al13 201213

8D13 Interac4ng13 with13 a13 Relightable13 Glasses-shy‐Free13 3D13 Display(CHIrsquo12)Li-Wei Chan Hui-Shan Kao Mike Y Chen Ming-Sui Jane Yi-Ping Hung

201413109　久保勇貴 2（鬼コース）13

どんなもの13

ライトフィードによる入力とライトフィールドによる表示を行うリアルタイム8Dディスプレイ13

先行研究と比べてどこがすごい13

リアルタイムでの8Dディスプレイの実現（先行研究は7fps）13

技術や手法のキモはどこ13

GPUにおけるレンダリング処理13

どうやって有効だと検証した13

MRIデータを用いたディスプレイのデモを示した13

議論はある13

現在はグレースケールの入力のみだがカラーでの入力できればより強力になるだろう13

次に読むべき論文は13

Sahoo13 et13 al13 201513

Control13 of13 Non-shy‐Solid13 Diffusers13 by13 Electrosta4c13 Charging13 (CHIrsquo15) Deepak Ranjan Sahoo Diego Martinez Plasencia Sriram Subramanian

201413109　久保勇貴 2（鬼コース）13

どんなもの13

シャボン玉や霧などの非固体を電場による制御を試みた研究13

先行研究と比べてどこがすごい13

非固体の形や位置の制御法を提案した点13

技術や手法のキモはどこ13

[Intra13 et13 al13 11]中のldquowire-shy‐to-shy‐Cylinderdquoを用いたエアゾール粒子の帯電13

どうやって有効だと検証した13

霧及びシャボン玉によるディスプレイのアプリケーション例で実際に制御して見せた13

議論はある13

風による影響を本手法は打ち消すことができた13

次に読むべき論文は13

Barnum13 et13 al13 201013

A13 Mul4-shy‐Layered13 Display13 with13 Water13 Drops(SIGGRAPHrsquo10)Peter C Barnum Srinivasa G Narasimhan Takeo Kanade

201413109　久保勇貴 2（鬼コース）13

どんなもの13

複数層の落下水滴にプロジェクションマッピングを行いディスプレイとした研究13

先行研究と比べてどこがすごい13

水滴の制御を行うことで単一のプロジェクタによって複数層の映像投影を可能とした点13

技術や手法のキモはどこ13

[Ambravaneswaran13 et13 al13 2002]及び本研究における実験結果に基づく水滴生成13

どうやって有効だと検証した13

複数のディスプレイ例を示した13 例）顔の投影水槽シミュレータなど13

議論はある13

本当の3Dディスプレイにするにはより多くの水滴制御が必要13

次に読むべき論文は13

Lee13 et13 al13 200713

An13 Immaterial13 Depth-shy‐Fused13 3D13 Display(VRSTrsquo07)Cha Lee Stephen DiVerdi Tobias Humlollerer

201413109　久保勇貴 2（鬼コース）13

どんなもの13

２つのスクリーンを駆使し3Dディスプレイを実現するdepth-shy‐fused13 3D(DFD)に関する評価を行いその結果よりディスプレイを提案した研究13

先行研究と比べてどこがすごい13

DFDが任意のスクリーン設定及び見る位置に対して有効であることを示した13

技術や手法のキモはどこ13

６通りのスクリーン組合せから２つを抽出し見え方の違いを検証した点13

どうやって有効だと検証した13

６通りのスクリーンについて立体的に見えるか被験者実験を実施その後それぞれに有意差がみられるか調べた13

議論はある13

ステレオイメージを認めることができなかったユーザに対しても強い3D効果が見られた13

次に読むべき論文は13

Tokuda13 et13 al13 201013

Cloud13 Display13 (ACErsquo10)Yutaka Tokuda Yasuhiro Suzuki Kunihiro Nishimura Tomohiro Tanikawa Michitaka Hirose

201413109　久保勇貴 2（鬼コース）13

どんなもの13

煙の渦輪を用いた空間を埋めるディスプレイ13

先行研究と比べてどこがすごい13

制御可能な手法により高所へのパーティクルを運搬することに着目した点13

技術や手法のキモはどこ13

コンピュータによって制御が行われる空気砲アレイ13

どうやって有効だと検証した13

箱の中で実験を行い安定して渦輪をできるようにした実際にデモを行ったことを示した13

議論はある13

今の試作機をより早くリフレッシュ速度を高めることによりより濃く空間を埋められることを目指す13

次に読むべき論文は13

Sato13 et13 al13 200913

Par]cle13 Display13 System　(JVRC09)13 -shy‐13 A13 Large13 Scale13 Display13 for13 Public13 Space13 -shy‐

Munehiko13 Sato13 Yasuhiro13 Suzuki13 13 Atsushi13 Hiyama13 Tomohiro13 Tanikawa13 Michitaka13 Hirose

201413109　久保勇貴 2（鬼コース）13

どんなもの13

パーティクルディスプレイによる公共スペースのための大画面ディスプレイの提案13

先行研究と比べてどこがすごい13

公共スペースにおける要求と制限に基づいたシステムを提案した点13

技術や手法のキモはどこ13

実験に基づく表示画像のスクロール時間の制御13

どうやって有効だと検証した13

Aという文字の知覚実験によって 適な点滅周期の調査を行った13

議論はある13

現在の試作機を組合せより高解像度にする必要がある13

次に読むべき論文は13

Kwon13 et13 al13 201513

FugaciousFilm13 Exploring13 Aen4ve13 Interac4on13 with13 Ephemeral13 Material13 (CHIrsquo15)Hyosun13 Kwon13 Shashank13 Jaiswal13 Steve13 Benford13 Sue13 Ann13 Seah13

13 Peter13 BenneC13 Boriana13 Koleva13 Holger13 Schnaumldelbach

201413109　久保勇貴 2（鬼コース）13

どんなもの13

膜を押す引く飛び出ることができる新しい石鹸膜インタフェースの提案13

先行研究と比べてどこがすごい13

徐々に消えるインタフェースは高い注意を有するインタラクションを提供するという点を示したこと13

技術や手法のキモはどこ13

水グリセリンを201の対比で混ぜることでldquopoprdquoがきれいになるようにしかつ膜の耐久性を向上させた13

どうやって有効だと検証した13

３目並べを用いた被験者実験を実施13 ユーザは膜を割ると負け膜を自分のマスにするにはタッチ押す引くの書かれた通りの操作を行う13

議論はある13

ユーザに精密な動作を要求することはとりわけ注意を払うことを誘発する13

次に読むべき論文は13

Wetzstein13 et13 al13 201213

Tensor13 Displays13 Compressive13 Light13 Field13 Synthesis13 using13 Mul4layer13 Displays13 with13 Direc4onal13 Backligh4ng(SIGGRAPHrsquo12)

Gordon13 Wetzstein13 Douglas13 Lanman13 MaChew13 Hirsch13 Ramesh13 Raskar

201413109　久保勇貴 2（鬼コース）13

どんなもの13

視点によって異なる立体映像を見ることができる複数の層からなるディスプレイ13

先行研究と比べてどこがすごい13

既存の手法を合成したcomputa(onal13 displaysというディスプレイの新しいフレームワークを提案した13

技術や手法のキモはどこ13

時分割で視差マスクを表示することでユーザの視線ごとに立体像を表現する13

どうやって有効だと検証した13

通常のディスプレイ３層LCDLCD及び指向性バックライトの例による比較13 13

議論はある13

波紋を含むこと色チャンネルが悪影響を与える相互反射不均一などの問題が見られた13

次に読むべき論文は13

Matoba13 et13 al13 1213

SplashDisplay(VRICrsquo12)Yasuo Matoba Taro Tokui Ryo Sato Tochiki Sato Hideki Koike

201413109　久保勇貴 2（鬼コース）13

どんなもの13

パーティクルにCGを投射しパーティクルがテーブル上に投げられると爆発しパーティクルが噴きあがる13

先行研究と比べてどこがすごい13

ビーズがミリメートルからメートル単位までZ軸方向について空中で奥行きを表現する13

技術や手法のキモはどこ13

スピーカによって風力が発生させビーズを舞い上げる点13

どうやって有効だと検証した13

ビーズを投げると花火が打ちあがっているかのようなアプリケーション例を示した13

議論はある13

高いレベルの表現及び幅広い入力範囲を提供できた13

次に読むべき論文は13

Kim13 et13 al13 1413

MARIO13 Mid-shy‐air13 Augmented13 Reality13 Interac4on13 with13 Objects13 (ECrsquo14)Hanyuool13 Kim13 13 Issei13 Takahashi13 Hiroki13 Yamamoto13 Satoshi13 Maekawa13 Takeshi13 Naemura

201413109　久保勇貴 2（鬼コース）13

どんなもの13

350times300times250のテーブル上のスペースにおいて自由に動かせる空中像を造りだすことができる13

先行研究と比べてどこがすごい13

凹面鏡や凹レンズのように曲面でないため画像の歪曲が発生しない13

技術や手法のキモはどこ13

Aerial13 Imaging13 Plate(AIP)を用いた空中像の生成及びそのためのディスプレイ移動装置13

どうやって有効だと検証した13

左右からの視差の考慮及び奥行き表現時の画像提示視野角の検証などを行った13 13

議論はある13

投影しているひよこを叩いたり払いのけたりするような動作がデモ中見られた13

次に読むべき論文は13

Tactile Feedback on Flat Surfaces for the Visually Impaired13Ali Israr Olivier Bau Seung-Chan Kim Ivan Poupyrev13

どのようなものか 視覚障害者のための触覚を用いた視覚代用デバイス 先行研究と比べてどこがすごいか 道案内をしてくれる機械などはあるが日用品の場所を教えたり探すのを手伝ってくれるデバイスはない 技術や手法のキモ タッチパネルとカメラを搭載したデバイス 触覚を与える技術はTeslaTouchを利用 色を基準にオブジェクトの位置を認識 有用性の確認 視覚障害者二人に対して実験このデバイスを使

わなくても各自の方法で物を見つけられるが間違えることが多いこのデバイスを使用することで間違えることなく正確に物の位置を特定できた 課題 一つの色でしか判断できない 触感のあるなしでしか情報を伝えられない 関連論文 TeslaTouch [Bau et al 2010]

20150522 橋爪智 2鬼

Fingernail-Mounted Display of Attraction Force and Texture13Masataka Niwa Tomoko Nozaki Taro Maeda and Hideyuki And13

どのようなものか 指先に取り付けて触感と力を両方表現できるデバイス 先行研究と比べてどこがすごいか 触感と引力をそれぞれ表現するデバイスはあるが両方を一つのデバイスで表現した例は少ない 引力は自由な方向に付加することができる 技術や手法のキモ 偏心に重さを付けた円盤を4枚使用する 5-9Hz 引力　100-200Hz 触感 それぞれの円盤の位相や回転数を調整することで

触感と力 を表現する 4つのモータを使いそれぞれの円盤を独立して制御する 有用性の確認 4人の男性に対して実験80以上の精度で認識できた 関連論文 The nail-mounted attraction forcebump display [Nozaki et al 2008]

20150522 橋爪智 2 鬼

Gilded gait reshaping the urban experience with augmented footsteps13Yuichiro Takeuchi13

どのようなものか 靴に装着し地面の触感をコントロールするデバイス 先行研究と比べてどこがすごいか 単独で動作しなかったり特定の環境のみでしか動作しなかったりするrarr靴単体で動作環境に依存しない 技術や手法のキモ 6個の振動パネルを取り付けゲルでカバー app modulesを取り替えることができ様々な機能を付加できる（GPSsound) 4種類の地面を再現

bull  Hard Ground 振動させない bull  Soft Ground すべてのパネルを振動 bull  Bumpy Ground ジグザグに振動 bull  Godzilla 全てのパネルを振動何回か繰り返す 課題 モーターを使っているため波形をプログラミングできないrarr圧電素子を使用する 関連論文 Haptic Shoes [Fu et al 2010]

20150522 橋爪智 2鬼

ExoInterfaces novel exosceleton haptic interfaces for virtual reality augmented sport and rehabilitation

Dzmitry Tsetserukou Katsunari Sato Susumu Tachi13

どのようなものか 腕に装着し物理的なinteractionを可能にするデバイス 先行研究と比べてどこがすごいか Exoskeleton 力を増幅するためだが重たく危険なこともある String-based wireが視界をまたぐ動きに制限がある rarr腕の動きに制限を与えない安全 技術や手法のキモ 「FlexTorque」人間の筋肉の構造を再現するベルトとモーターを使用する肩の近くに装着することで

腕に負担がかかりにくい 触覚feedback弱いトルク 運動を支援強いトルク 課題 物理的な接触を表現するゲームやスポーツにより没頭させるリハビリのサポートをする視覚障害者の支援（ものの場所を教える） 関連論文 FlexTorque [Dzmitry et al 2010]

20150522 橋爪智 2 鬼

Perception of Ultrasonic Haptic Feedback on the Hand Localisation and Apparent Motion13

Graham Wilson Tom Carter Sriram Subramanian Stephen Brewster13

どのようなものか 超音波を用いた触覚フィードバック有効性の検討を行う 先行研究と比べてどこがすごいか 超音波触覚フィードバックは比較的新しく研究や操作方法に関する知識が少ない 腕を自由に動かすことができ小さいものは着用可能 技術や手法のキモ 88のアレイ状に超音波発生器を設置

有効性の確認 bull  局所的な触感 　　　25箇所に分割しそれぞれに超音波を当てる 　　　触感を感じた989 　　　場所の誤差85mm bull  手のひらを動く触感 上下左右に動く 　　　動いてると感じた629

20150522 橋爪智 2 鬼

Friction Measurements on a Large Area TPaD13Nicholas D Marchuk J Edward Colgate Michael A Peshkin13

どのようなものか 超音波の振動により触感を与える 先行研究と比べてどこがすごいか ガラス板を使うので透明後ろにディスプレイを配置可能 技術や手法のキモ 「Squeeze Film Effect（スクイズ膜効果）」 ガラス板に取り付けた圧電素子の円盤に高周波信号

をかける 実験 振動しない部分＝摩擦が発生しない部分が発生周波数により場所が変わる rarr摩擦を大きさをかける力の大きさから計測 rarr指の場所に合わせて複数の周波数を使い分ける 関連論文 T-PaD[Winfield et al 2007]

20150522 橋爪智 2 鬼

STIMTAC a Tactile Input Device with Programmable Friction13Michel Amberg Freacutedeacuteric Giraud Betty Semail Paolo Olivo Geacutery Casiez Nicolas Roussel13

どのようなものか 触感を与えられるタッチデバイス 先行研究と比べてどこがすごいか LATPaD サイズ大きいノイズが大きい TeslaTouch 高い電圧付加が必要GNDに接続しなければいけない

技術や手法のキモ 「Squeeze Film Effect」超音波を用いて振動を与える 圧電性セラミックを電極にコーディング 指トラッキングは力センサを用いる 活用法 マウスキーボード絵を描く 関連論文 LATPaD[Vincent et al 2011] TeslaTouch[Bau et al 2010]

20150522 橋爪智 2 鬼

Surround Haptics Tactile Feedback for Immersive Gaming Experiences Ali Israr Seung-Chan Kim Ivan Poupyrev Jan Stec13

どのようなものか ゲームに合わせて高解像度の触覚フィードバックをユーザーに与える椅子 先行研究と比べてどこがすごいか 荒く配置した安価な振動アクチュエータで高解像度の触覚フィードバックを行える 一点の振動連続した動き範囲の振動などを再現

技術や手法のキモ 仮想的な振動アクチュエータをいくつかの振動アクチュエータを使って作り出す physical-physicalphysical-virtualvirtual-virtual ゲームにHaptics Engineを導入しHaptics APIを用いてHaptic Displayを操作する 関連論文 Exploring Surround Haptics Displays[Israr et al 2010]

20150522 橋爪智 2 鬼

Audio-Haptic Feedback in Mobile Phones Angela Chang Conor OrsquoSullivan13

どのようなものか haptics機能のついてない携帯電話にオーディオ機能を利用した触覚フィードバックを追加する 先行研究と比べてどこがすごいか 簡単に作れてnon-haptic mobile devicesでも大丈夫 技術や手法のキモ 「MultiFunction Transducer(MFT)」 スピーカーから音と信号の両方を出力できる

bull  Haptic Inheritance 　　音を2つの周波数帯に分ける bull  Synthesis and Matching 　　低周波数帯(20-300Hz)を使い触感を伝える 有効性の検討 42人の人を対象に実験を行う83の人が触感を感じた

20150522 橋爪智 2 鬼

Resolution of Sleep Deprivation Problems using ZZZoo Pillows13Shunsuke Yanaka Motoki Ishida13

どのようなものか 近年不眠症の人が多い rarr誰かと接していると安心し睡眠に導入しやすくなる rarrまるで添い寝をしているようなリアルな抱きまくらを使う 技術や手法のキモ breathing sensation 風船を使って人の呼吸を再現肺の形の風船弱く長い呼吸をする

heating お湯を使って人の体温を再現45 有効性の確認 84人の人が実験 呼吸が睡眠を誘ったかrarr61 体温が睡眠を誘ったかrarr85 関連論文 The Impact of Sleep Disorders on Social Life[Komada et al 2007]

20150522 橋爪智 2 鬼

まとめ13超音波 モーター 風

20150522 橋爪智 2 鬼

コイル 電気刺激 Electrovibration

振動 音 お湯

なかの

Temporally Consistent Disparity and Optical Flow via Efficient Spatio-temporal Filtering1

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示した

議論論はあるか

時間的に一定の視差を算出する手法静止画ステレオよりも精度度が良良いことを示す従来よりも推定精度度が良良いオプティカルフローも算出する

一枚の静止画に対するフィルタリング[1]をステレオ動画に拡張している

ケンブリッジのステレオ動画のデータセットを利利用 実写動画に対する比較も行行うノイズ耐性も検証する

フィルタベースとエネルギーベースの関係性を良良り理理解することで推定精度度を上げる

実装が簡単でリアルタイム視差推定が可能

Fast Cost-Volume Filtering for Visual Correspondence and Beyond [Rhemann C Hosni A Bleyer M Rother C Gelautz M CVPR2011] Real-time Spatiotemporal Stereo Matching Using the Dual-Cross-Bilateral Grid [Richardt C Orr D Davies I Criminisi A Dodgson NA ECCV2010] Secrets of optical flow estimation and their principles [Sun D Roth S Black MJ 2010] Motion estimation with non-local total variation regularization [Werlberger M Pock T Bischof H CVPR2010] Temporally Consistent Disparity Maps from Uncalibrated Stereo Videos [Bleyer M Gelatuz M ISPA2011]

なかの

SymStereo Matching using Induced Symmetry (2014)2

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示した

議論論はあるか

画像の対称性を用いてステレオマッチングを行行う 左右の画像を反転させて重ね合わせることで対称性を測る

絵的な類似の代わりに対称性を使う今まで対称性を用いる手法はなく新規性が大きい

三つのSymmetry-baseの手法で精度度を検証従来手法よりも精度度が向上しているMiddlebury Oxford Corridorfountain-P11のデータセット使用

ステレオの問題である不不連続な箇所オクルージョン部分は未解決である演算時間はやや増加

1-Dラインのコストを考える今までは撮像面に対して平行行な平面でデプスを考えていたが垂直な平面を考える

BT[Birchfield and Tomasi 1998] Census transform[Zabih and Woodfill 1994] Log N[Kovesi 1997] radio-metoric differences[Hirschmuller Scharstein 2009]

なかの

Camouflaging an Object from Many Viewpoints3

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

多くの視点から三次元の物体をカモフラージュするカモフラージュによってオクルージョン部分の不不連続がどの程度度生じるか他の視点ではどれほどになるかの検証

MRF（Markov Random Fields）ベース

新しい三次元物体のカモフラージュモデルを構築 37種類のデータセットを作る

箱形の物体に対してカモフラージュ処理理を施し 結果を評価する

オクルージョン不不連続テクスチャの歪みが問題 照明や画像の貼りつけに制限あり

なかの

Aliasing Detection and Reduction in Plenoptic Imaging4

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

カメラアレイ撮影の角度度のエイリアシングを除去するエイリアシングの探索索と打ち消しを行行う

周波数領領域ではなく空間領領域で探索索を行行う

先行行研究がフィルタデモザイキング再パラメータ調整などの前処理理でエイリアシング除去を行行うのに対しエイリアシング探索索後にリフォーカスの段階でエイリアシングを取り除く

8times8の平行行カメラアレイで検証するカメラ間の 基線長は70mm

今回は基線長が長いデータセットを使った 次はLytroなどのマイクロレンズアレイで検証する

Globally consistent multi-label assignment on the ray space of 4d light fields [S Wanner C Straehle B Goldluecke CVPR2013] Lineassisted light field triangulation and stereo matching [Z Yu X Guo H Lin A Lumsdaine J Yu ICCV 2013]

なかの

Globally Consistent Multi-Label Assignment on the Ray Space of 4D Light Fields5

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

四次元ライトフィールドの光線情報において マルチラベルの領領域分割を行行う

深度度情報光線情報を用いて領領域分割することで 二次元（空間）情報だけでは分割が難しかった 領領域を分割可能とする

The light field camera Extended depth of field aliasing and superresolution [T Bishop P Favaro IEEE Transactions on Pattern Analysis and Machine Intelligence 2012]

なかの

Line Assisted Light Field Triangulation and Stereo Matching6

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

光線情報を利利用してステレオマッチングの精度度を 向上させる手法三角測量量の誤差を減らす

Light Field Stereo Matchingとかいう手法 グラフ構造を作成

Variational light field analysis for disparity estimation and super-resolution [S Wanner and B Goldlumluecke 2013]

なかの

Adaptive stereo similarity fusion using confidence measures 20157

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

ステレオマッチングの新しい方式fusion weightsを提案複数の手法を組み合わせてコスト計算を行行う手法付録に既存手法のコスト関数一覧あり

パラメータに依存する手法を用いないことで高速化を図っている

一つのアルゴリズムでは異異なる特性を持つ領領域全てに対して適切切なマッチングはできない複数を組み合わせることでそれを補う13種と多い

middleburyとKITTIのデータセットで評価

一枚あたり03sと高速だが001sとより高速なアルゴリズムが存在する

Segment-based stereo matching using belief propagation and a self-adapting dissimilarity measure [A Klaus M Sormann K Karner ICPR2006] On building an accurate stereo matching system on graphics hardware [X Mei X Sun M Zhou S Jiao H Wang X Zhang ICCV2011] Similarity measures for depth estimation [K Wegner O Stankiewicz 3DTV-CON2009] On accurate dense stereo-matching using a local adaptive multi-cost approach [C Stentoumis L Grammatikopoulos I Kalisperakis G Karras ISPRS2014] A quantitative evaluation of confidence measures for stereo vision [X Hu P Mordohai PAMI2012]

なかの

SIMILARITY MEASURE FOR DEPTH ESTIMATIOM 20098

どんなもの

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

4種類の視差推定アルゴリズムを組み合わせている 類似度度の選択性の解析

Belief Propagationの枠組みを用いる

名古屋大学の多視点データベースを利利用

HHI Test Material for 3D Video [I Feldmann M Muller F Zilly R Tanger A SmolicP Kauff T Wiegand 2008] Multiview Video Test Sequence and Camera Parameters [Yo-Sung Ho Eun-Kyung Lee and Cheon Lee 2008] 1D Parallel Test Sequences for MPEG-FTV [M Tanimoto T Fujii N Fukushima 2008] Non-parametric Local Transforms for Computing Visual Correspondence [R Zabih J Woodfill 1994]

なかの

Spatiotemporal Stereo via Spatiotemporal Quadric Element (Stequel) Matching9

どんなもの

技術や手法のキモはどこ

新しいマッチング手法を提案動き考慮することなく時間情報を取り込むことができる 時間方向のエピ線を考える

オプティカルフロー推定は3D境界や低テクスチャで弱いが提案手法はロバストである

なかの

Depth Video Enhancement Based on Weighted Mode Filtering10

どんなもの

議論論はある

ノイズを含んだ低解像度度のデプスマップの質を高める手法（超解像度度とデノイズ）時間方向も使用簡単なオプティカルフローを計算し利利用する

非反復復アルゴリズムのためGPUに載せやすく高速化が考えられる

なかの

Fast Bilateral-Space Stereo for Synthetic Defocus11

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

議論論はある

次に読むべき論論文は

高速な自由焦点ぼけ画像の作成

Bilateral-spaceを提案

従来研究よりも10から100倍速くぼけ具合の精度度も良良い

ぼけを作成するというアプリケーションに利利用する距離離という面では提案手法が有益であるが実測的な距離離という面での精度度は悪い背景と前景が同じ色で近くにある場合同一ととらえてしまう

Efficient high-resolution stereo matching using local plane sweeps [S N Sinha D Scharstein and R SzeliskiCVPR2014] Bilateral filtering-based optical flow estimation with occlusion detection [J Xiao H Cheng H Sawhney C Rao and M IsnardiECCV2006] Efficient nonlocal regularization for optical flow [P Krumlahenbumluhl and V KoltunECCV2012] Real-time spatiotemporal stereo matching using the dual-cross-bilateral grid [C Richardt D Orr I Davies A Criminisi and N A DodgsonECCV2010]

どうやって有効性を示した視差推定の精度度はmiddleburyKITTI

なかの

Robust Spatiotemporal Stereo for Dynamic Scenes12

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

ステレオ動画のフレーム間情報を取り入れることでノイズ耐性を向上させるまた動きの大きなものも考える

時間を含めたウインドウの提案自動的にそのような変化に対応する画像領領域を検出する

従来の時空間ステレオと比べ大きな動きによる急激な視差の時間変化に対して頑健である

なかの

Spacetime Stereo A Unifying Framework for Depth from Triangulation13

どんなもの

先行行研究と比べてどこがすごい

space time stereoを提案ステレオカメラの視差推定でも構造光を用いた視差推定でも利利用可能 動的なシーンでの利利用も可能

フレームごとマッチングを取っていたが複数フレームでのマッチングを可能とした

なかの

Learning to Select and Order Vacation Photographs (Disney research)14

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示したあまりにもたくさん撮影した写真たちから自動的にフォトアルバムを作成する研究

複雑な視覚での区別を試みたのはこの論論文が初

５つの異異なるトピックから63の個人的な写真コレクションのデータセットを利利用し定量量的に評価する

写真間の差別かを定義する顔全体の絵何が写っているか写っていないかを評価する

Jointly aligning and segmenting multiple web photo streams for the inference of collective photo storylines [G Kim and E P Xing CVPR2013] Photo sequencing [T Basha Y Moses and S Avidan CVPR2012]

なかの

A Taxonomy and Evaluation of Dense Two-Frame Stereo Correspondence Algorithms15

どんなもの

どうやって有効性を示した

次に読むべき論論文は

ステレオマッチングに関する分類を行行う 新たなデータセットを作成する

というよりも他の手法が有効性を示すことができるようにデータセットを作成した 今ではmiddleburyのデータセットと言えばステレオ業界では超有名

High-resolution stereo datasets with subpixel-accurate ground truth

なかの

Discriminability Limits in Spatio-Temporal Stereo Block Matching1

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

spatio-temporal disparity estimationの根本的な前提の正当性を解析しマッチング処理理の際に動きが助けとなる程度度を決定する

時空間マッチングのエラーを分析し誤りの原因を確率率率で導出する（フレーム数動きの分散画像特徴ノイズの関数）

[34243334]は時空間マッチングの利利点を指摘していたが本論論文はマッチング精度度の向上のために動きを用いる手法の程度度や性質を研究する

6つのステレオビデオを用いて検証を行行った

Spacetime stereo Shape recovery for dynamic scenes [L Zhang B Curless and S Seitz CVPR2003] Spatiotemporal stereo and scene flow via stequel matching [M Sizintsev and R Wildes PAMI2012] Temporally consistent disparity and optical flow via efficient spatio-temporal filtering [A Hosni C Rhemann M Bleyer and M Gelautz PRCAIVT2012] Spacetime stereo A unifying framework for depth from triangulation [PAMI2005] Dynamic depth recovery from multiple synchronized video streams [H Tao H Sawhney and R Kumar CVPR2001] Spatiotemporal descriptor for wide-baseline stereo reconstruction of non-rigid and ambiguous scenes [ECCV2003]

なかの

Depth-Based Patch Scaling for Content-Aware Stereo Image Completion2

どんなもの

どうやって有効性を示した

ステレオでデプスを取り物体の三次元情報を使ってインペインティングを行行う

bookのデータセット背景が繰り返しパターンが多いものを使っている

なかの

Fast Semi-dense Surface Reconstruction from Stereoscopic Video in Laparoscopic Surgery3

どんなもの

手法の流流れ

次に読むべき論論文は

腹腔内手術の際にステレオビデオから高速に物体の三次元再構成を行行う研究

Evaluation of stereo matching costs on images with radiometric differences [Hirschmueller H Scharstein D PAMI2008]

スコープカメラから画像取得GPUで演算する 視差を算出しフィルタにかける距離離に変換 点群を再びフィルタにかけて三次元再構成

なかの

3D Reconstruction from Accidental Motion4

どんなもの

技術や手法のキモはどこ

議論論はある

数秒のビデオ（単眼）から三次元再構成を行行う 手ぶれなどの動きから再構成が可能で特定の動きや機材を必要としない

短い基線長でも再構成が可能（3mmの基線長）

基線長が短いため背景の精度度が低くなる リフォーカス画像作成には十分 練習では上手く動作したが検証がまだ必要

なかの

Panoramic Video from Unstructured Camera Arrays5

どんなもの

技術や手法のキモはどこ

議論論はある

複数のカメラを用いたパノラマ撮影を行行う その際に不不自然さがないような動画を作成する

不不自然さを感じる感覚特性を提示しそれにのっとって対策を講じている

一つのカメラの解像度度と品質を向上させるよりも複数台のカメラを組み合わせることがはるかに簡単で有益である専門家でなくてもGoProのカメラセットを組み合わせることは容易易

カメラの配置は厳密に決められていない完璧な時間同期やローリングシャッターの不不足のような実撮影での問題もクリアしている

先行行研究と比べてどこがすごい

どうやって有効性を示した左のシステムは14台のカメラを使用 右のシステムはGoProを5台使用

Disney 201558

なかの

Floating Scale Surface Reconstruction6

どんなもの

技術や手法のキモはどこ

流流動的にスケールを変えられる三次元再構成手法

サンプル規模に依存するパラメータがない rarrどのスケールのサンプルにも対応できる

siggraph2014

なかの

A Super Resolution Reconstruction Scheme for Mixed Spatio-Temporal Stereo Video7

どんなもの

技術や手法のキモはどこ

ビデオ超解像アルゴリズム

二台のカメラを使用 一台は低解像度度で高速一台は高解像度度で低速

HHI 3DV ftp siteのBookarrivalとbeergadenを使用どうやって有効性を示した

なかの

What Is a Good Day for Outdoor Photometric Stereo8

どんなもの

先行行研究と比べてどこがすごい

議論論はある

次に読むべき論論文は

屋外における照度度差があるステレオの研究 屋外でステレオを行行う際に有利利or不不利利な日照条件を明らかにする

点光源を用いた研究は行行われていたが屋外での研究はされていなかった

晴れより曇りの方が精度度が良良い雲があるから特徴量量を取りやすい雑音を白色ガウスモデルを想定 季節ごとのデータセットを利利用してみても良良い

Time-lapse photometric stereo and applications [F Shen K Sunkavalli N Bonneel S Rusinkiewicz H Pfisterand X Tong2014] Outdoor photometric stereo [L-F Yu S-K Yeung Y-W Tai D Terzopoulos and T FChan ICCP2013]

どうやって有効性を示した屋外の照明に関するHDR環境マップのデータベースを利利用

Disney 2015424

なかの

COLORBRUSH ANIMATED DIFFUSION FOR INTUITIVE COLORIZATION SIMULATING WATER PAINTING 9

どんなものアニメを水彩画で描いたように変換する 水彩画を描くには経験が必要であるがそれを作成するアルゴリズムを考案絵具が水によりどうにじむかシュミレーションしている

Disney 20141027 ICIP2014

次に読むべき論論文はGabor-space geodesic active contoursrdquo In Algebraic Frames for the Perception-Action Cycle [C Sagiv NA Sochen and YY Zeevi 2000] Practical temporal consistency for image-based graphics applications [M Lang O Wang T Aydin A Smolic and M Gross SIGGRAPH2012] Computer-Generated Watercolor [CJ Curtis SE Anderson JE Seims KW Fleischer and DH Salesin SIGGRAPH1997]

なかの

From Sound to Sight Using Audio Processing to enable Visible Light Communication 10

どんなもの光に情報を載せる技術プロジェクトページがあって光関係の研究が8個載っている

httpwwwdisneyresearchcomprojectvisible-light-communication

ビデオのURL httpwwwdisneyresearchcomwpcontentuploadsPub_InvisibleLightCommunication_Siggraph14_videomp4

• 201211106_KeisukeKawahara
• 201311421_KeitaKanai_02
• 201313095_AkiraIshii_02
• 201413109_YuukiKubo_02
• 201513110_SatoshiHashizume_02
• 鬼輪講マラソン③_1
• 鬼輪講マラソン③_2

2 201313095

Poke

Poke

25Poke 3

noEceability 3

bull  HarrisonCLimBYShickAampHudsonSE(2009April)WheretolocatewearabledisplaysreacEonEmeperformanceofvisualalertsfromEptotoeInProcCHIrsquo09ACM941-944

bull  CampbellCSampTarasewichPDesigningvisualnoEficaEoncuesformobiledevicesInCHIEA04ACM1199-1202

NoERingampAampComparaEveampStudyampofampNoEficaEonampChannelsampforampWearableampInteracEveampRingsamp(CHIrsquo15)

ThijsRoumenSimonTPerraultShengdongZhao

h]pswwwyoutubecomwatchv=kOaphlSryf4

2 201313095

7 2 3

on-body

bull  GemperleFKasabachCSEvoricJBauerMandMarEnRDesignforWearabilityInProcISWCrsquo98116-122

WhereamptoampLocateampWearableampDisplaysampReacEonampTimeampPerformanceampofampVisualampAlertsampfromampTipamptoampToeamp(CHIrsquo09)

ChrisHarrisonBrianYLimAubreyShickSco]EHudson

2 201313095

FingerReader

4

939

34 5

bull  NanayakkaraSShilkrotRYeoKPandMaesPEyeRingafinger-worninputdeviceforseamlessinteracEonswithoursurroundingsInProcofAugmentedHuman(2013)13-20

FingerReaderampAampWearableampDeviceamptoampExploreampPrintedampTextamponamptheampGoamp(CHIrsquo15)

RoyShilkrotJochenHuberMengEeWongPaneMaesSurangaNanayakkara

h]psvimeocom86912300

2 201313095

Cyclops

1

360degMHI RDF

20 20MHI

79 RDF92

bull  MorrisDSaponasTSGuilloryAandKelnerIRecofitUsingawearablesensortofindrecognizeandcountrepeEEveexercisesInProcampACMampCHIamprsquo14amp(2014)3225ndash3234

CyclopsampWearableampandampSinglePieceampFullBodyampGestureampInputampDevicesamp(CHIrsquo15)amp

LiweiChanChi-HaoHsiehYi-LingChenShuoYangDa-YuanHuangRong-HaoLiangBing-YuChen

h]pswwwyoutubecomwatchv=JYm_3oNUGIk

2 201313095

Muehlbaueretal[24]

SVM

114 94 3020

9599 4 98 7 96 13

93

bull  MuehlbauerMBahleGLukowiczPWhatcananarmholsterwornsmartphonedoforacEvityrecogni-EonProcIEEEISWC2011

RecoFitampUsingampaampWearableampSensoramptoampFindampRecognizeampandampCountampRepeEEveampExercisesamp(CHIrsquo14)

DanMorrisTSco]SaponasAndrewGuilloryIlyaKelner

h]pswwwyoutubecomwatchv=zpa4rVGlO68

2 201313095

2

31 2

15-20 90-95

Hambone

bull  BAmentoWHillandLTerveenThesoundofonehandawrist-mountedbio-acousEcfingerEpgestureinterfaceInCHIrsquo02CHIrsquo02extendedabstractsonHumanfactorsincompuEngsystemspages724ndash725NewYorkNYUSA2002ACMPress

HamboneampAampBioAcousEcampGestureampInterfaceamp(ISWCrsquo07)

TravisDeyleSzabolcsPalinkoErikaShehanPooleandThadStarner

h]pswwwyoutubecomwatchv=Uxj-vyal84M

2 201313095

bull  RabinerLR(1989)ATutorialonHiddenMarkovModelsandSelectedApplicaEonsinSpeechRecogni-EonProcIEEEVol77257-28

TheampSoundampofampOneampHandampAampWristmountedampBioacousEcampFingerEpampGestureampInterfaceamp(CHIrsquo02)

BrianAmentoWillHillLorenTerveen

2 201313095

Non-linearSpaEalSampling

SVM

12

948

15cm

bull  NakatsumaKShinodaHMakinoYSatoKandMaenoTTouchinterfaceonbackofthehandInprocofSIGGRAPHrsquo11(2011)391ndash391

bull  ButlerAIzadiSandHodgesSSidesightmulE-touchinteracEonaroundsmalldevicesInProcofUISTrsquo08(2008)201ndash204

zSenseampEnablingampShallowampDepthampGestureampRecogniEonampforampGreaterampInputampExpressivityamponampSmartampWearablesamp(CHIrsquo15)

AnushaWithanaRoshanPeirisNipunaSamarasekaraSurangaNanayakkara

h]pswwwyoutubecomwatchv=fQobwL8eSU4

2 201313095

bull  HARRISONCTANDANDMORRISD2010Skinputap-propriaEngthebodyasaninputsurfaceInProceedingsofthe28thinternaEonalconferenceonHumanfactorsincompuEngsystemsACMNewYorkNYUSACHIrsquo10453ndash462

Touchampinterfaceamponampbackampofamptheamphandamp(SIGGRAPH11)

KeiNakatsumaHiroyukiShinodaYasutoshiMakinoKatsunariSatoTakashiMaeno

h]pswwwyoutubecomwatchv=tKNLxh9Yw2M

2 201313095

Pose-IO EMS

Pose-IO

EMS

EMS58deg

46 5 be]er

bull  RoudautARauASterzCPlauthMLopesPandBaudischPGestureoutputeyes-freeoutputusingaforcefeedbacktouchsurfaceProcCHI1325472556

PropriocepEveampInteracEonamp(CHIrsquo15)amp

PedroLopesAlexandraIonWilliMuellerDanielHoffmannPatrikJonellPatrickBaudisch

h]pswwwyoutubecomwatchv=KMxIw7zhlw

2 201313095

EMS

AR EMSEMS

GPS

bull  TamakiEMiyakiTandRekimotoJPossessedHandAhandgesturemanipulaEonsystemusingelectricalsEmuliInProcampAHrsquo10amp(2010)21ndash25

CruiseampControlampforampPedestriansampControllingampWalkingampDirecEonampusingampElectricalampMuscleampSEmulaEonamp(CHIrsquo15)amp

MaxPfeifferTimDunteStefanSchneegassFlorianAltMichaelRohs

h]pswwwyoutubecomwatchv=JSfnm_HoUv4

2 201313095

EMS

EMS

EMS 16automaEccalibraEonsystem

auto-calibraEonsystems 16

8875g

bull  KruijffESchmalsEegDandBeckhausSUsingneuromuscularelectricalsEmulaEonforpseudo-hapEcfeedbackInProceedingsoftheACMsymposiumonVirtualrealitysoywareandtechnologyVRSTrsquo06ACM(NewYorkNYUSA2006)316ndash319

PossessedHandampTechniquesampforampControllingampHumanampHandsampusingampElectricalampMusclesampSEmuliamp(CHIrsquo11)amp

EmiTamakiTakashiMiyakiJunRekimoto

h]psvimeocom27044937

2 201313095

EMS

EMS

RFIDEMS

1276

bull  KruijffESchmalsEegDandBeckhausDUsingneuromuscularelectricalsEmulaEonforpseudo-hapEcfeedbackProcVRST06316mdash319

Affordance++ampallowingampobjectsamptoampcommunicateampdynamicampuseamp(CHIrsquo15)

PedroLopesPatrikJonellPatrickBaudisch

h]pswwwyoutubecomwatchv=d0J7V37zQjY

2 201313095

EMS

EMS

EMS

ReacEonloss

EMS

UsingampNeuromuscularampElectricalampSEmulaEonampforampPseudoHapEcampFeedbackamp(VRSTrsquo06)

ErnstKruijffDieterSchmalsEegSteffiBeckhaus

2 201313095

SVM

106 Per-User

863 13

712

13

bull  SatoMPoupyrevIandHarrisonCToucheenhancingtouchinteracEononhumansscreensliquidsandeverydayobjectsInCHIrsquo12483ndash492

bull  TimCollinsAcEveacousEctouchinterfaceElectronicsLe]ersVol45No20pp1055ndash1056242009

TouchampampampAcEvateampAddingampInteracEvityamptoampExisEngampObjectsampusingampAcEveampAcousEcampSensingamp(UISTrsquo13)

MakotoOnoBuntarouShizukiJiroTanaka

h]pswwwyoutubecomwatchv=XgxXi6w8IQc

2 201313095

13

13

SVM

on-body

per-user 5 967 4987

bull  HarrisonCBenkoHWilsonAOmniTouchwearablemulEtouchinteracEoneverywhereinUIST11441-450

bull  MatsushitaNandRekimotoJHoloWalldesigningafingerhandbodyandobjectsensiEvewallUIST97209-210

ToucheampEnhancingampTouchampInteracEonamponampHumansampScreensampLiquidsampandampEverydayampObjectsamp(CHIrsquo12)

MunehikoSatoIvanPoupyrevChrisHarrison

h]pswwwyoutubecomwatchv=E4tYpXVTjxA

2 201313095

SVM

9 9TapSense 4

95 99

TapSenseDelete

bull  HarrisonCTanDandMorrisDSkinputappropriat-ingthebodyasaninputsurfaceInProcCHI10453-462

TapSenseampEnhancingampFingerampInteracEonamponampTouchampSurfacesamp(UISTrsquo11)

ChrisHarrisonJuliaSchwarzSco]EHudson

h]pswwwyoutubecomwatchv=-oN96cucBr4

2 201313095

13

13

22 SVM

13 FingersWholeArmForearm 876 Fingers877 WholeArm 955

883 Forearm 815

833

GUI

bull  SaponasTSTanDSMorrisDandBalakrishnanRDemonstraEngthefeasibilityofusingforearmelectromyographyformuscle-computerinterfacesInProcCHIrsquo09515-24

SkinputampAppropriaEngamptheampBodyampasampanampInputampSurfaceamp(CHIrsquo10)

ChrisHarrisonDesneyTanDanMorris

h]pswwwyoutubecomwatchv=g3XPUdW9Ryg

2 201313095

Fiberio

10 330 150

148 2

Fiberio

bull  MatsushitaNandRekimotoJHoloWallDesigningaFingerHandBodyObjectSensiEveWallProcUIST97209ndash210

FiberioampAampTouchscreenampthatampSensesampFingerprintsamp(UISTrsquo13)

ChrisEanHolzPatrickBaudisch

h]pswwwyoutubecomwatchv=p1a5yLzuTqA

2 201313095

3D

3D

bull  GeigerMVollertsenFTheMechanismsofLaserFormingCIRPANNALSlsquo93421301-304

bull  WillisKDDXuCWuJKLevinGGrossMDInteracEvefabricaEonnewinterfacesfordigitalfabricaEonProcTEI11pp69-72

LaserOrigamiampLaserCugngamp3DampObjectsamp(CHIrsquo13)

StefanieMuellerBasEanKruckPatrickBaudisch

h]pswwwyoutubecomwatchv=arjRtCjI9AQ

2 201313095

bend

bull  HyunyoungSongFranccediloisGuimbreEegravereChangHuHodLipsonModelCraycapturingfreehandannotaEonsandeditsonphysical3DmodelsProceedingsofthe19thannualACMsymposiumonUserinterfacesoywareandtechnologyOctober15-182006MontreuxSwitzerland

InteracEveampConstrucEonampInteracEveampFabricaEonampofampFuncEonalampMechanicalampDevicesamp(UISTrsquo12)

StefanieMuellerPedroLopesPatrickBaudisch

h]pdlacmorgcitaEoncfmid=23801162380191

2 201313095

3D

3D

bull  SavageVSchmidtRGrossmanTFitzmauriceGandHartmannBAseriesoftubesAddinginteracEvityto3dprintsusinginternalpipesInProcUIST14(2014)

3DampPrinEngampPneumaEcampDeviceampControlsampwithampVariableampAcEvaEonampForceampCapabiliEesamp(CHIrsquo15)amp

MarynelVazquezEricBrockmeyerRutaDesaiChrisHarrisonSco]EHudson

h]pswwwyoutubecomwatchv=-4gFYvhkz0Y

2 201313095

OpenFab 3D

fablets

3 3

bull  CHENDMATUSIKWSITTHI-AMORNPDIDYKPANDLEVIND2013Spec2FabAreducer-tunermodelfortranslat-ingspecificaEonsto3DprintsACMTransGraph324(July)

OpenFabampAampProgrammableampPipelineampforampMulEMaterialampFabricaEonamp(SIGGRAPHrsquo13)

KirilVidimcˇeSzu-PoWangJonathanRagan-KelleyWojciechMatusik

2 201313095

3D

3D

3D

3D14 30 13 67

244

14

3D

bull  MuellerSKruckBBaudischPLaserOrigamiLaser-Cunng3DObjectsProcCHIrsquo132585-2592

faBrickaEonampFastamp3DampPrinEngampofampFuncEonalampObjectsampbyampIntegraEngampConstrucEonampKitampBuildingampBlocksamp(CHIrsquo14)amp

StefanieMuellerTobiasMohrKersEnGuentherJohannesFrohnhofenPatrickBaudisch

h]pswwwyoutubecomwatchv=BlO6YRcLJjE

Touching13 the13 Void13 Direct-shy‐Touch13 Interac4on13 for13 Intangible13 Displays(CHIrsquo10)Li-Wei Chan Hui-Shan Kao Mike Y Chen Ming-Sui Jane Yi-Ping Hung

201413109　久保勇貴 2（鬼コース）13

どんなもの13

空中像へのタッチのエラーに関する調査及び影や音のフィードバックを付与することによるパーフォーマンス向上を示した研究13

先行研究と比べてどこがすごい13

平面画像をタッチする際の奥行きに関するエラーの正確な取得を初めて検証13

技術や手法のキモはどこ13

２つの赤外線カメラを用いた正確なタッチの検出13

どうやって有効だと検証した13

タッチ時の奥行きの正確さに関する被験者実験を実施またタッチする際に影や音を付けた際の反応時間を被験者実験で検証13

議論はある13

ユーザは慣れるまで影や音のフィードバックが必要だがそのあとは必要なくなる13

次に読むべき論文は13

MirageTable13 （CHI12） 13

MirageTable13 Freehand13 Interac4on13 on13 a13 Projected13 13 Augmented13 Reality13 Tabletop(CHIrsquo12)

Hrvoje Benko Ricardo Jota Andrew D Wilson

201413109　久保勇貴 2（鬼コース）13

どんなもの13

テーブル上においてバーチャルな物体をリアルタイムで現実でものを動かすことと同様な動作に操作可能なシステム13

先行研究と比べてどこがすごい13

現実の物体をリアルタイムで画面に取りこむことができ質の高いフリーハンドインタラクションを実現した点13

技術や手法のキモはどこ13

色深度前景頭追跡プロキシパーティクルを駆使したリアルタイムメッシュの作成13

どうやって有効だと検証した13

凹凸など例外な表面に対しての投影した際の画像の質についての評価実験また仮想物体の奥行き知覚に関する実験も行った13

議論はある13

前面のみしかキャプチャしていないため差が生じる握っている場所の再現は未解決な課題である13

次に読むべき論文は13

Hirsch13 et13 al13 201413 (SIGGRAPHrsquo14)13

A13 Compressive13 Light13 Field13 Projec4on13 System13 (SIGGRAPHrsquo14)MaChew13 Hirsch13 Gordon13 Wetzstein13 Ramesh13 Raskar

201413109　久保勇貴 2（鬼コース）13

どんなもの13

通常の3Dディスプレイに比べて解像度輝度コントラストを改善した圧縮ライトフィードディスプレイ13

先行研究と比べてどこがすごい13

多視点立体視を複数でなく１台のプロジェクタを用いて実現した13

技術や手法のキモはどこ13

受動的スクリーンと高速切り替えプロジェクタによる新しい光学設計13

どうやって有効だと検証した13

4つのシーン例を投影したものを示したアニメーションの3D効果について観察を行った13

議論はある13

光路長を広げると観察できる画質が大幅に制限され他のライトフィードビューと混線が生じる13

次に読むべき論文は13

Butler13 et13 al13 201113

Vermeer13 Direct13 Interac4on13 with13 a13 360deg13 Viewable13 3D13 Display(UISTrsquo11) Alex Butler Otmar Hilliges Shahram Izadi Steve Hodges David Molyneaux David Kim

201413109　久保勇貴 2（鬼コース）13

どんなもの13

映し出された3Dオブジェクトとインタラクションを行えるシステム13

先行研究と比べてどこがすごい13

ディスプレイ内の画像とのインタラクションを提案ボリュームディスプレイを支援する新しいセンシング法の提案13

技術や手法のキモはどこ13

パラボラ鏡に取り付けた赤外線カメラセンサによる指先検出13

どうやって有効だと検証した13

アプリケーション例を示した13

議論はある13

パラボラ鏡の大きさよりもディスプレイサイズが小さくなってしまう13

次に読むべき論文は13

Hirsch13 et13 al13 201213

8D13 Interac4ng13 with13 a13 Relightable13 Glasses-shy‐Free13 3D13 Display(CHIrsquo12)Li-Wei Chan Hui-Shan Kao Mike Y Chen Ming-Sui Jane Yi-Ping Hung

201413109　久保勇貴 2（鬼コース）13

どんなもの13

ライトフィードによる入力とライトフィールドによる表示を行うリアルタイム8Dディスプレイ13

先行研究と比べてどこがすごい13

リアルタイムでの8Dディスプレイの実現（先行研究は7fps）13

技術や手法のキモはどこ13

GPUにおけるレンダリング処理13

どうやって有効だと検証した13

MRIデータを用いたディスプレイのデモを示した13

議論はある13

現在はグレースケールの入力のみだがカラーでの入力できればより強力になるだろう13

次に読むべき論文は13

Sahoo13 et13 al13 201513

Control13 of13 Non-shy‐Solid13 Diffusers13 by13 Electrosta4c13 Charging13 (CHIrsquo15) Deepak Ranjan Sahoo Diego Martinez Plasencia Sriram Subramanian

201413109　久保勇貴 2（鬼コース）13

どんなもの13

シャボン玉や霧などの非固体を電場による制御を試みた研究13

先行研究と比べてどこがすごい13

非固体の形や位置の制御法を提案した点13

技術や手法のキモはどこ13

[Intra13 et13 al13 11]中のldquowire-shy‐to-shy‐Cylinderdquoを用いたエアゾール粒子の帯電13

どうやって有効だと検証した13

霧及びシャボン玉によるディスプレイのアプリケーション例で実際に制御して見せた13

議論はある13

風による影響を本手法は打ち消すことができた13

次に読むべき論文は13

Barnum13 et13 al13 201013

A13 Mul4-shy‐Layered13 Display13 with13 Water13 Drops(SIGGRAPHrsquo10)Peter C Barnum Srinivasa G Narasimhan Takeo Kanade

201413109　久保勇貴 2（鬼コース）13

どんなもの13

複数層の落下水滴にプロジェクションマッピングを行いディスプレイとした研究13

先行研究と比べてどこがすごい13

水滴の制御を行うことで単一のプロジェクタによって複数層の映像投影を可能とした点13

技術や手法のキモはどこ13

[Ambravaneswaran13 et13 al13 2002]及び本研究における実験結果に基づく水滴生成13

どうやって有効だと検証した13

複数のディスプレイ例を示した13 例）顔の投影水槽シミュレータなど13

議論はある13

本当の3Dディスプレイにするにはより多くの水滴制御が必要13

次に読むべき論文は13

Lee13 et13 al13 200713

An13 Immaterial13 Depth-shy‐Fused13 3D13 Display(VRSTrsquo07)Cha Lee Stephen DiVerdi Tobias Humlollerer

201413109　久保勇貴 2（鬼コース）13

どんなもの13

２つのスクリーンを駆使し3Dディスプレイを実現するdepth-shy‐fused13 3D(DFD)に関する評価を行いその結果よりディスプレイを提案した研究13

先行研究と比べてどこがすごい13

DFDが任意のスクリーン設定及び見る位置に対して有効であることを示した13

技術や手法のキモはどこ13

６通りのスクリーン組合せから２つを抽出し見え方の違いを検証した点13

どうやって有効だと検証した13

６通りのスクリーンについて立体的に見えるか被験者実験を実施その後それぞれに有意差がみられるか調べた13

議論はある13

ステレオイメージを認めることができなかったユーザに対しても強い3D効果が見られた13

次に読むべき論文は13

Tokuda13 et13 al13 201013

Cloud13 Display13 (ACErsquo10)Yutaka Tokuda Yasuhiro Suzuki Kunihiro Nishimura Tomohiro Tanikawa Michitaka Hirose

201413109　久保勇貴 2（鬼コース）13

どんなもの13

煙の渦輪を用いた空間を埋めるディスプレイ13

先行研究と比べてどこがすごい13

制御可能な手法により高所へのパーティクルを運搬することに着目した点13

技術や手法のキモはどこ13

コンピュータによって制御が行われる空気砲アレイ13

どうやって有効だと検証した13

箱の中で実験を行い安定して渦輪をできるようにした実際にデモを行ったことを示した13

議論はある13

今の試作機をより早くリフレッシュ速度を高めることによりより濃く空間を埋められることを目指す13

次に読むべき論文は13

Sato13 et13 al13 200913

Par]cle13 Display13 System　(JVRC09)13 -shy‐13 A13 Large13 Scale13 Display13 for13 Public13 Space13 -shy‐

Munehiko13 Sato13 Yasuhiro13 Suzuki13 13 Atsushi13 Hiyama13 Tomohiro13 Tanikawa13 Michitaka13 Hirose

201413109　久保勇貴 2（鬼コース）13

どんなもの13

パーティクルディスプレイによる公共スペースのための大画面ディスプレイの提案13

先行研究と比べてどこがすごい13

公共スペースにおける要求と制限に基づいたシステムを提案した点13

技術や手法のキモはどこ13

実験に基づく表示画像のスクロール時間の制御13

どうやって有効だと検証した13

Aという文字の知覚実験によって 適な点滅周期の調査を行った13

議論はある13

現在の試作機を組合せより高解像度にする必要がある13

次に読むべき論文は13

Kwon13 et13 al13 201513

FugaciousFilm13 Exploring13 Aen4ve13 Interac4on13 with13 Ephemeral13 Material13 (CHIrsquo15)Hyosun13 Kwon13 Shashank13 Jaiswal13 Steve13 Benford13 Sue13 Ann13 Seah13

13 Peter13 BenneC13 Boriana13 Koleva13 Holger13 Schnaumldelbach

201413109　久保勇貴 2（鬼コース）13

どんなもの13

膜を押す引く飛び出ることができる新しい石鹸膜インタフェースの提案13

先行研究と比べてどこがすごい13

徐々に消えるインタフェースは高い注意を有するインタラクションを提供するという点を示したこと13

技術や手法のキモはどこ13

水グリセリンを201の対比で混ぜることでldquopoprdquoがきれいになるようにしかつ膜の耐久性を向上させた13

どうやって有効だと検証した13

３目並べを用いた被験者実験を実施13 ユーザは膜を割ると負け膜を自分のマスにするにはタッチ押す引くの書かれた通りの操作を行う13

議論はある13

ユーザに精密な動作を要求することはとりわけ注意を払うことを誘発する13

次に読むべき論文は13

Wetzstein13 et13 al13 201213

Tensor13 Displays13 Compressive13 Light13 Field13 Synthesis13 using13 Mul4layer13 Displays13 with13 Direc4onal13 Backligh4ng(SIGGRAPHrsquo12)

Gordon13 Wetzstein13 Douglas13 Lanman13 MaChew13 Hirsch13 Ramesh13 Raskar

201413109　久保勇貴 2（鬼コース）13

どんなもの13

視点によって異なる立体映像を見ることができる複数の層からなるディスプレイ13

先行研究と比べてどこがすごい13

既存の手法を合成したcomputa(onal13 displaysというディスプレイの新しいフレームワークを提案した13

技術や手法のキモはどこ13

時分割で視差マスクを表示することでユーザの視線ごとに立体像を表現する13

どうやって有効だと検証した13

通常のディスプレイ３層LCDLCD及び指向性バックライトの例による比較13 13

議論はある13

波紋を含むこと色チャンネルが悪影響を与える相互反射不均一などの問題が見られた13

次に読むべき論文は13

Matoba13 et13 al13 1213

SplashDisplay(VRICrsquo12)Yasuo Matoba Taro Tokui Ryo Sato Tochiki Sato Hideki Koike

201413109　久保勇貴 2（鬼コース）13

どんなもの13

パーティクルにCGを投射しパーティクルがテーブル上に投げられると爆発しパーティクルが噴きあがる13

先行研究と比べてどこがすごい13

ビーズがミリメートルからメートル単位までZ軸方向について空中で奥行きを表現する13

技術や手法のキモはどこ13

スピーカによって風力が発生させビーズを舞い上げる点13

どうやって有効だと検証した13

ビーズを投げると花火が打ちあがっているかのようなアプリケーション例を示した13

議論はある13

高いレベルの表現及び幅広い入力範囲を提供できた13

次に読むべき論文は13

Kim13 et13 al13 1413

MARIO13 Mid-shy‐air13 Augmented13 Reality13 Interac4on13 with13 Objects13 (ECrsquo14)Hanyuool13 Kim13 13 Issei13 Takahashi13 Hiroki13 Yamamoto13 Satoshi13 Maekawa13 Takeshi13 Naemura

201413109　久保勇貴 2（鬼コース）13

どんなもの13

350times300times250のテーブル上のスペースにおいて自由に動かせる空中像を造りだすことができる13

先行研究と比べてどこがすごい13

凹面鏡や凹レンズのように曲面でないため画像の歪曲が発生しない13

技術や手法のキモはどこ13

Aerial13 Imaging13 Plate(AIP)を用いた空中像の生成及びそのためのディスプレイ移動装置13

どうやって有効だと検証した13

左右からの視差の考慮及び奥行き表現時の画像提示視野角の検証などを行った13 13

議論はある13

投影しているひよこを叩いたり払いのけたりするような動作がデモ中見られた13

次に読むべき論文は13

Tactile Feedback on Flat Surfaces for the Visually Impaired13Ali Israr Olivier Bau Seung-Chan Kim Ivan Poupyrev13

どのようなものか 視覚障害者のための触覚を用いた視覚代用デバイス 先行研究と比べてどこがすごいか 道案内をしてくれる機械などはあるが日用品の場所を教えたり探すのを手伝ってくれるデバイスはない 技術や手法のキモ タッチパネルとカメラを搭載したデバイス 触覚を与える技術はTeslaTouchを利用 色を基準にオブジェクトの位置を認識 有用性の確認 視覚障害者二人に対して実験このデバイスを使

わなくても各自の方法で物を見つけられるが間違えることが多いこのデバイスを使用することで間違えることなく正確に物の位置を特定できた 課題 一つの色でしか判断できない 触感のあるなしでしか情報を伝えられない 関連論文 TeslaTouch [Bau et al 2010]

20150522 橋爪智 2鬼

Fingernail-Mounted Display of Attraction Force and Texture13Masataka Niwa Tomoko Nozaki Taro Maeda and Hideyuki And13

どのようなものか 指先に取り付けて触感と力を両方表現できるデバイス 先行研究と比べてどこがすごいか 触感と引力をそれぞれ表現するデバイスはあるが両方を一つのデバイスで表現した例は少ない 引力は自由な方向に付加することができる 技術や手法のキモ 偏心に重さを付けた円盤を4枚使用する 5-9Hz 引力　100-200Hz 触感 それぞれの円盤の位相や回転数を調整することで

触感と力 を表現する 4つのモータを使いそれぞれの円盤を独立して制御する 有用性の確認 4人の男性に対して実験80以上の精度で認識できた 関連論文 The nail-mounted attraction forcebump display [Nozaki et al 2008]

20150522 橋爪智 2 鬼

Gilded gait reshaping the urban experience with augmented footsteps13Yuichiro Takeuchi13

どのようなものか 靴に装着し地面の触感をコントロールするデバイス 先行研究と比べてどこがすごいか 単独で動作しなかったり特定の環境のみでしか動作しなかったりするrarr靴単体で動作環境に依存しない 技術や手法のキモ 6個の振動パネルを取り付けゲルでカバー app modulesを取り替えることができ様々な機能を付加できる（GPSsound) 4種類の地面を再現

bull  Hard Ground 振動させない bull  Soft Ground すべてのパネルを振動 bull  Bumpy Ground ジグザグに振動 bull  Godzilla 全てのパネルを振動何回か繰り返す 課題 モーターを使っているため波形をプログラミングできないrarr圧電素子を使用する 関連論文 Haptic Shoes [Fu et al 2010]

20150522 橋爪智 2鬼

ExoInterfaces novel exosceleton haptic interfaces for virtual reality augmented sport and rehabilitation

Dzmitry Tsetserukou Katsunari Sato Susumu Tachi13

どのようなものか 腕に装着し物理的なinteractionを可能にするデバイス 先行研究と比べてどこがすごいか Exoskeleton 力を増幅するためだが重たく危険なこともある String-based wireが視界をまたぐ動きに制限がある rarr腕の動きに制限を与えない安全 技術や手法のキモ 「FlexTorque」人間の筋肉の構造を再現するベルトとモーターを使用する肩の近くに装着することで

腕に負担がかかりにくい 触覚feedback弱いトルク 運動を支援強いトルク 課題 物理的な接触を表現するゲームやスポーツにより没頭させるリハビリのサポートをする視覚障害者の支援（ものの場所を教える） 関連論文 FlexTorque [Dzmitry et al 2010]

20150522 橋爪智 2 鬼

Perception of Ultrasonic Haptic Feedback on the Hand Localisation and Apparent Motion13

Graham Wilson Tom Carter Sriram Subramanian Stephen Brewster13

どのようなものか 超音波を用いた触覚フィードバック有効性の検討を行う 先行研究と比べてどこがすごいか 超音波触覚フィードバックは比較的新しく研究や操作方法に関する知識が少ない 腕を自由に動かすことができ小さいものは着用可能 技術や手法のキモ 88のアレイ状に超音波発生器を設置

有効性の確認 bull  局所的な触感 　　　25箇所に分割しそれぞれに超音波を当てる 　　　触感を感じた989 　　　場所の誤差85mm bull  手のひらを動く触感 上下左右に動く 　　　動いてると感じた629

20150522 橋爪智 2 鬼

Friction Measurements on a Large Area TPaD13Nicholas D Marchuk J Edward Colgate Michael A Peshkin13

どのようなものか 超音波の振動により触感を与える 先行研究と比べてどこがすごいか ガラス板を使うので透明後ろにディスプレイを配置可能 技術や手法のキモ 「Squeeze Film Effect（スクイズ膜効果）」 ガラス板に取り付けた圧電素子の円盤に高周波信号

をかける 実験 振動しない部分＝摩擦が発生しない部分が発生周波数により場所が変わる rarr摩擦を大きさをかける力の大きさから計測 rarr指の場所に合わせて複数の周波数を使い分ける 関連論文 T-PaD[Winfield et al 2007]

20150522 橋爪智 2 鬼

STIMTAC a Tactile Input Device with Programmable Friction13Michel Amberg Freacutedeacuteric Giraud Betty Semail Paolo Olivo Geacutery Casiez Nicolas Roussel13

どのようなものか 触感を与えられるタッチデバイス 先行研究と比べてどこがすごいか LATPaD サイズ大きいノイズが大きい TeslaTouch 高い電圧付加が必要GNDに接続しなければいけない

技術や手法のキモ 「Squeeze Film Effect」超音波を用いて振動を与える 圧電性セラミックを電極にコーディング 指トラッキングは力センサを用いる 活用法 マウスキーボード絵を描く 関連論文 LATPaD[Vincent et al 2011] TeslaTouch[Bau et al 2010]

20150522 橋爪智 2 鬼

Surround Haptics Tactile Feedback for Immersive Gaming Experiences Ali Israr Seung-Chan Kim Ivan Poupyrev Jan Stec13

どのようなものか ゲームに合わせて高解像度の触覚フィードバックをユーザーに与える椅子 先行研究と比べてどこがすごいか 荒く配置した安価な振動アクチュエータで高解像度の触覚フィードバックを行える 一点の振動連続した動き範囲の振動などを再現

技術や手法のキモ 仮想的な振動アクチュエータをいくつかの振動アクチュエータを使って作り出す physical-physicalphysical-virtualvirtual-virtual ゲームにHaptics Engineを導入しHaptics APIを用いてHaptic Displayを操作する 関連論文 Exploring Surround Haptics Displays[Israr et al 2010]

20150522 橋爪智 2 鬼

Audio-Haptic Feedback in Mobile Phones Angela Chang Conor OrsquoSullivan13

どのようなものか haptics機能のついてない携帯電話にオーディオ機能を利用した触覚フィードバックを追加する 先行研究と比べてどこがすごいか 簡単に作れてnon-haptic mobile devicesでも大丈夫 技術や手法のキモ 「MultiFunction Transducer(MFT)」 スピーカーから音と信号の両方を出力できる

bull  Haptic Inheritance 　　音を2つの周波数帯に分ける bull  Synthesis and Matching 　　低周波数帯(20-300Hz)を使い触感を伝える 有効性の検討 42人の人を対象に実験を行う83の人が触感を感じた

20150522 橋爪智 2 鬼

Resolution of Sleep Deprivation Problems using ZZZoo Pillows13Shunsuke Yanaka Motoki Ishida13

どのようなものか 近年不眠症の人が多い rarr誰かと接していると安心し睡眠に導入しやすくなる rarrまるで添い寝をしているようなリアルな抱きまくらを使う 技術や手法のキモ breathing sensation 風船を使って人の呼吸を再現肺の形の風船弱く長い呼吸をする

heating お湯を使って人の体温を再現45 有効性の確認 84人の人が実験 呼吸が睡眠を誘ったかrarr61 体温が睡眠を誘ったかrarr85 関連論文 The Impact of Sleep Disorders on Social Life[Komada et al 2007]

20150522 橋爪智 2 鬼

まとめ13超音波 モーター 風

20150522 橋爪智 2 鬼

コイル 電気刺激 Electrovibration

振動 音 お湯

なかの

Temporally Consistent Disparity and Optical Flow via Efficient Spatio-temporal Filtering1

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示した

議論論はあるか

時間的に一定の視差を算出する手法静止画ステレオよりも精度度が良良いことを示す従来よりも推定精度度が良良いオプティカルフローも算出する

一枚の静止画に対するフィルタリング[1]をステレオ動画に拡張している

ケンブリッジのステレオ動画のデータセットを利利用 実写動画に対する比較も行行うノイズ耐性も検証する

フィルタベースとエネルギーベースの関係性を良良り理理解することで推定精度度を上げる

実装が簡単でリアルタイム視差推定が可能

Fast Cost-Volume Filtering for Visual Correspondence and Beyond [Rhemann C Hosni A Bleyer M Rother C Gelautz M CVPR2011] Real-time Spatiotemporal Stereo Matching Using the Dual-Cross-Bilateral Grid [Richardt C Orr D Davies I Criminisi A Dodgson NA ECCV2010] Secrets of optical flow estimation and their principles [Sun D Roth S Black MJ 2010] Motion estimation with non-local total variation regularization [Werlberger M Pock T Bischof H CVPR2010] Temporally Consistent Disparity Maps from Uncalibrated Stereo Videos [Bleyer M Gelatuz M ISPA2011]

なかの

SymStereo Matching using Induced Symmetry (2014)2

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示した

議論論はあるか

画像の対称性を用いてステレオマッチングを行行う 左右の画像を反転させて重ね合わせることで対称性を測る

絵的な類似の代わりに対称性を使う今まで対称性を用いる手法はなく新規性が大きい

三つのSymmetry-baseの手法で精度度を検証従来手法よりも精度度が向上しているMiddlebury Oxford Corridorfountain-P11のデータセット使用

ステレオの問題である不不連続な箇所オクルージョン部分は未解決である演算時間はやや増加

1-Dラインのコストを考える今までは撮像面に対して平行行な平面でデプスを考えていたが垂直な平面を考える

BT[Birchfield and Tomasi 1998] Census transform[Zabih and Woodfill 1994] Log N[Kovesi 1997] radio-metoric differences[Hirschmuller Scharstein 2009]

なかの

Camouflaging an Object from Many Viewpoints3

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

多くの視点から三次元の物体をカモフラージュするカモフラージュによってオクルージョン部分の不不連続がどの程度度生じるか他の視点ではどれほどになるかの検証

MRF（Markov Random Fields）ベース

新しい三次元物体のカモフラージュモデルを構築 37種類のデータセットを作る

箱形の物体に対してカモフラージュ処理理を施し 結果を評価する

オクルージョン不不連続テクスチャの歪みが問題 照明や画像の貼りつけに制限あり

なかの

Aliasing Detection and Reduction in Plenoptic Imaging4

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

カメラアレイ撮影の角度度のエイリアシングを除去するエイリアシングの探索索と打ち消しを行行う

周波数領領域ではなく空間領領域で探索索を行行う

先行行研究がフィルタデモザイキング再パラメータ調整などの前処理理でエイリアシング除去を行行うのに対しエイリアシング探索索後にリフォーカスの段階でエイリアシングを取り除く

8times8の平行行カメラアレイで検証するカメラ間の 基線長は70mm

今回は基線長が長いデータセットを使った 次はLytroなどのマイクロレンズアレイで検証する

Globally consistent multi-label assignment on the ray space of 4d light fields [S Wanner C Straehle B Goldluecke CVPR2013] Lineassisted light field triangulation and stereo matching [Z Yu X Guo H Lin A Lumsdaine J Yu ICCV 2013]

なかの

Globally Consistent Multi-Label Assignment on the Ray Space of 4D Light Fields5

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

四次元ライトフィールドの光線情報において マルチラベルの領領域分割を行行う

深度度情報光線情報を用いて領領域分割することで 二次元（空間）情報だけでは分割が難しかった 領領域を分割可能とする

The light field camera Extended depth of field aliasing and superresolution [T Bishop P Favaro IEEE Transactions on Pattern Analysis and Machine Intelligence 2012]

なかの

Line Assisted Light Field Triangulation and Stereo Matching6

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

光線情報を利利用してステレオマッチングの精度度を 向上させる手法三角測量量の誤差を減らす

Light Field Stereo Matchingとかいう手法 グラフ構造を作成

Variational light field analysis for disparity estimation and super-resolution [S Wanner and B Goldlumluecke 2013]

なかの

Adaptive stereo similarity fusion using confidence measures 20157

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

ステレオマッチングの新しい方式fusion weightsを提案複数の手法を組み合わせてコスト計算を行行う手法付録に既存手法のコスト関数一覧あり

パラメータに依存する手法を用いないことで高速化を図っている

一つのアルゴリズムでは異異なる特性を持つ領領域全てに対して適切切なマッチングはできない複数を組み合わせることでそれを補う13種と多い

middleburyとKITTIのデータセットで評価

一枚あたり03sと高速だが001sとより高速なアルゴリズムが存在する

Segment-based stereo matching using belief propagation and a self-adapting dissimilarity measure [A Klaus M Sormann K Karner ICPR2006] On building an accurate stereo matching system on graphics hardware [X Mei X Sun M Zhou S Jiao H Wang X Zhang ICCV2011] Similarity measures for depth estimation [K Wegner O Stankiewicz 3DTV-CON2009] On accurate dense stereo-matching using a local adaptive multi-cost approach [C Stentoumis L Grammatikopoulos I Kalisperakis G Karras ISPRS2014] A quantitative evaluation of confidence measures for stereo vision [X Hu P Mordohai PAMI2012]

なかの

SIMILARITY MEASURE FOR DEPTH ESTIMATIOM 20098

どんなもの

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

4種類の視差推定アルゴリズムを組み合わせている 類似度度の選択性の解析

Belief Propagationの枠組みを用いる

名古屋大学の多視点データベースを利利用

HHI Test Material for 3D Video [I Feldmann M Muller F Zilly R Tanger A SmolicP Kauff T Wiegand 2008] Multiview Video Test Sequence and Camera Parameters [Yo-Sung Ho Eun-Kyung Lee and Cheon Lee 2008] 1D Parallel Test Sequences for MPEG-FTV [M Tanimoto T Fujii N Fukushima 2008] Non-parametric Local Transforms for Computing Visual Correspondence [R Zabih J Woodfill 1994]

なかの

Spatiotemporal Stereo via Spatiotemporal Quadric Element (Stequel) Matching9

どんなもの

技術や手法のキモはどこ

新しいマッチング手法を提案動き考慮することなく時間情報を取り込むことができる 時間方向のエピ線を考える

オプティカルフロー推定は3D境界や低テクスチャで弱いが提案手法はロバストである

なかの

Depth Video Enhancement Based on Weighted Mode Filtering10

どんなもの

議論論はある

ノイズを含んだ低解像度度のデプスマップの質を高める手法（超解像度度とデノイズ）時間方向も使用簡単なオプティカルフローを計算し利利用する

非反復復アルゴリズムのためGPUに載せやすく高速化が考えられる

なかの

Fast Bilateral-Space Stereo for Synthetic Defocus11

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

議論論はある

次に読むべき論論文は

高速な自由焦点ぼけ画像の作成

Bilateral-spaceを提案

従来研究よりも10から100倍速くぼけ具合の精度度も良良い

ぼけを作成するというアプリケーションに利利用する距離離という面では提案手法が有益であるが実測的な距離離という面での精度度は悪い背景と前景が同じ色で近くにある場合同一ととらえてしまう

Efficient high-resolution stereo matching using local plane sweeps [S N Sinha D Scharstein and R SzeliskiCVPR2014] Bilateral filtering-based optical flow estimation with occlusion detection [J Xiao H Cheng H Sawhney C Rao and M IsnardiECCV2006] Efficient nonlocal regularization for optical flow [P Krumlahenbumluhl and V KoltunECCV2012] Real-time spatiotemporal stereo matching using the dual-cross-bilateral grid [C Richardt D Orr I Davies A Criminisi and N A DodgsonECCV2010]

どうやって有効性を示した視差推定の精度度はmiddleburyKITTI

なかの

Robust Spatiotemporal Stereo for Dynamic Scenes12

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

ステレオ動画のフレーム間情報を取り入れることでノイズ耐性を向上させるまた動きの大きなものも考える

時間を含めたウインドウの提案自動的にそのような変化に対応する画像領領域を検出する

従来の時空間ステレオと比べ大きな動きによる急激な視差の時間変化に対して頑健である

なかの

Spacetime Stereo A Unifying Framework for Depth from Triangulation13

どんなもの

先行行研究と比べてどこがすごい

space time stereoを提案ステレオカメラの視差推定でも構造光を用いた視差推定でも利利用可能 動的なシーンでの利利用も可能

フレームごとマッチングを取っていたが複数フレームでのマッチングを可能とした

なかの

Learning to Select and Order Vacation Photographs (Disney research)14

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示したあまりにもたくさん撮影した写真たちから自動的にフォトアルバムを作成する研究

複雑な視覚での区別を試みたのはこの論論文が初

５つの異異なるトピックから63の個人的な写真コレクションのデータセットを利利用し定量量的に評価する

写真間の差別かを定義する顔全体の絵何が写っているか写っていないかを評価する

Jointly aligning and segmenting multiple web photo streams for the inference of collective photo storylines [G Kim and E P Xing CVPR2013] Photo sequencing [T Basha Y Moses and S Avidan CVPR2012]

なかの

A Taxonomy and Evaluation of Dense Two-Frame Stereo Correspondence Algorithms15

どんなもの

どうやって有効性を示した

次に読むべき論論文は

ステレオマッチングに関する分類を行行う 新たなデータセットを作成する

というよりも他の手法が有効性を示すことができるようにデータセットを作成した 今ではmiddleburyのデータセットと言えばステレオ業界では超有名

High-resolution stereo datasets with subpixel-accurate ground truth

なかの

Discriminability Limits in Spatio-Temporal Stereo Block Matching1

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

spatio-temporal disparity estimationの根本的な前提の正当性を解析しマッチング処理理の際に動きが助けとなる程度度を決定する

時空間マッチングのエラーを分析し誤りの原因を確率率率で導出する（フレーム数動きの分散画像特徴ノイズの関数）

[34243334]は時空間マッチングの利利点を指摘していたが本論論文はマッチング精度度の向上のために動きを用いる手法の程度度や性質を研究する

6つのステレオビデオを用いて検証を行行った

Spacetime stereo Shape recovery for dynamic scenes [L Zhang B Curless and S Seitz CVPR2003] Spatiotemporal stereo and scene flow via stequel matching [M Sizintsev and R Wildes PAMI2012] Temporally consistent disparity and optical flow via efficient spatio-temporal filtering [A Hosni C Rhemann M Bleyer and M Gelautz PRCAIVT2012] Spacetime stereo A unifying framework for depth from triangulation [PAMI2005] Dynamic depth recovery from multiple synchronized video streams [H Tao H Sawhney and R Kumar CVPR2001] Spatiotemporal descriptor for wide-baseline stereo reconstruction of non-rigid and ambiguous scenes [ECCV2003]

なかの

Depth-Based Patch Scaling for Content-Aware Stereo Image Completion2

どんなもの

どうやって有効性を示した

ステレオでデプスを取り物体の三次元情報を使ってインペインティングを行行う

bookのデータセット背景が繰り返しパターンが多いものを使っている

なかの

Fast Semi-dense Surface Reconstruction from Stereoscopic Video in Laparoscopic Surgery3

どんなもの

手法の流流れ

次に読むべき論論文は

腹腔内手術の際にステレオビデオから高速に物体の三次元再構成を行行う研究

Evaluation of stereo matching costs on images with radiometric differences [Hirschmueller H Scharstein D PAMI2008]

スコープカメラから画像取得GPUで演算する 視差を算出しフィルタにかける距離離に変換 点群を再びフィルタにかけて三次元再構成

なかの

3D Reconstruction from Accidental Motion4

どんなもの

技術や手法のキモはどこ

議論論はある

数秒のビデオ（単眼）から三次元再構成を行行う 手ぶれなどの動きから再構成が可能で特定の動きや機材を必要としない

短い基線長でも再構成が可能（3mmの基線長）

基線長が短いため背景の精度度が低くなる リフォーカス画像作成には十分 練習では上手く動作したが検証がまだ必要

なかの

Panoramic Video from Unstructured Camera Arrays5

どんなもの

技術や手法のキモはどこ

議論論はある

複数のカメラを用いたパノラマ撮影を行行う その際に不不自然さがないような動画を作成する

不不自然さを感じる感覚特性を提示しそれにのっとって対策を講じている

一つのカメラの解像度度と品質を向上させるよりも複数台のカメラを組み合わせることがはるかに簡単で有益である専門家でなくてもGoProのカメラセットを組み合わせることは容易易

カメラの配置は厳密に決められていない完璧な時間同期やローリングシャッターの不不足のような実撮影での問題もクリアしている

先行行研究と比べてどこがすごい

どうやって有効性を示した左のシステムは14台のカメラを使用 右のシステムはGoProを5台使用

Disney 201558

なかの

Floating Scale Surface Reconstruction6

どんなもの

技術や手法のキモはどこ

流流動的にスケールを変えられる三次元再構成手法

サンプル規模に依存するパラメータがない rarrどのスケールのサンプルにも対応できる

siggraph2014

なかの

A Super Resolution Reconstruction Scheme for Mixed Spatio-Temporal Stereo Video7

どんなもの

技術や手法のキモはどこ

ビデオ超解像アルゴリズム

二台のカメラを使用 一台は低解像度度で高速一台は高解像度度で低速

HHI 3DV ftp siteのBookarrivalとbeergadenを使用どうやって有効性を示した

なかの

What Is a Good Day for Outdoor Photometric Stereo8

どんなもの

先行行研究と比べてどこがすごい

議論論はある

次に読むべき論論文は

屋外における照度度差があるステレオの研究 屋外でステレオを行行う際に有利利or不不利利な日照条件を明らかにする

点光源を用いた研究は行行われていたが屋外での研究はされていなかった

晴れより曇りの方が精度度が良良い雲があるから特徴量量を取りやすい雑音を白色ガウスモデルを想定 季節ごとのデータセットを利利用してみても良良い

Time-lapse photometric stereo and applications [F Shen K Sunkavalli N Bonneel S Rusinkiewicz H Pfisterand X Tong2014] Outdoor photometric stereo [L-F Yu S-K Yeung Y-W Tai D Terzopoulos and T FChan ICCP2013]

どうやって有効性を示した屋外の照明に関するHDR環境マップのデータベースを利利用

Disney 2015424

なかの

COLORBRUSH ANIMATED DIFFUSION FOR INTUITIVE COLORIZATION SIMULATING WATER PAINTING 9

どんなものアニメを水彩画で描いたように変換する 水彩画を描くには経験が必要であるがそれを作成するアルゴリズムを考案絵具が水によりどうにじむかシュミレーションしている

Disney 20141027 ICIP2014

次に読むべき論論文はGabor-space geodesic active contoursrdquo In Algebraic Frames for the Perception-Action Cycle [C Sagiv NA Sochen and YY Zeevi 2000] Practical temporal consistency for image-based graphics applications [M Lang O Wang T Aydin A Smolic and M Gross SIGGRAPH2012] Computer-Generated Watercolor [CJ Curtis SE Anderson JE Seims KW Fleischer and DH Salesin SIGGRAPH1997]

なかの

From Sound to Sight Using Audio Processing to enable Visible Light Communication 10

どんなもの光に情報を載せる技術プロジェクトページがあって光関係の研究が8個載っている

httpwwwdisneyresearchcomprojectvisible-light-communication

ビデオのURL httpwwwdisneyresearchcomwpcontentuploadsPub_InvisibleLightCommunication_Siggraph14_videomp4

• 201211106_KeisukeKawahara
• 201311421_KeitaKanai_02
• 201313095_AkiraIshii_02
• 201413109_YuukiKubo_02
• 201513110_SatoshiHashizume_02
• 鬼輪講マラソン③_1
• 鬼輪講マラソン③_2

2 201313095

7 2 3

on-body

bull  GemperleFKasabachCSEvoricJBauerMandMarEnRDesignforWearabilityInProcISWCrsquo98116-122

WhereamptoampLocateampWearableampDisplaysampReacEonampTimeampPerformanceampofampVisualampAlertsampfromampTipamptoampToeamp(CHIrsquo09)

ChrisHarrisonBrianYLimAubreyShickSco]EHudson

2 201313095

FingerReader

4

939

34 5

bull  NanayakkaraSShilkrotRYeoKPandMaesPEyeRingafinger-worninputdeviceforseamlessinteracEonswithoursurroundingsInProcofAugmentedHuman(2013)13-20

FingerReaderampAampWearableampDeviceamptoampExploreampPrintedampTextamponamptheampGoamp(CHIrsquo15)

RoyShilkrotJochenHuberMengEeWongPaneMaesSurangaNanayakkara

h]psvimeocom86912300

2 201313095

Cyclops

1

360degMHI RDF

20 20MHI

79 RDF92

bull  MorrisDSaponasTSGuilloryAandKelnerIRecofitUsingawearablesensortofindrecognizeandcountrepeEEveexercisesInProcampACMampCHIamprsquo14amp(2014)3225ndash3234

CyclopsampWearableampandampSinglePieceampFullBodyampGestureampInputampDevicesamp(CHIrsquo15)amp

LiweiChanChi-HaoHsiehYi-LingChenShuoYangDa-YuanHuangRong-HaoLiangBing-YuChen

h]pswwwyoutubecomwatchv=JYm_3oNUGIk

2 201313095

Muehlbaueretal[24]

SVM

114 94 3020

9599 4 98 7 96 13

93

bull  MuehlbauerMBahleGLukowiczPWhatcananarmholsterwornsmartphonedoforacEvityrecogni-EonProcIEEEISWC2011

RecoFitampUsingampaampWearableampSensoramptoampFindampRecognizeampandampCountampRepeEEveampExercisesamp(CHIrsquo14)

DanMorrisTSco]SaponasAndrewGuilloryIlyaKelner

h]pswwwyoutubecomwatchv=zpa4rVGlO68

2 201313095

2

31 2

15-20 90-95

Hambone

bull  BAmentoWHillandLTerveenThesoundofonehandawrist-mountedbio-acousEcfingerEpgestureinterfaceInCHIrsquo02CHIrsquo02extendedabstractsonHumanfactorsincompuEngsystemspages724ndash725NewYorkNYUSA2002ACMPress

HamboneampAampBioAcousEcampGestureampInterfaceamp(ISWCrsquo07)

TravisDeyleSzabolcsPalinkoErikaShehanPooleandThadStarner

h]pswwwyoutubecomwatchv=Uxj-vyal84M

2 201313095

bull  RabinerLR(1989)ATutorialonHiddenMarkovModelsandSelectedApplicaEonsinSpeechRecogni-EonProcIEEEVol77257-28

TheampSoundampofampOneampHandampAampWristmountedampBioacousEcampFingerEpampGestureampInterfaceamp(CHIrsquo02)

BrianAmentoWillHillLorenTerveen

2 201313095

Non-linearSpaEalSampling

SVM

12

948

15cm

bull  NakatsumaKShinodaHMakinoYSatoKandMaenoTTouchinterfaceonbackofthehandInprocofSIGGRAPHrsquo11(2011)391ndash391

bull  ButlerAIzadiSandHodgesSSidesightmulE-touchinteracEonaroundsmalldevicesInProcofUISTrsquo08(2008)201ndash204

zSenseampEnablingampShallowampDepthampGestureampRecogniEonampforampGreaterampInputampExpressivityamponampSmartampWearablesamp(CHIrsquo15)

AnushaWithanaRoshanPeirisNipunaSamarasekaraSurangaNanayakkara

h]pswwwyoutubecomwatchv=fQobwL8eSU4

2 201313095

bull  HARRISONCTANDANDMORRISD2010Skinputap-propriaEngthebodyasaninputsurfaceInProceedingsofthe28thinternaEonalconferenceonHumanfactorsincompuEngsystemsACMNewYorkNYUSACHIrsquo10453ndash462

Touchampinterfaceamponampbackampofamptheamphandamp(SIGGRAPH11)

KeiNakatsumaHiroyukiShinodaYasutoshiMakinoKatsunariSatoTakashiMaeno

h]pswwwyoutubecomwatchv=tKNLxh9Yw2M

2 201313095

Pose-IO EMS

Pose-IO

EMS

EMS58deg

46 5 be]er

bull  RoudautARauASterzCPlauthMLopesPandBaudischPGestureoutputeyes-freeoutputusingaforcefeedbacktouchsurfaceProcCHI1325472556

PropriocepEveampInteracEonamp(CHIrsquo15)amp

PedroLopesAlexandraIonWilliMuellerDanielHoffmannPatrikJonellPatrickBaudisch

h]pswwwyoutubecomwatchv=KMxIw7zhlw

2 201313095

EMS

AR EMSEMS

GPS

bull  TamakiEMiyakiTandRekimotoJPossessedHandAhandgesturemanipulaEonsystemusingelectricalsEmuliInProcampAHrsquo10amp(2010)21ndash25

CruiseampControlampforampPedestriansampControllingampWalkingampDirecEonampusingampElectricalampMuscleampSEmulaEonamp(CHIrsquo15)amp

MaxPfeifferTimDunteStefanSchneegassFlorianAltMichaelRohs

h]pswwwyoutubecomwatchv=JSfnm_HoUv4

2 201313095

EMS

EMS

EMS 16automaEccalibraEonsystem

auto-calibraEonsystems 16

8875g

bull  KruijffESchmalsEegDandBeckhausSUsingneuromuscularelectricalsEmulaEonforpseudo-hapEcfeedbackInProceedingsoftheACMsymposiumonVirtualrealitysoywareandtechnologyVRSTrsquo06ACM(NewYorkNYUSA2006)316ndash319

PossessedHandampTechniquesampforampControllingampHumanampHandsampusingampElectricalampMusclesampSEmuliamp(CHIrsquo11)amp

EmiTamakiTakashiMiyakiJunRekimoto

h]psvimeocom27044937

2 201313095

EMS

EMS

RFIDEMS

1276

bull  KruijffESchmalsEegDandBeckhausDUsingneuromuscularelectricalsEmulaEonforpseudo-hapEcfeedbackProcVRST06316mdash319

Affordance++ampallowingampobjectsamptoampcommunicateampdynamicampuseamp(CHIrsquo15)

PedroLopesPatrikJonellPatrickBaudisch

h]pswwwyoutubecomwatchv=d0J7V37zQjY

2 201313095

EMS

EMS

EMS

ReacEonloss

EMS

UsingampNeuromuscularampElectricalampSEmulaEonampforampPseudoHapEcampFeedbackamp(VRSTrsquo06)

ErnstKruijffDieterSchmalsEegSteffiBeckhaus

2 201313095

SVM

106 Per-User

863 13

712

13

bull  SatoMPoupyrevIandHarrisonCToucheenhancingtouchinteracEononhumansscreensliquidsandeverydayobjectsInCHIrsquo12483ndash492

bull  TimCollinsAcEveacousEctouchinterfaceElectronicsLe]ersVol45No20pp1055ndash1056242009

TouchampampampAcEvateampAddingampInteracEvityamptoampExisEngampObjectsampusingampAcEveampAcousEcampSensingamp(UISTrsquo13)

MakotoOnoBuntarouShizukiJiroTanaka

h]pswwwyoutubecomwatchv=XgxXi6w8IQc

2 201313095

13

13

SVM

on-body

per-user 5 967 4987

bull  HarrisonCBenkoHWilsonAOmniTouchwearablemulEtouchinteracEoneverywhereinUIST11441-450

bull  MatsushitaNandRekimotoJHoloWalldesigningafingerhandbodyandobjectsensiEvewallUIST97209-210

ToucheampEnhancingampTouchampInteracEonamponampHumansampScreensampLiquidsampandampEverydayampObjectsamp(CHIrsquo12)

MunehikoSatoIvanPoupyrevChrisHarrison

h]pswwwyoutubecomwatchv=E4tYpXVTjxA

2 201313095

SVM

9 9TapSense 4

95 99

TapSenseDelete

bull  HarrisonCTanDandMorrisDSkinputappropriat-ingthebodyasaninputsurfaceInProcCHI10453-462

TapSenseampEnhancingampFingerampInteracEonamponampTouchampSurfacesamp(UISTrsquo11)

ChrisHarrisonJuliaSchwarzSco]EHudson

h]pswwwyoutubecomwatchv=-oN96cucBr4

2 201313095

13

13

22 SVM

13 FingersWholeArmForearm 876 Fingers877 WholeArm 955

883 Forearm 815

833

GUI

bull  SaponasTSTanDSMorrisDandBalakrishnanRDemonstraEngthefeasibilityofusingforearmelectromyographyformuscle-computerinterfacesInProcCHIrsquo09515-24

SkinputampAppropriaEngamptheampBodyampasampanampInputampSurfaceamp(CHIrsquo10)

ChrisHarrisonDesneyTanDanMorris

h]pswwwyoutubecomwatchv=g3XPUdW9Ryg

2 201313095

Fiberio

10 330 150

148 2

Fiberio

bull  MatsushitaNandRekimotoJHoloWallDesigningaFingerHandBodyObjectSensiEveWallProcUIST97209ndash210

FiberioampAampTouchscreenampthatampSensesampFingerprintsamp(UISTrsquo13)

ChrisEanHolzPatrickBaudisch

h]pswwwyoutubecomwatchv=p1a5yLzuTqA

2 201313095

3D

3D

bull  GeigerMVollertsenFTheMechanismsofLaserFormingCIRPANNALSlsquo93421301-304

bull  WillisKDDXuCWuJKLevinGGrossMDInteracEvefabricaEonnewinterfacesfordigitalfabricaEonProcTEI11pp69-72

LaserOrigamiampLaserCugngamp3DampObjectsamp(CHIrsquo13)

StefanieMuellerBasEanKruckPatrickBaudisch

h]pswwwyoutubecomwatchv=arjRtCjI9AQ

2 201313095

bend

bull  HyunyoungSongFranccediloisGuimbreEegravereChangHuHodLipsonModelCraycapturingfreehandannotaEonsandeditsonphysical3DmodelsProceedingsofthe19thannualACMsymposiumonUserinterfacesoywareandtechnologyOctober15-182006MontreuxSwitzerland

InteracEveampConstrucEonampInteracEveampFabricaEonampofampFuncEonalampMechanicalampDevicesamp(UISTrsquo12)

StefanieMuellerPedroLopesPatrickBaudisch

h]pdlacmorgcitaEoncfmid=23801162380191

2 201313095

3D

3D

bull  SavageVSchmidtRGrossmanTFitzmauriceGandHartmannBAseriesoftubesAddinginteracEvityto3dprintsusinginternalpipesInProcUIST14(2014)

3DampPrinEngampPneumaEcampDeviceampControlsampwithampVariableampAcEvaEonampForceampCapabiliEesamp(CHIrsquo15)amp

MarynelVazquezEricBrockmeyerRutaDesaiChrisHarrisonSco]EHudson

h]pswwwyoutubecomwatchv=-4gFYvhkz0Y

2 201313095

OpenFab 3D

fablets

3 3

bull  CHENDMATUSIKWSITTHI-AMORNPDIDYKPANDLEVIND2013Spec2FabAreducer-tunermodelfortranslat-ingspecificaEonsto3DprintsACMTransGraph324(July)

OpenFabampAampProgrammableampPipelineampforampMulEMaterialampFabricaEonamp(SIGGRAPHrsquo13)

KirilVidimcˇeSzu-PoWangJonathanRagan-KelleyWojciechMatusik

2 201313095

3D

3D

3D

3D14 30 13 67

244

14

3D

bull  MuellerSKruckBBaudischPLaserOrigamiLaser-Cunng3DObjectsProcCHIrsquo132585-2592

faBrickaEonampFastamp3DampPrinEngampofampFuncEonalampObjectsampbyampIntegraEngampConstrucEonampKitampBuildingampBlocksamp(CHIrsquo14)amp

StefanieMuellerTobiasMohrKersEnGuentherJohannesFrohnhofenPatrickBaudisch

h]pswwwyoutubecomwatchv=BlO6YRcLJjE

Touching13 the13 Void13 Direct-shy‐Touch13 Interac4on13 for13 Intangible13 Displays(CHIrsquo10)Li-Wei Chan Hui-Shan Kao Mike Y Chen Ming-Sui Jane Yi-Ping Hung

201413109　久保勇貴 2（鬼コース）13

どんなもの13

空中像へのタッチのエラーに関する調査及び影や音のフィードバックを付与することによるパーフォーマンス向上を示した研究13

先行研究と比べてどこがすごい13

平面画像をタッチする際の奥行きに関するエラーの正確な取得を初めて検証13

技術や手法のキモはどこ13

２つの赤外線カメラを用いた正確なタッチの検出13

どうやって有効だと検証した13

タッチ時の奥行きの正確さに関する被験者実験を実施またタッチする際に影や音を付けた際の反応時間を被験者実験で検証13

議論はある13

ユーザは慣れるまで影や音のフィードバックが必要だがそのあとは必要なくなる13

次に読むべき論文は13

MirageTable13 （CHI12） 13

MirageTable13 Freehand13 Interac4on13 on13 a13 Projected13 13 Augmented13 Reality13 Tabletop(CHIrsquo12)

Hrvoje Benko Ricardo Jota Andrew D Wilson

201413109　久保勇貴 2（鬼コース）13

どんなもの13

テーブル上においてバーチャルな物体をリアルタイムで現実でものを動かすことと同様な動作に操作可能なシステム13

先行研究と比べてどこがすごい13

現実の物体をリアルタイムで画面に取りこむことができ質の高いフリーハンドインタラクションを実現した点13

技術や手法のキモはどこ13

色深度前景頭追跡プロキシパーティクルを駆使したリアルタイムメッシュの作成13

どうやって有効だと検証した13

凹凸など例外な表面に対しての投影した際の画像の質についての評価実験また仮想物体の奥行き知覚に関する実験も行った13

議論はある13

前面のみしかキャプチャしていないため差が生じる握っている場所の再現は未解決な課題である13

次に読むべき論文は13

Hirsch13 et13 al13 201413 (SIGGRAPHrsquo14)13

A13 Compressive13 Light13 Field13 Projec4on13 System13 (SIGGRAPHrsquo14)MaChew13 Hirsch13 Gordon13 Wetzstein13 Ramesh13 Raskar

201413109　久保勇貴 2（鬼コース）13

どんなもの13

通常の3Dディスプレイに比べて解像度輝度コントラストを改善した圧縮ライトフィードディスプレイ13

先行研究と比べてどこがすごい13

多視点立体視を複数でなく１台のプロジェクタを用いて実現した13

技術や手法のキモはどこ13

受動的スクリーンと高速切り替えプロジェクタによる新しい光学設計13

どうやって有効だと検証した13

4つのシーン例を投影したものを示したアニメーションの3D効果について観察を行った13

議論はある13

光路長を広げると観察できる画質が大幅に制限され他のライトフィードビューと混線が生じる13

次に読むべき論文は13

Butler13 et13 al13 201113

Vermeer13 Direct13 Interac4on13 with13 a13 360deg13 Viewable13 3D13 Display(UISTrsquo11) Alex Butler Otmar Hilliges Shahram Izadi Steve Hodges David Molyneaux David Kim

201413109　久保勇貴 2（鬼コース）13

どんなもの13

映し出された3Dオブジェクトとインタラクションを行えるシステム13

先行研究と比べてどこがすごい13

ディスプレイ内の画像とのインタラクションを提案ボリュームディスプレイを支援する新しいセンシング法の提案13

技術や手法のキモはどこ13

パラボラ鏡に取り付けた赤外線カメラセンサによる指先検出13

どうやって有効だと検証した13

アプリケーション例を示した13

議論はある13

パラボラ鏡の大きさよりもディスプレイサイズが小さくなってしまう13

次に読むべき論文は13

Hirsch13 et13 al13 201213

8D13 Interac4ng13 with13 a13 Relightable13 Glasses-shy‐Free13 3D13 Display(CHIrsquo12)Li-Wei Chan Hui-Shan Kao Mike Y Chen Ming-Sui Jane Yi-Ping Hung

201413109　久保勇貴 2（鬼コース）13

どんなもの13

ライトフィードによる入力とライトフィールドによる表示を行うリアルタイム8Dディスプレイ13

先行研究と比べてどこがすごい13

リアルタイムでの8Dディスプレイの実現（先行研究は7fps）13

技術や手法のキモはどこ13

GPUにおけるレンダリング処理13

どうやって有効だと検証した13

MRIデータを用いたディスプレイのデモを示した13

議論はある13

現在はグレースケールの入力のみだがカラーでの入力できればより強力になるだろう13

次に読むべき論文は13

Sahoo13 et13 al13 201513

Control13 of13 Non-shy‐Solid13 Diffusers13 by13 Electrosta4c13 Charging13 (CHIrsquo15) Deepak Ranjan Sahoo Diego Martinez Plasencia Sriram Subramanian

201413109　久保勇貴 2（鬼コース）13

どんなもの13

シャボン玉や霧などの非固体を電場による制御を試みた研究13

先行研究と比べてどこがすごい13

非固体の形や位置の制御法を提案した点13

技術や手法のキモはどこ13

[Intra13 et13 al13 11]中のldquowire-shy‐to-shy‐Cylinderdquoを用いたエアゾール粒子の帯電13

どうやって有効だと検証した13

霧及びシャボン玉によるディスプレイのアプリケーション例で実際に制御して見せた13

議論はある13

風による影響を本手法は打ち消すことができた13

次に読むべき論文は13

Barnum13 et13 al13 201013

A13 Mul4-shy‐Layered13 Display13 with13 Water13 Drops(SIGGRAPHrsquo10)Peter C Barnum Srinivasa G Narasimhan Takeo Kanade

201413109　久保勇貴 2（鬼コース）13

どんなもの13

複数層の落下水滴にプロジェクションマッピングを行いディスプレイとした研究13

先行研究と比べてどこがすごい13

水滴の制御を行うことで単一のプロジェクタによって複数層の映像投影を可能とした点13

技術や手法のキモはどこ13

[Ambravaneswaran13 et13 al13 2002]及び本研究における実験結果に基づく水滴生成13

どうやって有効だと検証した13

複数のディスプレイ例を示した13 例）顔の投影水槽シミュレータなど13

議論はある13

本当の3Dディスプレイにするにはより多くの水滴制御が必要13

次に読むべき論文は13

Lee13 et13 al13 200713

An13 Immaterial13 Depth-shy‐Fused13 3D13 Display(VRSTrsquo07)Cha Lee Stephen DiVerdi Tobias Humlollerer

201413109　久保勇貴 2（鬼コース）13

どんなもの13

２つのスクリーンを駆使し3Dディスプレイを実現するdepth-shy‐fused13 3D(DFD)に関する評価を行いその結果よりディスプレイを提案した研究13

先行研究と比べてどこがすごい13

DFDが任意のスクリーン設定及び見る位置に対して有効であることを示した13

技術や手法のキモはどこ13

６通りのスクリーン組合せから２つを抽出し見え方の違いを検証した点13

どうやって有効だと検証した13

６通りのスクリーンについて立体的に見えるか被験者実験を実施その後それぞれに有意差がみられるか調べた13

議論はある13

ステレオイメージを認めることができなかったユーザに対しても強い3D効果が見られた13

次に読むべき論文は13

Tokuda13 et13 al13 201013

Cloud13 Display13 (ACErsquo10)Yutaka Tokuda Yasuhiro Suzuki Kunihiro Nishimura Tomohiro Tanikawa Michitaka Hirose

201413109　久保勇貴 2（鬼コース）13

どんなもの13

煙の渦輪を用いた空間を埋めるディスプレイ13

先行研究と比べてどこがすごい13

制御可能な手法により高所へのパーティクルを運搬することに着目した点13

技術や手法のキモはどこ13

コンピュータによって制御が行われる空気砲アレイ13

どうやって有効だと検証した13

箱の中で実験を行い安定して渦輪をできるようにした実際にデモを行ったことを示した13

議論はある13

今の試作機をより早くリフレッシュ速度を高めることによりより濃く空間を埋められることを目指す13

次に読むべき論文は13

Sato13 et13 al13 200913

Par]cle13 Display13 System　(JVRC09)13 -shy‐13 A13 Large13 Scale13 Display13 for13 Public13 Space13 -shy‐

Munehiko13 Sato13 Yasuhiro13 Suzuki13 13 Atsushi13 Hiyama13 Tomohiro13 Tanikawa13 Michitaka13 Hirose

201413109　久保勇貴 2（鬼コース）13

どんなもの13

パーティクルディスプレイによる公共スペースのための大画面ディスプレイの提案13

先行研究と比べてどこがすごい13

公共スペースにおける要求と制限に基づいたシステムを提案した点13

技術や手法のキモはどこ13

実験に基づく表示画像のスクロール時間の制御13

どうやって有効だと検証した13

Aという文字の知覚実験によって 適な点滅周期の調査を行った13

議論はある13

現在の試作機を組合せより高解像度にする必要がある13

次に読むべき論文は13

Kwon13 et13 al13 201513

FugaciousFilm13 Exploring13 Aen4ve13 Interac4on13 with13 Ephemeral13 Material13 (CHIrsquo15)Hyosun13 Kwon13 Shashank13 Jaiswal13 Steve13 Benford13 Sue13 Ann13 Seah13

13 Peter13 BenneC13 Boriana13 Koleva13 Holger13 Schnaumldelbach

201413109　久保勇貴 2（鬼コース）13

どんなもの13

膜を押す引く飛び出ることができる新しい石鹸膜インタフェースの提案13

先行研究と比べてどこがすごい13

徐々に消えるインタフェースは高い注意を有するインタラクションを提供するという点を示したこと13

技術や手法のキモはどこ13

水グリセリンを201の対比で混ぜることでldquopoprdquoがきれいになるようにしかつ膜の耐久性を向上させた13

どうやって有効だと検証した13

３目並べを用いた被験者実験を実施13 ユーザは膜を割ると負け膜を自分のマスにするにはタッチ押す引くの書かれた通りの操作を行う13

議論はある13

ユーザに精密な動作を要求することはとりわけ注意を払うことを誘発する13

次に読むべき論文は13

Wetzstein13 et13 al13 201213

Tensor13 Displays13 Compressive13 Light13 Field13 Synthesis13 using13 Mul4layer13 Displays13 with13 Direc4onal13 Backligh4ng(SIGGRAPHrsquo12)

Gordon13 Wetzstein13 Douglas13 Lanman13 MaChew13 Hirsch13 Ramesh13 Raskar

201413109　久保勇貴 2（鬼コース）13

どんなもの13

視点によって異なる立体映像を見ることができる複数の層からなるディスプレイ13

先行研究と比べてどこがすごい13

既存の手法を合成したcomputa(onal13 displaysというディスプレイの新しいフレームワークを提案した13

技術や手法のキモはどこ13

時分割で視差マスクを表示することでユーザの視線ごとに立体像を表現する13

どうやって有効だと検証した13

通常のディスプレイ３層LCDLCD及び指向性バックライトの例による比較13 13

議論はある13

波紋を含むこと色チャンネルが悪影響を与える相互反射不均一などの問題が見られた13

次に読むべき論文は13

Matoba13 et13 al13 1213

SplashDisplay(VRICrsquo12)Yasuo Matoba Taro Tokui Ryo Sato Tochiki Sato Hideki Koike

201413109　久保勇貴 2（鬼コース）13

どんなもの13

パーティクルにCGを投射しパーティクルがテーブル上に投げられると爆発しパーティクルが噴きあがる13

先行研究と比べてどこがすごい13

ビーズがミリメートルからメートル単位までZ軸方向について空中で奥行きを表現する13

技術や手法のキモはどこ13

スピーカによって風力が発生させビーズを舞い上げる点13

どうやって有効だと検証した13

ビーズを投げると花火が打ちあがっているかのようなアプリケーション例を示した13

議論はある13

高いレベルの表現及び幅広い入力範囲を提供できた13

次に読むべき論文は13

Kim13 et13 al13 1413

MARIO13 Mid-shy‐air13 Augmented13 Reality13 Interac4on13 with13 Objects13 (ECrsquo14)Hanyuool13 Kim13 13 Issei13 Takahashi13 Hiroki13 Yamamoto13 Satoshi13 Maekawa13 Takeshi13 Naemura

201413109　久保勇貴 2（鬼コース）13

どんなもの13

350times300times250のテーブル上のスペースにおいて自由に動かせる空中像を造りだすことができる13

先行研究と比べてどこがすごい13

凹面鏡や凹レンズのように曲面でないため画像の歪曲が発生しない13

技術や手法のキモはどこ13

Aerial13 Imaging13 Plate(AIP)を用いた空中像の生成及びそのためのディスプレイ移動装置13

どうやって有効だと検証した13

左右からの視差の考慮及び奥行き表現時の画像提示視野角の検証などを行った13 13

議論はある13

投影しているひよこを叩いたり払いのけたりするような動作がデモ中見られた13

次に読むべき論文は13

Tactile Feedback on Flat Surfaces for the Visually Impaired13Ali Israr Olivier Bau Seung-Chan Kim Ivan Poupyrev13

どのようなものか 視覚障害者のための触覚を用いた視覚代用デバイス 先行研究と比べてどこがすごいか 道案内をしてくれる機械などはあるが日用品の場所を教えたり探すのを手伝ってくれるデバイスはない 技術や手法のキモ タッチパネルとカメラを搭載したデバイス 触覚を与える技術はTeslaTouchを利用 色を基準にオブジェクトの位置を認識 有用性の確認 視覚障害者二人に対して実験このデバイスを使

わなくても各自の方法で物を見つけられるが間違えることが多いこのデバイスを使用することで間違えることなく正確に物の位置を特定できた 課題 一つの色でしか判断できない 触感のあるなしでしか情報を伝えられない 関連論文 TeslaTouch [Bau et al 2010]

20150522 橋爪智 2鬼

Fingernail-Mounted Display of Attraction Force and Texture13Masataka Niwa Tomoko Nozaki Taro Maeda and Hideyuki And13

どのようなものか 指先に取り付けて触感と力を両方表現できるデバイス 先行研究と比べてどこがすごいか 触感と引力をそれぞれ表現するデバイスはあるが両方を一つのデバイスで表現した例は少ない 引力は自由な方向に付加することができる 技術や手法のキモ 偏心に重さを付けた円盤を4枚使用する 5-9Hz 引力　100-200Hz 触感 それぞれの円盤の位相や回転数を調整することで

触感と力 を表現する 4つのモータを使いそれぞれの円盤を独立して制御する 有用性の確認 4人の男性に対して実験80以上の精度で認識できた 関連論文 The nail-mounted attraction forcebump display [Nozaki et al 2008]

20150522 橋爪智 2 鬼

Gilded gait reshaping the urban experience with augmented footsteps13Yuichiro Takeuchi13

どのようなものか 靴に装着し地面の触感をコントロールするデバイス 先行研究と比べてどこがすごいか 単独で動作しなかったり特定の環境のみでしか動作しなかったりするrarr靴単体で動作環境に依存しない 技術や手法のキモ 6個の振動パネルを取り付けゲルでカバー app modulesを取り替えることができ様々な機能を付加できる（GPSsound) 4種類の地面を再現

bull  Hard Ground 振動させない bull  Soft Ground すべてのパネルを振動 bull  Bumpy Ground ジグザグに振動 bull  Godzilla 全てのパネルを振動何回か繰り返す 課題 モーターを使っているため波形をプログラミングできないrarr圧電素子を使用する 関連論文 Haptic Shoes [Fu et al 2010]

20150522 橋爪智 2鬼

ExoInterfaces novel exosceleton haptic interfaces for virtual reality augmented sport and rehabilitation

Dzmitry Tsetserukou Katsunari Sato Susumu Tachi13

どのようなものか 腕に装着し物理的なinteractionを可能にするデバイス 先行研究と比べてどこがすごいか Exoskeleton 力を増幅するためだが重たく危険なこともある String-based wireが視界をまたぐ動きに制限がある rarr腕の動きに制限を与えない安全 技術や手法のキモ 「FlexTorque」人間の筋肉の構造を再現するベルトとモーターを使用する肩の近くに装着することで

腕に負担がかかりにくい 触覚feedback弱いトルク 運動を支援強いトルク 課題 物理的な接触を表現するゲームやスポーツにより没頭させるリハビリのサポートをする視覚障害者の支援（ものの場所を教える） 関連論文 FlexTorque [Dzmitry et al 2010]

20150522 橋爪智 2 鬼

Perception of Ultrasonic Haptic Feedback on the Hand Localisation and Apparent Motion13

Graham Wilson Tom Carter Sriram Subramanian Stephen Brewster13

どのようなものか 超音波を用いた触覚フィードバック有効性の検討を行う 先行研究と比べてどこがすごいか 超音波触覚フィードバックは比較的新しく研究や操作方法に関する知識が少ない 腕を自由に動かすことができ小さいものは着用可能 技術や手法のキモ 88のアレイ状に超音波発生器を設置

有効性の確認 bull  局所的な触感 　　　25箇所に分割しそれぞれに超音波を当てる 　　　触感を感じた989 　　　場所の誤差85mm bull  手のひらを動く触感 上下左右に動く 　　　動いてると感じた629

20150522 橋爪智 2 鬼

Friction Measurements on a Large Area TPaD13Nicholas D Marchuk J Edward Colgate Michael A Peshkin13

どのようなものか 超音波の振動により触感を与える 先行研究と比べてどこがすごいか ガラス板を使うので透明後ろにディスプレイを配置可能 技術や手法のキモ 「Squeeze Film Effect（スクイズ膜効果）」 ガラス板に取り付けた圧電素子の円盤に高周波信号

をかける 実験 振動しない部分＝摩擦が発生しない部分が発生周波数により場所が変わる rarr摩擦を大きさをかける力の大きさから計測 rarr指の場所に合わせて複数の周波数を使い分ける 関連論文 T-PaD[Winfield et al 2007]

20150522 橋爪智 2 鬼

STIMTAC a Tactile Input Device with Programmable Friction13Michel Amberg Freacutedeacuteric Giraud Betty Semail Paolo Olivo Geacutery Casiez Nicolas Roussel13

どのようなものか 触感を与えられるタッチデバイス 先行研究と比べてどこがすごいか LATPaD サイズ大きいノイズが大きい TeslaTouch 高い電圧付加が必要GNDに接続しなければいけない

技術や手法のキモ 「Squeeze Film Effect」超音波を用いて振動を与える 圧電性セラミックを電極にコーディング 指トラッキングは力センサを用いる 活用法 マウスキーボード絵を描く 関連論文 LATPaD[Vincent et al 2011] TeslaTouch[Bau et al 2010]

20150522 橋爪智 2 鬼

Surround Haptics Tactile Feedback for Immersive Gaming Experiences Ali Israr Seung-Chan Kim Ivan Poupyrev Jan Stec13

どのようなものか ゲームに合わせて高解像度の触覚フィードバックをユーザーに与える椅子 先行研究と比べてどこがすごいか 荒く配置した安価な振動アクチュエータで高解像度の触覚フィードバックを行える 一点の振動連続した動き範囲の振動などを再現

技術や手法のキモ 仮想的な振動アクチュエータをいくつかの振動アクチュエータを使って作り出す physical-physicalphysical-virtualvirtual-virtual ゲームにHaptics Engineを導入しHaptics APIを用いてHaptic Displayを操作する 関連論文 Exploring Surround Haptics Displays[Israr et al 2010]

20150522 橋爪智 2 鬼

Audio-Haptic Feedback in Mobile Phones Angela Chang Conor OrsquoSullivan13

どのようなものか haptics機能のついてない携帯電話にオーディオ機能を利用した触覚フィードバックを追加する 先行研究と比べてどこがすごいか 簡単に作れてnon-haptic mobile devicesでも大丈夫 技術や手法のキモ 「MultiFunction Transducer(MFT)」 スピーカーから音と信号の両方を出力できる

bull  Haptic Inheritance 　　音を2つの周波数帯に分ける bull  Synthesis and Matching 　　低周波数帯(20-300Hz)を使い触感を伝える 有効性の検討 42人の人を対象に実験を行う83の人が触感を感じた

20150522 橋爪智 2 鬼

Resolution of Sleep Deprivation Problems using ZZZoo Pillows13Shunsuke Yanaka Motoki Ishida13

どのようなものか 近年不眠症の人が多い rarr誰かと接していると安心し睡眠に導入しやすくなる rarrまるで添い寝をしているようなリアルな抱きまくらを使う 技術や手法のキモ breathing sensation 風船を使って人の呼吸を再現肺の形の風船弱く長い呼吸をする

heating お湯を使って人の体温を再現45 有効性の確認 84人の人が実験 呼吸が睡眠を誘ったかrarr61 体温が睡眠を誘ったかrarr85 関連論文 The Impact of Sleep Disorders on Social Life[Komada et al 2007]

20150522 橋爪智 2 鬼

まとめ13超音波 モーター 風

20150522 橋爪智 2 鬼

コイル 電気刺激 Electrovibration

振動 音 お湯

なかの

Temporally Consistent Disparity and Optical Flow via Efficient Spatio-temporal Filtering1

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示した

議論論はあるか

時間的に一定の視差を算出する手法静止画ステレオよりも精度度が良良いことを示す従来よりも推定精度度が良良いオプティカルフローも算出する

一枚の静止画に対するフィルタリング[1]をステレオ動画に拡張している

ケンブリッジのステレオ動画のデータセットを利利用 実写動画に対する比較も行行うノイズ耐性も検証する

フィルタベースとエネルギーベースの関係性を良良り理理解することで推定精度度を上げる

実装が簡単でリアルタイム視差推定が可能

Fast Cost-Volume Filtering for Visual Correspondence and Beyond [Rhemann C Hosni A Bleyer M Rother C Gelautz M CVPR2011] Real-time Spatiotemporal Stereo Matching Using the Dual-Cross-Bilateral Grid [Richardt C Orr D Davies I Criminisi A Dodgson NA ECCV2010] Secrets of optical flow estimation and their principles [Sun D Roth S Black MJ 2010] Motion estimation with non-local total variation regularization [Werlberger M Pock T Bischof H CVPR2010] Temporally Consistent Disparity Maps from Uncalibrated Stereo Videos [Bleyer M Gelatuz M ISPA2011]

なかの

SymStereo Matching using Induced Symmetry (2014)2

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示した

議論論はあるか

画像の対称性を用いてステレオマッチングを行行う 左右の画像を反転させて重ね合わせることで対称性を測る

絵的な類似の代わりに対称性を使う今まで対称性を用いる手法はなく新規性が大きい

三つのSymmetry-baseの手法で精度度を検証従来手法よりも精度度が向上しているMiddlebury Oxford Corridorfountain-P11のデータセット使用

ステレオの問題である不不連続な箇所オクルージョン部分は未解決である演算時間はやや増加

1-Dラインのコストを考える今までは撮像面に対して平行行な平面でデプスを考えていたが垂直な平面を考える

BT[Birchfield and Tomasi 1998] Census transform[Zabih and Woodfill 1994] Log N[Kovesi 1997] radio-metoric differences[Hirschmuller Scharstein 2009]

なかの

Camouflaging an Object from Many Viewpoints3

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

多くの視点から三次元の物体をカモフラージュするカモフラージュによってオクルージョン部分の不不連続がどの程度度生じるか他の視点ではどれほどになるかの検証

MRF（Markov Random Fields）ベース

新しい三次元物体のカモフラージュモデルを構築 37種類のデータセットを作る

箱形の物体に対してカモフラージュ処理理を施し 結果を評価する

オクルージョン不不連続テクスチャの歪みが問題 照明や画像の貼りつけに制限あり

なかの

Aliasing Detection and Reduction in Plenoptic Imaging4

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

カメラアレイ撮影の角度度のエイリアシングを除去するエイリアシングの探索索と打ち消しを行行う

周波数領領域ではなく空間領領域で探索索を行行う

先行行研究がフィルタデモザイキング再パラメータ調整などの前処理理でエイリアシング除去を行行うのに対しエイリアシング探索索後にリフォーカスの段階でエイリアシングを取り除く

8times8の平行行カメラアレイで検証するカメラ間の 基線長は70mm

今回は基線長が長いデータセットを使った 次はLytroなどのマイクロレンズアレイで検証する

Globally consistent multi-label assignment on the ray space of 4d light fields [S Wanner C Straehle B Goldluecke CVPR2013] Lineassisted light field triangulation and stereo matching [Z Yu X Guo H Lin A Lumsdaine J Yu ICCV 2013]

なかの

Globally Consistent Multi-Label Assignment on the Ray Space of 4D Light Fields5

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

四次元ライトフィールドの光線情報において マルチラベルの領領域分割を行行う

深度度情報光線情報を用いて領領域分割することで 二次元（空間）情報だけでは分割が難しかった 領領域を分割可能とする

The light field camera Extended depth of field aliasing and superresolution [T Bishop P Favaro IEEE Transactions on Pattern Analysis and Machine Intelligence 2012]

なかの

Line Assisted Light Field Triangulation and Stereo Matching6

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

光線情報を利利用してステレオマッチングの精度度を 向上させる手法三角測量量の誤差を減らす

Light Field Stereo Matchingとかいう手法 グラフ構造を作成

Variational light field analysis for disparity estimation and super-resolution [S Wanner and B Goldlumluecke 2013]

なかの

Adaptive stereo similarity fusion using confidence measures 20157

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

ステレオマッチングの新しい方式fusion weightsを提案複数の手法を組み合わせてコスト計算を行行う手法付録に既存手法のコスト関数一覧あり

パラメータに依存する手法を用いないことで高速化を図っている

一つのアルゴリズムでは異異なる特性を持つ領領域全てに対して適切切なマッチングはできない複数を組み合わせることでそれを補う13種と多い

middleburyとKITTIのデータセットで評価

一枚あたり03sと高速だが001sとより高速なアルゴリズムが存在する

Segment-based stereo matching using belief propagation and a self-adapting dissimilarity measure [A Klaus M Sormann K Karner ICPR2006] On building an accurate stereo matching system on graphics hardware [X Mei X Sun M Zhou S Jiao H Wang X Zhang ICCV2011] Similarity measures for depth estimation [K Wegner O Stankiewicz 3DTV-CON2009] On accurate dense stereo-matching using a local adaptive multi-cost approach [C Stentoumis L Grammatikopoulos I Kalisperakis G Karras ISPRS2014] A quantitative evaluation of confidence measures for stereo vision [X Hu P Mordohai PAMI2012]

なかの

SIMILARITY MEASURE FOR DEPTH ESTIMATIOM 20098

どんなもの

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

4種類の視差推定アルゴリズムを組み合わせている 類似度度の選択性の解析

Belief Propagationの枠組みを用いる

名古屋大学の多視点データベースを利利用

HHI Test Material for 3D Video [I Feldmann M Muller F Zilly R Tanger A SmolicP Kauff T Wiegand 2008] Multiview Video Test Sequence and Camera Parameters [Yo-Sung Ho Eun-Kyung Lee and Cheon Lee 2008] 1D Parallel Test Sequences for MPEG-FTV [M Tanimoto T Fujii N Fukushima 2008] Non-parametric Local Transforms for Computing Visual Correspondence [R Zabih J Woodfill 1994]

なかの

Spatiotemporal Stereo via Spatiotemporal Quadric Element (Stequel) Matching9

どんなもの

技術や手法のキモはどこ

新しいマッチング手法を提案動き考慮することなく時間情報を取り込むことができる 時間方向のエピ線を考える

オプティカルフロー推定は3D境界や低テクスチャで弱いが提案手法はロバストである

なかの

Depth Video Enhancement Based on Weighted Mode Filtering10

どんなもの

議論論はある

ノイズを含んだ低解像度度のデプスマップの質を高める手法（超解像度度とデノイズ）時間方向も使用簡単なオプティカルフローを計算し利利用する

非反復復アルゴリズムのためGPUに載せやすく高速化が考えられる

なかの

Fast Bilateral-Space Stereo for Synthetic Defocus11

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

議論論はある

次に読むべき論論文は

高速な自由焦点ぼけ画像の作成

Bilateral-spaceを提案

従来研究よりも10から100倍速くぼけ具合の精度度も良良い

ぼけを作成するというアプリケーションに利利用する距離離という面では提案手法が有益であるが実測的な距離離という面での精度度は悪い背景と前景が同じ色で近くにある場合同一ととらえてしまう

Efficient high-resolution stereo matching using local plane sweeps [S N Sinha D Scharstein and R SzeliskiCVPR2014] Bilateral filtering-based optical flow estimation with occlusion detection [J Xiao H Cheng H Sawhney C Rao and M IsnardiECCV2006] Efficient nonlocal regularization for optical flow [P Krumlahenbumluhl and V KoltunECCV2012] Real-time spatiotemporal stereo matching using the dual-cross-bilateral grid [C Richardt D Orr I Davies A Criminisi and N A DodgsonECCV2010]

どうやって有効性を示した視差推定の精度度はmiddleburyKITTI

なかの

Robust Spatiotemporal Stereo for Dynamic Scenes12

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

ステレオ動画のフレーム間情報を取り入れることでノイズ耐性を向上させるまた動きの大きなものも考える

時間を含めたウインドウの提案自動的にそのような変化に対応する画像領領域を検出する

従来の時空間ステレオと比べ大きな動きによる急激な視差の時間変化に対して頑健である

なかの

Spacetime Stereo A Unifying Framework for Depth from Triangulation13

どんなもの

先行行研究と比べてどこがすごい

space time stereoを提案ステレオカメラの視差推定でも構造光を用いた視差推定でも利利用可能 動的なシーンでの利利用も可能

フレームごとマッチングを取っていたが複数フレームでのマッチングを可能とした

なかの

Learning to Select and Order Vacation Photographs (Disney research)14

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示したあまりにもたくさん撮影した写真たちから自動的にフォトアルバムを作成する研究

複雑な視覚での区別を試みたのはこの論論文が初

５つの異異なるトピックから63の個人的な写真コレクションのデータセットを利利用し定量量的に評価する

写真間の差別かを定義する顔全体の絵何が写っているか写っていないかを評価する

Jointly aligning and segmenting multiple web photo streams for the inference of collective photo storylines [G Kim and E P Xing CVPR2013] Photo sequencing [T Basha Y Moses and S Avidan CVPR2012]

なかの

A Taxonomy and Evaluation of Dense Two-Frame Stereo Correspondence Algorithms15

どんなもの

どうやって有効性を示した

次に読むべき論論文は

ステレオマッチングに関する分類を行行う 新たなデータセットを作成する

というよりも他の手法が有効性を示すことができるようにデータセットを作成した 今ではmiddleburyのデータセットと言えばステレオ業界では超有名

High-resolution stereo datasets with subpixel-accurate ground truth

なかの

Discriminability Limits in Spatio-Temporal Stereo Block Matching1

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

spatio-temporal disparity estimationの根本的な前提の正当性を解析しマッチング処理理の際に動きが助けとなる程度度を決定する

時空間マッチングのエラーを分析し誤りの原因を確率率率で導出する（フレーム数動きの分散画像特徴ノイズの関数）

[34243334]は時空間マッチングの利利点を指摘していたが本論論文はマッチング精度度の向上のために動きを用いる手法の程度度や性質を研究する

6つのステレオビデオを用いて検証を行行った

Spacetime stereo Shape recovery for dynamic scenes [L Zhang B Curless and S Seitz CVPR2003] Spatiotemporal stereo and scene flow via stequel matching [M Sizintsev and R Wildes PAMI2012] Temporally consistent disparity and optical flow via efficient spatio-temporal filtering [A Hosni C Rhemann M Bleyer and M Gelautz PRCAIVT2012] Spacetime stereo A unifying framework for depth from triangulation [PAMI2005] Dynamic depth recovery from multiple synchronized video streams [H Tao H Sawhney and R Kumar CVPR2001] Spatiotemporal descriptor for wide-baseline stereo reconstruction of non-rigid and ambiguous scenes [ECCV2003]

なかの

Depth-Based Patch Scaling for Content-Aware Stereo Image Completion2

どんなもの

どうやって有効性を示した

ステレオでデプスを取り物体の三次元情報を使ってインペインティングを行行う

bookのデータセット背景が繰り返しパターンが多いものを使っている

なかの

Fast Semi-dense Surface Reconstruction from Stereoscopic Video in Laparoscopic Surgery3

どんなもの

手法の流流れ

次に読むべき論論文は

腹腔内手術の際にステレオビデオから高速に物体の三次元再構成を行行う研究

Evaluation of stereo matching costs on images with radiometric differences [Hirschmueller H Scharstein D PAMI2008]

スコープカメラから画像取得GPUで演算する 視差を算出しフィルタにかける距離離に変換 点群を再びフィルタにかけて三次元再構成

なかの

3D Reconstruction from Accidental Motion4

どんなもの

技術や手法のキモはどこ

議論論はある

数秒のビデオ（単眼）から三次元再構成を行行う 手ぶれなどの動きから再構成が可能で特定の動きや機材を必要としない

短い基線長でも再構成が可能（3mmの基線長）

基線長が短いため背景の精度度が低くなる リフォーカス画像作成には十分 練習では上手く動作したが検証がまだ必要

なかの

Panoramic Video from Unstructured Camera Arrays5

どんなもの

技術や手法のキモはどこ

議論論はある

複数のカメラを用いたパノラマ撮影を行行う その際に不不自然さがないような動画を作成する

不不自然さを感じる感覚特性を提示しそれにのっとって対策を講じている

一つのカメラの解像度度と品質を向上させるよりも複数台のカメラを組み合わせることがはるかに簡単で有益である専門家でなくてもGoProのカメラセットを組み合わせることは容易易

カメラの配置は厳密に決められていない完璧な時間同期やローリングシャッターの不不足のような実撮影での問題もクリアしている

先行行研究と比べてどこがすごい

どうやって有効性を示した左のシステムは14台のカメラを使用 右のシステムはGoProを5台使用

Disney 201558

なかの

Floating Scale Surface Reconstruction6

どんなもの

技術や手法のキモはどこ

流流動的にスケールを変えられる三次元再構成手法

サンプル規模に依存するパラメータがない rarrどのスケールのサンプルにも対応できる

siggraph2014

なかの

A Super Resolution Reconstruction Scheme for Mixed Spatio-Temporal Stereo Video7

どんなもの

技術や手法のキモはどこ

ビデオ超解像アルゴリズム

二台のカメラを使用 一台は低解像度度で高速一台は高解像度度で低速

HHI 3DV ftp siteのBookarrivalとbeergadenを使用どうやって有効性を示した

なかの

What Is a Good Day for Outdoor Photometric Stereo8

どんなもの

先行行研究と比べてどこがすごい

議論論はある

次に読むべき論論文は

屋外における照度度差があるステレオの研究 屋外でステレオを行行う際に有利利or不不利利な日照条件を明らかにする

点光源を用いた研究は行行われていたが屋外での研究はされていなかった

晴れより曇りの方が精度度が良良い雲があるから特徴量量を取りやすい雑音を白色ガウスモデルを想定 季節ごとのデータセットを利利用してみても良良い

Time-lapse photometric stereo and applications [F Shen K Sunkavalli N Bonneel S Rusinkiewicz H Pfisterand X Tong2014] Outdoor photometric stereo [L-F Yu S-K Yeung Y-W Tai D Terzopoulos and T FChan ICCP2013]

どうやって有効性を示した屋外の照明に関するHDR環境マップのデータベースを利利用

Disney 2015424

なかの

COLORBRUSH ANIMATED DIFFUSION FOR INTUITIVE COLORIZATION SIMULATING WATER PAINTING 9

どんなものアニメを水彩画で描いたように変換する 水彩画を描くには経験が必要であるがそれを作成するアルゴリズムを考案絵具が水によりどうにじむかシュミレーションしている

Disney 20141027 ICIP2014

次に読むべき論論文はGabor-space geodesic active contoursrdquo In Algebraic Frames for the Perception-Action Cycle [C Sagiv NA Sochen and YY Zeevi 2000] Practical temporal consistency for image-based graphics applications [M Lang O Wang T Aydin A Smolic and M Gross SIGGRAPH2012] Computer-Generated Watercolor [CJ Curtis SE Anderson JE Seims KW Fleischer and DH Salesin SIGGRAPH1997]

なかの

From Sound to Sight Using Audio Processing to enable Visible Light Communication 10

どんなもの光に情報を載せる技術プロジェクトページがあって光関係の研究が8個載っている

httpwwwdisneyresearchcomprojectvisible-light-communication

ビデオのURL httpwwwdisneyresearchcomwpcontentuploadsPub_InvisibleLightCommunication_Siggraph14_videomp4

• 201211106_KeisukeKawahara
• 201311421_KeitaKanai_02
• 201313095_AkiraIshii_02
• 201413109_YuukiKubo_02
• 201513110_SatoshiHashizume_02
• 鬼輪講マラソン③_1
• 鬼輪講マラソン③_2

2 201313095

FingerReader

4

939

34 5

bull  NanayakkaraSShilkrotRYeoKPandMaesPEyeRingafinger-worninputdeviceforseamlessinteracEonswithoursurroundingsInProcofAugmentedHuman(2013)13-20

FingerReaderampAampWearableampDeviceamptoampExploreampPrintedampTextamponamptheampGoamp(CHIrsquo15)

RoyShilkrotJochenHuberMengEeWongPaneMaesSurangaNanayakkara

h]psvimeocom86912300

2 201313095

Cyclops

1

360degMHI RDF

20 20MHI

79 RDF92

bull  MorrisDSaponasTSGuilloryAandKelnerIRecofitUsingawearablesensortofindrecognizeandcountrepeEEveexercisesInProcampACMampCHIamprsquo14amp(2014)3225ndash3234

CyclopsampWearableampandampSinglePieceampFullBodyampGestureampInputampDevicesamp(CHIrsquo15)amp

LiweiChanChi-HaoHsiehYi-LingChenShuoYangDa-YuanHuangRong-HaoLiangBing-YuChen

h]pswwwyoutubecomwatchv=JYm_3oNUGIk

2 201313095

Muehlbaueretal[24]

SVM

114 94 3020

9599 4 98 7 96 13

93

bull  MuehlbauerMBahleGLukowiczPWhatcananarmholsterwornsmartphonedoforacEvityrecogni-EonProcIEEEISWC2011

RecoFitampUsingampaampWearableampSensoramptoampFindampRecognizeampandampCountampRepeEEveampExercisesamp(CHIrsquo14)

DanMorrisTSco]SaponasAndrewGuilloryIlyaKelner

h]pswwwyoutubecomwatchv=zpa4rVGlO68

2 201313095

2

31 2

15-20 90-95

Hambone

bull  BAmentoWHillandLTerveenThesoundofonehandawrist-mountedbio-acousEcfingerEpgestureinterfaceInCHIrsquo02CHIrsquo02extendedabstractsonHumanfactorsincompuEngsystemspages724ndash725NewYorkNYUSA2002ACMPress

HamboneampAampBioAcousEcampGestureampInterfaceamp(ISWCrsquo07)

TravisDeyleSzabolcsPalinkoErikaShehanPooleandThadStarner

h]pswwwyoutubecomwatchv=Uxj-vyal84M

2 201313095

bull  RabinerLR(1989)ATutorialonHiddenMarkovModelsandSelectedApplicaEonsinSpeechRecogni-EonProcIEEEVol77257-28

TheampSoundampofampOneampHandampAampWristmountedampBioacousEcampFingerEpampGestureampInterfaceamp(CHIrsquo02)

BrianAmentoWillHillLorenTerveen

2 201313095

Non-linearSpaEalSampling

SVM

12

948

15cm

bull  NakatsumaKShinodaHMakinoYSatoKandMaenoTTouchinterfaceonbackofthehandInprocofSIGGRAPHrsquo11(2011)391ndash391

bull  ButlerAIzadiSandHodgesSSidesightmulE-touchinteracEonaroundsmalldevicesInProcofUISTrsquo08(2008)201ndash204

zSenseampEnablingampShallowampDepthampGestureampRecogniEonampforampGreaterampInputampExpressivityamponampSmartampWearablesamp(CHIrsquo15)

AnushaWithanaRoshanPeirisNipunaSamarasekaraSurangaNanayakkara

h]pswwwyoutubecomwatchv=fQobwL8eSU4

2 201313095

bull  HARRISONCTANDANDMORRISD2010Skinputap-propriaEngthebodyasaninputsurfaceInProceedingsofthe28thinternaEonalconferenceonHumanfactorsincompuEngsystemsACMNewYorkNYUSACHIrsquo10453ndash462

Touchampinterfaceamponampbackampofamptheamphandamp(SIGGRAPH11)

KeiNakatsumaHiroyukiShinodaYasutoshiMakinoKatsunariSatoTakashiMaeno

h]pswwwyoutubecomwatchv=tKNLxh9Yw2M

2 201313095

Pose-IO EMS

Pose-IO

EMS

EMS58deg

46 5 be]er

bull  RoudautARauASterzCPlauthMLopesPandBaudischPGestureoutputeyes-freeoutputusingaforcefeedbacktouchsurfaceProcCHI1325472556

PropriocepEveampInteracEonamp(CHIrsquo15)amp

PedroLopesAlexandraIonWilliMuellerDanielHoffmannPatrikJonellPatrickBaudisch

h]pswwwyoutubecomwatchv=KMxIw7zhlw

2 201313095

EMS

AR EMSEMS

GPS

bull  TamakiEMiyakiTandRekimotoJPossessedHandAhandgesturemanipulaEonsystemusingelectricalsEmuliInProcampAHrsquo10amp(2010)21ndash25

CruiseampControlampforampPedestriansampControllingampWalkingampDirecEonampusingampElectricalampMuscleampSEmulaEonamp(CHIrsquo15)amp

MaxPfeifferTimDunteStefanSchneegassFlorianAltMichaelRohs

h]pswwwyoutubecomwatchv=JSfnm_HoUv4

2 201313095

EMS

EMS

EMS 16automaEccalibraEonsystem

auto-calibraEonsystems 16

8875g

bull  KruijffESchmalsEegDandBeckhausSUsingneuromuscularelectricalsEmulaEonforpseudo-hapEcfeedbackInProceedingsoftheACMsymposiumonVirtualrealitysoywareandtechnologyVRSTrsquo06ACM(NewYorkNYUSA2006)316ndash319

PossessedHandampTechniquesampforampControllingampHumanampHandsampusingampElectricalampMusclesampSEmuliamp(CHIrsquo11)amp

EmiTamakiTakashiMiyakiJunRekimoto

h]psvimeocom27044937

2 201313095

EMS

EMS

RFIDEMS

1276

bull  KruijffESchmalsEegDandBeckhausDUsingneuromuscularelectricalsEmulaEonforpseudo-hapEcfeedbackProcVRST06316mdash319

Affordance++ampallowingampobjectsamptoampcommunicateampdynamicampuseamp(CHIrsquo15)

PedroLopesPatrikJonellPatrickBaudisch

h]pswwwyoutubecomwatchv=d0J7V37zQjY

2 201313095

EMS

EMS

EMS

ReacEonloss

EMS

UsingampNeuromuscularampElectricalampSEmulaEonampforampPseudoHapEcampFeedbackamp(VRSTrsquo06)

ErnstKruijffDieterSchmalsEegSteffiBeckhaus

2 201313095

SVM

106 Per-User

863 13

712

13

bull  SatoMPoupyrevIandHarrisonCToucheenhancingtouchinteracEononhumansscreensliquidsandeverydayobjectsInCHIrsquo12483ndash492

bull  TimCollinsAcEveacousEctouchinterfaceElectronicsLe]ersVol45No20pp1055ndash1056242009

TouchampampampAcEvateampAddingampInteracEvityamptoampExisEngampObjectsampusingampAcEveampAcousEcampSensingamp(UISTrsquo13)

MakotoOnoBuntarouShizukiJiroTanaka

h]pswwwyoutubecomwatchv=XgxXi6w8IQc

2 201313095

13

13

SVM

on-body

per-user 5 967 4987

bull  HarrisonCBenkoHWilsonAOmniTouchwearablemulEtouchinteracEoneverywhereinUIST11441-450

bull  MatsushitaNandRekimotoJHoloWalldesigningafingerhandbodyandobjectsensiEvewallUIST97209-210

ToucheampEnhancingampTouchampInteracEonamponampHumansampScreensampLiquidsampandampEverydayampObjectsamp(CHIrsquo12)

MunehikoSatoIvanPoupyrevChrisHarrison

h]pswwwyoutubecomwatchv=E4tYpXVTjxA

2 201313095

SVM

9 9TapSense 4

95 99

TapSenseDelete

bull  HarrisonCTanDandMorrisDSkinputappropriat-ingthebodyasaninputsurfaceInProcCHI10453-462

TapSenseampEnhancingampFingerampInteracEonamponampTouchampSurfacesamp(UISTrsquo11)

ChrisHarrisonJuliaSchwarzSco]EHudson

h]pswwwyoutubecomwatchv=-oN96cucBr4

2 201313095

13

13

22 SVM

13 FingersWholeArmForearm 876 Fingers877 WholeArm 955

883 Forearm 815

833

GUI

bull  SaponasTSTanDSMorrisDandBalakrishnanRDemonstraEngthefeasibilityofusingforearmelectromyographyformuscle-computerinterfacesInProcCHIrsquo09515-24

SkinputampAppropriaEngamptheampBodyampasampanampInputampSurfaceamp(CHIrsquo10)

ChrisHarrisonDesneyTanDanMorris

h]pswwwyoutubecomwatchv=g3XPUdW9Ryg

2 201313095

Fiberio

10 330 150

148 2

Fiberio

bull  MatsushitaNandRekimotoJHoloWallDesigningaFingerHandBodyObjectSensiEveWallProcUIST97209ndash210

FiberioampAampTouchscreenampthatampSensesampFingerprintsamp(UISTrsquo13)

ChrisEanHolzPatrickBaudisch

h]pswwwyoutubecomwatchv=p1a5yLzuTqA

2 201313095

3D

3D

bull  GeigerMVollertsenFTheMechanismsofLaserFormingCIRPANNALSlsquo93421301-304

bull  WillisKDDXuCWuJKLevinGGrossMDInteracEvefabricaEonnewinterfacesfordigitalfabricaEonProcTEI11pp69-72

LaserOrigamiampLaserCugngamp3DampObjectsamp(CHIrsquo13)

StefanieMuellerBasEanKruckPatrickBaudisch

h]pswwwyoutubecomwatchv=arjRtCjI9AQ

2 201313095

bend

bull  HyunyoungSongFranccediloisGuimbreEegravereChangHuHodLipsonModelCraycapturingfreehandannotaEonsandeditsonphysical3DmodelsProceedingsofthe19thannualACMsymposiumonUserinterfacesoywareandtechnologyOctober15-182006MontreuxSwitzerland

InteracEveampConstrucEonampInteracEveampFabricaEonampofampFuncEonalampMechanicalampDevicesamp(UISTrsquo12)

StefanieMuellerPedroLopesPatrickBaudisch

h]pdlacmorgcitaEoncfmid=23801162380191

2 201313095

3D

3D

bull  SavageVSchmidtRGrossmanTFitzmauriceGandHartmannBAseriesoftubesAddinginteracEvityto3dprintsusinginternalpipesInProcUIST14(2014)

3DampPrinEngampPneumaEcampDeviceampControlsampwithampVariableampAcEvaEonampForceampCapabiliEesamp(CHIrsquo15)amp

MarynelVazquezEricBrockmeyerRutaDesaiChrisHarrisonSco]EHudson

h]pswwwyoutubecomwatchv=-4gFYvhkz0Y

2 201313095

OpenFab 3D

fablets

3 3

bull  CHENDMATUSIKWSITTHI-AMORNPDIDYKPANDLEVIND2013Spec2FabAreducer-tunermodelfortranslat-ingspecificaEonsto3DprintsACMTransGraph324(July)

OpenFabampAampProgrammableampPipelineampforampMulEMaterialampFabricaEonamp(SIGGRAPHrsquo13)

KirilVidimcˇeSzu-PoWangJonathanRagan-KelleyWojciechMatusik

2 201313095

3D

3D

3D

3D14 30 13 67

244

14

3D

bull  MuellerSKruckBBaudischPLaserOrigamiLaser-Cunng3DObjectsProcCHIrsquo132585-2592

faBrickaEonampFastamp3DampPrinEngampofampFuncEonalampObjectsampbyampIntegraEngampConstrucEonampKitampBuildingampBlocksamp(CHIrsquo14)amp

StefanieMuellerTobiasMohrKersEnGuentherJohannesFrohnhofenPatrickBaudisch

h]pswwwyoutubecomwatchv=BlO6YRcLJjE

Touching13 the13 Void13 Direct-shy‐Touch13 Interac4on13 for13 Intangible13 Displays(CHIrsquo10)Li-Wei Chan Hui-Shan Kao Mike Y Chen Ming-Sui Jane Yi-Ping Hung

201413109　久保勇貴 2（鬼コース）13

どんなもの13

空中像へのタッチのエラーに関する調査及び影や音のフィードバックを付与することによるパーフォーマンス向上を示した研究13

先行研究と比べてどこがすごい13

平面画像をタッチする際の奥行きに関するエラーの正確な取得を初めて検証13

技術や手法のキモはどこ13

２つの赤外線カメラを用いた正確なタッチの検出13

どうやって有効だと検証した13

タッチ時の奥行きの正確さに関する被験者実験を実施またタッチする際に影や音を付けた際の反応時間を被験者実験で検証13

議論はある13

ユーザは慣れるまで影や音のフィードバックが必要だがそのあとは必要なくなる13

次に読むべき論文は13

MirageTable13 （CHI12） 13

MirageTable13 Freehand13 Interac4on13 on13 a13 Projected13 13 Augmented13 Reality13 Tabletop(CHIrsquo12)

Hrvoje Benko Ricardo Jota Andrew D Wilson

201413109　久保勇貴 2（鬼コース）13

どんなもの13

テーブル上においてバーチャルな物体をリアルタイムで現実でものを動かすことと同様な動作に操作可能なシステム13

先行研究と比べてどこがすごい13

現実の物体をリアルタイムで画面に取りこむことができ質の高いフリーハンドインタラクションを実現した点13

技術や手法のキモはどこ13

色深度前景頭追跡プロキシパーティクルを駆使したリアルタイムメッシュの作成13

どうやって有効だと検証した13

凹凸など例外な表面に対しての投影した際の画像の質についての評価実験また仮想物体の奥行き知覚に関する実験も行った13

議論はある13

前面のみしかキャプチャしていないため差が生じる握っている場所の再現は未解決な課題である13

次に読むべき論文は13

Hirsch13 et13 al13 201413 (SIGGRAPHrsquo14)13

A13 Compressive13 Light13 Field13 Projec4on13 System13 (SIGGRAPHrsquo14)MaChew13 Hirsch13 Gordon13 Wetzstein13 Ramesh13 Raskar

201413109　久保勇貴 2（鬼コース）13

どんなもの13

通常の3Dディスプレイに比べて解像度輝度コントラストを改善した圧縮ライトフィードディスプレイ13

先行研究と比べてどこがすごい13

多視点立体視を複数でなく１台のプロジェクタを用いて実現した13

技術や手法のキモはどこ13

受動的スクリーンと高速切り替えプロジェクタによる新しい光学設計13

どうやって有効だと検証した13

4つのシーン例を投影したものを示したアニメーションの3D効果について観察を行った13

議論はある13

光路長を広げると観察できる画質が大幅に制限され他のライトフィードビューと混線が生じる13

次に読むべき論文は13

Butler13 et13 al13 201113

Vermeer13 Direct13 Interac4on13 with13 a13 360deg13 Viewable13 3D13 Display(UISTrsquo11) Alex Butler Otmar Hilliges Shahram Izadi Steve Hodges David Molyneaux David Kim

201413109　久保勇貴 2（鬼コース）13

どんなもの13

映し出された3Dオブジェクトとインタラクションを行えるシステム13

先行研究と比べてどこがすごい13

ディスプレイ内の画像とのインタラクションを提案ボリュームディスプレイを支援する新しいセンシング法の提案13

技術や手法のキモはどこ13

パラボラ鏡に取り付けた赤外線カメラセンサによる指先検出13

どうやって有効だと検証した13

アプリケーション例を示した13

議論はある13

パラボラ鏡の大きさよりもディスプレイサイズが小さくなってしまう13

次に読むべき論文は13

Hirsch13 et13 al13 201213

8D13 Interac4ng13 with13 a13 Relightable13 Glasses-shy‐Free13 3D13 Display(CHIrsquo12)Li-Wei Chan Hui-Shan Kao Mike Y Chen Ming-Sui Jane Yi-Ping Hung

201413109　久保勇貴 2（鬼コース）13

どんなもの13

ライトフィードによる入力とライトフィールドによる表示を行うリアルタイム8Dディスプレイ13

先行研究と比べてどこがすごい13

リアルタイムでの8Dディスプレイの実現（先行研究は7fps）13

技術や手法のキモはどこ13

GPUにおけるレンダリング処理13

どうやって有効だと検証した13

MRIデータを用いたディスプレイのデモを示した13

議論はある13

現在はグレースケールの入力のみだがカラーでの入力できればより強力になるだろう13

次に読むべき論文は13

Sahoo13 et13 al13 201513

Control13 of13 Non-shy‐Solid13 Diffusers13 by13 Electrosta4c13 Charging13 (CHIrsquo15) Deepak Ranjan Sahoo Diego Martinez Plasencia Sriram Subramanian

201413109　久保勇貴 2（鬼コース）13

どんなもの13

シャボン玉や霧などの非固体を電場による制御を試みた研究13

先行研究と比べてどこがすごい13

非固体の形や位置の制御法を提案した点13

技術や手法のキモはどこ13

[Intra13 et13 al13 11]中のldquowire-shy‐to-shy‐Cylinderdquoを用いたエアゾール粒子の帯電13

どうやって有効だと検証した13

霧及びシャボン玉によるディスプレイのアプリケーション例で実際に制御して見せた13

議論はある13

風による影響を本手法は打ち消すことができた13

次に読むべき論文は13

Barnum13 et13 al13 201013

A13 Mul4-shy‐Layered13 Display13 with13 Water13 Drops(SIGGRAPHrsquo10)Peter C Barnum Srinivasa G Narasimhan Takeo Kanade

201413109　久保勇貴 2（鬼コース）13

どんなもの13

複数層の落下水滴にプロジェクションマッピングを行いディスプレイとした研究13

先行研究と比べてどこがすごい13

水滴の制御を行うことで単一のプロジェクタによって複数層の映像投影を可能とした点13

技術や手法のキモはどこ13

[Ambravaneswaran13 et13 al13 2002]及び本研究における実験結果に基づく水滴生成13

どうやって有効だと検証した13

複数のディスプレイ例を示した13 例）顔の投影水槽シミュレータなど13

議論はある13

本当の3Dディスプレイにするにはより多くの水滴制御が必要13

次に読むべき論文は13

Lee13 et13 al13 200713

An13 Immaterial13 Depth-shy‐Fused13 3D13 Display(VRSTrsquo07)Cha Lee Stephen DiVerdi Tobias Humlollerer

201413109　久保勇貴 2（鬼コース）13

どんなもの13

２つのスクリーンを駆使し3Dディスプレイを実現するdepth-shy‐fused13 3D(DFD)に関する評価を行いその結果よりディスプレイを提案した研究13

先行研究と比べてどこがすごい13

DFDが任意のスクリーン設定及び見る位置に対して有効であることを示した13

技術や手法のキモはどこ13

６通りのスクリーン組合せから２つを抽出し見え方の違いを検証した点13

どうやって有効だと検証した13

６通りのスクリーンについて立体的に見えるか被験者実験を実施その後それぞれに有意差がみられるか調べた13

議論はある13

ステレオイメージを認めることができなかったユーザに対しても強い3D効果が見られた13

次に読むべき論文は13

Tokuda13 et13 al13 201013

Cloud13 Display13 (ACErsquo10)Yutaka Tokuda Yasuhiro Suzuki Kunihiro Nishimura Tomohiro Tanikawa Michitaka Hirose

201413109　久保勇貴 2（鬼コース）13

どんなもの13

煙の渦輪を用いた空間を埋めるディスプレイ13

先行研究と比べてどこがすごい13

制御可能な手法により高所へのパーティクルを運搬することに着目した点13

技術や手法のキモはどこ13

コンピュータによって制御が行われる空気砲アレイ13

どうやって有効だと検証した13

箱の中で実験を行い安定して渦輪をできるようにした実際にデモを行ったことを示した13

議論はある13

今の試作機をより早くリフレッシュ速度を高めることによりより濃く空間を埋められることを目指す13

次に読むべき論文は13

Sato13 et13 al13 200913

Par]cle13 Display13 System　(JVRC09)13 -shy‐13 A13 Large13 Scale13 Display13 for13 Public13 Space13 -shy‐

Munehiko13 Sato13 Yasuhiro13 Suzuki13 13 Atsushi13 Hiyama13 Tomohiro13 Tanikawa13 Michitaka13 Hirose

201413109　久保勇貴 2（鬼コース）13

どんなもの13

パーティクルディスプレイによる公共スペースのための大画面ディスプレイの提案13

先行研究と比べてどこがすごい13

公共スペースにおける要求と制限に基づいたシステムを提案した点13

技術や手法のキモはどこ13

実験に基づく表示画像のスクロール時間の制御13

どうやって有効だと検証した13

Aという文字の知覚実験によって 適な点滅周期の調査を行った13

議論はある13

現在の試作機を組合せより高解像度にする必要がある13

次に読むべき論文は13

Kwon13 et13 al13 201513

FugaciousFilm13 Exploring13 Aen4ve13 Interac4on13 with13 Ephemeral13 Material13 (CHIrsquo15)Hyosun13 Kwon13 Shashank13 Jaiswal13 Steve13 Benford13 Sue13 Ann13 Seah13

13 Peter13 BenneC13 Boriana13 Koleva13 Holger13 Schnaumldelbach

201413109　久保勇貴 2（鬼コース）13

どんなもの13

膜を押す引く飛び出ることができる新しい石鹸膜インタフェースの提案13

先行研究と比べてどこがすごい13

徐々に消えるインタフェースは高い注意を有するインタラクションを提供するという点を示したこと13

技術や手法のキモはどこ13

水グリセリンを201の対比で混ぜることでldquopoprdquoがきれいになるようにしかつ膜の耐久性を向上させた13

どうやって有効だと検証した13

３目並べを用いた被験者実験を実施13 ユーザは膜を割ると負け膜を自分のマスにするにはタッチ押す引くの書かれた通りの操作を行う13

議論はある13

ユーザに精密な動作を要求することはとりわけ注意を払うことを誘発する13

次に読むべき論文は13

Wetzstein13 et13 al13 201213

Tensor13 Displays13 Compressive13 Light13 Field13 Synthesis13 using13 Mul4layer13 Displays13 with13 Direc4onal13 Backligh4ng(SIGGRAPHrsquo12)

Gordon13 Wetzstein13 Douglas13 Lanman13 MaChew13 Hirsch13 Ramesh13 Raskar

201413109　久保勇貴 2（鬼コース）13

どんなもの13

視点によって異なる立体映像を見ることができる複数の層からなるディスプレイ13

先行研究と比べてどこがすごい13

既存の手法を合成したcomputa(onal13 displaysというディスプレイの新しいフレームワークを提案した13

技術や手法のキモはどこ13

時分割で視差マスクを表示することでユーザの視線ごとに立体像を表現する13

どうやって有効だと検証した13

通常のディスプレイ３層LCDLCD及び指向性バックライトの例による比較13 13

議論はある13

波紋を含むこと色チャンネルが悪影響を与える相互反射不均一などの問題が見られた13

次に読むべき論文は13

Matoba13 et13 al13 1213

SplashDisplay(VRICrsquo12)Yasuo Matoba Taro Tokui Ryo Sato Tochiki Sato Hideki Koike

201413109　久保勇貴 2（鬼コース）13

どんなもの13

パーティクルにCGを投射しパーティクルがテーブル上に投げられると爆発しパーティクルが噴きあがる13

先行研究と比べてどこがすごい13

ビーズがミリメートルからメートル単位までZ軸方向について空中で奥行きを表現する13

技術や手法のキモはどこ13

スピーカによって風力が発生させビーズを舞い上げる点13

どうやって有効だと検証した13

ビーズを投げると花火が打ちあがっているかのようなアプリケーション例を示した13

議論はある13

高いレベルの表現及び幅広い入力範囲を提供できた13

次に読むべき論文は13

Kim13 et13 al13 1413

MARIO13 Mid-shy‐air13 Augmented13 Reality13 Interac4on13 with13 Objects13 (ECrsquo14)Hanyuool13 Kim13 13 Issei13 Takahashi13 Hiroki13 Yamamoto13 Satoshi13 Maekawa13 Takeshi13 Naemura

201413109　久保勇貴 2（鬼コース）13

どんなもの13

350times300times250のテーブル上のスペースにおいて自由に動かせる空中像を造りだすことができる13

先行研究と比べてどこがすごい13

凹面鏡や凹レンズのように曲面でないため画像の歪曲が発生しない13

技術や手法のキモはどこ13

Aerial13 Imaging13 Plate(AIP)を用いた空中像の生成及びそのためのディスプレイ移動装置13

どうやって有効だと検証した13

左右からの視差の考慮及び奥行き表現時の画像提示視野角の検証などを行った13 13

議論はある13

投影しているひよこを叩いたり払いのけたりするような動作がデモ中見られた13

次に読むべき論文は13

Tactile Feedback on Flat Surfaces for the Visually Impaired13Ali Israr Olivier Bau Seung-Chan Kim Ivan Poupyrev13

どのようなものか 視覚障害者のための触覚を用いた視覚代用デバイス 先行研究と比べてどこがすごいか 道案内をしてくれる機械などはあるが日用品の場所を教えたり探すのを手伝ってくれるデバイスはない 技術や手法のキモ タッチパネルとカメラを搭載したデバイス 触覚を与える技術はTeslaTouchを利用 色を基準にオブジェクトの位置を認識 有用性の確認 視覚障害者二人に対して実験このデバイスを使

わなくても各自の方法で物を見つけられるが間違えることが多いこのデバイスを使用することで間違えることなく正確に物の位置を特定できた 課題 一つの色でしか判断できない 触感のあるなしでしか情報を伝えられない 関連論文 TeslaTouch [Bau et al 2010]

20150522 橋爪智 2鬼

Fingernail-Mounted Display of Attraction Force and Texture13Masataka Niwa Tomoko Nozaki Taro Maeda and Hideyuki And13

どのようなものか 指先に取り付けて触感と力を両方表現できるデバイス 先行研究と比べてどこがすごいか 触感と引力をそれぞれ表現するデバイスはあるが両方を一つのデバイスで表現した例は少ない 引力は自由な方向に付加することができる 技術や手法のキモ 偏心に重さを付けた円盤を4枚使用する 5-9Hz 引力　100-200Hz 触感 それぞれの円盤の位相や回転数を調整することで

触感と力 を表現する 4つのモータを使いそれぞれの円盤を独立して制御する 有用性の確認 4人の男性に対して実験80以上の精度で認識できた 関連論文 The nail-mounted attraction forcebump display [Nozaki et al 2008]

20150522 橋爪智 2 鬼

Gilded gait reshaping the urban experience with augmented footsteps13Yuichiro Takeuchi13

どのようなものか 靴に装着し地面の触感をコントロールするデバイス 先行研究と比べてどこがすごいか 単独で動作しなかったり特定の環境のみでしか動作しなかったりするrarr靴単体で動作環境に依存しない 技術や手法のキモ 6個の振動パネルを取り付けゲルでカバー app modulesを取り替えることができ様々な機能を付加できる（GPSsound) 4種類の地面を再現

bull  Hard Ground 振動させない bull  Soft Ground すべてのパネルを振動 bull  Bumpy Ground ジグザグに振動 bull  Godzilla 全てのパネルを振動何回か繰り返す 課題 モーターを使っているため波形をプログラミングできないrarr圧電素子を使用する 関連論文 Haptic Shoes [Fu et al 2010]

20150522 橋爪智 2鬼

ExoInterfaces novel exosceleton haptic interfaces for virtual reality augmented sport and rehabilitation

Dzmitry Tsetserukou Katsunari Sato Susumu Tachi13

どのようなものか 腕に装着し物理的なinteractionを可能にするデバイス 先行研究と比べてどこがすごいか Exoskeleton 力を増幅するためだが重たく危険なこともある String-based wireが視界をまたぐ動きに制限がある rarr腕の動きに制限を与えない安全 技術や手法のキモ 「FlexTorque」人間の筋肉の構造を再現するベルトとモーターを使用する肩の近くに装着することで

腕に負担がかかりにくい 触覚feedback弱いトルク 運動を支援強いトルク 課題 物理的な接触を表現するゲームやスポーツにより没頭させるリハビリのサポートをする視覚障害者の支援（ものの場所を教える） 関連論文 FlexTorque [Dzmitry et al 2010]

20150522 橋爪智 2 鬼

Perception of Ultrasonic Haptic Feedback on the Hand Localisation and Apparent Motion13

Graham Wilson Tom Carter Sriram Subramanian Stephen Brewster13

どのようなものか 超音波を用いた触覚フィードバック有効性の検討を行う 先行研究と比べてどこがすごいか 超音波触覚フィードバックは比較的新しく研究や操作方法に関する知識が少ない 腕を自由に動かすことができ小さいものは着用可能 技術や手法のキモ 88のアレイ状に超音波発生器を設置

有効性の確認 bull  局所的な触感 　　　25箇所に分割しそれぞれに超音波を当てる 　　　触感を感じた989 　　　場所の誤差85mm bull  手のひらを動く触感 上下左右に動く 　　　動いてると感じた629

20150522 橋爪智 2 鬼

Friction Measurements on a Large Area TPaD13Nicholas D Marchuk J Edward Colgate Michael A Peshkin13

どのようなものか 超音波の振動により触感を与える 先行研究と比べてどこがすごいか ガラス板を使うので透明後ろにディスプレイを配置可能 技術や手法のキモ 「Squeeze Film Effect（スクイズ膜効果）」 ガラス板に取り付けた圧電素子の円盤に高周波信号

をかける 実験 振動しない部分＝摩擦が発生しない部分が発生周波数により場所が変わる rarr摩擦を大きさをかける力の大きさから計測 rarr指の場所に合わせて複数の周波数を使い分ける 関連論文 T-PaD[Winfield et al 2007]

20150522 橋爪智 2 鬼

STIMTAC a Tactile Input Device with Programmable Friction13Michel Amberg Freacutedeacuteric Giraud Betty Semail Paolo Olivo Geacutery Casiez Nicolas Roussel13

どのようなものか 触感を与えられるタッチデバイス 先行研究と比べてどこがすごいか LATPaD サイズ大きいノイズが大きい TeslaTouch 高い電圧付加が必要GNDに接続しなければいけない

技術や手法のキモ 「Squeeze Film Effect」超音波を用いて振動を与える 圧電性セラミックを電極にコーディング 指トラッキングは力センサを用いる 活用法 マウスキーボード絵を描く 関連論文 LATPaD[Vincent et al 2011] TeslaTouch[Bau et al 2010]

20150522 橋爪智 2 鬼

Surround Haptics Tactile Feedback for Immersive Gaming Experiences Ali Israr Seung-Chan Kim Ivan Poupyrev Jan Stec13

どのようなものか ゲームに合わせて高解像度の触覚フィードバックをユーザーに与える椅子 先行研究と比べてどこがすごいか 荒く配置した安価な振動アクチュエータで高解像度の触覚フィードバックを行える 一点の振動連続した動き範囲の振動などを再現

技術や手法のキモ 仮想的な振動アクチュエータをいくつかの振動アクチュエータを使って作り出す physical-physicalphysical-virtualvirtual-virtual ゲームにHaptics Engineを導入しHaptics APIを用いてHaptic Displayを操作する 関連論文 Exploring Surround Haptics Displays[Israr et al 2010]

20150522 橋爪智 2 鬼

Audio-Haptic Feedback in Mobile Phones Angela Chang Conor OrsquoSullivan13

どのようなものか haptics機能のついてない携帯電話にオーディオ機能を利用した触覚フィードバックを追加する 先行研究と比べてどこがすごいか 簡単に作れてnon-haptic mobile devicesでも大丈夫 技術や手法のキモ 「MultiFunction Transducer(MFT)」 スピーカーから音と信号の両方を出力できる

bull  Haptic Inheritance 　　音を2つの周波数帯に分ける bull  Synthesis and Matching 　　低周波数帯(20-300Hz)を使い触感を伝える 有効性の検討 42人の人を対象に実験を行う83の人が触感を感じた

20150522 橋爪智 2 鬼

Resolution of Sleep Deprivation Problems using ZZZoo Pillows13Shunsuke Yanaka Motoki Ishida13

どのようなものか 近年不眠症の人が多い rarr誰かと接していると安心し睡眠に導入しやすくなる rarrまるで添い寝をしているようなリアルな抱きまくらを使う 技術や手法のキモ breathing sensation 風船を使って人の呼吸を再現肺の形の風船弱く長い呼吸をする

heating お湯を使って人の体温を再現45 有効性の確認 84人の人が実験 呼吸が睡眠を誘ったかrarr61 体温が睡眠を誘ったかrarr85 関連論文 The Impact of Sleep Disorders on Social Life[Komada et al 2007]

20150522 橋爪智 2 鬼

まとめ13超音波 モーター 風

20150522 橋爪智 2 鬼

コイル 電気刺激 Electrovibration

振動 音 お湯

なかの

Temporally Consistent Disparity and Optical Flow via Efficient Spatio-temporal Filtering1

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示した

議論論はあるか

時間的に一定の視差を算出する手法静止画ステレオよりも精度度が良良いことを示す従来よりも推定精度度が良良いオプティカルフローも算出する

一枚の静止画に対するフィルタリング[1]をステレオ動画に拡張している

ケンブリッジのステレオ動画のデータセットを利利用 実写動画に対する比較も行行うノイズ耐性も検証する

フィルタベースとエネルギーベースの関係性を良良り理理解することで推定精度度を上げる

実装が簡単でリアルタイム視差推定が可能

Fast Cost-Volume Filtering for Visual Correspondence and Beyond [Rhemann C Hosni A Bleyer M Rother C Gelautz M CVPR2011] Real-time Spatiotemporal Stereo Matching Using the Dual-Cross-Bilateral Grid [Richardt C Orr D Davies I Criminisi A Dodgson NA ECCV2010] Secrets of optical flow estimation and their principles [Sun D Roth S Black MJ 2010] Motion estimation with non-local total variation regularization [Werlberger M Pock T Bischof H CVPR2010] Temporally Consistent Disparity Maps from Uncalibrated Stereo Videos [Bleyer M Gelatuz M ISPA2011]

なかの

SymStereo Matching using Induced Symmetry (2014)2

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示した

議論論はあるか

画像の対称性を用いてステレオマッチングを行行う 左右の画像を反転させて重ね合わせることで対称性を測る

絵的な類似の代わりに対称性を使う今まで対称性を用いる手法はなく新規性が大きい

三つのSymmetry-baseの手法で精度度を検証従来手法よりも精度度が向上しているMiddlebury Oxford Corridorfountain-P11のデータセット使用

ステレオの問題である不不連続な箇所オクルージョン部分は未解決である演算時間はやや増加

1-Dラインのコストを考える今までは撮像面に対して平行行な平面でデプスを考えていたが垂直な平面を考える

BT[Birchfield and Tomasi 1998] Census transform[Zabih and Woodfill 1994] Log N[Kovesi 1997] radio-metoric differences[Hirschmuller Scharstein 2009]

なかの

Camouflaging an Object from Many Viewpoints3

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

多くの視点から三次元の物体をカモフラージュするカモフラージュによってオクルージョン部分の不不連続がどの程度度生じるか他の視点ではどれほどになるかの検証

MRF（Markov Random Fields）ベース

新しい三次元物体のカモフラージュモデルを構築 37種類のデータセットを作る

箱形の物体に対してカモフラージュ処理理を施し 結果を評価する

オクルージョン不不連続テクスチャの歪みが問題 照明や画像の貼りつけに制限あり

なかの

Aliasing Detection and Reduction in Plenoptic Imaging4

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

カメラアレイ撮影の角度度のエイリアシングを除去するエイリアシングの探索索と打ち消しを行行う

周波数領領域ではなく空間領領域で探索索を行行う

先行行研究がフィルタデモザイキング再パラメータ調整などの前処理理でエイリアシング除去を行行うのに対しエイリアシング探索索後にリフォーカスの段階でエイリアシングを取り除く

8times8の平行行カメラアレイで検証するカメラ間の 基線長は70mm

今回は基線長が長いデータセットを使った 次はLytroなどのマイクロレンズアレイで検証する

Globally consistent multi-label assignment on the ray space of 4d light fields [S Wanner C Straehle B Goldluecke CVPR2013] Lineassisted light field triangulation and stereo matching [Z Yu X Guo H Lin A Lumsdaine J Yu ICCV 2013]

なかの

Globally Consistent Multi-Label Assignment on the Ray Space of 4D Light Fields5

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

四次元ライトフィールドの光線情報において マルチラベルの領領域分割を行行う

深度度情報光線情報を用いて領領域分割することで 二次元（空間）情報だけでは分割が難しかった 領領域を分割可能とする

The light field camera Extended depth of field aliasing and superresolution [T Bishop P Favaro IEEE Transactions on Pattern Analysis and Machine Intelligence 2012]

なかの

Line Assisted Light Field Triangulation and Stereo Matching6

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

光線情報を利利用してステレオマッチングの精度度を 向上させる手法三角測量量の誤差を減らす

Light Field Stereo Matchingとかいう手法 グラフ構造を作成

Variational light field analysis for disparity estimation and super-resolution [S Wanner and B Goldlumluecke 2013]

なかの

Adaptive stereo similarity fusion using confidence measures 20157

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

ステレオマッチングの新しい方式fusion weightsを提案複数の手法を組み合わせてコスト計算を行行う手法付録に既存手法のコスト関数一覧あり

パラメータに依存する手法を用いないことで高速化を図っている

一つのアルゴリズムでは異異なる特性を持つ領領域全てに対して適切切なマッチングはできない複数を組み合わせることでそれを補う13種と多い

middleburyとKITTIのデータセットで評価

一枚あたり03sと高速だが001sとより高速なアルゴリズムが存在する

Segment-based stereo matching using belief propagation and a self-adapting dissimilarity measure [A Klaus M Sormann K Karner ICPR2006] On building an accurate stereo matching system on graphics hardware [X Mei X Sun M Zhou S Jiao H Wang X Zhang ICCV2011] Similarity measures for depth estimation [K Wegner O Stankiewicz 3DTV-CON2009] On accurate dense stereo-matching using a local adaptive multi-cost approach [C Stentoumis L Grammatikopoulos I Kalisperakis G Karras ISPRS2014] A quantitative evaluation of confidence measures for stereo vision [X Hu P Mordohai PAMI2012]

なかの

SIMILARITY MEASURE FOR DEPTH ESTIMATIOM 20098

どんなもの

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

4種類の視差推定アルゴリズムを組み合わせている 類似度度の選択性の解析

Belief Propagationの枠組みを用いる

名古屋大学の多視点データベースを利利用

HHI Test Material for 3D Video [I Feldmann M Muller F Zilly R Tanger A SmolicP Kauff T Wiegand 2008] Multiview Video Test Sequence and Camera Parameters [Yo-Sung Ho Eun-Kyung Lee and Cheon Lee 2008] 1D Parallel Test Sequences for MPEG-FTV [M Tanimoto T Fujii N Fukushima 2008] Non-parametric Local Transforms for Computing Visual Correspondence [R Zabih J Woodfill 1994]

なかの

Spatiotemporal Stereo via Spatiotemporal Quadric Element (Stequel) Matching9

どんなもの

技術や手法のキモはどこ

新しいマッチング手法を提案動き考慮することなく時間情報を取り込むことができる 時間方向のエピ線を考える

オプティカルフロー推定は3D境界や低テクスチャで弱いが提案手法はロバストである

なかの

Depth Video Enhancement Based on Weighted Mode Filtering10

どんなもの

議論論はある

ノイズを含んだ低解像度度のデプスマップの質を高める手法（超解像度度とデノイズ）時間方向も使用簡単なオプティカルフローを計算し利利用する

非反復復アルゴリズムのためGPUに載せやすく高速化が考えられる

なかの

Fast Bilateral-Space Stereo for Synthetic Defocus11

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

議論論はある

次に読むべき論論文は

高速な自由焦点ぼけ画像の作成

Bilateral-spaceを提案

従来研究よりも10から100倍速くぼけ具合の精度度も良良い

ぼけを作成するというアプリケーションに利利用する距離離という面では提案手法が有益であるが実測的な距離離という面での精度度は悪い背景と前景が同じ色で近くにある場合同一ととらえてしまう

Efficient high-resolution stereo matching using local plane sweeps [S N Sinha D Scharstein and R SzeliskiCVPR2014] Bilateral filtering-based optical flow estimation with occlusion detection [J Xiao H Cheng H Sawhney C Rao and M IsnardiECCV2006] Efficient nonlocal regularization for optical flow [P Krumlahenbumluhl and V KoltunECCV2012] Real-time spatiotemporal stereo matching using the dual-cross-bilateral grid [C Richardt D Orr I Davies A Criminisi and N A DodgsonECCV2010]

どうやって有効性を示した視差推定の精度度はmiddleburyKITTI

なかの

Robust Spatiotemporal Stereo for Dynamic Scenes12

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

ステレオ動画のフレーム間情報を取り入れることでノイズ耐性を向上させるまた動きの大きなものも考える

時間を含めたウインドウの提案自動的にそのような変化に対応する画像領領域を検出する

従来の時空間ステレオと比べ大きな動きによる急激な視差の時間変化に対して頑健である

なかの

Spacetime Stereo A Unifying Framework for Depth from Triangulation13

どんなもの

先行行研究と比べてどこがすごい

space time stereoを提案ステレオカメラの視差推定でも構造光を用いた視差推定でも利利用可能 動的なシーンでの利利用も可能

フレームごとマッチングを取っていたが複数フレームでのマッチングを可能とした

なかの

Learning to Select and Order Vacation Photographs (Disney research)14

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示したあまりにもたくさん撮影した写真たちから自動的にフォトアルバムを作成する研究

複雑な視覚での区別を試みたのはこの論論文が初

５つの異異なるトピックから63の個人的な写真コレクションのデータセットを利利用し定量量的に評価する

写真間の差別かを定義する顔全体の絵何が写っているか写っていないかを評価する

Jointly aligning and segmenting multiple web photo streams for the inference of collective photo storylines [G Kim and E P Xing CVPR2013] Photo sequencing [T Basha Y Moses and S Avidan CVPR2012]

なかの

A Taxonomy and Evaluation of Dense Two-Frame Stereo Correspondence Algorithms15

どんなもの

どうやって有効性を示した

次に読むべき論論文は

ステレオマッチングに関する分類を行行う 新たなデータセットを作成する

というよりも他の手法が有効性を示すことができるようにデータセットを作成した 今ではmiddleburyのデータセットと言えばステレオ業界では超有名

High-resolution stereo datasets with subpixel-accurate ground truth

なかの

Discriminability Limits in Spatio-Temporal Stereo Block Matching1

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

spatio-temporal disparity estimationの根本的な前提の正当性を解析しマッチング処理理の際に動きが助けとなる程度度を決定する

時空間マッチングのエラーを分析し誤りの原因を確率率率で導出する（フレーム数動きの分散画像特徴ノイズの関数）

[34243334]は時空間マッチングの利利点を指摘していたが本論論文はマッチング精度度の向上のために動きを用いる手法の程度度や性質を研究する

6つのステレオビデオを用いて検証を行行った

Spacetime stereo Shape recovery for dynamic scenes [L Zhang B Curless and S Seitz CVPR2003] Spatiotemporal stereo and scene flow via stequel matching [M Sizintsev and R Wildes PAMI2012] Temporally consistent disparity and optical flow via efficient spatio-temporal filtering [A Hosni C Rhemann M Bleyer and M Gelautz PRCAIVT2012] Spacetime stereo A unifying framework for depth from triangulation [PAMI2005] Dynamic depth recovery from multiple synchronized video streams [H Tao H Sawhney and R Kumar CVPR2001] Spatiotemporal descriptor for wide-baseline stereo reconstruction of non-rigid and ambiguous scenes [ECCV2003]

なかの

Depth-Based Patch Scaling for Content-Aware Stereo Image Completion2

どんなもの

どうやって有効性を示した

ステレオでデプスを取り物体の三次元情報を使ってインペインティングを行行う

bookのデータセット背景が繰り返しパターンが多いものを使っている

なかの

Fast Semi-dense Surface Reconstruction from Stereoscopic Video in Laparoscopic Surgery3

どんなもの

手法の流流れ

次に読むべき論論文は

腹腔内手術の際にステレオビデオから高速に物体の三次元再構成を行行う研究

Evaluation of stereo matching costs on images with radiometric differences [Hirschmueller H Scharstein D PAMI2008]

スコープカメラから画像取得GPUで演算する 視差を算出しフィルタにかける距離離に変換 点群を再びフィルタにかけて三次元再構成

なかの

3D Reconstruction from Accidental Motion4

どんなもの

技術や手法のキモはどこ

議論論はある

数秒のビデオ（単眼）から三次元再構成を行行う 手ぶれなどの動きから再構成が可能で特定の動きや機材を必要としない

短い基線長でも再構成が可能（3mmの基線長）

基線長が短いため背景の精度度が低くなる リフォーカス画像作成には十分 練習では上手く動作したが検証がまだ必要

なかの

Panoramic Video from Unstructured Camera Arrays5

どんなもの

技術や手法のキモはどこ

議論論はある

複数のカメラを用いたパノラマ撮影を行行う その際に不不自然さがないような動画を作成する

不不自然さを感じる感覚特性を提示しそれにのっとって対策を講じている

一つのカメラの解像度度と品質を向上させるよりも複数台のカメラを組み合わせることがはるかに簡単で有益である専門家でなくてもGoProのカメラセットを組み合わせることは容易易

カメラの配置は厳密に決められていない完璧な時間同期やローリングシャッターの不不足のような実撮影での問題もクリアしている

先行行研究と比べてどこがすごい

どうやって有効性を示した左のシステムは14台のカメラを使用 右のシステムはGoProを5台使用

Disney 201558

なかの

Floating Scale Surface Reconstruction6

どんなもの

技術や手法のキモはどこ

流流動的にスケールを変えられる三次元再構成手法

サンプル規模に依存するパラメータがない rarrどのスケールのサンプルにも対応できる

siggraph2014

なかの

A Super Resolution Reconstruction Scheme for Mixed Spatio-Temporal Stereo Video7

どんなもの

技術や手法のキモはどこ

ビデオ超解像アルゴリズム

二台のカメラを使用 一台は低解像度度で高速一台は高解像度度で低速

HHI 3DV ftp siteのBookarrivalとbeergadenを使用どうやって有効性を示した

なかの

What Is a Good Day for Outdoor Photometric Stereo8

どんなもの

先行行研究と比べてどこがすごい

議論論はある

次に読むべき論論文は

屋外における照度度差があるステレオの研究 屋外でステレオを行行う際に有利利or不不利利な日照条件を明らかにする

点光源を用いた研究は行行われていたが屋外での研究はされていなかった

晴れより曇りの方が精度度が良良い雲があるから特徴量量を取りやすい雑音を白色ガウスモデルを想定 季節ごとのデータセットを利利用してみても良良い

Time-lapse photometric stereo and applications [F Shen K Sunkavalli N Bonneel S Rusinkiewicz H Pfisterand X Tong2014] Outdoor photometric stereo [L-F Yu S-K Yeung Y-W Tai D Terzopoulos and T FChan ICCP2013]

どうやって有効性を示した屋外の照明に関するHDR環境マップのデータベースを利利用

Disney 2015424

なかの

COLORBRUSH ANIMATED DIFFUSION FOR INTUITIVE COLORIZATION SIMULATING WATER PAINTING 9

どんなものアニメを水彩画で描いたように変換する 水彩画を描くには経験が必要であるがそれを作成するアルゴリズムを考案絵具が水によりどうにじむかシュミレーションしている

Disney 20141027 ICIP2014

次に読むべき論論文はGabor-space geodesic active contoursrdquo In Algebraic Frames for the Perception-Action Cycle [C Sagiv NA Sochen and YY Zeevi 2000] Practical temporal consistency for image-based graphics applications [M Lang O Wang T Aydin A Smolic and M Gross SIGGRAPH2012] Computer-Generated Watercolor [CJ Curtis SE Anderson JE Seims KW Fleischer and DH Salesin SIGGRAPH1997]

なかの

From Sound to Sight Using Audio Processing to enable Visible Light Communication 10

どんなもの光に情報を載せる技術プロジェクトページがあって光関係の研究が8個載っている

httpwwwdisneyresearchcomprojectvisible-light-communication

ビデオのURL httpwwwdisneyresearchcomwpcontentuploadsPub_InvisibleLightCommunication_Siggraph14_videomp4

• 201211106_KeisukeKawahara
• 201311421_KeitaKanai_02
• 201313095_AkiraIshii_02
• 201413109_YuukiKubo_02
• 201513110_SatoshiHashizume_02
• 鬼輪講マラソン③_1
• 鬼輪講マラソン③_2

2 201313095

Cyclops

1

360degMHI RDF

20 20MHI

79 RDF92

bull  MorrisDSaponasTSGuilloryAandKelnerIRecofitUsingawearablesensortofindrecognizeandcountrepeEEveexercisesInProcampACMampCHIamprsquo14amp(2014)3225ndash3234

CyclopsampWearableampandampSinglePieceampFullBodyampGestureampInputampDevicesamp(CHIrsquo15)amp

LiweiChanChi-HaoHsiehYi-LingChenShuoYangDa-YuanHuangRong-HaoLiangBing-YuChen

h]pswwwyoutubecomwatchv=JYm_3oNUGIk

2 201313095

Muehlbaueretal[24]

SVM

114 94 3020

9599 4 98 7 96 13

93

bull  MuehlbauerMBahleGLukowiczPWhatcananarmholsterwornsmartphonedoforacEvityrecogni-EonProcIEEEISWC2011

RecoFitampUsingampaampWearableampSensoramptoampFindampRecognizeampandampCountampRepeEEveampExercisesamp(CHIrsquo14)

DanMorrisTSco]SaponasAndrewGuilloryIlyaKelner

h]pswwwyoutubecomwatchv=zpa4rVGlO68

2 201313095

2

31 2

15-20 90-95

Hambone

bull  BAmentoWHillandLTerveenThesoundofonehandawrist-mountedbio-acousEcfingerEpgestureinterfaceInCHIrsquo02CHIrsquo02extendedabstractsonHumanfactorsincompuEngsystemspages724ndash725NewYorkNYUSA2002ACMPress

HamboneampAampBioAcousEcampGestureampInterfaceamp(ISWCrsquo07)

TravisDeyleSzabolcsPalinkoErikaShehanPooleandThadStarner

h]pswwwyoutubecomwatchv=Uxj-vyal84M

2 201313095

bull  RabinerLR(1989)ATutorialonHiddenMarkovModelsandSelectedApplicaEonsinSpeechRecogni-EonProcIEEEVol77257-28

TheampSoundampofampOneampHandampAampWristmountedampBioacousEcampFingerEpampGestureampInterfaceamp(CHIrsquo02)

BrianAmentoWillHillLorenTerveen

2 201313095

Non-linearSpaEalSampling

SVM

12

948

15cm

bull  NakatsumaKShinodaHMakinoYSatoKandMaenoTTouchinterfaceonbackofthehandInprocofSIGGRAPHrsquo11(2011)391ndash391

bull  ButlerAIzadiSandHodgesSSidesightmulE-touchinteracEonaroundsmalldevicesInProcofUISTrsquo08(2008)201ndash204

zSenseampEnablingampShallowampDepthampGestureampRecogniEonampforampGreaterampInputampExpressivityamponampSmartampWearablesamp(CHIrsquo15)

AnushaWithanaRoshanPeirisNipunaSamarasekaraSurangaNanayakkara

h]pswwwyoutubecomwatchv=fQobwL8eSU4

2 201313095

bull  HARRISONCTANDANDMORRISD2010Skinputap-propriaEngthebodyasaninputsurfaceInProceedingsofthe28thinternaEonalconferenceonHumanfactorsincompuEngsystemsACMNewYorkNYUSACHIrsquo10453ndash462

Touchampinterfaceamponampbackampofamptheamphandamp(SIGGRAPH11)

KeiNakatsumaHiroyukiShinodaYasutoshiMakinoKatsunariSatoTakashiMaeno

h]pswwwyoutubecomwatchv=tKNLxh9Yw2M

2 201313095

Pose-IO EMS

Pose-IO

EMS

EMS58deg

46 5 be]er

bull  RoudautARauASterzCPlauthMLopesPandBaudischPGestureoutputeyes-freeoutputusingaforcefeedbacktouchsurfaceProcCHI1325472556

PropriocepEveampInteracEonamp(CHIrsquo15)amp

PedroLopesAlexandraIonWilliMuellerDanielHoffmannPatrikJonellPatrickBaudisch

h]pswwwyoutubecomwatchv=KMxIw7zhlw

2 201313095

EMS

AR EMSEMS

GPS

bull  TamakiEMiyakiTandRekimotoJPossessedHandAhandgesturemanipulaEonsystemusingelectricalsEmuliInProcampAHrsquo10amp(2010)21ndash25

CruiseampControlampforampPedestriansampControllingampWalkingampDirecEonampusingampElectricalampMuscleampSEmulaEonamp(CHIrsquo15)amp

MaxPfeifferTimDunteStefanSchneegassFlorianAltMichaelRohs

h]pswwwyoutubecomwatchv=JSfnm_HoUv4

2 201313095

EMS

EMS

EMS 16automaEccalibraEonsystem

auto-calibraEonsystems 16

8875g

bull  KruijffESchmalsEegDandBeckhausSUsingneuromuscularelectricalsEmulaEonforpseudo-hapEcfeedbackInProceedingsoftheACMsymposiumonVirtualrealitysoywareandtechnologyVRSTrsquo06ACM(NewYorkNYUSA2006)316ndash319

PossessedHandampTechniquesampforampControllingampHumanampHandsampusingampElectricalampMusclesampSEmuliamp(CHIrsquo11)amp

EmiTamakiTakashiMiyakiJunRekimoto

h]psvimeocom27044937

2 201313095

EMS

EMS

RFIDEMS

1276

bull  KruijffESchmalsEegDandBeckhausDUsingneuromuscularelectricalsEmulaEonforpseudo-hapEcfeedbackProcVRST06316mdash319

Affordance++ampallowingampobjectsamptoampcommunicateampdynamicampuseamp(CHIrsquo15)

PedroLopesPatrikJonellPatrickBaudisch

h]pswwwyoutubecomwatchv=d0J7V37zQjY

2 201313095

EMS

EMS

EMS

ReacEonloss

EMS

UsingampNeuromuscularampElectricalampSEmulaEonampforampPseudoHapEcampFeedbackamp(VRSTrsquo06)

ErnstKruijffDieterSchmalsEegSteffiBeckhaus

2 201313095

SVM

106 Per-User

863 13

712

13

bull  SatoMPoupyrevIandHarrisonCToucheenhancingtouchinteracEononhumansscreensliquidsandeverydayobjectsInCHIrsquo12483ndash492

bull  TimCollinsAcEveacousEctouchinterfaceElectronicsLe]ersVol45No20pp1055ndash1056242009

TouchampampampAcEvateampAddingampInteracEvityamptoampExisEngampObjectsampusingampAcEveampAcousEcampSensingamp(UISTrsquo13)

MakotoOnoBuntarouShizukiJiroTanaka

h]pswwwyoutubecomwatchv=XgxXi6w8IQc

2 201313095

13

13

SVM

on-body

per-user 5 967 4987

bull  HarrisonCBenkoHWilsonAOmniTouchwearablemulEtouchinteracEoneverywhereinUIST11441-450

bull  MatsushitaNandRekimotoJHoloWalldesigningafingerhandbodyandobjectsensiEvewallUIST97209-210

ToucheampEnhancingampTouchampInteracEonamponampHumansampScreensampLiquidsampandampEverydayampObjectsamp(CHIrsquo12)

MunehikoSatoIvanPoupyrevChrisHarrison

h]pswwwyoutubecomwatchv=E4tYpXVTjxA

2 201313095

SVM

9 9TapSense 4

95 99

TapSenseDelete

bull  HarrisonCTanDandMorrisDSkinputappropriat-ingthebodyasaninputsurfaceInProcCHI10453-462

TapSenseampEnhancingampFingerampInteracEonamponampTouchampSurfacesamp(UISTrsquo11)

ChrisHarrisonJuliaSchwarzSco]EHudson

h]pswwwyoutubecomwatchv=-oN96cucBr4

2 201313095

13

13

22 SVM

13 FingersWholeArmForearm 876 Fingers877 WholeArm 955

883 Forearm 815

833

GUI

bull  SaponasTSTanDSMorrisDandBalakrishnanRDemonstraEngthefeasibilityofusingforearmelectromyographyformuscle-computerinterfacesInProcCHIrsquo09515-24

SkinputampAppropriaEngamptheampBodyampasampanampInputampSurfaceamp(CHIrsquo10)

ChrisHarrisonDesneyTanDanMorris

h]pswwwyoutubecomwatchv=g3XPUdW9Ryg

2 201313095

Fiberio

10 330 150

148 2

Fiberio

bull  MatsushitaNandRekimotoJHoloWallDesigningaFingerHandBodyObjectSensiEveWallProcUIST97209ndash210

FiberioampAampTouchscreenampthatampSensesampFingerprintsamp(UISTrsquo13)

ChrisEanHolzPatrickBaudisch

h]pswwwyoutubecomwatchv=p1a5yLzuTqA

2 201313095

3D

3D

bull  GeigerMVollertsenFTheMechanismsofLaserFormingCIRPANNALSlsquo93421301-304

bull  WillisKDDXuCWuJKLevinGGrossMDInteracEvefabricaEonnewinterfacesfordigitalfabricaEonProcTEI11pp69-72

LaserOrigamiampLaserCugngamp3DampObjectsamp(CHIrsquo13)

StefanieMuellerBasEanKruckPatrickBaudisch

h]pswwwyoutubecomwatchv=arjRtCjI9AQ

2 201313095

bend

bull  HyunyoungSongFranccediloisGuimbreEegravereChangHuHodLipsonModelCraycapturingfreehandannotaEonsandeditsonphysical3DmodelsProceedingsofthe19thannualACMsymposiumonUserinterfacesoywareandtechnologyOctober15-182006MontreuxSwitzerland

InteracEveampConstrucEonampInteracEveampFabricaEonampofampFuncEonalampMechanicalampDevicesamp(UISTrsquo12)

StefanieMuellerPedroLopesPatrickBaudisch

h]pdlacmorgcitaEoncfmid=23801162380191

2 201313095

3D

3D

bull  SavageVSchmidtRGrossmanTFitzmauriceGandHartmannBAseriesoftubesAddinginteracEvityto3dprintsusinginternalpipesInProcUIST14(2014)

3DampPrinEngampPneumaEcampDeviceampControlsampwithampVariableampAcEvaEonampForceampCapabiliEesamp(CHIrsquo15)amp

MarynelVazquezEricBrockmeyerRutaDesaiChrisHarrisonSco]EHudson

h]pswwwyoutubecomwatchv=-4gFYvhkz0Y

2 201313095

OpenFab 3D

fablets

3 3

bull  CHENDMATUSIKWSITTHI-AMORNPDIDYKPANDLEVIND2013Spec2FabAreducer-tunermodelfortranslat-ingspecificaEonsto3DprintsACMTransGraph324(July)

OpenFabampAampProgrammableampPipelineampforampMulEMaterialampFabricaEonamp(SIGGRAPHrsquo13)

KirilVidimcˇeSzu-PoWangJonathanRagan-KelleyWojciechMatusik

2 201313095

3D

3D

3D

3D14 30 13 67

244

14

3D

bull  MuellerSKruckBBaudischPLaserOrigamiLaser-Cunng3DObjectsProcCHIrsquo132585-2592

faBrickaEonampFastamp3DampPrinEngampofampFuncEonalampObjectsampbyampIntegraEngampConstrucEonampKitampBuildingampBlocksamp(CHIrsquo14)amp

StefanieMuellerTobiasMohrKersEnGuentherJohannesFrohnhofenPatrickBaudisch

h]pswwwyoutubecomwatchv=BlO6YRcLJjE

Touching13 the13 Void13 Direct-shy‐Touch13 Interac4on13 for13 Intangible13 Displays(CHIrsquo10)Li-Wei Chan Hui-Shan Kao Mike Y Chen Ming-Sui Jane Yi-Ping Hung

201413109　久保勇貴 2（鬼コース）13

どんなもの13

空中像へのタッチのエラーに関する調査及び影や音のフィードバックを付与することによるパーフォーマンス向上を示した研究13

先行研究と比べてどこがすごい13

平面画像をタッチする際の奥行きに関するエラーの正確な取得を初めて検証13

技術や手法のキモはどこ13

２つの赤外線カメラを用いた正確なタッチの検出13

どうやって有効だと検証した13

タッチ時の奥行きの正確さに関する被験者実験を実施またタッチする際に影や音を付けた際の反応時間を被験者実験で検証13

議論はある13

ユーザは慣れるまで影や音のフィードバックが必要だがそのあとは必要なくなる13

次に読むべき論文は13

MirageTable13 （CHI12） 13

MirageTable13 Freehand13 Interac4on13 on13 a13 Projected13 13 Augmented13 Reality13 Tabletop(CHIrsquo12)

Hrvoje Benko Ricardo Jota Andrew D Wilson

201413109　久保勇貴 2（鬼コース）13

どんなもの13

テーブル上においてバーチャルな物体をリアルタイムで現実でものを動かすことと同様な動作に操作可能なシステム13

先行研究と比べてどこがすごい13

現実の物体をリアルタイムで画面に取りこむことができ質の高いフリーハンドインタラクションを実現した点13

技術や手法のキモはどこ13

色深度前景頭追跡プロキシパーティクルを駆使したリアルタイムメッシュの作成13

どうやって有効だと検証した13

凹凸など例外な表面に対しての投影した際の画像の質についての評価実験また仮想物体の奥行き知覚に関する実験も行った13

議論はある13

前面のみしかキャプチャしていないため差が生じる握っている場所の再現は未解決な課題である13

次に読むべき論文は13

Hirsch13 et13 al13 201413 (SIGGRAPHrsquo14)13

A13 Compressive13 Light13 Field13 Projec4on13 System13 (SIGGRAPHrsquo14)MaChew13 Hirsch13 Gordon13 Wetzstein13 Ramesh13 Raskar

201413109　久保勇貴 2（鬼コース）13

どんなもの13

通常の3Dディスプレイに比べて解像度輝度コントラストを改善した圧縮ライトフィードディスプレイ13

先行研究と比べてどこがすごい13

多視点立体視を複数でなく１台のプロジェクタを用いて実現した13

技術や手法のキモはどこ13

受動的スクリーンと高速切り替えプロジェクタによる新しい光学設計13

どうやって有効だと検証した13

4つのシーン例を投影したものを示したアニメーションの3D効果について観察を行った13

議論はある13

光路長を広げると観察できる画質が大幅に制限され他のライトフィードビューと混線が生じる13

次に読むべき論文は13

Butler13 et13 al13 201113

Vermeer13 Direct13 Interac4on13 with13 a13 360deg13 Viewable13 3D13 Display(UISTrsquo11) Alex Butler Otmar Hilliges Shahram Izadi Steve Hodges David Molyneaux David Kim

201413109　久保勇貴 2（鬼コース）13

どんなもの13

映し出された3Dオブジェクトとインタラクションを行えるシステム13

先行研究と比べてどこがすごい13

ディスプレイ内の画像とのインタラクションを提案ボリュームディスプレイを支援する新しいセンシング法の提案13

技術や手法のキモはどこ13

パラボラ鏡に取り付けた赤外線カメラセンサによる指先検出13

どうやって有効だと検証した13

アプリケーション例を示した13

議論はある13

パラボラ鏡の大きさよりもディスプレイサイズが小さくなってしまう13

次に読むべき論文は13

Hirsch13 et13 al13 201213

8D13 Interac4ng13 with13 a13 Relightable13 Glasses-shy‐Free13 3D13 Display(CHIrsquo12)Li-Wei Chan Hui-Shan Kao Mike Y Chen Ming-Sui Jane Yi-Ping Hung

201413109　久保勇貴 2（鬼コース）13

どんなもの13

ライトフィードによる入力とライトフィールドによる表示を行うリアルタイム8Dディスプレイ13

先行研究と比べてどこがすごい13

リアルタイムでの8Dディスプレイの実現（先行研究は7fps）13

技術や手法のキモはどこ13

GPUにおけるレンダリング処理13

どうやって有効だと検証した13

MRIデータを用いたディスプレイのデモを示した13

議論はある13

現在はグレースケールの入力のみだがカラーでの入力できればより強力になるだろう13

次に読むべき論文は13

Sahoo13 et13 al13 201513

Control13 of13 Non-shy‐Solid13 Diffusers13 by13 Electrosta4c13 Charging13 (CHIrsquo15) Deepak Ranjan Sahoo Diego Martinez Plasencia Sriram Subramanian

201413109　久保勇貴 2（鬼コース）13

どんなもの13

シャボン玉や霧などの非固体を電場による制御を試みた研究13

先行研究と比べてどこがすごい13

非固体の形や位置の制御法を提案した点13

技術や手法のキモはどこ13

[Intra13 et13 al13 11]中のldquowire-shy‐to-shy‐Cylinderdquoを用いたエアゾール粒子の帯電13

どうやって有効だと検証した13

霧及びシャボン玉によるディスプレイのアプリケーション例で実際に制御して見せた13

議論はある13

風による影響を本手法は打ち消すことができた13

次に読むべき論文は13

Barnum13 et13 al13 201013

A13 Mul4-shy‐Layered13 Display13 with13 Water13 Drops(SIGGRAPHrsquo10)Peter C Barnum Srinivasa G Narasimhan Takeo Kanade

201413109　久保勇貴 2（鬼コース）13

どんなもの13

複数層の落下水滴にプロジェクションマッピングを行いディスプレイとした研究13

先行研究と比べてどこがすごい13

水滴の制御を行うことで単一のプロジェクタによって複数層の映像投影を可能とした点13

技術や手法のキモはどこ13

[Ambravaneswaran13 et13 al13 2002]及び本研究における実験結果に基づく水滴生成13

どうやって有効だと検証した13

複数のディスプレイ例を示した13 例）顔の投影水槽シミュレータなど13

議論はある13

本当の3Dディスプレイにするにはより多くの水滴制御が必要13

次に読むべき論文は13

Lee13 et13 al13 200713

An13 Immaterial13 Depth-shy‐Fused13 3D13 Display(VRSTrsquo07)Cha Lee Stephen DiVerdi Tobias Humlollerer

201413109　久保勇貴 2（鬼コース）13

どんなもの13

２つのスクリーンを駆使し3Dディスプレイを実現するdepth-shy‐fused13 3D(DFD)に関する評価を行いその結果よりディスプレイを提案した研究13

先行研究と比べてどこがすごい13

DFDが任意のスクリーン設定及び見る位置に対して有効であることを示した13

技術や手法のキモはどこ13

６通りのスクリーン組合せから２つを抽出し見え方の違いを検証した点13

どうやって有効だと検証した13

６通りのスクリーンについて立体的に見えるか被験者実験を実施その後それぞれに有意差がみられるか調べた13

議論はある13

ステレオイメージを認めることができなかったユーザに対しても強い3D効果が見られた13

次に読むべき論文は13

Tokuda13 et13 al13 201013

Cloud13 Display13 (ACErsquo10)Yutaka Tokuda Yasuhiro Suzuki Kunihiro Nishimura Tomohiro Tanikawa Michitaka Hirose

201413109　久保勇貴 2（鬼コース）13

どんなもの13

煙の渦輪を用いた空間を埋めるディスプレイ13

先行研究と比べてどこがすごい13

制御可能な手法により高所へのパーティクルを運搬することに着目した点13

技術や手法のキモはどこ13

コンピュータによって制御が行われる空気砲アレイ13

どうやって有効だと検証した13

箱の中で実験を行い安定して渦輪をできるようにした実際にデモを行ったことを示した13

議論はある13

今の試作機をより早くリフレッシュ速度を高めることによりより濃く空間を埋められることを目指す13

次に読むべき論文は13

Sato13 et13 al13 200913

Par]cle13 Display13 System　(JVRC09)13 -shy‐13 A13 Large13 Scale13 Display13 for13 Public13 Space13 -shy‐

Munehiko13 Sato13 Yasuhiro13 Suzuki13 13 Atsushi13 Hiyama13 Tomohiro13 Tanikawa13 Michitaka13 Hirose

201413109　久保勇貴 2（鬼コース）13

どんなもの13

パーティクルディスプレイによる公共スペースのための大画面ディスプレイの提案13

先行研究と比べてどこがすごい13

公共スペースにおける要求と制限に基づいたシステムを提案した点13

技術や手法のキモはどこ13

実験に基づく表示画像のスクロール時間の制御13

どうやって有効だと検証した13

Aという文字の知覚実験によって 適な点滅周期の調査を行った13

議論はある13

現在の試作機を組合せより高解像度にする必要がある13

次に読むべき論文は13

Kwon13 et13 al13 201513

FugaciousFilm13 Exploring13 Aen4ve13 Interac4on13 with13 Ephemeral13 Material13 (CHIrsquo15)Hyosun13 Kwon13 Shashank13 Jaiswal13 Steve13 Benford13 Sue13 Ann13 Seah13

13 Peter13 BenneC13 Boriana13 Koleva13 Holger13 Schnaumldelbach

201413109　久保勇貴 2（鬼コース）13

どんなもの13

膜を押す引く飛び出ることができる新しい石鹸膜インタフェースの提案13

先行研究と比べてどこがすごい13

徐々に消えるインタフェースは高い注意を有するインタラクションを提供するという点を示したこと13

技術や手法のキモはどこ13

水グリセリンを201の対比で混ぜることでldquopoprdquoがきれいになるようにしかつ膜の耐久性を向上させた13

どうやって有効だと検証した13

３目並べを用いた被験者実験を実施13 ユーザは膜を割ると負け膜を自分のマスにするにはタッチ押す引くの書かれた通りの操作を行う13

議論はある13

ユーザに精密な動作を要求することはとりわけ注意を払うことを誘発する13

次に読むべき論文は13

Wetzstein13 et13 al13 201213

Tensor13 Displays13 Compressive13 Light13 Field13 Synthesis13 using13 Mul4layer13 Displays13 with13 Direc4onal13 Backligh4ng(SIGGRAPHrsquo12)

Gordon13 Wetzstein13 Douglas13 Lanman13 MaChew13 Hirsch13 Ramesh13 Raskar

201413109　久保勇貴 2（鬼コース）13

どんなもの13

視点によって異なる立体映像を見ることができる複数の層からなるディスプレイ13

先行研究と比べてどこがすごい13

既存の手法を合成したcomputa(onal13 displaysというディスプレイの新しいフレームワークを提案した13

技術や手法のキモはどこ13

時分割で視差マスクを表示することでユーザの視線ごとに立体像を表現する13

どうやって有効だと検証した13

通常のディスプレイ３層LCDLCD及び指向性バックライトの例による比較13 13

議論はある13

波紋を含むこと色チャンネルが悪影響を与える相互反射不均一などの問題が見られた13

次に読むべき論文は13

Matoba13 et13 al13 1213

SplashDisplay(VRICrsquo12)Yasuo Matoba Taro Tokui Ryo Sato Tochiki Sato Hideki Koike

201413109　久保勇貴 2（鬼コース）13

どんなもの13

パーティクルにCGを投射しパーティクルがテーブル上に投げられると爆発しパーティクルが噴きあがる13

先行研究と比べてどこがすごい13

ビーズがミリメートルからメートル単位までZ軸方向について空中で奥行きを表現する13

技術や手法のキモはどこ13

スピーカによって風力が発生させビーズを舞い上げる点13

どうやって有効だと検証した13

ビーズを投げると花火が打ちあがっているかのようなアプリケーション例を示した13

議論はある13

高いレベルの表現及び幅広い入力範囲を提供できた13

次に読むべき論文は13

Kim13 et13 al13 1413

MARIO13 Mid-shy‐air13 Augmented13 Reality13 Interac4on13 with13 Objects13 (ECrsquo14)Hanyuool13 Kim13 13 Issei13 Takahashi13 Hiroki13 Yamamoto13 Satoshi13 Maekawa13 Takeshi13 Naemura

201413109　久保勇貴 2（鬼コース）13

どんなもの13

350times300times250のテーブル上のスペースにおいて自由に動かせる空中像を造りだすことができる13

先行研究と比べてどこがすごい13

凹面鏡や凹レンズのように曲面でないため画像の歪曲が発生しない13

技術や手法のキモはどこ13

Aerial13 Imaging13 Plate(AIP)を用いた空中像の生成及びそのためのディスプレイ移動装置13

どうやって有効だと検証した13

左右からの視差の考慮及び奥行き表現時の画像提示視野角の検証などを行った13 13

議論はある13

投影しているひよこを叩いたり払いのけたりするような動作がデモ中見られた13

次に読むべき論文は13

Tactile Feedback on Flat Surfaces for the Visually Impaired13Ali Israr Olivier Bau Seung-Chan Kim Ivan Poupyrev13

どのようなものか 視覚障害者のための触覚を用いた視覚代用デバイス 先行研究と比べてどこがすごいか 道案内をしてくれる機械などはあるが日用品の場所を教えたり探すのを手伝ってくれるデバイスはない 技術や手法のキモ タッチパネルとカメラを搭載したデバイス 触覚を与える技術はTeslaTouchを利用 色を基準にオブジェクトの位置を認識 有用性の確認 視覚障害者二人に対して実験このデバイスを使

わなくても各自の方法で物を見つけられるが間違えることが多いこのデバイスを使用することで間違えることなく正確に物の位置を特定できた 課題 一つの色でしか判断できない 触感のあるなしでしか情報を伝えられない 関連論文 TeslaTouch [Bau et al 2010]

20150522 橋爪智 2鬼

Fingernail-Mounted Display of Attraction Force and Texture13Masataka Niwa Tomoko Nozaki Taro Maeda and Hideyuki And13

どのようなものか 指先に取り付けて触感と力を両方表現できるデバイス 先行研究と比べてどこがすごいか 触感と引力をそれぞれ表現するデバイスはあるが両方を一つのデバイスで表現した例は少ない 引力は自由な方向に付加することができる 技術や手法のキモ 偏心に重さを付けた円盤を4枚使用する 5-9Hz 引力　100-200Hz 触感 それぞれの円盤の位相や回転数を調整することで

触感と力 を表現する 4つのモータを使いそれぞれの円盤を独立して制御する 有用性の確認 4人の男性に対して実験80以上の精度で認識できた 関連論文 The nail-mounted attraction forcebump display [Nozaki et al 2008]

20150522 橋爪智 2 鬼

Gilded gait reshaping the urban experience with augmented footsteps13Yuichiro Takeuchi13

どのようなものか 靴に装着し地面の触感をコントロールするデバイス 先行研究と比べてどこがすごいか 単独で動作しなかったり特定の環境のみでしか動作しなかったりするrarr靴単体で動作環境に依存しない 技術や手法のキモ 6個の振動パネルを取り付けゲルでカバー app modulesを取り替えることができ様々な機能を付加できる（GPSsound) 4種類の地面を再現

bull  Hard Ground 振動させない bull  Soft Ground すべてのパネルを振動 bull  Bumpy Ground ジグザグに振動 bull  Godzilla 全てのパネルを振動何回か繰り返す 課題 モーターを使っているため波形をプログラミングできないrarr圧電素子を使用する 関連論文 Haptic Shoes [Fu et al 2010]

20150522 橋爪智 2鬼

ExoInterfaces novel exosceleton haptic interfaces for virtual reality augmented sport and rehabilitation

Dzmitry Tsetserukou Katsunari Sato Susumu Tachi13

どのようなものか 腕に装着し物理的なinteractionを可能にするデバイス 先行研究と比べてどこがすごいか Exoskeleton 力を増幅するためだが重たく危険なこともある String-based wireが視界をまたぐ動きに制限がある rarr腕の動きに制限を与えない安全 技術や手法のキモ 「FlexTorque」人間の筋肉の構造を再現するベルトとモーターを使用する肩の近くに装着することで

腕に負担がかかりにくい 触覚feedback弱いトルク 運動を支援強いトルク 課題 物理的な接触を表現するゲームやスポーツにより没頭させるリハビリのサポートをする視覚障害者の支援（ものの場所を教える） 関連論文 FlexTorque [Dzmitry et al 2010]

20150522 橋爪智 2 鬼

Perception of Ultrasonic Haptic Feedback on the Hand Localisation and Apparent Motion13

Graham Wilson Tom Carter Sriram Subramanian Stephen Brewster13

どのようなものか 超音波を用いた触覚フィードバック有効性の検討を行う 先行研究と比べてどこがすごいか 超音波触覚フィードバックは比較的新しく研究や操作方法に関する知識が少ない 腕を自由に動かすことができ小さいものは着用可能 技術や手法のキモ 88のアレイ状に超音波発生器を設置

有効性の確認 bull  局所的な触感 　　　25箇所に分割しそれぞれに超音波を当てる 　　　触感を感じた989 　　　場所の誤差85mm bull  手のひらを動く触感 上下左右に動く 　　　動いてると感じた629

20150522 橋爪智 2 鬼

Friction Measurements on a Large Area TPaD13Nicholas D Marchuk J Edward Colgate Michael A Peshkin13

どのようなものか 超音波の振動により触感を与える 先行研究と比べてどこがすごいか ガラス板を使うので透明後ろにディスプレイを配置可能 技術や手法のキモ 「Squeeze Film Effect（スクイズ膜効果）」 ガラス板に取り付けた圧電素子の円盤に高周波信号

をかける 実験 振動しない部分＝摩擦が発生しない部分が発生周波数により場所が変わる rarr摩擦を大きさをかける力の大きさから計測 rarr指の場所に合わせて複数の周波数を使い分ける 関連論文 T-PaD[Winfield et al 2007]

20150522 橋爪智 2 鬼

STIMTAC a Tactile Input Device with Programmable Friction13Michel Amberg Freacutedeacuteric Giraud Betty Semail Paolo Olivo Geacutery Casiez Nicolas Roussel13

どのようなものか 触感を与えられるタッチデバイス 先行研究と比べてどこがすごいか LATPaD サイズ大きいノイズが大きい TeslaTouch 高い電圧付加が必要GNDに接続しなければいけない

技術や手法のキモ 「Squeeze Film Effect」超音波を用いて振動を与える 圧電性セラミックを電極にコーディング 指トラッキングは力センサを用いる 活用法 マウスキーボード絵を描く 関連論文 LATPaD[Vincent et al 2011] TeslaTouch[Bau et al 2010]

20150522 橋爪智 2 鬼

Surround Haptics Tactile Feedback for Immersive Gaming Experiences Ali Israr Seung-Chan Kim Ivan Poupyrev Jan Stec13

どのようなものか ゲームに合わせて高解像度の触覚フィードバックをユーザーに与える椅子 先行研究と比べてどこがすごいか 荒く配置した安価な振動アクチュエータで高解像度の触覚フィードバックを行える 一点の振動連続した動き範囲の振動などを再現

技術や手法のキモ 仮想的な振動アクチュエータをいくつかの振動アクチュエータを使って作り出す physical-physicalphysical-virtualvirtual-virtual ゲームにHaptics Engineを導入しHaptics APIを用いてHaptic Displayを操作する 関連論文 Exploring Surround Haptics Displays[Israr et al 2010]

20150522 橋爪智 2 鬼

Audio-Haptic Feedback in Mobile Phones Angela Chang Conor OrsquoSullivan13

どのようなものか haptics機能のついてない携帯電話にオーディオ機能を利用した触覚フィードバックを追加する 先行研究と比べてどこがすごいか 簡単に作れてnon-haptic mobile devicesでも大丈夫 技術や手法のキモ 「MultiFunction Transducer(MFT)」 スピーカーから音と信号の両方を出力できる

bull  Haptic Inheritance 　　音を2つの周波数帯に分ける bull  Synthesis and Matching 　　低周波数帯(20-300Hz)を使い触感を伝える 有効性の検討 42人の人を対象に実験を行う83の人が触感を感じた

20150522 橋爪智 2 鬼

Resolution of Sleep Deprivation Problems using ZZZoo Pillows13Shunsuke Yanaka Motoki Ishida13

どのようなものか 近年不眠症の人が多い rarr誰かと接していると安心し睡眠に導入しやすくなる rarrまるで添い寝をしているようなリアルな抱きまくらを使う 技術や手法のキモ breathing sensation 風船を使って人の呼吸を再現肺の形の風船弱く長い呼吸をする

heating お湯を使って人の体温を再現45 有効性の確認 84人の人が実験 呼吸が睡眠を誘ったかrarr61 体温が睡眠を誘ったかrarr85 関連論文 The Impact of Sleep Disorders on Social Life[Komada et al 2007]

20150522 橋爪智 2 鬼

まとめ13超音波 モーター 風

20150522 橋爪智 2 鬼

コイル 電気刺激 Electrovibration

振動 音 お湯

なかの

Temporally Consistent Disparity and Optical Flow via Efficient Spatio-temporal Filtering1

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示した

議論論はあるか

時間的に一定の視差を算出する手法静止画ステレオよりも精度度が良良いことを示す従来よりも推定精度度が良良いオプティカルフローも算出する

一枚の静止画に対するフィルタリング[1]をステレオ動画に拡張している

ケンブリッジのステレオ動画のデータセットを利利用 実写動画に対する比較も行行うノイズ耐性も検証する

フィルタベースとエネルギーベースの関係性を良良り理理解することで推定精度度を上げる

実装が簡単でリアルタイム視差推定が可能

Fast Cost-Volume Filtering for Visual Correspondence and Beyond [Rhemann C Hosni A Bleyer M Rother C Gelautz M CVPR2011] Real-time Spatiotemporal Stereo Matching Using the Dual-Cross-Bilateral Grid [Richardt C Orr D Davies I Criminisi A Dodgson NA ECCV2010] Secrets of optical flow estimation and their principles [Sun D Roth S Black MJ 2010] Motion estimation with non-local total variation regularization [Werlberger M Pock T Bischof H CVPR2010] Temporally Consistent Disparity Maps from Uncalibrated Stereo Videos [Bleyer M Gelatuz M ISPA2011]

なかの

SymStereo Matching using Induced Symmetry (2014)2

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示した

議論論はあるか

画像の対称性を用いてステレオマッチングを行行う 左右の画像を反転させて重ね合わせることで対称性を測る

絵的な類似の代わりに対称性を使う今まで対称性を用いる手法はなく新規性が大きい

三つのSymmetry-baseの手法で精度度を検証従来手法よりも精度度が向上しているMiddlebury Oxford Corridorfountain-P11のデータセット使用

ステレオの問題である不不連続な箇所オクルージョン部分は未解決である演算時間はやや増加

1-Dラインのコストを考える今までは撮像面に対して平行行な平面でデプスを考えていたが垂直な平面を考える

BT[Birchfield and Tomasi 1998] Census transform[Zabih and Woodfill 1994] Log N[Kovesi 1997] radio-metoric differences[Hirschmuller Scharstein 2009]

なかの

Camouflaging an Object from Many Viewpoints3

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

多くの視点から三次元の物体をカモフラージュするカモフラージュによってオクルージョン部分の不不連続がどの程度度生じるか他の視点ではどれほどになるかの検証

MRF（Markov Random Fields）ベース

新しい三次元物体のカモフラージュモデルを構築 37種類のデータセットを作る

箱形の物体に対してカモフラージュ処理理を施し 結果を評価する

オクルージョン不不連続テクスチャの歪みが問題 照明や画像の貼りつけに制限あり

なかの

Aliasing Detection and Reduction in Plenoptic Imaging4

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

カメラアレイ撮影の角度度のエイリアシングを除去するエイリアシングの探索索と打ち消しを行行う

周波数領領域ではなく空間領領域で探索索を行行う

先行行研究がフィルタデモザイキング再パラメータ調整などの前処理理でエイリアシング除去を行行うのに対しエイリアシング探索索後にリフォーカスの段階でエイリアシングを取り除く

8times8の平行行カメラアレイで検証するカメラ間の 基線長は70mm

今回は基線長が長いデータセットを使った 次はLytroなどのマイクロレンズアレイで検証する

Globally consistent multi-label assignment on the ray space of 4d light fields [S Wanner C Straehle B Goldluecke CVPR2013] Lineassisted light field triangulation and stereo matching [Z Yu X Guo H Lin A Lumsdaine J Yu ICCV 2013]

なかの

Globally Consistent Multi-Label Assignment on the Ray Space of 4D Light Fields5

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

四次元ライトフィールドの光線情報において マルチラベルの領領域分割を行行う

深度度情報光線情報を用いて領領域分割することで 二次元（空間）情報だけでは分割が難しかった 領領域を分割可能とする

The light field camera Extended depth of field aliasing and superresolution [T Bishop P Favaro IEEE Transactions on Pattern Analysis and Machine Intelligence 2012]

なかの

Line Assisted Light Field Triangulation and Stereo Matching6

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

光線情報を利利用してステレオマッチングの精度度を 向上させる手法三角測量量の誤差を減らす

Light Field Stereo Matchingとかいう手法 グラフ構造を作成

Variational light field analysis for disparity estimation and super-resolution [S Wanner and B Goldlumluecke 2013]

なかの

Adaptive stereo similarity fusion using confidence measures 20157

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

ステレオマッチングの新しい方式fusion weightsを提案複数の手法を組み合わせてコスト計算を行行う手法付録に既存手法のコスト関数一覧あり

パラメータに依存する手法を用いないことで高速化を図っている

一つのアルゴリズムでは異異なる特性を持つ領領域全てに対して適切切なマッチングはできない複数を組み合わせることでそれを補う13種と多い

middleburyとKITTIのデータセットで評価

一枚あたり03sと高速だが001sとより高速なアルゴリズムが存在する

Segment-based stereo matching using belief propagation and a self-adapting dissimilarity measure [A Klaus M Sormann K Karner ICPR2006] On building an accurate stereo matching system on graphics hardware [X Mei X Sun M Zhou S Jiao H Wang X Zhang ICCV2011] Similarity measures for depth estimation [K Wegner O Stankiewicz 3DTV-CON2009] On accurate dense stereo-matching using a local adaptive multi-cost approach [C Stentoumis L Grammatikopoulos I Kalisperakis G Karras ISPRS2014] A quantitative evaluation of confidence measures for stereo vision [X Hu P Mordohai PAMI2012]

なかの

SIMILARITY MEASURE FOR DEPTH ESTIMATIOM 20098

どんなもの

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

4種類の視差推定アルゴリズムを組み合わせている 類似度度の選択性の解析

Belief Propagationの枠組みを用いる

名古屋大学の多視点データベースを利利用

HHI Test Material for 3D Video [I Feldmann M Muller F Zilly R Tanger A SmolicP Kauff T Wiegand 2008] Multiview Video Test Sequence and Camera Parameters [Yo-Sung Ho Eun-Kyung Lee and Cheon Lee 2008] 1D Parallel Test Sequences for MPEG-FTV [M Tanimoto T Fujii N Fukushima 2008] Non-parametric Local Transforms for Computing Visual Correspondence [R Zabih J Woodfill 1994]

なかの

Spatiotemporal Stereo via Spatiotemporal Quadric Element (Stequel) Matching9

どんなもの

技術や手法のキモはどこ

新しいマッチング手法を提案動き考慮することなく時間情報を取り込むことができる 時間方向のエピ線を考える

オプティカルフロー推定は3D境界や低テクスチャで弱いが提案手法はロバストである

なかの

Depth Video Enhancement Based on Weighted Mode Filtering10

どんなもの

議論論はある

ノイズを含んだ低解像度度のデプスマップの質を高める手法（超解像度度とデノイズ）時間方向も使用簡単なオプティカルフローを計算し利利用する

非反復復アルゴリズムのためGPUに載せやすく高速化が考えられる

なかの

Fast Bilateral-Space Stereo for Synthetic Defocus11

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

議論論はある

次に読むべき論論文は

高速な自由焦点ぼけ画像の作成

Bilateral-spaceを提案

従来研究よりも10から100倍速くぼけ具合の精度度も良良い

ぼけを作成するというアプリケーションに利利用する距離離という面では提案手法が有益であるが実測的な距離離という面での精度度は悪い背景と前景が同じ色で近くにある場合同一ととらえてしまう

Efficient high-resolution stereo matching using local plane sweeps [S N Sinha D Scharstein and R SzeliskiCVPR2014] Bilateral filtering-based optical flow estimation with occlusion detection [J Xiao H Cheng H Sawhney C Rao and M IsnardiECCV2006] Efficient nonlocal regularization for optical flow [P Krumlahenbumluhl and V KoltunECCV2012] Real-time spatiotemporal stereo matching using the dual-cross-bilateral grid [C Richardt D Orr I Davies A Criminisi and N A DodgsonECCV2010]

どうやって有効性を示した視差推定の精度度はmiddleburyKITTI

なかの

Robust Spatiotemporal Stereo for Dynamic Scenes12

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

ステレオ動画のフレーム間情報を取り入れることでノイズ耐性を向上させるまた動きの大きなものも考える

時間を含めたウインドウの提案自動的にそのような変化に対応する画像領領域を検出する

従来の時空間ステレオと比べ大きな動きによる急激な視差の時間変化に対して頑健である

なかの

Spacetime Stereo A Unifying Framework for Depth from Triangulation13

どんなもの

先行行研究と比べてどこがすごい

space time stereoを提案ステレオカメラの視差推定でも構造光を用いた視差推定でも利利用可能 動的なシーンでの利利用も可能

フレームごとマッチングを取っていたが複数フレームでのマッチングを可能とした

なかの

Learning to Select and Order Vacation Photographs (Disney research)14

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示したあまりにもたくさん撮影した写真たちから自動的にフォトアルバムを作成する研究

複雑な視覚での区別を試みたのはこの論論文が初

５つの異異なるトピックから63の個人的な写真コレクションのデータセットを利利用し定量量的に評価する

写真間の差別かを定義する顔全体の絵何が写っているか写っていないかを評価する

Jointly aligning and segmenting multiple web photo streams for the inference of collective photo storylines [G Kim and E P Xing CVPR2013] Photo sequencing [T Basha Y Moses and S Avidan CVPR2012]

なかの

A Taxonomy and Evaluation of Dense Two-Frame Stereo Correspondence Algorithms15

どんなもの

どうやって有効性を示した

次に読むべき論論文は

ステレオマッチングに関する分類を行行う 新たなデータセットを作成する

というよりも他の手法が有効性を示すことができるようにデータセットを作成した 今ではmiddleburyのデータセットと言えばステレオ業界では超有名

High-resolution stereo datasets with subpixel-accurate ground truth

なかの

Discriminability Limits in Spatio-Temporal Stereo Block Matching1

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

spatio-temporal disparity estimationの根本的な前提の正当性を解析しマッチング処理理の際に動きが助けとなる程度度を決定する

時空間マッチングのエラーを分析し誤りの原因を確率率率で導出する（フレーム数動きの分散画像特徴ノイズの関数）

[34243334]は時空間マッチングの利利点を指摘していたが本論論文はマッチング精度度の向上のために動きを用いる手法の程度度や性質を研究する

6つのステレオビデオを用いて検証を行行った

Spacetime stereo Shape recovery for dynamic scenes [L Zhang B Curless and S Seitz CVPR2003] Spatiotemporal stereo and scene flow via stequel matching [M Sizintsev and R Wildes PAMI2012] Temporally consistent disparity and optical flow via efficient spatio-temporal filtering [A Hosni C Rhemann M Bleyer and M Gelautz PRCAIVT2012] Spacetime stereo A unifying framework for depth from triangulation [PAMI2005] Dynamic depth recovery from multiple synchronized video streams [H Tao H Sawhney and R Kumar CVPR2001] Spatiotemporal descriptor for wide-baseline stereo reconstruction of non-rigid and ambiguous scenes [ECCV2003]

なかの

Depth-Based Patch Scaling for Content-Aware Stereo Image Completion2

どんなもの

どうやって有効性を示した

ステレオでデプスを取り物体の三次元情報を使ってインペインティングを行行う

bookのデータセット背景が繰り返しパターンが多いものを使っている

なかの

Fast Semi-dense Surface Reconstruction from Stereoscopic Video in Laparoscopic Surgery3

どんなもの

手法の流流れ

次に読むべき論論文は

腹腔内手術の際にステレオビデオから高速に物体の三次元再構成を行行う研究

Evaluation of stereo matching costs on images with radiometric differences [Hirschmueller H Scharstein D PAMI2008]

スコープカメラから画像取得GPUで演算する 視差を算出しフィルタにかける距離離に変換 点群を再びフィルタにかけて三次元再構成

なかの

3D Reconstruction from Accidental Motion4

どんなもの

技術や手法のキモはどこ

議論論はある

数秒のビデオ（単眼）から三次元再構成を行行う 手ぶれなどの動きから再構成が可能で特定の動きや機材を必要としない

短い基線長でも再構成が可能（3mmの基線長）

基線長が短いため背景の精度度が低くなる リフォーカス画像作成には十分 練習では上手く動作したが検証がまだ必要

なかの

Panoramic Video from Unstructured Camera Arrays5

どんなもの

技術や手法のキモはどこ

議論論はある

複数のカメラを用いたパノラマ撮影を行行う その際に不不自然さがないような動画を作成する

不不自然さを感じる感覚特性を提示しそれにのっとって対策を講じている

一つのカメラの解像度度と品質を向上させるよりも複数台のカメラを組み合わせることがはるかに簡単で有益である専門家でなくてもGoProのカメラセットを組み合わせることは容易易

カメラの配置は厳密に決められていない完璧な時間同期やローリングシャッターの不不足のような実撮影での問題もクリアしている

先行行研究と比べてどこがすごい

どうやって有効性を示した左のシステムは14台のカメラを使用 右のシステムはGoProを5台使用

Disney 201558

なかの

Floating Scale Surface Reconstruction6

どんなもの

技術や手法のキモはどこ

流流動的にスケールを変えられる三次元再構成手法

サンプル規模に依存するパラメータがない rarrどのスケールのサンプルにも対応できる

siggraph2014

なかの

A Super Resolution Reconstruction Scheme for Mixed Spatio-Temporal Stereo Video7

どんなもの

技術や手法のキモはどこ

ビデオ超解像アルゴリズム

二台のカメラを使用 一台は低解像度度で高速一台は高解像度度で低速

HHI 3DV ftp siteのBookarrivalとbeergadenを使用どうやって有効性を示した

なかの

What Is a Good Day for Outdoor Photometric Stereo8

どんなもの

先行行研究と比べてどこがすごい

議論論はある

次に読むべき論論文は

屋外における照度度差があるステレオの研究 屋外でステレオを行行う際に有利利or不不利利な日照条件を明らかにする

点光源を用いた研究は行行われていたが屋外での研究はされていなかった

晴れより曇りの方が精度度が良良い雲があるから特徴量量を取りやすい雑音を白色ガウスモデルを想定 季節ごとのデータセットを利利用してみても良良い

Time-lapse photometric stereo and applications [F Shen K Sunkavalli N Bonneel S Rusinkiewicz H Pfisterand X Tong2014] Outdoor photometric stereo [L-F Yu S-K Yeung Y-W Tai D Terzopoulos and T FChan ICCP2013]

どうやって有効性を示した屋外の照明に関するHDR環境マップのデータベースを利利用

Disney 2015424

なかの

COLORBRUSH ANIMATED DIFFUSION FOR INTUITIVE COLORIZATION SIMULATING WATER PAINTING 9

どんなものアニメを水彩画で描いたように変換する 水彩画を描くには経験が必要であるがそれを作成するアルゴリズムを考案絵具が水によりどうにじむかシュミレーションしている

Disney 20141027 ICIP2014

次に読むべき論論文はGabor-space geodesic active contoursrdquo In Algebraic Frames for the Perception-Action Cycle [C Sagiv NA Sochen and YY Zeevi 2000] Practical temporal consistency for image-based graphics applications [M Lang O Wang T Aydin A Smolic and M Gross SIGGRAPH2012] Computer-Generated Watercolor [CJ Curtis SE Anderson JE Seims KW Fleischer and DH Salesin SIGGRAPH1997]

なかの

From Sound to Sight Using Audio Processing to enable Visible Light Communication 10

どんなもの光に情報を載せる技術プロジェクトページがあって光関係の研究が8個載っている

httpwwwdisneyresearchcomprojectvisible-light-communication

ビデオのURL httpwwwdisneyresearchcomwpcontentuploadsPub_InvisibleLightCommunication_Siggraph14_videomp4

• 201211106_KeisukeKawahara
• 201311421_KeitaKanai_02
• 201313095_AkiraIshii_02
• 201413109_YuukiKubo_02
• 201513110_SatoshiHashizume_02
• 鬼輪講マラソン③_1
• 鬼輪講マラソン③_2

2 201313095

Muehlbaueretal[24]

SVM

114 94 3020

9599 4 98 7 96 13

93

bull  MuehlbauerMBahleGLukowiczPWhatcananarmholsterwornsmartphonedoforacEvityrecogni-EonProcIEEEISWC2011

RecoFitampUsingampaampWearableampSensoramptoampFindampRecognizeampandampCountampRepeEEveampExercisesamp(CHIrsquo14)

DanMorrisTSco]SaponasAndrewGuilloryIlyaKelner

h]pswwwyoutubecomwatchv=zpa4rVGlO68

2 201313095

2

31 2

15-20 90-95

Hambone

bull  BAmentoWHillandLTerveenThesoundofonehandawrist-mountedbio-acousEcfingerEpgestureinterfaceInCHIrsquo02CHIrsquo02extendedabstractsonHumanfactorsincompuEngsystemspages724ndash725NewYorkNYUSA2002ACMPress

HamboneampAampBioAcousEcampGestureampInterfaceamp(ISWCrsquo07)

TravisDeyleSzabolcsPalinkoErikaShehanPooleandThadStarner

h]pswwwyoutubecomwatchv=Uxj-vyal84M

2 201313095

bull  RabinerLR(1989)ATutorialonHiddenMarkovModelsandSelectedApplicaEonsinSpeechRecogni-EonProcIEEEVol77257-28

TheampSoundampofampOneampHandampAampWristmountedampBioacousEcampFingerEpampGestureampInterfaceamp(CHIrsquo02)

BrianAmentoWillHillLorenTerveen

2 201313095

Non-linearSpaEalSampling

SVM

12

948

15cm

bull  NakatsumaKShinodaHMakinoYSatoKandMaenoTTouchinterfaceonbackofthehandInprocofSIGGRAPHrsquo11(2011)391ndash391

bull  ButlerAIzadiSandHodgesSSidesightmulE-touchinteracEonaroundsmalldevicesInProcofUISTrsquo08(2008)201ndash204

zSenseampEnablingampShallowampDepthampGestureampRecogniEonampforampGreaterampInputampExpressivityamponampSmartampWearablesamp(CHIrsquo15)

AnushaWithanaRoshanPeirisNipunaSamarasekaraSurangaNanayakkara

h]pswwwyoutubecomwatchv=fQobwL8eSU4

2 201313095

bull  HARRISONCTANDANDMORRISD2010Skinputap-propriaEngthebodyasaninputsurfaceInProceedingsofthe28thinternaEonalconferenceonHumanfactorsincompuEngsystemsACMNewYorkNYUSACHIrsquo10453ndash462

Touchampinterfaceamponampbackampofamptheamphandamp(SIGGRAPH11)

KeiNakatsumaHiroyukiShinodaYasutoshiMakinoKatsunariSatoTakashiMaeno

h]pswwwyoutubecomwatchv=tKNLxh9Yw2M

2 201313095

Pose-IO EMS

Pose-IO

EMS

EMS58deg

46 5 be]er

bull  RoudautARauASterzCPlauthMLopesPandBaudischPGestureoutputeyes-freeoutputusingaforcefeedbacktouchsurfaceProcCHI1325472556

PropriocepEveampInteracEonamp(CHIrsquo15)amp

PedroLopesAlexandraIonWilliMuellerDanielHoffmannPatrikJonellPatrickBaudisch

h]pswwwyoutubecomwatchv=KMxIw7zhlw

2 201313095

EMS

AR EMSEMS

GPS

bull  TamakiEMiyakiTandRekimotoJPossessedHandAhandgesturemanipulaEonsystemusingelectricalsEmuliInProcampAHrsquo10amp(2010)21ndash25

CruiseampControlampforampPedestriansampControllingampWalkingampDirecEonampusingampElectricalampMuscleampSEmulaEonamp(CHIrsquo15)amp

MaxPfeifferTimDunteStefanSchneegassFlorianAltMichaelRohs

h]pswwwyoutubecomwatchv=JSfnm_HoUv4

2 201313095

EMS

EMS

EMS 16automaEccalibraEonsystem

auto-calibraEonsystems 16

8875g

bull  KruijffESchmalsEegDandBeckhausSUsingneuromuscularelectricalsEmulaEonforpseudo-hapEcfeedbackInProceedingsoftheACMsymposiumonVirtualrealitysoywareandtechnologyVRSTrsquo06ACM(NewYorkNYUSA2006)316ndash319

PossessedHandampTechniquesampforampControllingampHumanampHandsampusingampElectricalampMusclesampSEmuliamp(CHIrsquo11)amp

EmiTamakiTakashiMiyakiJunRekimoto

h]psvimeocom27044937

2 201313095

EMS

EMS

RFIDEMS

1276

bull  KruijffESchmalsEegDandBeckhausDUsingneuromuscularelectricalsEmulaEonforpseudo-hapEcfeedbackProcVRST06316mdash319

Affordance++ampallowingampobjectsamptoampcommunicateampdynamicampuseamp(CHIrsquo15)

PedroLopesPatrikJonellPatrickBaudisch

h]pswwwyoutubecomwatchv=d0J7V37zQjY

2 201313095

EMS

EMS

EMS

ReacEonloss

EMS

UsingampNeuromuscularampElectricalampSEmulaEonampforampPseudoHapEcampFeedbackamp(VRSTrsquo06)

ErnstKruijffDieterSchmalsEegSteffiBeckhaus

2 201313095

SVM

106 Per-User

863 13

712

13

bull  SatoMPoupyrevIandHarrisonCToucheenhancingtouchinteracEononhumansscreensliquidsandeverydayobjectsInCHIrsquo12483ndash492

bull  TimCollinsAcEveacousEctouchinterfaceElectronicsLe]ersVol45No20pp1055ndash1056242009

TouchampampampAcEvateampAddingampInteracEvityamptoampExisEngampObjectsampusingampAcEveampAcousEcampSensingamp(UISTrsquo13)

MakotoOnoBuntarouShizukiJiroTanaka

h]pswwwyoutubecomwatchv=XgxXi6w8IQc

2 201313095

13

13

SVM

on-body

per-user 5 967 4987

bull  HarrisonCBenkoHWilsonAOmniTouchwearablemulEtouchinteracEoneverywhereinUIST11441-450

bull  MatsushitaNandRekimotoJHoloWalldesigningafingerhandbodyandobjectsensiEvewallUIST97209-210

ToucheampEnhancingampTouchampInteracEonamponampHumansampScreensampLiquidsampandampEverydayampObjectsamp(CHIrsquo12)

MunehikoSatoIvanPoupyrevChrisHarrison

h]pswwwyoutubecomwatchv=E4tYpXVTjxA

2 201313095

SVM

9 9TapSense 4

95 99

TapSenseDelete

bull  HarrisonCTanDandMorrisDSkinputappropriat-ingthebodyasaninputsurfaceInProcCHI10453-462

TapSenseampEnhancingampFingerampInteracEonamponampTouchampSurfacesamp(UISTrsquo11)

ChrisHarrisonJuliaSchwarzSco]EHudson

h]pswwwyoutubecomwatchv=-oN96cucBr4

2 201313095

13

13

22 SVM

13 FingersWholeArmForearm 876 Fingers877 WholeArm 955

883 Forearm 815

833

GUI

bull  SaponasTSTanDSMorrisDandBalakrishnanRDemonstraEngthefeasibilityofusingforearmelectromyographyformuscle-computerinterfacesInProcCHIrsquo09515-24

SkinputampAppropriaEngamptheampBodyampasampanampInputampSurfaceamp(CHIrsquo10)

ChrisHarrisonDesneyTanDanMorris

h]pswwwyoutubecomwatchv=g3XPUdW9Ryg

2 201313095

Fiberio

10 330 150

148 2

Fiberio

bull  MatsushitaNandRekimotoJHoloWallDesigningaFingerHandBodyObjectSensiEveWallProcUIST97209ndash210

FiberioampAampTouchscreenampthatampSensesampFingerprintsamp(UISTrsquo13)

ChrisEanHolzPatrickBaudisch

h]pswwwyoutubecomwatchv=p1a5yLzuTqA

2 201313095

3D

3D

bull  GeigerMVollertsenFTheMechanismsofLaserFormingCIRPANNALSlsquo93421301-304

bull  WillisKDDXuCWuJKLevinGGrossMDInteracEvefabricaEonnewinterfacesfordigitalfabricaEonProcTEI11pp69-72

LaserOrigamiampLaserCugngamp3DampObjectsamp(CHIrsquo13)

StefanieMuellerBasEanKruckPatrickBaudisch

h]pswwwyoutubecomwatchv=arjRtCjI9AQ

2 201313095

bend

bull  HyunyoungSongFranccediloisGuimbreEegravereChangHuHodLipsonModelCraycapturingfreehandannotaEonsandeditsonphysical3DmodelsProceedingsofthe19thannualACMsymposiumonUserinterfacesoywareandtechnologyOctober15-182006MontreuxSwitzerland

InteracEveampConstrucEonampInteracEveampFabricaEonampofampFuncEonalampMechanicalampDevicesamp(UISTrsquo12)

StefanieMuellerPedroLopesPatrickBaudisch

h]pdlacmorgcitaEoncfmid=23801162380191

2 201313095

3D

3D

bull  SavageVSchmidtRGrossmanTFitzmauriceGandHartmannBAseriesoftubesAddinginteracEvityto3dprintsusinginternalpipesInProcUIST14(2014)

3DampPrinEngampPneumaEcampDeviceampControlsampwithampVariableampAcEvaEonampForceampCapabiliEesamp(CHIrsquo15)amp

MarynelVazquezEricBrockmeyerRutaDesaiChrisHarrisonSco]EHudson

h]pswwwyoutubecomwatchv=-4gFYvhkz0Y

2 201313095

OpenFab 3D

fablets

3 3

bull  CHENDMATUSIKWSITTHI-AMORNPDIDYKPANDLEVIND2013Spec2FabAreducer-tunermodelfortranslat-ingspecificaEonsto3DprintsACMTransGraph324(July)

OpenFabampAampProgrammableampPipelineampforampMulEMaterialampFabricaEonamp(SIGGRAPHrsquo13)

KirilVidimcˇeSzu-PoWangJonathanRagan-KelleyWojciechMatusik

2 201313095

3D

3D

3D

3D14 30 13 67

244

14

3D

bull  MuellerSKruckBBaudischPLaserOrigamiLaser-Cunng3DObjectsProcCHIrsquo132585-2592

faBrickaEonampFastamp3DampPrinEngampofampFuncEonalampObjectsampbyampIntegraEngampConstrucEonampKitampBuildingampBlocksamp(CHIrsquo14)amp

StefanieMuellerTobiasMohrKersEnGuentherJohannesFrohnhofenPatrickBaudisch

h]pswwwyoutubecomwatchv=BlO6YRcLJjE

Touching13 the13 Void13 Direct-shy‐Touch13 Interac4on13 for13 Intangible13 Displays(CHIrsquo10)Li-Wei Chan Hui-Shan Kao Mike Y Chen Ming-Sui Jane Yi-Ping Hung

201413109　久保勇貴 2（鬼コース）13

どんなもの13

空中像へのタッチのエラーに関する調査及び影や音のフィードバックを付与することによるパーフォーマンス向上を示した研究13

先行研究と比べてどこがすごい13

平面画像をタッチする際の奥行きに関するエラーの正確な取得を初めて検証13

技術や手法のキモはどこ13

２つの赤外線カメラを用いた正確なタッチの検出13

どうやって有効だと検証した13

タッチ時の奥行きの正確さに関する被験者実験を実施またタッチする際に影や音を付けた際の反応時間を被験者実験で検証13

議論はある13

ユーザは慣れるまで影や音のフィードバックが必要だがそのあとは必要なくなる13

次に読むべき論文は13

MirageTable13 （CHI12） 13

MirageTable13 Freehand13 Interac4on13 on13 a13 Projected13 13 Augmented13 Reality13 Tabletop(CHIrsquo12)

Hrvoje Benko Ricardo Jota Andrew D Wilson

201413109　久保勇貴 2（鬼コース）13

どんなもの13

テーブル上においてバーチャルな物体をリアルタイムで現実でものを動かすことと同様な動作に操作可能なシステム13

先行研究と比べてどこがすごい13

現実の物体をリアルタイムで画面に取りこむことができ質の高いフリーハンドインタラクションを実現した点13

技術や手法のキモはどこ13

色深度前景頭追跡プロキシパーティクルを駆使したリアルタイムメッシュの作成13

どうやって有効だと検証した13

凹凸など例外な表面に対しての投影した際の画像の質についての評価実験また仮想物体の奥行き知覚に関する実験も行った13

議論はある13

前面のみしかキャプチャしていないため差が生じる握っている場所の再現は未解決な課題である13

次に読むべき論文は13

Hirsch13 et13 al13 201413 (SIGGRAPHrsquo14)13

A13 Compressive13 Light13 Field13 Projec4on13 System13 (SIGGRAPHrsquo14)MaChew13 Hirsch13 Gordon13 Wetzstein13 Ramesh13 Raskar

201413109　久保勇貴 2（鬼コース）13

どんなもの13

通常の3Dディスプレイに比べて解像度輝度コントラストを改善した圧縮ライトフィードディスプレイ13

先行研究と比べてどこがすごい13

多視点立体視を複数でなく１台のプロジェクタを用いて実現した13

技術や手法のキモはどこ13

受動的スクリーンと高速切り替えプロジェクタによる新しい光学設計13

どうやって有効だと検証した13

4つのシーン例を投影したものを示したアニメーションの3D効果について観察を行った13

議論はある13

光路長を広げると観察できる画質が大幅に制限され他のライトフィードビューと混線が生じる13

次に読むべき論文は13

Butler13 et13 al13 201113

Vermeer13 Direct13 Interac4on13 with13 a13 360deg13 Viewable13 3D13 Display(UISTrsquo11) Alex Butler Otmar Hilliges Shahram Izadi Steve Hodges David Molyneaux David Kim

201413109　久保勇貴 2（鬼コース）13

どんなもの13

映し出された3Dオブジェクトとインタラクションを行えるシステム13

先行研究と比べてどこがすごい13

ディスプレイ内の画像とのインタラクションを提案ボリュームディスプレイを支援する新しいセンシング法の提案13

技術や手法のキモはどこ13

パラボラ鏡に取り付けた赤外線カメラセンサによる指先検出13

どうやって有効だと検証した13

アプリケーション例を示した13

議論はある13

パラボラ鏡の大きさよりもディスプレイサイズが小さくなってしまう13

次に読むべき論文は13

Hirsch13 et13 al13 201213

8D13 Interac4ng13 with13 a13 Relightable13 Glasses-shy‐Free13 3D13 Display(CHIrsquo12)Li-Wei Chan Hui-Shan Kao Mike Y Chen Ming-Sui Jane Yi-Ping Hung

201413109　久保勇貴 2（鬼コース）13

どんなもの13

ライトフィードによる入力とライトフィールドによる表示を行うリアルタイム8Dディスプレイ13

先行研究と比べてどこがすごい13

リアルタイムでの8Dディスプレイの実現（先行研究は7fps）13

技術や手法のキモはどこ13

GPUにおけるレンダリング処理13

どうやって有効だと検証した13

MRIデータを用いたディスプレイのデモを示した13

議論はある13

現在はグレースケールの入力のみだがカラーでの入力できればより強力になるだろう13

次に読むべき論文は13

Sahoo13 et13 al13 201513

Control13 of13 Non-shy‐Solid13 Diffusers13 by13 Electrosta4c13 Charging13 (CHIrsquo15) Deepak Ranjan Sahoo Diego Martinez Plasencia Sriram Subramanian

201413109　久保勇貴 2（鬼コース）13

どんなもの13

シャボン玉や霧などの非固体を電場による制御を試みた研究13

先行研究と比べてどこがすごい13

非固体の形や位置の制御法を提案した点13

技術や手法のキモはどこ13

[Intra13 et13 al13 11]中のldquowire-shy‐to-shy‐Cylinderdquoを用いたエアゾール粒子の帯電13

どうやって有効だと検証した13

霧及びシャボン玉によるディスプレイのアプリケーション例で実際に制御して見せた13

議論はある13

風による影響を本手法は打ち消すことができた13

次に読むべき論文は13

Barnum13 et13 al13 201013

A13 Mul4-shy‐Layered13 Display13 with13 Water13 Drops(SIGGRAPHrsquo10)Peter C Barnum Srinivasa G Narasimhan Takeo Kanade

201413109　久保勇貴 2（鬼コース）13

どんなもの13

複数層の落下水滴にプロジェクションマッピングを行いディスプレイとした研究13

先行研究と比べてどこがすごい13

水滴の制御を行うことで単一のプロジェクタによって複数層の映像投影を可能とした点13

技術や手法のキモはどこ13

[Ambravaneswaran13 et13 al13 2002]及び本研究における実験結果に基づく水滴生成13

どうやって有効だと検証した13

複数のディスプレイ例を示した13 例）顔の投影水槽シミュレータなど13

議論はある13

本当の3Dディスプレイにするにはより多くの水滴制御が必要13

次に読むべき論文は13

Lee13 et13 al13 200713

An13 Immaterial13 Depth-shy‐Fused13 3D13 Display(VRSTrsquo07)Cha Lee Stephen DiVerdi Tobias Humlollerer

201413109　久保勇貴 2（鬼コース）13

どんなもの13

２つのスクリーンを駆使し3Dディスプレイを実現するdepth-shy‐fused13 3D(DFD)に関する評価を行いその結果よりディスプレイを提案した研究13

先行研究と比べてどこがすごい13

DFDが任意のスクリーン設定及び見る位置に対して有効であることを示した13

技術や手法のキモはどこ13

６通りのスクリーン組合せから２つを抽出し見え方の違いを検証した点13

どうやって有効だと検証した13

６通りのスクリーンについて立体的に見えるか被験者実験を実施その後それぞれに有意差がみられるか調べた13

議論はある13

ステレオイメージを認めることができなかったユーザに対しても強い3D効果が見られた13

次に読むべき論文は13

Tokuda13 et13 al13 201013

Cloud13 Display13 (ACErsquo10)Yutaka Tokuda Yasuhiro Suzuki Kunihiro Nishimura Tomohiro Tanikawa Michitaka Hirose

201413109　久保勇貴 2（鬼コース）13

どんなもの13

煙の渦輪を用いた空間を埋めるディスプレイ13

先行研究と比べてどこがすごい13

制御可能な手法により高所へのパーティクルを運搬することに着目した点13

技術や手法のキモはどこ13

コンピュータによって制御が行われる空気砲アレイ13

どうやって有効だと検証した13

箱の中で実験を行い安定して渦輪をできるようにした実際にデモを行ったことを示した13

議論はある13

今の試作機をより早くリフレッシュ速度を高めることによりより濃く空間を埋められることを目指す13

次に読むべき論文は13

Sato13 et13 al13 200913

Par]cle13 Display13 System　(JVRC09)13 -shy‐13 A13 Large13 Scale13 Display13 for13 Public13 Space13 -shy‐

Munehiko13 Sato13 Yasuhiro13 Suzuki13 13 Atsushi13 Hiyama13 Tomohiro13 Tanikawa13 Michitaka13 Hirose

201413109　久保勇貴 2（鬼コース）13

どんなもの13

パーティクルディスプレイによる公共スペースのための大画面ディスプレイの提案13

先行研究と比べてどこがすごい13

公共スペースにおける要求と制限に基づいたシステムを提案した点13

技術や手法のキモはどこ13

実験に基づく表示画像のスクロール時間の制御13

どうやって有効だと検証した13

Aという文字の知覚実験によって 適な点滅周期の調査を行った13

議論はある13

現在の試作機を組合せより高解像度にする必要がある13

次に読むべき論文は13

Kwon13 et13 al13 201513

FugaciousFilm13 Exploring13 Aen4ve13 Interac4on13 with13 Ephemeral13 Material13 (CHIrsquo15)Hyosun13 Kwon13 Shashank13 Jaiswal13 Steve13 Benford13 Sue13 Ann13 Seah13

13 Peter13 BenneC13 Boriana13 Koleva13 Holger13 Schnaumldelbach

201413109　久保勇貴 2（鬼コース）13

どんなもの13

膜を押す引く飛び出ることができる新しい石鹸膜インタフェースの提案13

先行研究と比べてどこがすごい13

徐々に消えるインタフェースは高い注意を有するインタラクションを提供するという点を示したこと13

技術や手法のキモはどこ13

水グリセリンを201の対比で混ぜることでldquopoprdquoがきれいになるようにしかつ膜の耐久性を向上させた13

どうやって有効だと検証した13

３目並べを用いた被験者実験を実施13 ユーザは膜を割ると負け膜を自分のマスにするにはタッチ押す引くの書かれた通りの操作を行う13

議論はある13

ユーザに精密な動作を要求することはとりわけ注意を払うことを誘発する13

次に読むべき論文は13

Wetzstein13 et13 al13 201213

Tensor13 Displays13 Compressive13 Light13 Field13 Synthesis13 using13 Mul4layer13 Displays13 with13 Direc4onal13 Backligh4ng(SIGGRAPHrsquo12)

Gordon13 Wetzstein13 Douglas13 Lanman13 MaChew13 Hirsch13 Ramesh13 Raskar

201413109　久保勇貴 2（鬼コース）13

どんなもの13

視点によって異なる立体映像を見ることができる複数の層からなるディスプレイ13

先行研究と比べてどこがすごい13

既存の手法を合成したcomputa(onal13 displaysというディスプレイの新しいフレームワークを提案した13

技術や手法のキモはどこ13

時分割で視差マスクを表示することでユーザの視線ごとに立体像を表現する13

どうやって有効だと検証した13

通常のディスプレイ３層LCDLCD及び指向性バックライトの例による比較13 13

議論はある13

波紋を含むこと色チャンネルが悪影響を与える相互反射不均一などの問題が見られた13

次に読むべき論文は13

Matoba13 et13 al13 1213

SplashDisplay(VRICrsquo12)Yasuo Matoba Taro Tokui Ryo Sato Tochiki Sato Hideki Koike

201413109　久保勇貴 2（鬼コース）13

どんなもの13

パーティクルにCGを投射しパーティクルがテーブル上に投げられると爆発しパーティクルが噴きあがる13

先行研究と比べてどこがすごい13

ビーズがミリメートルからメートル単位までZ軸方向について空中で奥行きを表現する13

技術や手法のキモはどこ13

スピーカによって風力が発生させビーズを舞い上げる点13

どうやって有効だと検証した13

ビーズを投げると花火が打ちあがっているかのようなアプリケーション例を示した13

議論はある13

高いレベルの表現及び幅広い入力範囲を提供できた13

次に読むべき論文は13

Kim13 et13 al13 1413

MARIO13 Mid-shy‐air13 Augmented13 Reality13 Interac4on13 with13 Objects13 (ECrsquo14)Hanyuool13 Kim13 13 Issei13 Takahashi13 Hiroki13 Yamamoto13 Satoshi13 Maekawa13 Takeshi13 Naemura

201413109　久保勇貴 2（鬼コース）13

どんなもの13

350times300times250のテーブル上のスペースにおいて自由に動かせる空中像を造りだすことができる13

先行研究と比べてどこがすごい13

凹面鏡や凹レンズのように曲面でないため画像の歪曲が発生しない13

技術や手法のキモはどこ13

Aerial13 Imaging13 Plate(AIP)を用いた空中像の生成及びそのためのディスプレイ移動装置13

どうやって有効だと検証した13

左右からの視差の考慮及び奥行き表現時の画像提示視野角の検証などを行った13 13

議論はある13

投影しているひよこを叩いたり払いのけたりするような動作がデモ中見られた13

次に読むべき論文は13

Tactile Feedback on Flat Surfaces for the Visually Impaired13Ali Israr Olivier Bau Seung-Chan Kim Ivan Poupyrev13

どのようなものか 視覚障害者のための触覚を用いた視覚代用デバイス 先行研究と比べてどこがすごいか 道案内をしてくれる機械などはあるが日用品の場所を教えたり探すのを手伝ってくれるデバイスはない 技術や手法のキモ タッチパネルとカメラを搭載したデバイス 触覚を与える技術はTeslaTouchを利用 色を基準にオブジェクトの位置を認識 有用性の確認 視覚障害者二人に対して実験このデバイスを使

わなくても各自の方法で物を見つけられるが間違えることが多いこのデバイスを使用することで間違えることなく正確に物の位置を特定できた 課題 一つの色でしか判断できない 触感のあるなしでしか情報を伝えられない 関連論文 TeslaTouch [Bau et al 2010]

20150522 橋爪智 2鬼

Fingernail-Mounted Display of Attraction Force and Texture13Masataka Niwa Tomoko Nozaki Taro Maeda and Hideyuki And13

どのようなものか 指先に取り付けて触感と力を両方表現できるデバイス 先行研究と比べてどこがすごいか 触感と引力をそれぞれ表現するデバイスはあるが両方を一つのデバイスで表現した例は少ない 引力は自由な方向に付加することができる 技術や手法のキモ 偏心に重さを付けた円盤を4枚使用する 5-9Hz 引力　100-200Hz 触感 それぞれの円盤の位相や回転数を調整することで

触感と力 を表現する 4つのモータを使いそれぞれの円盤を独立して制御する 有用性の確認 4人の男性に対して実験80以上の精度で認識できた 関連論文 The nail-mounted attraction forcebump display [Nozaki et al 2008]

20150522 橋爪智 2 鬼

Gilded gait reshaping the urban experience with augmented footsteps13Yuichiro Takeuchi13

どのようなものか 靴に装着し地面の触感をコントロールするデバイス 先行研究と比べてどこがすごいか 単独で動作しなかったり特定の環境のみでしか動作しなかったりするrarr靴単体で動作環境に依存しない 技術や手法のキモ 6個の振動パネルを取り付けゲルでカバー app modulesを取り替えることができ様々な機能を付加できる（GPSsound) 4種類の地面を再現

bull  Hard Ground 振動させない bull  Soft Ground すべてのパネルを振動 bull  Bumpy Ground ジグザグに振動 bull  Godzilla 全てのパネルを振動何回か繰り返す 課題 モーターを使っているため波形をプログラミングできないrarr圧電素子を使用する 関連論文 Haptic Shoes [Fu et al 2010]

20150522 橋爪智 2鬼

ExoInterfaces novel exosceleton haptic interfaces for virtual reality augmented sport and rehabilitation

Dzmitry Tsetserukou Katsunari Sato Susumu Tachi13

どのようなものか 腕に装着し物理的なinteractionを可能にするデバイス 先行研究と比べてどこがすごいか Exoskeleton 力を増幅するためだが重たく危険なこともある String-based wireが視界をまたぐ動きに制限がある rarr腕の動きに制限を与えない安全 技術や手法のキモ 「FlexTorque」人間の筋肉の構造を再現するベルトとモーターを使用する肩の近くに装着することで

腕に負担がかかりにくい 触覚feedback弱いトルク 運動を支援強いトルク 課題 物理的な接触を表現するゲームやスポーツにより没頭させるリハビリのサポートをする視覚障害者の支援（ものの場所を教える） 関連論文 FlexTorque [Dzmitry et al 2010]

20150522 橋爪智 2 鬼

Perception of Ultrasonic Haptic Feedback on the Hand Localisation and Apparent Motion13

Graham Wilson Tom Carter Sriram Subramanian Stephen Brewster13

どのようなものか 超音波を用いた触覚フィードバック有効性の検討を行う 先行研究と比べてどこがすごいか 超音波触覚フィードバックは比較的新しく研究や操作方法に関する知識が少ない 腕を自由に動かすことができ小さいものは着用可能 技術や手法のキモ 88のアレイ状に超音波発生器を設置

有効性の確認 bull  局所的な触感 　　　25箇所に分割しそれぞれに超音波を当てる 　　　触感を感じた989 　　　場所の誤差85mm bull  手のひらを動く触感 上下左右に動く 　　　動いてると感じた629

20150522 橋爪智 2 鬼

Friction Measurements on a Large Area TPaD13Nicholas D Marchuk J Edward Colgate Michael A Peshkin13

どのようなものか 超音波の振動により触感を与える 先行研究と比べてどこがすごいか ガラス板を使うので透明後ろにディスプレイを配置可能 技術や手法のキモ 「Squeeze Film Effect（スクイズ膜効果）」 ガラス板に取り付けた圧電素子の円盤に高周波信号

をかける 実験 振動しない部分＝摩擦が発生しない部分が発生周波数により場所が変わる rarr摩擦を大きさをかける力の大きさから計測 rarr指の場所に合わせて複数の周波数を使い分ける 関連論文 T-PaD[Winfield et al 2007]

20150522 橋爪智 2 鬼

STIMTAC a Tactile Input Device with Programmable Friction13Michel Amberg Freacutedeacuteric Giraud Betty Semail Paolo Olivo Geacutery Casiez Nicolas Roussel13

どのようなものか 触感を与えられるタッチデバイス 先行研究と比べてどこがすごいか LATPaD サイズ大きいノイズが大きい TeslaTouch 高い電圧付加が必要GNDに接続しなければいけない

技術や手法のキモ 「Squeeze Film Effect」超音波を用いて振動を与える 圧電性セラミックを電極にコーディング 指トラッキングは力センサを用いる 活用法 マウスキーボード絵を描く 関連論文 LATPaD[Vincent et al 2011] TeslaTouch[Bau et al 2010]

20150522 橋爪智 2 鬼

Surround Haptics Tactile Feedback for Immersive Gaming Experiences Ali Israr Seung-Chan Kim Ivan Poupyrev Jan Stec13

どのようなものか ゲームに合わせて高解像度の触覚フィードバックをユーザーに与える椅子 先行研究と比べてどこがすごいか 荒く配置した安価な振動アクチュエータで高解像度の触覚フィードバックを行える 一点の振動連続した動き範囲の振動などを再現

技術や手法のキモ 仮想的な振動アクチュエータをいくつかの振動アクチュエータを使って作り出す physical-physicalphysical-virtualvirtual-virtual ゲームにHaptics Engineを導入しHaptics APIを用いてHaptic Displayを操作する 関連論文 Exploring Surround Haptics Displays[Israr et al 2010]

20150522 橋爪智 2 鬼

Audio-Haptic Feedback in Mobile Phones Angela Chang Conor OrsquoSullivan13

どのようなものか haptics機能のついてない携帯電話にオーディオ機能を利用した触覚フィードバックを追加する 先行研究と比べてどこがすごいか 簡単に作れてnon-haptic mobile devicesでも大丈夫 技術や手法のキモ 「MultiFunction Transducer(MFT)」 スピーカーから音と信号の両方を出力できる

bull  Haptic Inheritance 　　音を2つの周波数帯に分ける bull  Synthesis and Matching 　　低周波数帯(20-300Hz)を使い触感を伝える 有効性の検討 42人の人を対象に実験を行う83の人が触感を感じた

20150522 橋爪智 2 鬼

Resolution of Sleep Deprivation Problems using ZZZoo Pillows13Shunsuke Yanaka Motoki Ishida13

どのようなものか 近年不眠症の人が多い rarr誰かと接していると安心し睡眠に導入しやすくなる rarrまるで添い寝をしているようなリアルな抱きまくらを使う 技術や手法のキモ breathing sensation 風船を使って人の呼吸を再現肺の形の風船弱く長い呼吸をする

heating お湯を使って人の体温を再現45 有効性の確認 84人の人が実験 呼吸が睡眠を誘ったかrarr61 体温が睡眠を誘ったかrarr85 関連論文 The Impact of Sleep Disorders on Social Life[Komada et al 2007]

20150522 橋爪智 2 鬼

まとめ13超音波 モーター 風

20150522 橋爪智 2 鬼

コイル 電気刺激 Electrovibration

振動 音 お湯

なかの

Temporally Consistent Disparity and Optical Flow via Efficient Spatio-temporal Filtering1

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示した

議論論はあるか

時間的に一定の視差を算出する手法静止画ステレオよりも精度度が良良いことを示す従来よりも推定精度度が良良いオプティカルフローも算出する

一枚の静止画に対するフィルタリング[1]をステレオ動画に拡張している

ケンブリッジのステレオ動画のデータセットを利利用 実写動画に対する比較も行行うノイズ耐性も検証する

フィルタベースとエネルギーベースの関係性を良良り理理解することで推定精度度を上げる

実装が簡単でリアルタイム視差推定が可能

Fast Cost-Volume Filtering for Visual Correspondence and Beyond [Rhemann C Hosni A Bleyer M Rother C Gelautz M CVPR2011] Real-time Spatiotemporal Stereo Matching Using the Dual-Cross-Bilateral Grid [Richardt C Orr D Davies I Criminisi A Dodgson NA ECCV2010] Secrets of optical flow estimation and their principles [Sun D Roth S Black MJ 2010] Motion estimation with non-local total variation regularization [Werlberger M Pock T Bischof H CVPR2010] Temporally Consistent Disparity Maps from Uncalibrated Stereo Videos [Bleyer M Gelatuz M ISPA2011]

なかの

SymStereo Matching using Induced Symmetry (2014)2

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示した

議論論はあるか

画像の対称性を用いてステレオマッチングを行行う 左右の画像を反転させて重ね合わせることで対称性を測る

絵的な類似の代わりに対称性を使う今まで対称性を用いる手法はなく新規性が大きい

三つのSymmetry-baseの手法で精度度を検証従来手法よりも精度度が向上しているMiddlebury Oxford Corridorfountain-P11のデータセット使用

ステレオの問題である不不連続な箇所オクルージョン部分は未解決である演算時間はやや増加

1-Dラインのコストを考える今までは撮像面に対して平行行な平面でデプスを考えていたが垂直な平面を考える

BT[Birchfield and Tomasi 1998] Census transform[Zabih and Woodfill 1994] Log N[Kovesi 1997] radio-metoric differences[Hirschmuller Scharstein 2009]

なかの

Camouflaging an Object from Many Viewpoints3

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

多くの視点から三次元の物体をカモフラージュするカモフラージュによってオクルージョン部分の不不連続がどの程度度生じるか他の視点ではどれほどになるかの検証

MRF（Markov Random Fields）ベース

新しい三次元物体のカモフラージュモデルを構築 37種類のデータセットを作る

箱形の物体に対してカモフラージュ処理理を施し 結果を評価する

オクルージョン不不連続テクスチャの歪みが問題 照明や画像の貼りつけに制限あり

なかの

Aliasing Detection and Reduction in Plenoptic Imaging4

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

カメラアレイ撮影の角度度のエイリアシングを除去するエイリアシングの探索索と打ち消しを行行う

周波数領領域ではなく空間領領域で探索索を行行う

先行行研究がフィルタデモザイキング再パラメータ調整などの前処理理でエイリアシング除去を行行うのに対しエイリアシング探索索後にリフォーカスの段階でエイリアシングを取り除く

8times8の平行行カメラアレイで検証するカメラ間の 基線長は70mm

今回は基線長が長いデータセットを使った 次はLytroなどのマイクロレンズアレイで検証する

Globally consistent multi-label assignment on the ray space of 4d light fields [S Wanner C Straehle B Goldluecke CVPR2013] Lineassisted light field triangulation and stereo matching [Z Yu X Guo H Lin A Lumsdaine J Yu ICCV 2013]

なかの

Globally Consistent Multi-Label Assignment on the Ray Space of 4D Light Fields5

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

四次元ライトフィールドの光線情報において マルチラベルの領領域分割を行行う

深度度情報光線情報を用いて領領域分割することで 二次元（空間）情報だけでは分割が難しかった 領領域を分割可能とする

The light field camera Extended depth of field aliasing and superresolution [T Bishop P Favaro IEEE Transactions on Pattern Analysis and Machine Intelligence 2012]

なかの

Line Assisted Light Field Triangulation and Stereo Matching6

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

光線情報を利利用してステレオマッチングの精度度を 向上させる手法三角測量量の誤差を減らす

Light Field Stereo Matchingとかいう手法 グラフ構造を作成

Variational light field analysis for disparity estimation and super-resolution [S Wanner and B Goldlumluecke 2013]

なかの

Adaptive stereo similarity fusion using confidence measures 20157

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

ステレオマッチングの新しい方式fusion weightsを提案複数の手法を組み合わせてコスト計算を行行う手法付録に既存手法のコスト関数一覧あり

パラメータに依存する手法を用いないことで高速化を図っている

一つのアルゴリズムでは異異なる特性を持つ領領域全てに対して適切切なマッチングはできない複数を組み合わせることでそれを補う13種と多い

middleburyとKITTIのデータセットで評価

一枚あたり03sと高速だが001sとより高速なアルゴリズムが存在する

Segment-based stereo matching using belief propagation and a self-adapting dissimilarity measure [A Klaus M Sormann K Karner ICPR2006] On building an accurate stereo matching system on graphics hardware [X Mei X Sun M Zhou S Jiao H Wang X Zhang ICCV2011] Similarity measures for depth estimation [K Wegner O Stankiewicz 3DTV-CON2009] On accurate dense stereo-matching using a local adaptive multi-cost approach [C Stentoumis L Grammatikopoulos I Kalisperakis G Karras ISPRS2014] A quantitative evaluation of confidence measures for stereo vision [X Hu P Mordohai PAMI2012]

なかの

SIMILARITY MEASURE FOR DEPTH ESTIMATIOM 20098

どんなもの

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

4種類の視差推定アルゴリズムを組み合わせている 類似度度の選択性の解析

Belief Propagationの枠組みを用いる

名古屋大学の多視点データベースを利利用

HHI Test Material for 3D Video [I Feldmann M Muller F Zilly R Tanger A SmolicP Kauff T Wiegand 2008] Multiview Video Test Sequence and Camera Parameters [Yo-Sung Ho Eun-Kyung Lee and Cheon Lee 2008] 1D Parallel Test Sequences for MPEG-FTV [M Tanimoto T Fujii N Fukushima 2008] Non-parametric Local Transforms for Computing Visual Correspondence [R Zabih J Woodfill 1994]

なかの

Spatiotemporal Stereo via Spatiotemporal Quadric Element (Stequel) Matching9

どんなもの

技術や手法のキモはどこ

新しいマッチング手法を提案動き考慮することなく時間情報を取り込むことができる 時間方向のエピ線を考える

オプティカルフロー推定は3D境界や低テクスチャで弱いが提案手法はロバストである

なかの

Depth Video Enhancement Based on Weighted Mode Filtering10

どんなもの

議論論はある

ノイズを含んだ低解像度度のデプスマップの質を高める手法（超解像度度とデノイズ）時間方向も使用簡単なオプティカルフローを計算し利利用する

非反復復アルゴリズムのためGPUに載せやすく高速化が考えられる

なかの

Fast Bilateral-Space Stereo for Synthetic Defocus11

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

議論論はある

次に読むべき論論文は

高速な自由焦点ぼけ画像の作成

Bilateral-spaceを提案

従来研究よりも10から100倍速くぼけ具合の精度度も良良い

ぼけを作成するというアプリケーションに利利用する距離離という面では提案手法が有益であるが実測的な距離離という面での精度度は悪い背景と前景が同じ色で近くにある場合同一ととらえてしまう

Efficient high-resolution stereo matching using local plane sweeps [S N Sinha D Scharstein and R SzeliskiCVPR2014] Bilateral filtering-based optical flow estimation with occlusion detection [J Xiao H Cheng H Sawhney C Rao and M IsnardiECCV2006] Efficient nonlocal regularization for optical flow [P Krumlahenbumluhl and V KoltunECCV2012] Real-time spatiotemporal stereo matching using the dual-cross-bilateral grid [C Richardt D Orr I Davies A Criminisi and N A DodgsonECCV2010]

どうやって有効性を示した視差推定の精度度はmiddleburyKITTI

なかの

Robust Spatiotemporal Stereo for Dynamic Scenes12

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

ステレオ動画のフレーム間情報を取り入れることでノイズ耐性を向上させるまた動きの大きなものも考える

時間を含めたウインドウの提案自動的にそのような変化に対応する画像領領域を検出する

従来の時空間ステレオと比べ大きな動きによる急激な視差の時間変化に対して頑健である

なかの

Spacetime Stereo A Unifying Framework for Depth from Triangulation13

どんなもの

先行行研究と比べてどこがすごい

space time stereoを提案ステレオカメラの視差推定でも構造光を用いた視差推定でも利利用可能 動的なシーンでの利利用も可能

フレームごとマッチングを取っていたが複数フレームでのマッチングを可能とした

なかの

Learning to Select and Order Vacation Photographs (Disney research)14

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示したあまりにもたくさん撮影した写真たちから自動的にフォトアルバムを作成する研究

複雑な視覚での区別を試みたのはこの論論文が初

５つの異異なるトピックから63の個人的な写真コレクションのデータセットを利利用し定量量的に評価する

写真間の差別かを定義する顔全体の絵何が写っているか写っていないかを評価する

Jointly aligning and segmenting multiple web photo streams for the inference of collective photo storylines [G Kim and E P Xing CVPR2013] Photo sequencing [T Basha Y Moses and S Avidan CVPR2012]

なかの

A Taxonomy and Evaluation of Dense Two-Frame Stereo Correspondence Algorithms15

どんなもの

どうやって有効性を示した

次に読むべき論論文は

ステレオマッチングに関する分類を行行う 新たなデータセットを作成する

というよりも他の手法が有効性を示すことができるようにデータセットを作成した 今ではmiddleburyのデータセットと言えばステレオ業界では超有名

High-resolution stereo datasets with subpixel-accurate ground truth

なかの

Discriminability Limits in Spatio-Temporal Stereo Block Matching1

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

spatio-temporal disparity estimationの根本的な前提の正当性を解析しマッチング処理理の際に動きが助けとなる程度度を決定する

時空間マッチングのエラーを分析し誤りの原因を確率率率で導出する（フレーム数動きの分散画像特徴ノイズの関数）

[34243334]は時空間マッチングの利利点を指摘していたが本論論文はマッチング精度度の向上のために動きを用いる手法の程度度や性質を研究する

6つのステレオビデオを用いて検証を行行った

Spacetime stereo Shape recovery for dynamic scenes [L Zhang B Curless and S Seitz CVPR2003] Spatiotemporal stereo and scene flow via stequel matching [M Sizintsev and R Wildes PAMI2012] Temporally consistent disparity and optical flow via efficient spatio-temporal filtering [A Hosni C Rhemann M Bleyer and M Gelautz PRCAIVT2012] Spacetime stereo A unifying framework for depth from triangulation [PAMI2005] Dynamic depth recovery from multiple synchronized video streams [H Tao H Sawhney and R Kumar CVPR2001] Spatiotemporal descriptor for wide-baseline stereo reconstruction of non-rigid and ambiguous scenes [ECCV2003]

なかの

Depth-Based Patch Scaling for Content-Aware Stereo Image Completion2

どんなもの

どうやって有効性を示した

ステレオでデプスを取り物体の三次元情報を使ってインペインティングを行行う

bookのデータセット背景が繰り返しパターンが多いものを使っている

なかの

Fast Semi-dense Surface Reconstruction from Stereoscopic Video in Laparoscopic Surgery3

どんなもの

手法の流流れ

次に読むべき論論文は

腹腔内手術の際にステレオビデオから高速に物体の三次元再構成を行行う研究

Evaluation of stereo matching costs on images with radiometric differences [Hirschmueller H Scharstein D PAMI2008]

スコープカメラから画像取得GPUで演算する 視差を算出しフィルタにかける距離離に変換 点群を再びフィルタにかけて三次元再構成

なかの

3D Reconstruction from Accidental Motion4

どんなもの

技術や手法のキモはどこ

議論論はある

数秒のビデオ（単眼）から三次元再構成を行行う 手ぶれなどの動きから再構成が可能で特定の動きや機材を必要としない

短い基線長でも再構成が可能（3mmの基線長）

基線長が短いため背景の精度度が低くなる リフォーカス画像作成には十分 練習では上手く動作したが検証がまだ必要

なかの

Panoramic Video from Unstructured Camera Arrays5

どんなもの

技術や手法のキモはどこ

議論論はある

複数のカメラを用いたパノラマ撮影を行行う その際に不不自然さがないような動画を作成する

不不自然さを感じる感覚特性を提示しそれにのっとって対策を講じている

一つのカメラの解像度度と品質を向上させるよりも複数台のカメラを組み合わせることがはるかに簡単で有益である専門家でなくてもGoProのカメラセットを組み合わせることは容易易

カメラの配置は厳密に決められていない完璧な時間同期やローリングシャッターの不不足のような実撮影での問題もクリアしている

先行行研究と比べてどこがすごい

どうやって有効性を示した左のシステムは14台のカメラを使用 右のシステムはGoProを5台使用

Disney 201558

なかの

Floating Scale Surface Reconstruction6

どんなもの

技術や手法のキモはどこ

流流動的にスケールを変えられる三次元再構成手法

サンプル規模に依存するパラメータがない rarrどのスケールのサンプルにも対応できる

siggraph2014

なかの

A Super Resolution Reconstruction Scheme for Mixed Spatio-Temporal Stereo Video7

どんなもの

技術や手法のキモはどこ

ビデオ超解像アルゴリズム

二台のカメラを使用 一台は低解像度度で高速一台は高解像度度で低速

HHI 3DV ftp siteのBookarrivalとbeergadenを使用どうやって有効性を示した

なかの

What Is a Good Day for Outdoor Photometric Stereo8

どんなもの

先行行研究と比べてどこがすごい

議論論はある

次に読むべき論論文は

屋外における照度度差があるステレオの研究 屋外でステレオを行行う際に有利利or不不利利な日照条件を明らかにする

点光源を用いた研究は行行われていたが屋外での研究はされていなかった

晴れより曇りの方が精度度が良良い雲があるから特徴量量を取りやすい雑音を白色ガウスモデルを想定 季節ごとのデータセットを利利用してみても良良い

Time-lapse photometric stereo and applications [F Shen K Sunkavalli N Bonneel S Rusinkiewicz H Pfisterand X Tong2014] Outdoor photometric stereo [L-F Yu S-K Yeung Y-W Tai D Terzopoulos and T FChan ICCP2013]

どうやって有効性を示した屋外の照明に関するHDR環境マップのデータベースを利利用

Disney 2015424

なかの

COLORBRUSH ANIMATED DIFFUSION FOR INTUITIVE COLORIZATION SIMULATING WATER PAINTING 9

どんなものアニメを水彩画で描いたように変換する 水彩画を描くには経験が必要であるがそれを作成するアルゴリズムを考案絵具が水によりどうにじむかシュミレーションしている

Disney 20141027 ICIP2014

次に読むべき論論文はGabor-space geodesic active contoursrdquo In Algebraic Frames for the Perception-Action Cycle [C Sagiv NA Sochen and YY Zeevi 2000] Practical temporal consistency for image-based graphics applications [M Lang O Wang T Aydin A Smolic and M Gross SIGGRAPH2012] Computer-Generated Watercolor [CJ Curtis SE Anderson JE Seims KW Fleischer and DH Salesin SIGGRAPH1997]

なかの

From Sound to Sight Using Audio Processing to enable Visible Light Communication 10

どんなもの光に情報を載せる技術プロジェクトページがあって光関係の研究が8個載っている

httpwwwdisneyresearchcomprojectvisible-light-communication

ビデオのURL httpwwwdisneyresearchcomwpcontentuploadsPub_InvisibleLightCommunication_Siggraph14_videomp4

• 201211106_KeisukeKawahara
• 201311421_KeitaKanai_02
• 201313095_AkiraIshii_02
• 201413109_YuukiKubo_02
• 201513110_SatoshiHashizume_02
• 鬼輪講マラソン③_1
• 鬼輪講マラソン③_2

2 201313095

2

31 2

15-20 90-95

Hambone

bull  BAmentoWHillandLTerveenThesoundofonehandawrist-mountedbio-acousEcfingerEpgestureinterfaceInCHIrsquo02CHIrsquo02extendedabstractsonHumanfactorsincompuEngsystemspages724ndash725NewYorkNYUSA2002ACMPress

HamboneampAampBioAcousEcampGestureampInterfaceamp(ISWCrsquo07)

TravisDeyleSzabolcsPalinkoErikaShehanPooleandThadStarner

h]pswwwyoutubecomwatchv=Uxj-vyal84M

2 201313095

bull  RabinerLR(1989)ATutorialonHiddenMarkovModelsandSelectedApplicaEonsinSpeechRecogni-EonProcIEEEVol77257-28

TheampSoundampofampOneampHandampAampWristmountedampBioacousEcampFingerEpampGestureampInterfaceamp(CHIrsquo02)

BrianAmentoWillHillLorenTerveen

2 201313095

Non-linearSpaEalSampling

SVM

12

948

15cm

bull  NakatsumaKShinodaHMakinoYSatoKandMaenoTTouchinterfaceonbackofthehandInprocofSIGGRAPHrsquo11(2011)391ndash391

bull  ButlerAIzadiSandHodgesSSidesightmulE-touchinteracEonaroundsmalldevicesInProcofUISTrsquo08(2008)201ndash204

zSenseampEnablingampShallowampDepthampGestureampRecogniEonampforampGreaterampInputampExpressivityamponampSmartampWearablesamp(CHIrsquo15)

AnushaWithanaRoshanPeirisNipunaSamarasekaraSurangaNanayakkara

h]pswwwyoutubecomwatchv=fQobwL8eSU4

2 201313095

bull  HARRISONCTANDANDMORRISD2010Skinputap-propriaEngthebodyasaninputsurfaceInProceedingsofthe28thinternaEonalconferenceonHumanfactorsincompuEngsystemsACMNewYorkNYUSACHIrsquo10453ndash462

Touchampinterfaceamponampbackampofamptheamphandamp(SIGGRAPH11)

KeiNakatsumaHiroyukiShinodaYasutoshiMakinoKatsunariSatoTakashiMaeno

h]pswwwyoutubecomwatchv=tKNLxh9Yw2M

2 201313095

Pose-IO EMS

Pose-IO

EMS

EMS58deg

46 5 be]er

bull  RoudautARauASterzCPlauthMLopesPandBaudischPGestureoutputeyes-freeoutputusingaforcefeedbacktouchsurfaceProcCHI1325472556

PropriocepEveampInteracEonamp(CHIrsquo15)amp

PedroLopesAlexandraIonWilliMuellerDanielHoffmannPatrikJonellPatrickBaudisch

h]pswwwyoutubecomwatchv=KMxIw7zhlw

2 201313095

EMS

AR EMSEMS

GPS

bull  TamakiEMiyakiTandRekimotoJPossessedHandAhandgesturemanipulaEonsystemusingelectricalsEmuliInProcampAHrsquo10amp(2010)21ndash25

CruiseampControlampforampPedestriansampControllingampWalkingampDirecEonampusingampElectricalampMuscleampSEmulaEonamp(CHIrsquo15)amp

MaxPfeifferTimDunteStefanSchneegassFlorianAltMichaelRohs

h]pswwwyoutubecomwatchv=JSfnm_HoUv4

2 201313095

EMS

EMS

EMS 16automaEccalibraEonsystem

auto-calibraEonsystems 16

8875g

bull  KruijffESchmalsEegDandBeckhausSUsingneuromuscularelectricalsEmulaEonforpseudo-hapEcfeedbackInProceedingsoftheACMsymposiumonVirtualrealitysoywareandtechnologyVRSTrsquo06ACM(NewYorkNYUSA2006)316ndash319

PossessedHandampTechniquesampforampControllingampHumanampHandsampusingampElectricalampMusclesampSEmuliamp(CHIrsquo11)amp

EmiTamakiTakashiMiyakiJunRekimoto

h]psvimeocom27044937

2 201313095

EMS

EMS

RFIDEMS

1276

bull  KruijffESchmalsEegDandBeckhausDUsingneuromuscularelectricalsEmulaEonforpseudo-hapEcfeedbackProcVRST06316mdash319

Affordance++ampallowingampobjectsamptoampcommunicateampdynamicampuseamp(CHIrsquo15)

PedroLopesPatrikJonellPatrickBaudisch

h]pswwwyoutubecomwatchv=d0J7V37zQjY

2 201313095

EMS

EMS

EMS

ReacEonloss

EMS

UsingampNeuromuscularampElectricalampSEmulaEonampforampPseudoHapEcampFeedbackamp(VRSTrsquo06)

ErnstKruijffDieterSchmalsEegSteffiBeckhaus

2 201313095

SVM

106 Per-User

863 13

712

13

bull  SatoMPoupyrevIandHarrisonCToucheenhancingtouchinteracEononhumansscreensliquidsandeverydayobjectsInCHIrsquo12483ndash492

bull  TimCollinsAcEveacousEctouchinterfaceElectronicsLe]ersVol45No20pp1055ndash1056242009

TouchampampampAcEvateampAddingampInteracEvityamptoampExisEngampObjectsampusingampAcEveampAcousEcampSensingamp(UISTrsquo13)

MakotoOnoBuntarouShizukiJiroTanaka

h]pswwwyoutubecomwatchv=XgxXi6w8IQc

2 201313095

13

13

SVM

on-body

per-user 5 967 4987

bull  HarrisonCBenkoHWilsonAOmniTouchwearablemulEtouchinteracEoneverywhereinUIST11441-450

bull  MatsushitaNandRekimotoJHoloWalldesigningafingerhandbodyandobjectsensiEvewallUIST97209-210

ToucheampEnhancingampTouchampInteracEonamponampHumansampScreensampLiquidsampandampEverydayampObjectsamp(CHIrsquo12)

MunehikoSatoIvanPoupyrevChrisHarrison

h]pswwwyoutubecomwatchv=E4tYpXVTjxA

2 201313095

SVM

9 9TapSense 4

95 99

TapSenseDelete

bull  HarrisonCTanDandMorrisDSkinputappropriat-ingthebodyasaninputsurfaceInProcCHI10453-462

TapSenseampEnhancingampFingerampInteracEonamponampTouchampSurfacesamp(UISTrsquo11)

ChrisHarrisonJuliaSchwarzSco]EHudson

h]pswwwyoutubecomwatchv=-oN96cucBr4

2 201313095

13

13

22 SVM

13 FingersWholeArmForearm 876 Fingers877 WholeArm 955

883 Forearm 815

833

GUI

bull  SaponasTSTanDSMorrisDandBalakrishnanRDemonstraEngthefeasibilityofusingforearmelectromyographyformuscle-computerinterfacesInProcCHIrsquo09515-24

SkinputampAppropriaEngamptheampBodyampasampanampInputampSurfaceamp(CHIrsquo10)

ChrisHarrisonDesneyTanDanMorris

h]pswwwyoutubecomwatchv=g3XPUdW9Ryg

2 201313095

Fiberio

10 330 150

148 2

Fiberio

bull  MatsushitaNandRekimotoJHoloWallDesigningaFingerHandBodyObjectSensiEveWallProcUIST97209ndash210

FiberioampAampTouchscreenampthatampSensesampFingerprintsamp(UISTrsquo13)

ChrisEanHolzPatrickBaudisch

h]pswwwyoutubecomwatchv=p1a5yLzuTqA

2 201313095

3D

3D

bull  GeigerMVollertsenFTheMechanismsofLaserFormingCIRPANNALSlsquo93421301-304

bull  WillisKDDXuCWuJKLevinGGrossMDInteracEvefabricaEonnewinterfacesfordigitalfabricaEonProcTEI11pp69-72

LaserOrigamiampLaserCugngamp3DampObjectsamp(CHIrsquo13)

StefanieMuellerBasEanKruckPatrickBaudisch

h]pswwwyoutubecomwatchv=arjRtCjI9AQ

2 201313095

bend

bull  HyunyoungSongFranccediloisGuimbreEegravereChangHuHodLipsonModelCraycapturingfreehandannotaEonsandeditsonphysical3DmodelsProceedingsofthe19thannualACMsymposiumonUserinterfacesoywareandtechnologyOctober15-182006MontreuxSwitzerland

InteracEveampConstrucEonampInteracEveampFabricaEonampofampFuncEonalampMechanicalampDevicesamp(UISTrsquo12)

StefanieMuellerPedroLopesPatrickBaudisch

h]pdlacmorgcitaEoncfmid=23801162380191

2 201313095

3D

3D

bull  SavageVSchmidtRGrossmanTFitzmauriceGandHartmannBAseriesoftubesAddinginteracEvityto3dprintsusinginternalpipesInProcUIST14(2014)

3DampPrinEngampPneumaEcampDeviceampControlsampwithampVariableampAcEvaEonampForceampCapabiliEesamp(CHIrsquo15)amp

MarynelVazquezEricBrockmeyerRutaDesaiChrisHarrisonSco]EHudson

h]pswwwyoutubecomwatchv=-4gFYvhkz0Y

2 201313095

OpenFab 3D

fablets

3 3

bull  CHENDMATUSIKWSITTHI-AMORNPDIDYKPANDLEVIND2013Spec2FabAreducer-tunermodelfortranslat-ingspecificaEonsto3DprintsACMTransGraph324(July)

OpenFabampAampProgrammableampPipelineampforampMulEMaterialampFabricaEonamp(SIGGRAPHrsquo13)

KirilVidimcˇeSzu-PoWangJonathanRagan-KelleyWojciechMatusik

2 201313095

3D

3D

3D

3D14 30 13 67

244

14

3D

bull  MuellerSKruckBBaudischPLaserOrigamiLaser-Cunng3DObjectsProcCHIrsquo132585-2592

faBrickaEonampFastamp3DampPrinEngampofampFuncEonalampObjectsampbyampIntegraEngampConstrucEonampKitampBuildingampBlocksamp(CHIrsquo14)amp

StefanieMuellerTobiasMohrKersEnGuentherJohannesFrohnhofenPatrickBaudisch

h]pswwwyoutubecomwatchv=BlO6YRcLJjE

Touching13 the13 Void13 Direct-shy‐Touch13 Interac4on13 for13 Intangible13 Displays(CHIrsquo10)Li-Wei Chan Hui-Shan Kao Mike Y Chen Ming-Sui Jane Yi-Ping Hung

201413109　久保勇貴 2（鬼コース）13

どんなもの13

空中像へのタッチのエラーに関する調査及び影や音のフィードバックを付与することによるパーフォーマンス向上を示した研究13

先行研究と比べてどこがすごい13

平面画像をタッチする際の奥行きに関するエラーの正確な取得を初めて検証13

技術や手法のキモはどこ13

２つの赤外線カメラを用いた正確なタッチの検出13

どうやって有効だと検証した13

タッチ時の奥行きの正確さに関する被験者実験を実施またタッチする際に影や音を付けた際の反応時間を被験者実験で検証13

議論はある13

ユーザは慣れるまで影や音のフィードバックが必要だがそのあとは必要なくなる13

次に読むべき論文は13

MirageTable13 （CHI12） 13

MirageTable13 Freehand13 Interac4on13 on13 a13 Projected13 13 Augmented13 Reality13 Tabletop(CHIrsquo12)

Hrvoje Benko Ricardo Jota Andrew D Wilson

201413109　久保勇貴 2（鬼コース）13

どんなもの13

テーブル上においてバーチャルな物体をリアルタイムで現実でものを動かすことと同様な動作に操作可能なシステム13

先行研究と比べてどこがすごい13

現実の物体をリアルタイムで画面に取りこむことができ質の高いフリーハンドインタラクションを実現した点13

技術や手法のキモはどこ13

色深度前景頭追跡プロキシパーティクルを駆使したリアルタイムメッシュの作成13

どうやって有効だと検証した13

凹凸など例外な表面に対しての投影した際の画像の質についての評価実験また仮想物体の奥行き知覚に関する実験も行った13

議論はある13

前面のみしかキャプチャしていないため差が生じる握っている場所の再現は未解決な課題である13

次に読むべき論文は13

Hirsch13 et13 al13 201413 (SIGGRAPHrsquo14)13

A13 Compressive13 Light13 Field13 Projec4on13 System13 (SIGGRAPHrsquo14)MaChew13 Hirsch13 Gordon13 Wetzstein13 Ramesh13 Raskar

201413109　久保勇貴 2（鬼コース）13

どんなもの13

通常の3Dディスプレイに比べて解像度輝度コントラストを改善した圧縮ライトフィードディスプレイ13

先行研究と比べてどこがすごい13

多視点立体視を複数でなく１台のプロジェクタを用いて実現した13

技術や手法のキモはどこ13

受動的スクリーンと高速切り替えプロジェクタによる新しい光学設計13

どうやって有効だと検証した13

4つのシーン例を投影したものを示したアニメーションの3D効果について観察を行った13

議論はある13

光路長を広げると観察できる画質が大幅に制限され他のライトフィードビューと混線が生じる13

次に読むべき論文は13

Butler13 et13 al13 201113

Vermeer13 Direct13 Interac4on13 with13 a13 360deg13 Viewable13 3D13 Display(UISTrsquo11) Alex Butler Otmar Hilliges Shahram Izadi Steve Hodges David Molyneaux David Kim

201413109　久保勇貴 2（鬼コース）13

どんなもの13

映し出された3Dオブジェクトとインタラクションを行えるシステム13

先行研究と比べてどこがすごい13

ディスプレイ内の画像とのインタラクションを提案ボリュームディスプレイを支援する新しいセンシング法の提案13

技術や手法のキモはどこ13

パラボラ鏡に取り付けた赤外線カメラセンサによる指先検出13

どうやって有効だと検証した13

アプリケーション例を示した13

議論はある13

パラボラ鏡の大きさよりもディスプレイサイズが小さくなってしまう13

次に読むべき論文は13

Hirsch13 et13 al13 201213

8D13 Interac4ng13 with13 a13 Relightable13 Glasses-shy‐Free13 3D13 Display(CHIrsquo12)Li-Wei Chan Hui-Shan Kao Mike Y Chen Ming-Sui Jane Yi-Ping Hung

201413109　久保勇貴 2（鬼コース）13

どんなもの13

ライトフィードによる入力とライトフィールドによる表示を行うリアルタイム8Dディスプレイ13

先行研究と比べてどこがすごい13

リアルタイムでの8Dディスプレイの実現（先行研究は7fps）13

技術や手法のキモはどこ13

GPUにおけるレンダリング処理13

どうやって有効だと検証した13

MRIデータを用いたディスプレイのデモを示した13

議論はある13

現在はグレースケールの入力のみだがカラーでの入力できればより強力になるだろう13

次に読むべき論文は13

Sahoo13 et13 al13 201513

Control13 of13 Non-shy‐Solid13 Diffusers13 by13 Electrosta4c13 Charging13 (CHIrsquo15) Deepak Ranjan Sahoo Diego Martinez Plasencia Sriram Subramanian

201413109　久保勇貴 2（鬼コース）13

どんなもの13

シャボン玉や霧などの非固体を電場による制御を試みた研究13

先行研究と比べてどこがすごい13

非固体の形や位置の制御法を提案した点13

技術や手法のキモはどこ13

[Intra13 et13 al13 11]中のldquowire-shy‐to-shy‐Cylinderdquoを用いたエアゾール粒子の帯電13

どうやって有効だと検証した13

霧及びシャボン玉によるディスプレイのアプリケーション例で実際に制御して見せた13

議論はある13

風による影響を本手法は打ち消すことができた13

次に読むべき論文は13

Barnum13 et13 al13 201013

A13 Mul4-shy‐Layered13 Display13 with13 Water13 Drops(SIGGRAPHrsquo10)Peter C Barnum Srinivasa G Narasimhan Takeo Kanade

201413109　久保勇貴 2（鬼コース）13

どんなもの13

複数層の落下水滴にプロジェクションマッピングを行いディスプレイとした研究13

先行研究と比べてどこがすごい13

水滴の制御を行うことで単一のプロジェクタによって複数層の映像投影を可能とした点13

技術や手法のキモはどこ13

[Ambravaneswaran13 et13 al13 2002]及び本研究における実験結果に基づく水滴生成13

どうやって有効だと検証した13

複数のディスプレイ例を示した13 例）顔の投影水槽シミュレータなど13

議論はある13

本当の3Dディスプレイにするにはより多くの水滴制御が必要13

次に読むべき論文は13

Lee13 et13 al13 200713

An13 Immaterial13 Depth-shy‐Fused13 3D13 Display(VRSTrsquo07)Cha Lee Stephen DiVerdi Tobias Humlollerer

201413109　久保勇貴 2（鬼コース）13

どんなもの13

２つのスクリーンを駆使し3Dディスプレイを実現するdepth-shy‐fused13 3D(DFD)に関する評価を行いその結果よりディスプレイを提案した研究13

先行研究と比べてどこがすごい13

DFDが任意のスクリーン設定及び見る位置に対して有効であることを示した13

技術や手法のキモはどこ13

６通りのスクリーン組合せから２つを抽出し見え方の違いを検証した点13

どうやって有効だと検証した13

６通りのスクリーンについて立体的に見えるか被験者実験を実施その後それぞれに有意差がみられるか調べた13

議論はある13

ステレオイメージを認めることができなかったユーザに対しても強い3D効果が見られた13

次に読むべき論文は13

Tokuda13 et13 al13 201013

Cloud13 Display13 (ACErsquo10)Yutaka Tokuda Yasuhiro Suzuki Kunihiro Nishimura Tomohiro Tanikawa Michitaka Hirose

201413109　久保勇貴 2（鬼コース）13

どんなもの13

煙の渦輪を用いた空間を埋めるディスプレイ13

先行研究と比べてどこがすごい13

制御可能な手法により高所へのパーティクルを運搬することに着目した点13

技術や手法のキモはどこ13

コンピュータによって制御が行われる空気砲アレイ13

どうやって有効だと検証した13

箱の中で実験を行い安定して渦輪をできるようにした実際にデモを行ったことを示した13

議論はある13

今の試作機をより早くリフレッシュ速度を高めることによりより濃く空間を埋められることを目指す13

次に読むべき論文は13

Sato13 et13 al13 200913

Par]cle13 Display13 System　(JVRC09)13 -shy‐13 A13 Large13 Scale13 Display13 for13 Public13 Space13 -shy‐

Munehiko13 Sato13 Yasuhiro13 Suzuki13 13 Atsushi13 Hiyama13 Tomohiro13 Tanikawa13 Michitaka13 Hirose

201413109　久保勇貴 2（鬼コース）13

どんなもの13

パーティクルディスプレイによる公共スペースのための大画面ディスプレイの提案13

先行研究と比べてどこがすごい13

公共スペースにおける要求と制限に基づいたシステムを提案した点13

技術や手法のキモはどこ13

実験に基づく表示画像のスクロール時間の制御13

どうやって有効だと検証した13

Aという文字の知覚実験によって 適な点滅周期の調査を行った13

議論はある13

現在の試作機を組合せより高解像度にする必要がある13

次に読むべき論文は13

Kwon13 et13 al13 201513

FugaciousFilm13 Exploring13 Aen4ve13 Interac4on13 with13 Ephemeral13 Material13 (CHIrsquo15)Hyosun13 Kwon13 Shashank13 Jaiswal13 Steve13 Benford13 Sue13 Ann13 Seah13

13 Peter13 BenneC13 Boriana13 Koleva13 Holger13 Schnaumldelbach

201413109　久保勇貴 2（鬼コース）13

どんなもの13

膜を押す引く飛び出ることができる新しい石鹸膜インタフェースの提案13

先行研究と比べてどこがすごい13

徐々に消えるインタフェースは高い注意を有するインタラクションを提供するという点を示したこと13

技術や手法のキモはどこ13

水グリセリンを201の対比で混ぜることでldquopoprdquoがきれいになるようにしかつ膜の耐久性を向上させた13

どうやって有効だと検証した13

３目並べを用いた被験者実験を実施13 ユーザは膜を割ると負け膜を自分のマスにするにはタッチ押す引くの書かれた通りの操作を行う13

議論はある13

ユーザに精密な動作を要求することはとりわけ注意を払うことを誘発する13

次に読むべき論文は13

Wetzstein13 et13 al13 201213

Tensor13 Displays13 Compressive13 Light13 Field13 Synthesis13 using13 Mul4layer13 Displays13 with13 Direc4onal13 Backligh4ng(SIGGRAPHrsquo12)

Gordon13 Wetzstein13 Douglas13 Lanman13 MaChew13 Hirsch13 Ramesh13 Raskar

201413109　久保勇貴 2（鬼コース）13

どんなもの13

視点によって異なる立体映像を見ることができる複数の層からなるディスプレイ13

先行研究と比べてどこがすごい13

既存の手法を合成したcomputa(onal13 displaysというディスプレイの新しいフレームワークを提案した13

技術や手法のキモはどこ13

時分割で視差マスクを表示することでユーザの視線ごとに立体像を表現する13

どうやって有効だと検証した13

通常のディスプレイ３層LCDLCD及び指向性バックライトの例による比較13 13

議論はある13

波紋を含むこと色チャンネルが悪影響を与える相互反射不均一などの問題が見られた13

次に読むべき論文は13

Matoba13 et13 al13 1213

SplashDisplay(VRICrsquo12)Yasuo Matoba Taro Tokui Ryo Sato Tochiki Sato Hideki Koike

201413109　久保勇貴 2（鬼コース）13

どんなもの13

パーティクルにCGを投射しパーティクルがテーブル上に投げられると爆発しパーティクルが噴きあがる13

先行研究と比べてどこがすごい13

ビーズがミリメートルからメートル単位までZ軸方向について空中で奥行きを表現する13

技術や手法のキモはどこ13

スピーカによって風力が発生させビーズを舞い上げる点13

どうやって有効だと検証した13

ビーズを投げると花火が打ちあがっているかのようなアプリケーション例を示した13

議論はある13

高いレベルの表現及び幅広い入力範囲を提供できた13

次に読むべき論文は13

Kim13 et13 al13 1413

MARIO13 Mid-shy‐air13 Augmented13 Reality13 Interac4on13 with13 Objects13 (ECrsquo14)Hanyuool13 Kim13 13 Issei13 Takahashi13 Hiroki13 Yamamoto13 Satoshi13 Maekawa13 Takeshi13 Naemura

201413109　久保勇貴 2（鬼コース）13

どんなもの13

350times300times250のテーブル上のスペースにおいて自由に動かせる空中像を造りだすことができる13

先行研究と比べてどこがすごい13

凹面鏡や凹レンズのように曲面でないため画像の歪曲が発生しない13

技術や手法のキモはどこ13

Aerial13 Imaging13 Plate(AIP)を用いた空中像の生成及びそのためのディスプレイ移動装置13

どうやって有効だと検証した13

左右からの視差の考慮及び奥行き表現時の画像提示視野角の検証などを行った13 13

議論はある13

投影しているひよこを叩いたり払いのけたりするような動作がデモ中見られた13

次に読むべき論文は13

Tactile Feedback on Flat Surfaces for the Visually Impaired13Ali Israr Olivier Bau Seung-Chan Kim Ivan Poupyrev13

どのようなものか 視覚障害者のための触覚を用いた視覚代用デバイス 先行研究と比べてどこがすごいか 道案内をしてくれる機械などはあるが日用品の場所を教えたり探すのを手伝ってくれるデバイスはない 技術や手法のキモ タッチパネルとカメラを搭載したデバイス 触覚を与える技術はTeslaTouchを利用 色を基準にオブジェクトの位置を認識 有用性の確認 視覚障害者二人に対して実験このデバイスを使

わなくても各自の方法で物を見つけられるが間違えることが多いこのデバイスを使用することで間違えることなく正確に物の位置を特定できた 課題 一つの色でしか判断できない 触感のあるなしでしか情報を伝えられない 関連論文 TeslaTouch [Bau et al 2010]

20150522 橋爪智 2鬼

Fingernail-Mounted Display of Attraction Force and Texture13Masataka Niwa Tomoko Nozaki Taro Maeda and Hideyuki And13

どのようなものか 指先に取り付けて触感と力を両方表現できるデバイス 先行研究と比べてどこがすごいか 触感と引力をそれぞれ表現するデバイスはあるが両方を一つのデバイスで表現した例は少ない 引力は自由な方向に付加することができる 技術や手法のキモ 偏心に重さを付けた円盤を4枚使用する 5-9Hz 引力　100-200Hz 触感 それぞれの円盤の位相や回転数を調整することで

触感と力 を表現する 4つのモータを使いそれぞれの円盤を独立して制御する 有用性の確認 4人の男性に対して実験80以上の精度で認識できた 関連論文 The nail-mounted attraction forcebump display [Nozaki et al 2008]

20150522 橋爪智 2 鬼

Gilded gait reshaping the urban experience with augmented footsteps13Yuichiro Takeuchi13

どのようなものか 靴に装着し地面の触感をコントロールするデバイス 先行研究と比べてどこがすごいか 単独で動作しなかったり特定の環境のみでしか動作しなかったりするrarr靴単体で動作環境に依存しない 技術や手法のキモ 6個の振動パネルを取り付けゲルでカバー app modulesを取り替えることができ様々な機能を付加できる（GPSsound) 4種類の地面を再現

bull  Hard Ground 振動させない bull  Soft Ground すべてのパネルを振動 bull  Bumpy Ground ジグザグに振動 bull  Godzilla 全てのパネルを振動何回か繰り返す 課題 モーターを使っているため波形をプログラミングできないrarr圧電素子を使用する 関連論文 Haptic Shoes [Fu et al 2010]

20150522 橋爪智 2鬼

ExoInterfaces novel exosceleton haptic interfaces for virtual reality augmented sport and rehabilitation

Dzmitry Tsetserukou Katsunari Sato Susumu Tachi13

どのようなものか 腕に装着し物理的なinteractionを可能にするデバイス 先行研究と比べてどこがすごいか Exoskeleton 力を増幅するためだが重たく危険なこともある String-based wireが視界をまたぐ動きに制限がある rarr腕の動きに制限を与えない安全 技術や手法のキモ 「FlexTorque」人間の筋肉の構造を再現するベルトとモーターを使用する肩の近くに装着することで

腕に負担がかかりにくい 触覚feedback弱いトルク 運動を支援強いトルク 課題 物理的な接触を表現するゲームやスポーツにより没頭させるリハビリのサポートをする視覚障害者の支援（ものの場所を教える） 関連論文 FlexTorque [Dzmitry et al 2010]

20150522 橋爪智 2 鬼

Perception of Ultrasonic Haptic Feedback on the Hand Localisation and Apparent Motion13

Graham Wilson Tom Carter Sriram Subramanian Stephen Brewster13

どのようなものか 超音波を用いた触覚フィードバック有効性の検討を行う 先行研究と比べてどこがすごいか 超音波触覚フィードバックは比較的新しく研究や操作方法に関する知識が少ない 腕を自由に動かすことができ小さいものは着用可能 技術や手法のキモ 88のアレイ状に超音波発生器を設置

有効性の確認 bull  局所的な触感 　　　25箇所に分割しそれぞれに超音波を当てる 　　　触感を感じた989 　　　場所の誤差85mm bull  手のひらを動く触感 上下左右に動く 　　　動いてると感じた629

20150522 橋爪智 2 鬼

Friction Measurements on a Large Area TPaD13Nicholas D Marchuk J Edward Colgate Michael A Peshkin13

どのようなものか 超音波の振動により触感を与える 先行研究と比べてどこがすごいか ガラス板を使うので透明後ろにディスプレイを配置可能 技術や手法のキモ 「Squeeze Film Effect（スクイズ膜効果）」 ガラス板に取り付けた圧電素子の円盤に高周波信号

をかける 実験 振動しない部分＝摩擦が発生しない部分が発生周波数により場所が変わる rarr摩擦を大きさをかける力の大きさから計測 rarr指の場所に合わせて複数の周波数を使い分ける 関連論文 T-PaD[Winfield et al 2007]

20150522 橋爪智 2 鬼

STIMTAC a Tactile Input Device with Programmable Friction13Michel Amberg Freacutedeacuteric Giraud Betty Semail Paolo Olivo Geacutery Casiez Nicolas Roussel13

どのようなものか 触感を与えられるタッチデバイス 先行研究と比べてどこがすごいか LATPaD サイズ大きいノイズが大きい TeslaTouch 高い電圧付加が必要GNDに接続しなければいけない

技術や手法のキモ 「Squeeze Film Effect」超音波を用いて振動を与える 圧電性セラミックを電極にコーディング 指トラッキングは力センサを用いる 活用法 マウスキーボード絵を描く 関連論文 LATPaD[Vincent et al 2011] TeslaTouch[Bau et al 2010]

20150522 橋爪智 2 鬼

Surround Haptics Tactile Feedback for Immersive Gaming Experiences Ali Israr Seung-Chan Kim Ivan Poupyrev Jan Stec13

どのようなものか ゲームに合わせて高解像度の触覚フィードバックをユーザーに与える椅子 先行研究と比べてどこがすごいか 荒く配置した安価な振動アクチュエータで高解像度の触覚フィードバックを行える 一点の振動連続した動き範囲の振動などを再現

技術や手法のキモ 仮想的な振動アクチュエータをいくつかの振動アクチュエータを使って作り出す physical-physicalphysical-virtualvirtual-virtual ゲームにHaptics Engineを導入しHaptics APIを用いてHaptic Displayを操作する 関連論文 Exploring Surround Haptics Displays[Israr et al 2010]

20150522 橋爪智 2 鬼

Audio-Haptic Feedback in Mobile Phones Angela Chang Conor OrsquoSullivan13

どのようなものか haptics機能のついてない携帯電話にオーディオ機能を利用した触覚フィードバックを追加する 先行研究と比べてどこがすごいか 簡単に作れてnon-haptic mobile devicesでも大丈夫 技術や手法のキモ 「MultiFunction Transducer(MFT)」 スピーカーから音と信号の両方を出力できる

bull  Haptic Inheritance 　　音を2つの周波数帯に分ける bull  Synthesis and Matching 　　低周波数帯(20-300Hz)を使い触感を伝える 有効性の検討 42人の人を対象に実験を行う83の人が触感を感じた

20150522 橋爪智 2 鬼

Resolution of Sleep Deprivation Problems using ZZZoo Pillows13Shunsuke Yanaka Motoki Ishida13

どのようなものか 近年不眠症の人が多い rarr誰かと接していると安心し睡眠に導入しやすくなる rarrまるで添い寝をしているようなリアルな抱きまくらを使う 技術や手法のキモ breathing sensation 風船を使って人の呼吸を再現肺の形の風船弱く長い呼吸をする

heating お湯を使って人の体温を再現45 有効性の確認 84人の人が実験 呼吸が睡眠を誘ったかrarr61 体温が睡眠を誘ったかrarr85 関連論文 The Impact of Sleep Disorders on Social Life[Komada et al 2007]

20150522 橋爪智 2 鬼

まとめ13超音波 モーター 風

20150522 橋爪智 2 鬼

コイル 電気刺激 Electrovibration

振動 音 お湯

なかの

Temporally Consistent Disparity and Optical Flow via Efficient Spatio-temporal Filtering1

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示した

議論論はあるか

時間的に一定の視差を算出する手法静止画ステレオよりも精度度が良良いことを示す従来よりも推定精度度が良良いオプティカルフローも算出する

一枚の静止画に対するフィルタリング[1]をステレオ動画に拡張している

ケンブリッジのステレオ動画のデータセットを利利用 実写動画に対する比較も行行うノイズ耐性も検証する

フィルタベースとエネルギーベースの関係性を良良り理理解することで推定精度度を上げる

実装が簡単でリアルタイム視差推定が可能

Fast Cost-Volume Filtering for Visual Correspondence and Beyond [Rhemann C Hosni A Bleyer M Rother C Gelautz M CVPR2011] Real-time Spatiotemporal Stereo Matching Using the Dual-Cross-Bilateral Grid [Richardt C Orr D Davies I Criminisi A Dodgson NA ECCV2010] Secrets of optical flow estimation and their principles [Sun D Roth S Black MJ 2010] Motion estimation with non-local total variation regularization [Werlberger M Pock T Bischof H CVPR2010] Temporally Consistent Disparity Maps from Uncalibrated Stereo Videos [Bleyer M Gelatuz M ISPA2011]

なかの

SymStereo Matching using Induced Symmetry (2014)2

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示した

議論論はあるか

画像の対称性を用いてステレオマッチングを行行う 左右の画像を反転させて重ね合わせることで対称性を測る

絵的な類似の代わりに対称性を使う今まで対称性を用いる手法はなく新規性が大きい

三つのSymmetry-baseの手法で精度度を検証従来手法よりも精度度が向上しているMiddlebury Oxford Corridorfountain-P11のデータセット使用

ステレオの問題である不不連続な箇所オクルージョン部分は未解決である演算時間はやや増加

1-Dラインのコストを考える今までは撮像面に対して平行行な平面でデプスを考えていたが垂直な平面を考える

BT[Birchfield and Tomasi 1998] Census transform[Zabih and Woodfill 1994] Log N[Kovesi 1997] radio-metoric differences[Hirschmuller Scharstein 2009]

なかの

Camouflaging an Object from Many Viewpoints3

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

多くの視点から三次元の物体をカモフラージュするカモフラージュによってオクルージョン部分の不不連続がどの程度度生じるか他の視点ではどれほどになるかの検証

MRF（Markov Random Fields）ベース

新しい三次元物体のカモフラージュモデルを構築 37種類のデータセットを作る

箱形の物体に対してカモフラージュ処理理を施し 結果を評価する

オクルージョン不不連続テクスチャの歪みが問題 照明や画像の貼りつけに制限あり

なかの

Aliasing Detection and Reduction in Plenoptic Imaging4

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

カメラアレイ撮影の角度度のエイリアシングを除去するエイリアシングの探索索と打ち消しを行行う

周波数領領域ではなく空間領領域で探索索を行行う

先行行研究がフィルタデモザイキング再パラメータ調整などの前処理理でエイリアシング除去を行行うのに対しエイリアシング探索索後にリフォーカスの段階でエイリアシングを取り除く

8times8の平行行カメラアレイで検証するカメラ間の 基線長は70mm

今回は基線長が長いデータセットを使った 次はLytroなどのマイクロレンズアレイで検証する

Globally consistent multi-label assignment on the ray space of 4d light fields [S Wanner C Straehle B Goldluecke CVPR2013] Lineassisted light field triangulation and stereo matching [Z Yu X Guo H Lin A Lumsdaine J Yu ICCV 2013]

なかの

Globally Consistent Multi-Label Assignment on the Ray Space of 4D Light Fields5

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

四次元ライトフィールドの光線情報において マルチラベルの領領域分割を行行う

深度度情報光線情報を用いて領領域分割することで 二次元（空間）情報だけでは分割が難しかった 領領域を分割可能とする

The light field camera Extended depth of field aliasing and superresolution [T Bishop P Favaro IEEE Transactions on Pattern Analysis and Machine Intelligence 2012]

なかの

Line Assisted Light Field Triangulation and Stereo Matching6

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

光線情報を利利用してステレオマッチングの精度度を 向上させる手法三角測量量の誤差を減らす

Light Field Stereo Matchingとかいう手法 グラフ構造を作成

Variational light field analysis for disparity estimation and super-resolution [S Wanner and B Goldlumluecke 2013]

なかの

Adaptive stereo similarity fusion using confidence measures 20157

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

ステレオマッチングの新しい方式fusion weightsを提案複数の手法を組み合わせてコスト計算を行行う手法付録に既存手法のコスト関数一覧あり

パラメータに依存する手法を用いないことで高速化を図っている

一つのアルゴリズムでは異異なる特性を持つ領領域全てに対して適切切なマッチングはできない複数を組み合わせることでそれを補う13種と多い

middleburyとKITTIのデータセットで評価

一枚あたり03sと高速だが001sとより高速なアルゴリズムが存在する

Segment-based stereo matching using belief propagation and a self-adapting dissimilarity measure [A Klaus M Sormann K Karner ICPR2006] On building an accurate stereo matching system on graphics hardware [X Mei X Sun M Zhou S Jiao H Wang X Zhang ICCV2011] Similarity measures for depth estimation [K Wegner O Stankiewicz 3DTV-CON2009] On accurate dense stereo-matching using a local adaptive multi-cost approach [C Stentoumis L Grammatikopoulos I Kalisperakis G Karras ISPRS2014] A quantitative evaluation of confidence measures for stereo vision [X Hu P Mordohai PAMI2012]

なかの

SIMILARITY MEASURE FOR DEPTH ESTIMATIOM 20098

どんなもの

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

4種類の視差推定アルゴリズムを組み合わせている 類似度度の選択性の解析

Belief Propagationの枠組みを用いる

名古屋大学の多視点データベースを利利用

HHI Test Material for 3D Video [I Feldmann M Muller F Zilly R Tanger A SmolicP Kauff T Wiegand 2008] Multiview Video Test Sequence and Camera Parameters [Yo-Sung Ho Eun-Kyung Lee and Cheon Lee 2008] 1D Parallel Test Sequences for MPEG-FTV [M Tanimoto T Fujii N Fukushima 2008] Non-parametric Local Transforms for Computing Visual Correspondence [R Zabih J Woodfill 1994]

なかの

Spatiotemporal Stereo via Spatiotemporal Quadric Element (Stequel) Matching9

どんなもの

技術や手法のキモはどこ

新しいマッチング手法を提案動き考慮することなく時間情報を取り込むことができる 時間方向のエピ線を考える

オプティカルフロー推定は3D境界や低テクスチャで弱いが提案手法はロバストである

なかの

Depth Video Enhancement Based on Weighted Mode Filtering10

どんなもの

議論論はある

ノイズを含んだ低解像度度のデプスマップの質を高める手法（超解像度度とデノイズ）時間方向も使用簡単なオプティカルフローを計算し利利用する

非反復復アルゴリズムのためGPUに載せやすく高速化が考えられる

なかの

Fast Bilateral-Space Stereo for Synthetic Defocus11

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

議論論はある

次に読むべき論論文は

高速な自由焦点ぼけ画像の作成

Bilateral-spaceを提案

従来研究よりも10から100倍速くぼけ具合の精度度も良良い

ぼけを作成するというアプリケーションに利利用する距離離という面では提案手法が有益であるが実測的な距離離という面での精度度は悪い背景と前景が同じ色で近くにある場合同一ととらえてしまう

Efficient high-resolution stereo matching using local plane sweeps [S N Sinha D Scharstein and R SzeliskiCVPR2014] Bilateral filtering-based optical flow estimation with occlusion detection [J Xiao H Cheng H Sawhney C Rao and M IsnardiECCV2006] Efficient nonlocal regularization for optical flow [P Krumlahenbumluhl and V KoltunECCV2012] Real-time spatiotemporal stereo matching using the dual-cross-bilateral grid [C Richardt D Orr I Davies A Criminisi and N A DodgsonECCV2010]

どうやって有効性を示した視差推定の精度度はmiddleburyKITTI

なかの

Robust Spatiotemporal Stereo for Dynamic Scenes12

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

ステレオ動画のフレーム間情報を取り入れることでノイズ耐性を向上させるまた動きの大きなものも考える

時間を含めたウインドウの提案自動的にそのような変化に対応する画像領領域を検出する

従来の時空間ステレオと比べ大きな動きによる急激な視差の時間変化に対して頑健である

なかの

Spacetime Stereo A Unifying Framework for Depth from Triangulation13

どんなもの

先行行研究と比べてどこがすごい

space time stereoを提案ステレオカメラの視差推定でも構造光を用いた視差推定でも利利用可能 動的なシーンでの利利用も可能

フレームごとマッチングを取っていたが複数フレームでのマッチングを可能とした

なかの

Learning to Select and Order Vacation Photographs (Disney research)14

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示したあまりにもたくさん撮影した写真たちから自動的にフォトアルバムを作成する研究

複雑な視覚での区別を試みたのはこの論論文が初

５つの異異なるトピックから63の個人的な写真コレクションのデータセットを利利用し定量量的に評価する

写真間の差別かを定義する顔全体の絵何が写っているか写っていないかを評価する

Jointly aligning and segmenting multiple web photo streams for the inference of collective photo storylines [G Kim and E P Xing CVPR2013] Photo sequencing [T Basha Y Moses and S Avidan CVPR2012]

なかの

A Taxonomy and Evaluation of Dense Two-Frame Stereo Correspondence Algorithms15

どんなもの

どうやって有効性を示した

次に読むべき論論文は

ステレオマッチングに関する分類を行行う 新たなデータセットを作成する

というよりも他の手法が有効性を示すことができるようにデータセットを作成した 今ではmiddleburyのデータセットと言えばステレオ業界では超有名

High-resolution stereo datasets with subpixel-accurate ground truth

なかの

Discriminability Limits in Spatio-Temporal Stereo Block Matching1

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

spatio-temporal disparity estimationの根本的な前提の正当性を解析しマッチング処理理の際に動きが助けとなる程度度を決定する

時空間マッチングのエラーを分析し誤りの原因を確率率率で導出する（フレーム数動きの分散画像特徴ノイズの関数）

[34243334]は時空間マッチングの利利点を指摘していたが本論論文はマッチング精度度の向上のために動きを用いる手法の程度度や性質を研究する

6つのステレオビデオを用いて検証を行行った

Spacetime stereo Shape recovery for dynamic scenes [L Zhang B Curless and S Seitz CVPR2003] Spatiotemporal stereo and scene flow via stequel matching [M Sizintsev and R Wildes PAMI2012] Temporally consistent disparity and optical flow via efficient spatio-temporal filtering [A Hosni C Rhemann M Bleyer and M Gelautz PRCAIVT2012] Spacetime stereo A unifying framework for depth from triangulation [PAMI2005] Dynamic depth recovery from multiple synchronized video streams [H Tao H Sawhney and R Kumar CVPR2001] Spatiotemporal descriptor for wide-baseline stereo reconstruction of non-rigid and ambiguous scenes [ECCV2003]

なかの

Depth-Based Patch Scaling for Content-Aware Stereo Image Completion2

どんなもの

どうやって有効性を示した

ステレオでデプスを取り物体の三次元情報を使ってインペインティングを行行う

bookのデータセット背景が繰り返しパターンが多いものを使っている

なかの

Fast Semi-dense Surface Reconstruction from Stereoscopic Video in Laparoscopic Surgery3

どんなもの

手法の流流れ

次に読むべき論論文は

腹腔内手術の際にステレオビデオから高速に物体の三次元再構成を行行う研究

Evaluation of stereo matching costs on images with radiometric differences [Hirschmueller H Scharstein D PAMI2008]

スコープカメラから画像取得GPUで演算する 視差を算出しフィルタにかける距離離に変換 点群を再びフィルタにかけて三次元再構成

なかの

3D Reconstruction from Accidental Motion4

どんなもの

技術や手法のキモはどこ

議論論はある

数秒のビデオ（単眼）から三次元再構成を行行う 手ぶれなどの動きから再構成が可能で特定の動きや機材を必要としない

短い基線長でも再構成が可能（3mmの基線長）

基線長が短いため背景の精度度が低くなる リフォーカス画像作成には十分 練習では上手く動作したが検証がまだ必要

なかの

Panoramic Video from Unstructured Camera Arrays5

どんなもの

技術や手法のキモはどこ

議論論はある

複数のカメラを用いたパノラマ撮影を行行う その際に不不自然さがないような動画を作成する

不不自然さを感じる感覚特性を提示しそれにのっとって対策を講じている

一つのカメラの解像度度と品質を向上させるよりも複数台のカメラを組み合わせることがはるかに簡単で有益である専門家でなくてもGoProのカメラセットを組み合わせることは容易易

カメラの配置は厳密に決められていない完璧な時間同期やローリングシャッターの不不足のような実撮影での問題もクリアしている

先行行研究と比べてどこがすごい

どうやって有効性を示した左のシステムは14台のカメラを使用 右のシステムはGoProを5台使用

Disney 201558

なかの

Floating Scale Surface Reconstruction6

どんなもの

技術や手法のキモはどこ

流流動的にスケールを変えられる三次元再構成手法

サンプル規模に依存するパラメータがない rarrどのスケールのサンプルにも対応できる

siggraph2014

なかの

A Super Resolution Reconstruction Scheme for Mixed Spatio-Temporal Stereo Video7

どんなもの

技術や手法のキモはどこ

ビデオ超解像アルゴリズム

二台のカメラを使用 一台は低解像度度で高速一台は高解像度度で低速

HHI 3DV ftp siteのBookarrivalとbeergadenを使用どうやって有効性を示した

なかの

What Is a Good Day for Outdoor Photometric Stereo8

どんなもの

先行行研究と比べてどこがすごい

議論論はある

次に読むべき論論文は

屋外における照度度差があるステレオの研究 屋外でステレオを行行う際に有利利or不不利利な日照条件を明らかにする

点光源を用いた研究は行行われていたが屋外での研究はされていなかった

晴れより曇りの方が精度度が良良い雲があるから特徴量量を取りやすい雑音を白色ガウスモデルを想定 季節ごとのデータセットを利利用してみても良良い

Time-lapse photometric stereo and applications [F Shen K Sunkavalli N Bonneel S Rusinkiewicz H Pfisterand X Tong2014] Outdoor photometric stereo [L-F Yu S-K Yeung Y-W Tai D Terzopoulos and T FChan ICCP2013]

どうやって有効性を示した屋外の照明に関するHDR環境マップのデータベースを利利用

Disney 2015424

なかの

COLORBRUSH ANIMATED DIFFUSION FOR INTUITIVE COLORIZATION SIMULATING WATER PAINTING 9

どんなものアニメを水彩画で描いたように変換する 水彩画を描くには経験が必要であるがそれを作成するアルゴリズムを考案絵具が水によりどうにじむかシュミレーションしている

Disney 20141027 ICIP2014

次に読むべき論論文はGabor-space geodesic active contoursrdquo In Algebraic Frames for the Perception-Action Cycle [C Sagiv NA Sochen and YY Zeevi 2000] Practical temporal consistency for image-based graphics applications [M Lang O Wang T Aydin A Smolic and M Gross SIGGRAPH2012] Computer-Generated Watercolor [CJ Curtis SE Anderson JE Seims KW Fleischer and DH Salesin SIGGRAPH1997]

なかの

From Sound to Sight Using Audio Processing to enable Visible Light Communication 10

どんなもの光に情報を載せる技術プロジェクトページがあって光関係の研究が8個載っている

httpwwwdisneyresearchcomprojectvisible-light-communication

ビデオのURL httpwwwdisneyresearchcomwpcontentuploadsPub_InvisibleLightCommunication_Siggraph14_videomp4

• 201211106_KeisukeKawahara
• 201311421_KeitaKanai_02
• 201313095_AkiraIshii_02
• 201413109_YuukiKubo_02
• 201513110_SatoshiHashizume_02
• 鬼輪講マラソン③_1
• 鬼輪講マラソン③_2

2 201313095

bull  RabinerLR(1989)ATutorialonHiddenMarkovModelsandSelectedApplicaEonsinSpeechRecogni-EonProcIEEEVol77257-28

TheampSoundampofampOneampHandampAampWristmountedampBioacousEcampFingerEpampGestureampInterfaceamp(CHIrsquo02)

BrianAmentoWillHillLorenTerveen

2 201313095

Non-linearSpaEalSampling

SVM

12

948

15cm

bull  NakatsumaKShinodaHMakinoYSatoKandMaenoTTouchinterfaceonbackofthehandInprocofSIGGRAPHrsquo11(2011)391ndash391

bull  ButlerAIzadiSandHodgesSSidesightmulE-touchinteracEonaroundsmalldevicesInProcofUISTrsquo08(2008)201ndash204

zSenseampEnablingampShallowampDepthampGestureampRecogniEonampforampGreaterampInputampExpressivityamponampSmartampWearablesamp(CHIrsquo15)

AnushaWithanaRoshanPeirisNipunaSamarasekaraSurangaNanayakkara

h]pswwwyoutubecomwatchv=fQobwL8eSU4

2 201313095

bull  HARRISONCTANDANDMORRISD2010Skinputap-propriaEngthebodyasaninputsurfaceInProceedingsofthe28thinternaEonalconferenceonHumanfactorsincompuEngsystemsACMNewYorkNYUSACHIrsquo10453ndash462

Touchampinterfaceamponampbackampofamptheamphandamp(SIGGRAPH11)

KeiNakatsumaHiroyukiShinodaYasutoshiMakinoKatsunariSatoTakashiMaeno

h]pswwwyoutubecomwatchv=tKNLxh9Yw2M

2 201313095

Pose-IO EMS

Pose-IO

EMS

EMS58deg

46 5 be]er

bull  RoudautARauASterzCPlauthMLopesPandBaudischPGestureoutputeyes-freeoutputusingaforcefeedbacktouchsurfaceProcCHI1325472556

PropriocepEveampInteracEonamp(CHIrsquo15)amp

PedroLopesAlexandraIonWilliMuellerDanielHoffmannPatrikJonellPatrickBaudisch

h]pswwwyoutubecomwatchv=KMxIw7zhlw

2 201313095

EMS

AR EMSEMS

GPS

bull  TamakiEMiyakiTandRekimotoJPossessedHandAhandgesturemanipulaEonsystemusingelectricalsEmuliInProcampAHrsquo10amp(2010)21ndash25

CruiseampControlampforampPedestriansampControllingampWalkingampDirecEonampusingampElectricalampMuscleampSEmulaEonamp(CHIrsquo15)amp

MaxPfeifferTimDunteStefanSchneegassFlorianAltMichaelRohs

h]pswwwyoutubecomwatchv=JSfnm_HoUv4

2 201313095

EMS

EMS

EMS 16automaEccalibraEonsystem

auto-calibraEonsystems 16

8875g

bull  KruijffESchmalsEegDandBeckhausSUsingneuromuscularelectricalsEmulaEonforpseudo-hapEcfeedbackInProceedingsoftheACMsymposiumonVirtualrealitysoywareandtechnologyVRSTrsquo06ACM(NewYorkNYUSA2006)316ndash319

PossessedHandampTechniquesampforampControllingampHumanampHandsampusingampElectricalampMusclesampSEmuliamp(CHIrsquo11)amp

EmiTamakiTakashiMiyakiJunRekimoto

h]psvimeocom27044937

2 201313095

EMS

EMS

RFIDEMS

1276

bull  KruijffESchmalsEegDandBeckhausDUsingneuromuscularelectricalsEmulaEonforpseudo-hapEcfeedbackProcVRST06316mdash319

Affordance++ampallowingampobjectsamptoampcommunicateampdynamicampuseamp(CHIrsquo15)

PedroLopesPatrikJonellPatrickBaudisch

h]pswwwyoutubecomwatchv=d0J7V37zQjY

2 201313095

EMS

EMS

EMS

ReacEonloss

EMS

UsingampNeuromuscularampElectricalampSEmulaEonampforampPseudoHapEcampFeedbackamp(VRSTrsquo06)

ErnstKruijffDieterSchmalsEegSteffiBeckhaus

2 201313095

SVM

106 Per-User

863 13

712

13

bull  SatoMPoupyrevIandHarrisonCToucheenhancingtouchinteracEononhumansscreensliquidsandeverydayobjectsInCHIrsquo12483ndash492

bull  TimCollinsAcEveacousEctouchinterfaceElectronicsLe]ersVol45No20pp1055ndash1056242009

TouchampampampAcEvateampAddingampInteracEvityamptoampExisEngampObjectsampusingampAcEveampAcousEcampSensingamp(UISTrsquo13)

MakotoOnoBuntarouShizukiJiroTanaka

h]pswwwyoutubecomwatchv=XgxXi6w8IQc

2 201313095

13

13

SVM

on-body

per-user 5 967 4987

bull  HarrisonCBenkoHWilsonAOmniTouchwearablemulEtouchinteracEoneverywhereinUIST11441-450

bull  MatsushitaNandRekimotoJHoloWalldesigningafingerhandbodyandobjectsensiEvewallUIST97209-210

ToucheampEnhancingampTouchampInteracEonamponampHumansampScreensampLiquidsampandampEverydayampObjectsamp(CHIrsquo12)

MunehikoSatoIvanPoupyrevChrisHarrison

h]pswwwyoutubecomwatchv=E4tYpXVTjxA

2 201313095

SVM

9 9TapSense 4

95 99

TapSenseDelete

bull  HarrisonCTanDandMorrisDSkinputappropriat-ingthebodyasaninputsurfaceInProcCHI10453-462

TapSenseampEnhancingampFingerampInteracEonamponampTouchampSurfacesamp(UISTrsquo11)

ChrisHarrisonJuliaSchwarzSco]EHudson

h]pswwwyoutubecomwatchv=-oN96cucBr4

2 201313095

13

13

22 SVM

13 FingersWholeArmForearm 876 Fingers877 WholeArm 955

883 Forearm 815

833

GUI

bull  SaponasTSTanDSMorrisDandBalakrishnanRDemonstraEngthefeasibilityofusingforearmelectromyographyformuscle-computerinterfacesInProcCHIrsquo09515-24

SkinputampAppropriaEngamptheampBodyampasampanampInputampSurfaceamp(CHIrsquo10)

ChrisHarrisonDesneyTanDanMorris

h]pswwwyoutubecomwatchv=g3XPUdW9Ryg

2 201313095

Fiberio

10 330 150

148 2

Fiberio

bull  MatsushitaNandRekimotoJHoloWallDesigningaFingerHandBodyObjectSensiEveWallProcUIST97209ndash210

FiberioampAampTouchscreenampthatampSensesampFingerprintsamp(UISTrsquo13)

ChrisEanHolzPatrickBaudisch

h]pswwwyoutubecomwatchv=p1a5yLzuTqA

2 201313095

3D

3D

bull  GeigerMVollertsenFTheMechanismsofLaserFormingCIRPANNALSlsquo93421301-304

bull  WillisKDDXuCWuJKLevinGGrossMDInteracEvefabricaEonnewinterfacesfordigitalfabricaEonProcTEI11pp69-72

LaserOrigamiampLaserCugngamp3DampObjectsamp(CHIrsquo13)

StefanieMuellerBasEanKruckPatrickBaudisch

h]pswwwyoutubecomwatchv=arjRtCjI9AQ

2 201313095

bend

bull  HyunyoungSongFranccediloisGuimbreEegravereChangHuHodLipsonModelCraycapturingfreehandannotaEonsandeditsonphysical3DmodelsProceedingsofthe19thannualACMsymposiumonUserinterfacesoywareandtechnologyOctober15-182006MontreuxSwitzerland

InteracEveampConstrucEonampInteracEveampFabricaEonampofampFuncEonalampMechanicalampDevicesamp(UISTrsquo12)

StefanieMuellerPedroLopesPatrickBaudisch

h]pdlacmorgcitaEoncfmid=23801162380191

2 201313095

3D

3D

bull  SavageVSchmidtRGrossmanTFitzmauriceGandHartmannBAseriesoftubesAddinginteracEvityto3dprintsusinginternalpipesInProcUIST14(2014)

3DampPrinEngampPneumaEcampDeviceampControlsampwithampVariableampAcEvaEonampForceampCapabiliEesamp(CHIrsquo15)amp

MarynelVazquezEricBrockmeyerRutaDesaiChrisHarrisonSco]EHudson

h]pswwwyoutubecomwatchv=-4gFYvhkz0Y

2 201313095

OpenFab 3D

fablets

3 3

bull  CHENDMATUSIKWSITTHI-AMORNPDIDYKPANDLEVIND2013Spec2FabAreducer-tunermodelfortranslat-ingspecificaEonsto3DprintsACMTransGraph324(July)

OpenFabampAampProgrammableampPipelineampforampMulEMaterialampFabricaEonamp(SIGGRAPHrsquo13)

KirilVidimcˇeSzu-PoWangJonathanRagan-KelleyWojciechMatusik

2 201313095

3D

3D

3D

3D14 30 13 67

244

14

3D

bull  MuellerSKruckBBaudischPLaserOrigamiLaser-Cunng3DObjectsProcCHIrsquo132585-2592

faBrickaEonampFastamp3DampPrinEngampofampFuncEonalampObjectsampbyampIntegraEngampConstrucEonampKitampBuildingampBlocksamp(CHIrsquo14)amp

StefanieMuellerTobiasMohrKersEnGuentherJohannesFrohnhofenPatrickBaudisch

h]pswwwyoutubecomwatchv=BlO6YRcLJjE

Touching13 the13 Void13 Direct-shy‐Touch13 Interac4on13 for13 Intangible13 Displays(CHIrsquo10)Li-Wei Chan Hui-Shan Kao Mike Y Chen Ming-Sui Jane Yi-Ping Hung

201413109　久保勇貴 2（鬼コース）13

どんなもの13

空中像へのタッチのエラーに関する調査及び影や音のフィードバックを付与することによるパーフォーマンス向上を示した研究13

先行研究と比べてどこがすごい13

平面画像をタッチする際の奥行きに関するエラーの正確な取得を初めて検証13

技術や手法のキモはどこ13

２つの赤外線カメラを用いた正確なタッチの検出13

どうやって有効だと検証した13

タッチ時の奥行きの正確さに関する被験者実験を実施またタッチする際に影や音を付けた際の反応時間を被験者実験で検証13

議論はある13

ユーザは慣れるまで影や音のフィードバックが必要だがそのあとは必要なくなる13

次に読むべき論文は13

MirageTable13 （CHI12） 13

MirageTable13 Freehand13 Interac4on13 on13 a13 Projected13 13 Augmented13 Reality13 Tabletop(CHIrsquo12)

Hrvoje Benko Ricardo Jota Andrew D Wilson

201413109　久保勇貴 2（鬼コース）13

どんなもの13

テーブル上においてバーチャルな物体をリアルタイムで現実でものを動かすことと同様な動作に操作可能なシステム13

先行研究と比べてどこがすごい13

現実の物体をリアルタイムで画面に取りこむことができ質の高いフリーハンドインタラクションを実現した点13

技術や手法のキモはどこ13

色深度前景頭追跡プロキシパーティクルを駆使したリアルタイムメッシュの作成13

どうやって有効だと検証した13

凹凸など例外な表面に対しての投影した際の画像の質についての評価実験また仮想物体の奥行き知覚に関する実験も行った13

議論はある13

前面のみしかキャプチャしていないため差が生じる握っている場所の再現は未解決な課題である13

次に読むべき論文は13

Hirsch13 et13 al13 201413 (SIGGRAPHrsquo14)13

A13 Compressive13 Light13 Field13 Projec4on13 System13 (SIGGRAPHrsquo14)MaChew13 Hirsch13 Gordon13 Wetzstein13 Ramesh13 Raskar

201413109　久保勇貴 2（鬼コース）13

どんなもの13

通常の3Dディスプレイに比べて解像度輝度コントラストを改善した圧縮ライトフィードディスプレイ13

先行研究と比べてどこがすごい13

多視点立体視を複数でなく１台のプロジェクタを用いて実現した13

技術や手法のキモはどこ13

受動的スクリーンと高速切り替えプロジェクタによる新しい光学設計13

どうやって有効だと検証した13

4つのシーン例を投影したものを示したアニメーションの3D効果について観察を行った13

議論はある13

光路長を広げると観察できる画質が大幅に制限され他のライトフィードビューと混線が生じる13

次に読むべき論文は13

Butler13 et13 al13 201113

Vermeer13 Direct13 Interac4on13 with13 a13 360deg13 Viewable13 3D13 Display(UISTrsquo11) Alex Butler Otmar Hilliges Shahram Izadi Steve Hodges David Molyneaux David Kim

201413109　久保勇貴 2（鬼コース）13

どんなもの13

映し出された3Dオブジェクトとインタラクションを行えるシステム13

先行研究と比べてどこがすごい13

ディスプレイ内の画像とのインタラクションを提案ボリュームディスプレイを支援する新しいセンシング法の提案13

技術や手法のキモはどこ13

パラボラ鏡に取り付けた赤外線カメラセンサによる指先検出13

どうやって有効だと検証した13

アプリケーション例を示した13

議論はある13

パラボラ鏡の大きさよりもディスプレイサイズが小さくなってしまう13

次に読むべき論文は13

Hirsch13 et13 al13 201213

8D13 Interac4ng13 with13 a13 Relightable13 Glasses-shy‐Free13 3D13 Display(CHIrsquo12)Li-Wei Chan Hui-Shan Kao Mike Y Chen Ming-Sui Jane Yi-Ping Hung

201413109　久保勇貴 2（鬼コース）13

どんなもの13

ライトフィードによる入力とライトフィールドによる表示を行うリアルタイム8Dディスプレイ13

先行研究と比べてどこがすごい13

リアルタイムでの8Dディスプレイの実現（先行研究は7fps）13

技術や手法のキモはどこ13

GPUにおけるレンダリング処理13

どうやって有効だと検証した13

MRIデータを用いたディスプレイのデモを示した13

議論はある13

現在はグレースケールの入力のみだがカラーでの入力できればより強力になるだろう13

次に読むべき論文は13

Sahoo13 et13 al13 201513

Control13 of13 Non-shy‐Solid13 Diffusers13 by13 Electrosta4c13 Charging13 (CHIrsquo15) Deepak Ranjan Sahoo Diego Martinez Plasencia Sriram Subramanian

201413109　久保勇貴 2（鬼コース）13

どんなもの13

シャボン玉や霧などの非固体を電場による制御を試みた研究13

先行研究と比べてどこがすごい13

非固体の形や位置の制御法を提案した点13

技術や手法のキモはどこ13

[Intra13 et13 al13 11]中のldquowire-shy‐to-shy‐Cylinderdquoを用いたエアゾール粒子の帯電13

どうやって有効だと検証した13

霧及びシャボン玉によるディスプレイのアプリケーション例で実際に制御して見せた13

議論はある13

風による影響を本手法は打ち消すことができた13

次に読むべき論文は13

Barnum13 et13 al13 201013

A13 Mul4-shy‐Layered13 Display13 with13 Water13 Drops(SIGGRAPHrsquo10)Peter C Barnum Srinivasa G Narasimhan Takeo Kanade

201413109　久保勇貴 2（鬼コース）13

どんなもの13

複数層の落下水滴にプロジェクションマッピングを行いディスプレイとした研究13

先行研究と比べてどこがすごい13

水滴の制御を行うことで単一のプロジェクタによって複数層の映像投影を可能とした点13

技術や手法のキモはどこ13

[Ambravaneswaran13 et13 al13 2002]及び本研究における実験結果に基づく水滴生成13

どうやって有効だと検証した13

複数のディスプレイ例を示した13 例）顔の投影水槽シミュレータなど13

議論はある13

本当の3Dディスプレイにするにはより多くの水滴制御が必要13

次に読むべき論文は13

Lee13 et13 al13 200713

An13 Immaterial13 Depth-shy‐Fused13 3D13 Display(VRSTrsquo07)Cha Lee Stephen DiVerdi Tobias Humlollerer

201413109　久保勇貴 2（鬼コース）13

どんなもの13

２つのスクリーンを駆使し3Dディスプレイを実現するdepth-shy‐fused13 3D(DFD)に関する評価を行いその結果よりディスプレイを提案した研究13

先行研究と比べてどこがすごい13

DFDが任意のスクリーン設定及び見る位置に対して有効であることを示した13

技術や手法のキモはどこ13

６通りのスクリーン組合せから２つを抽出し見え方の違いを検証した点13

どうやって有効だと検証した13

６通りのスクリーンについて立体的に見えるか被験者実験を実施その後それぞれに有意差がみられるか調べた13

議論はある13

ステレオイメージを認めることができなかったユーザに対しても強い3D効果が見られた13

次に読むべき論文は13

Tokuda13 et13 al13 201013

Cloud13 Display13 (ACErsquo10)Yutaka Tokuda Yasuhiro Suzuki Kunihiro Nishimura Tomohiro Tanikawa Michitaka Hirose

201413109　久保勇貴 2（鬼コース）13

どんなもの13

煙の渦輪を用いた空間を埋めるディスプレイ13

先行研究と比べてどこがすごい13

制御可能な手法により高所へのパーティクルを運搬することに着目した点13

技術や手法のキモはどこ13

コンピュータによって制御が行われる空気砲アレイ13

どうやって有効だと検証した13

箱の中で実験を行い安定して渦輪をできるようにした実際にデモを行ったことを示した13

議論はある13

今の試作機をより早くリフレッシュ速度を高めることによりより濃く空間を埋められることを目指す13

次に読むべき論文は13

Sato13 et13 al13 200913

Par]cle13 Display13 System　(JVRC09)13 -shy‐13 A13 Large13 Scale13 Display13 for13 Public13 Space13 -shy‐

Munehiko13 Sato13 Yasuhiro13 Suzuki13 13 Atsushi13 Hiyama13 Tomohiro13 Tanikawa13 Michitaka13 Hirose

201413109　久保勇貴 2（鬼コース）13

どんなもの13

パーティクルディスプレイによる公共スペースのための大画面ディスプレイの提案13

先行研究と比べてどこがすごい13

公共スペースにおける要求と制限に基づいたシステムを提案した点13

技術や手法のキモはどこ13

実験に基づく表示画像のスクロール時間の制御13

どうやって有効だと検証した13

Aという文字の知覚実験によって 適な点滅周期の調査を行った13

議論はある13

現在の試作機を組合せより高解像度にする必要がある13

次に読むべき論文は13

Kwon13 et13 al13 201513

FugaciousFilm13 Exploring13 Aen4ve13 Interac4on13 with13 Ephemeral13 Material13 (CHIrsquo15)Hyosun13 Kwon13 Shashank13 Jaiswal13 Steve13 Benford13 Sue13 Ann13 Seah13

13 Peter13 BenneC13 Boriana13 Koleva13 Holger13 Schnaumldelbach

201413109　久保勇貴 2（鬼コース）13

どんなもの13

膜を押す引く飛び出ることができる新しい石鹸膜インタフェースの提案13

先行研究と比べてどこがすごい13

徐々に消えるインタフェースは高い注意を有するインタラクションを提供するという点を示したこと13

技術や手法のキモはどこ13

水グリセリンを201の対比で混ぜることでldquopoprdquoがきれいになるようにしかつ膜の耐久性を向上させた13

どうやって有効だと検証した13

３目並べを用いた被験者実験を実施13 ユーザは膜を割ると負け膜を自分のマスにするにはタッチ押す引くの書かれた通りの操作を行う13

議論はある13

ユーザに精密な動作を要求することはとりわけ注意を払うことを誘発する13

次に読むべき論文は13

Wetzstein13 et13 al13 201213

Tensor13 Displays13 Compressive13 Light13 Field13 Synthesis13 using13 Mul4layer13 Displays13 with13 Direc4onal13 Backligh4ng(SIGGRAPHrsquo12)

Gordon13 Wetzstein13 Douglas13 Lanman13 MaChew13 Hirsch13 Ramesh13 Raskar

201413109　久保勇貴 2（鬼コース）13

どんなもの13

視点によって異なる立体映像を見ることができる複数の層からなるディスプレイ13

先行研究と比べてどこがすごい13

既存の手法を合成したcomputa(onal13 displaysというディスプレイの新しいフレームワークを提案した13

技術や手法のキモはどこ13

時分割で視差マスクを表示することでユーザの視線ごとに立体像を表現する13

どうやって有効だと検証した13

通常のディスプレイ３層LCDLCD及び指向性バックライトの例による比較13 13

議論はある13

波紋を含むこと色チャンネルが悪影響を与える相互反射不均一などの問題が見られた13

次に読むべき論文は13

Matoba13 et13 al13 1213

SplashDisplay(VRICrsquo12)Yasuo Matoba Taro Tokui Ryo Sato Tochiki Sato Hideki Koike

201413109　久保勇貴 2（鬼コース）13

どんなもの13

パーティクルにCGを投射しパーティクルがテーブル上に投げられると爆発しパーティクルが噴きあがる13

先行研究と比べてどこがすごい13

ビーズがミリメートルからメートル単位までZ軸方向について空中で奥行きを表現する13

技術や手法のキモはどこ13

スピーカによって風力が発生させビーズを舞い上げる点13

どうやって有効だと検証した13

ビーズを投げると花火が打ちあがっているかのようなアプリケーション例を示した13

議論はある13

高いレベルの表現及び幅広い入力範囲を提供できた13

次に読むべき論文は13

Kim13 et13 al13 1413

MARIO13 Mid-shy‐air13 Augmented13 Reality13 Interac4on13 with13 Objects13 (ECrsquo14)Hanyuool13 Kim13 13 Issei13 Takahashi13 Hiroki13 Yamamoto13 Satoshi13 Maekawa13 Takeshi13 Naemura

201413109　久保勇貴 2（鬼コース）13

どんなもの13

350times300times250のテーブル上のスペースにおいて自由に動かせる空中像を造りだすことができる13

先行研究と比べてどこがすごい13

凹面鏡や凹レンズのように曲面でないため画像の歪曲が発生しない13

技術や手法のキモはどこ13

Aerial13 Imaging13 Plate(AIP)を用いた空中像の生成及びそのためのディスプレイ移動装置13

どうやって有効だと検証した13

左右からの視差の考慮及び奥行き表現時の画像提示視野角の検証などを行った13 13

議論はある13

投影しているひよこを叩いたり払いのけたりするような動作がデモ中見られた13

次に読むべき論文は13

Tactile Feedback on Flat Surfaces for the Visually Impaired13Ali Israr Olivier Bau Seung-Chan Kim Ivan Poupyrev13

どのようなものか 視覚障害者のための触覚を用いた視覚代用デバイス 先行研究と比べてどこがすごいか 道案内をしてくれる機械などはあるが日用品の場所を教えたり探すのを手伝ってくれるデバイスはない 技術や手法のキモ タッチパネルとカメラを搭載したデバイス 触覚を与える技術はTeslaTouchを利用 色を基準にオブジェクトの位置を認識 有用性の確認 視覚障害者二人に対して実験このデバイスを使

わなくても各自の方法で物を見つけられるが間違えることが多いこのデバイスを使用することで間違えることなく正確に物の位置を特定できた 課題 一つの色でしか判断できない 触感のあるなしでしか情報を伝えられない 関連論文 TeslaTouch [Bau et al 2010]

20150522 橋爪智 2鬼

Fingernail-Mounted Display of Attraction Force and Texture13Masataka Niwa Tomoko Nozaki Taro Maeda and Hideyuki And13

どのようなものか 指先に取り付けて触感と力を両方表現できるデバイス 先行研究と比べてどこがすごいか 触感と引力をそれぞれ表現するデバイスはあるが両方を一つのデバイスで表現した例は少ない 引力は自由な方向に付加することができる 技術や手法のキモ 偏心に重さを付けた円盤を4枚使用する 5-9Hz 引力　100-200Hz 触感 それぞれの円盤の位相や回転数を調整することで

触感と力 を表現する 4つのモータを使いそれぞれの円盤を独立して制御する 有用性の確認 4人の男性に対して実験80以上の精度で認識できた 関連論文 The nail-mounted attraction forcebump display [Nozaki et al 2008]

20150522 橋爪智 2 鬼

Gilded gait reshaping the urban experience with augmented footsteps13Yuichiro Takeuchi13

どのようなものか 靴に装着し地面の触感をコントロールするデバイス 先行研究と比べてどこがすごいか 単独で動作しなかったり特定の環境のみでしか動作しなかったりするrarr靴単体で動作環境に依存しない 技術や手法のキモ 6個の振動パネルを取り付けゲルでカバー app modulesを取り替えることができ様々な機能を付加できる（GPSsound) 4種類の地面を再現

bull  Hard Ground 振動させない bull  Soft Ground すべてのパネルを振動 bull  Bumpy Ground ジグザグに振動 bull  Godzilla 全てのパネルを振動何回か繰り返す 課題 モーターを使っているため波形をプログラミングできないrarr圧電素子を使用する 関連論文 Haptic Shoes [Fu et al 2010]

20150522 橋爪智 2鬼

ExoInterfaces novel exosceleton haptic interfaces for virtual reality augmented sport and rehabilitation

Dzmitry Tsetserukou Katsunari Sato Susumu Tachi13

どのようなものか 腕に装着し物理的なinteractionを可能にするデバイス 先行研究と比べてどこがすごいか Exoskeleton 力を増幅するためだが重たく危険なこともある String-based wireが視界をまたぐ動きに制限がある rarr腕の動きに制限を与えない安全 技術や手法のキモ 「FlexTorque」人間の筋肉の構造を再現するベルトとモーターを使用する肩の近くに装着することで

腕に負担がかかりにくい 触覚feedback弱いトルク 運動を支援強いトルク 課題 物理的な接触を表現するゲームやスポーツにより没頭させるリハビリのサポートをする視覚障害者の支援（ものの場所を教える） 関連論文 FlexTorque [Dzmitry et al 2010]

20150522 橋爪智 2 鬼

Perception of Ultrasonic Haptic Feedback on the Hand Localisation and Apparent Motion13

Graham Wilson Tom Carter Sriram Subramanian Stephen Brewster13

どのようなものか 超音波を用いた触覚フィードバック有効性の検討を行う 先行研究と比べてどこがすごいか 超音波触覚フィードバックは比較的新しく研究や操作方法に関する知識が少ない 腕を自由に動かすことができ小さいものは着用可能 技術や手法のキモ 88のアレイ状に超音波発生器を設置

有効性の確認 bull  局所的な触感 　　　25箇所に分割しそれぞれに超音波を当てる 　　　触感を感じた989 　　　場所の誤差85mm bull  手のひらを動く触感 上下左右に動く 　　　動いてると感じた629

20150522 橋爪智 2 鬼

Friction Measurements on a Large Area TPaD13Nicholas D Marchuk J Edward Colgate Michael A Peshkin13

どのようなものか 超音波の振動により触感を与える 先行研究と比べてどこがすごいか ガラス板を使うので透明後ろにディスプレイを配置可能 技術や手法のキモ 「Squeeze Film Effect（スクイズ膜効果）」 ガラス板に取り付けた圧電素子の円盤に高周波信号

をかける 実験 振動しない部分＝摩擦が発生しない部分が発生周波数により場所が変わる rarr摩擦を大きさをかける力の大きさから計測 rarr指の場所に合わせて複数の周波数を使い分ける 関連論文 T-PaD[Winfield et al 2007]

20150522 橋爪智 2 鬼

STIMTAC a Tactile Input Device with Programmable Friction13Michel Amberg Freacutedeacuteric Giraud Betty Semail Paolo Olivo Geacutery Casiez Nicolas Roussel13

どのようなものか 触感を与えられるタッチデバイス 先行研究と比べてどこがすごいか LATPaD サイズ大きいノイズが大きい TeslaTouch 高い電圧付加が必要GNDに接続しなければいけない

技術や手法のキモ 「Squeeze Film Effect」超音波を用いて振動を与える 圧電性セラミックを電極にコーディング 指トラッキングは力センサを用いる 活用法 マウスキーボード絵を描く 関連論文 LATPaD[Vincent et al 2011] TeslaTouch[Bau et al 2010]

20150522 橋爪智 2 鬼

Surround Haptics Tactile Feedback for Immersive Gaming Experiences Ali Israr Seung-Chan Kim Ivan Poupyrev Jan Stec13

どのようなものか ゲームに合わせて高解像度の触覚フィードバックをユーザーに与える椅子 先行研究と比べてどこがすごいか 荒く配置した安価な振動アクチュエータで高解像度の触覚フィードバックを行える 一点の振動連続した動き範囲の振動などを再現

技術や手法のキモ 仮想的な振動アクチュエータをいくつかの振動アクチュエータを使って作り出す physical-physicalphysical-virtualvirtual-virtual ゲームにHaptics Engineを導入しHaptics APIを用いてHaptic Displayを操作する 関連論文 Exploring Surround Haptics Displays[Israr et al 2010]

20150522 橋爪智 2 鬼

Audio-Haptic Feedback in Mobile Phones Angela Chang Conor OrsquoSullivan13

どのようなものか haptics機能のついてない携帯電話にオーディオ機能を利用した触覚フィードバックを追加する 先行研究と比べてどこがすごいか 簡単に作れてnon-haptic mobile devicesでも大丈夫 技術や手法のキモ 「MultiFunction Transducer(MFT)」 スピーカーから音と信号の両方を出力できる

bull  Haptic Inheritance 　　音を2つの周波数帯に分ける bull  Synthesis and Matching 　　低周波数帯(20-300Hz)を使い触感を伝える 有効性の検討 42人の人を対象に実験を行う83の人が触感を感じた

20150522 橋爪智 2 鬼

Resolution of Sleep Deprivation Problems using ZZZoo Pillows13Shunsuke Yanaka Motoki Ishida13

どのようなものか 近年不眠症の人が多い rarr誰かと接していると安心し睡眠に導入しやすくなる rarrまるで添い寝をしているようなリアルな抱きまくらを使う 技術や手法のキモ breathing sensation 風船を使って人の呼吸を再現肺の形の風船弱く長い呼吸をする

heating お湯を使って人の体温を再現45 有効性の確認 84人の人が実験 呼吸が睡眠を誘ったかrarr61 体温が睡眠を誘ったかrarr85 関連論文 The Impact of Sleep Disorders on Social Life[Komada et al 2007]

20150522 橋爪智 2 鬼

まとめ13超音波 モーター 風

20150522 橋爪智 2 鬼

コイル 電気刺激 Electrovibration

振動 音 お湯

なかの

Temporally Consistent Disparity and Optical Flow via Efficient Spatio-temporal Filtering1

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示した

議論論はあるか

時間的に一定の視差を算出する手法静止画ステレオよりも精度度が良良いことを示す従来よりも推定精度度が良良いオプティカルフローも算出する

一枚の静止画に対するフィルタリング[1]をステレオ動画に拡張している

ケンブリッジのステレオ動画のデータセットを利利用 実写動画に対する比較も行行うノイズ耐性も検証する

フィルタベースとエネルギーベースの関係性を良良り理理解することで推定精度度を上げる

実装が簡単でリアルタイム視差推定が可能

Fast Cost-Volume Filtering for Visual Correspondence and Beyond [Rhemann C Hosni A Bleyer M Rother C Gelautz M CVPR2011] Real-time Spatiotemporal Stereo Matching Using the Dual-Cross-Bilateral Grid [Richardt C Orr D Davies I Criminisi A Dodgson NA ECCV2010] Secrets of optical flow estimation and their principles [Sun D Roth S Black MJ 2010] Motion estimation with non-local total variation regularization [Werlberger M Pock T Bischof H CVPR2010] Temporally Consistent Disparity Maps from Uncalibrated Stereo Videos [Bleyer M Gelatuz M ISPA2011]

なかの

SymStereo Matching using Induced Symmetry (2014)2

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示した

議論論はあるか

画像の対称性を用いてステレオマッチングを行行う 左右の画像を反転させて重ね合わせることで対称性を測る

絵的な類似の代わりに対称性を使う今まで対称性を用いる手法はなく新規性が大きい

三つのSymmetry-baseの手法で精度度を検証従来手法よりも精度度が向上しているMiddlebury Oxford Corridorfountain-P11のデータセット使用

ステレオの問題である不不連続な箇所オクルージョン部分は未解決である演算時間はやや増加

1-Dラインのコストを考える今までは撮像面に対して平行行な平面でデプスを考えていたが垂直な平面を考える

BT[Birchfield and Tomasi 1998] Census transform[Zabih and Woodfill 1994] Log N[Kovesi 1997] radio-metoric differences[Hirschmuller Scharstein 2009]

なかの

Camouflaging an Object from Many Viewpoints3

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

多くの視点から三次元の物体をカモフラージュするカモフラージュによってオクルージョン部分の不不連続がどの程度度生じるか他の視点ではどれほどになるかの検証

MRF（Markov Random Fields）ベース

新しい三次元物体のカモフラージュモデルを構築 37種類のデータセットを作る

箱形の物体に対してカモフラージュ処理理を施し 結果を評価する

オクルージョン不不連続テクスチャの歪みが問題 照明や画像の貼りつけに制限あり

なかの

Aliasing Detection and Reduction in Plenoptic Imaging4

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

カメラアレイ撮影の角度度のエイリアシングを除去するエイリアシングの探索索と打ち消しを行行う

周波数領領域ではなく空間領領域で探索索を行行う

先行行研究がフィルタデモザイキング再パラメータ調整などの前処理理でエイリアシング除去を行行うのに対しエイリアシング探索索後にリフォーカスの段階でエイリアシングを取り除く

8times8の平行行カメラアレイで検証するカメラ間の 基線長は70mm

今回は基線長が長いデータセットを使った 次はLytroなどのマイクロレンズアレイで検証する

Globally consistent multi-label assignment on the ray space of 4d light fields [S Wanner C Straehle B Goldluecke CVPR2013] Lineassisted light field triangulation and stereo matching [Z Yu X Guo H Lin A Lumsdaine J Yu ICCV 2013]

なかの

Globally Consistent Multi-Label Assignment on the Ray Space of 4D Light Fields5

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

四次元ライトフィールドの光線情報において マルチラベルの領領域分割を行行う

深度度情報光線情報を用いて領領域分割することで 二次元（空間）情報だけでは分割が難しかった 領領域を分割可能とする

The light field camera Extended depth of field aliasing and superresolution [T Bishop P Favaro IEEE Transactions on Pattern Analysis and Machine Intelligence 2012]

なかの

Line Assisted Light Field Triangulation and Stereo Matching6

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

光線情報を利利用してステレオマッチングの精度度を 向上させる手法三角測量量の誤差を減らす

Light Field Stereo Matchingとかいう手法 グラフ構造を作成

Variational light field analysis for disparity estimation and super-resolution [S Wanner and B Goldlumluecke 2013]

なかの

Adaptive stereo similarity fusion using confidence measures 20157

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

ステレオマッチングの新しい方式fusion weightsを提案複数の手法を組み合わせてコスト計算を行行う手法付録に既存手法のコスト関数一覧あり

パラメータに依存する手法を用いないことで高速化を図っている

一つのアルゴリズムでは異異なる特性を持つ領領域全てに対して適切切なマッチングはできない複数を組み合わせることでそれを補う13種と多い

middleburyとKITTIのデータセットで評価

一枚あたり03sと高速だが001sとより高速なアルゴリズムが存在する

Segment-based stereo matching using belief propagation and a self-adapting dissimilarity measure [A Klaus M Sormann K Karner ICPR2006] On building an accurate stereo matching system on graphics hardware [X Mei X Sun M Zhou S Jiao H Wang X Zhang ICCV2011] Similarity measures for depth estimation [K Wegner O Stankiewicz 3DTV-CON2009] On accurate dense stereo-matching using a local adaptive multi-cost approach [C Stentoumis L Grammatikopoulos I Kalisperakis G Karras ISPRS2014] A quantitative evaluation of confidence measures for stereo vision [X Hu P Mordohai PAMI2012]

なかの

SIMILARITY MEASURE FOR DEPTH ESTIMATIOM 20098

どんなもの

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

4種類の視差推定アルゴリズムを組み合わせている 類似度度の選択性の解析

Belief Propagationの枠組みを用いる

名古屋大学の多視点データベースを利利用

HHI Test Material for 3D Video [I Feldmann M Muller F Zilly R Tanger A SmolicP Kauff T Wiegand 2008] Multiview Video Test Sequence and Camera Parameters [Yo-Sung Ho Eun-Kyung Lee and Cheon Lee 2008] 1D Parallel Test Sequences for MPEG-FTV [M Tanimoto T Fujii N Fukushima 2008] Non-parametric Local Transforms for Computing Visual Correspondence [R Zabih J Woodfill 1994]

なかの

Spatiotemporal Stereo via Spatiotemporal Quadric Element (Stequel) Matching9

どんなもの

技術や手法のキモはどこ

新しいマッチング手法を提案動き考慮することなく時間情報を取り込むことができる 時間方向のエピ線を考える

オプティカルフロー推定は3D境界や低テクスチャで弱いが提案手法はロバストである

なかの

Depth Video Enhancement Based on Weighted Mode Filtering10

どんなもの

議論論はある

ノイズを含んだ低解像度度のデプスマップの質を高める手法（超解像度度とデノイズ）時間方向も使用簡単なオプティカルフローを計算し利利用する

非反復復アルゴリズムのためGPUに載せやすく高速化が考えられる

なかの

Fast Bilateral-Space Stereo for Synthetic Defocus11

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

議論論はある

次に読むべき論論文は

高速な自由焦点ぼけ画像の作成

Bilateral-spaceを提案

従来研究よりも10から100倍速くぼけ具合の精度度も良良い

ぼけを作成するというアプリケーションに利利用する距離離という面では提案手法が有益であるが実測的な距離離という面での精度度は悪い背景と前景が同じ色で近くにある場合同一ととらえてしまう

Efficient high-resolution stereo matching using local plane sweeps [S N Sinha D Scharstein and R SzeliskiCVPR2014] Bilateral filtering-based optical flow estimation with occlusion detection [J Xiao H Cheng H Sawhney C Rao and M IsnardiECCV2006] Efficient nonlocal regularization for optical flow [P Krumlahenbumluhl and V KoltunECCV2012] Real-time spatiotemporal stereo matching using the dual-cross-bilateral grid [C Richardt D Orr I Davies A Criminisi and N A DodgsonECCV2010]

どうやって有効性を示した視差推定の精度度はmiddleburyKITTI

なかの

Robust Spatiotemporal Stereo for Dynamic Scenes12

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

ステレオ動画のフレーム間情報を取り入れることでノイズ耐性を向上させるまた動きの大きなものも考える

時間を含めたウインドウの提案自動的にそのような変化に対応する画像領領域を検出する

従来の時空間ステレオと比べ大きな動きによる急激な視差の時間変化に対して頑健である

なかの

Spacetime Stereo A Unifying Framework for Depth from Triangulation13

どんなもの

先行行研究と比べてどこがすごい

space time stereoを提案ステレオカメラの視差推定でも構造光を用いた視差推定でも利利用可能 動的なシーンでの利利用も可能

フレームごとマッチングを取っていたが複数フレームでのマッチングを可能とした

なかの

Learning to Select and Order Vacation Photographs (Disney research)14

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示したあまりにもたくさん撮影した写真たちから自動的にフォトアルバムを作成する研究

複雑な視覚での区別を試みたのはこの論論文が初

５つの異異なるトピックから63の個人的な写真コレクションのデータセットを利利用し定量量的に評価する

写真間の差別かを定義する顔全体の絵何が写っているか写っていないかを評価する

Jointly aligning and segmenting multiple web photo streams for the inference of collective photo storylines [G Kim and E P Xing CVPR2013] Photo sequencing [T Basha Y Moses and S Avidan CVPR2012]

なかの

A Taxonomy and Evaluation of Dense Two-Frame Stereo Correspondence Algorithms15

どんなもの

どうやって有効性を示した

次に読むべき論論文は

ステレオマッチングに関する分類を行行う 新たなデータセットを作成する

というよりも他の手法が有効性を示すことができるようにデータセットを作成した 今ではmiddleburyのデータセットと言えばステレオ業界では超有名

High-resolution stereo datasets with subpixel-accurate ground truth

なかの

Discriminability Limits in Spatio-Temporal Stereo Block Matching1

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

spatio-temporal disparity estimationの根本的な前提の正当性を解析しマッチング処理理の際に動きが助けとなる程度度を決定する

時空間マッチングのエラーを分析し誤りの原因を確率率率で導出する（フレーム数動きの分散画像特徴ノイズの関数）

[34243334]は時空間マッチングの利利点を指摘していたが本論論文はマッチング精度度の向上のために動きを用いる手法の程度度や性質を研究する

6つのステレオビデオを用いて検証を行行った

Spacetime stereo Shape recovery for dynamic scenes [L Zhang B Curless and S Seitz CVPR2003] Spatiotemporal stereo and scene flow via stequel matching [M Sizintsev and R Wildes PAMI2012] Temporally consistent disparity and optical flow via efficient spatio-temporal filtering [A Hosni C Rhemann M Bleyer and M Gelautz PRCAIVT2012] Spacetime stereo A unifying framework for depth from triangulation [PAMI2005] Dynamic depth recovery from multiple synchronized video streams [H Tao H Sawhney and R Kumar CVPR2001] Spatiotemporal descriptor for wide-baseline stereo reconstruction of non-rigid and ambiguous scenes [ECCV2003]

なかの

Depth-Based Patch Scaling for Content-Aware Stereo Image Completion2

どんなもの

どうやって有効性を示した

ステレオでデプスを取り物体の三次元情報を使ってインペインティングを行行う

bookのデータセット背景が繰り返しパターンが多いものを使っている

なかの

Fast Semi-dense Surface Reconstruction from Stereoscopic Video in Laparoscopic Surgery3

どんなもの

手法の流流れ

次に読むべき論論文は

腹腔内手術の際にステレオビデオから高速に物体の三次元再構成を行行う研究

Evaluation of stereo matching costs on images with radiometric differences [Hirschmueller H Scharstein D PAMI2008]

スコープカメラから画像取得GPUで演算する 視差を算出しフィルタにかける距離離に変換 点群を再びフィルタにかけて三次元再構成

なかの

3D Reconstruction from Accidental Motion4

どんなもの

技術や手法のキモはどこ

議論論はある

数秒のビデオ（単眼）から三次元再構成を行行う 手ぶれなどの動きから再構成が可能で特定の動きや機材を必要としない

短い基線長でも再構成が可能（3mmの基線長）

基線長が短いため背景の精度度が低くなる リフォーカス画像作成には十分 練習では上手く動作したが検証がまだ必要

なかの

Panoramic Video from Unstructured Camera Arrays5

どんなもの

技術や手法のキモはどこ

議論論はある

複数のカメラを用いたパノラマ撮影を行行う その際に不不自然さがないような動画を作成する

不不自然さを感じる感覚特性を提示しそれにのっとって対策を講じている

一つのカメラの解像度度と品質を向上させるよりも複数台のカメラを組み合わせることがはるかに簡単で有益である専門家でなくてもGoProのカメラセットを組み合わせることは容易易

カメラの配置は厳密に決められていない完璧な時間同期やローリングシャッターの不不足のような実撮影での問題もクリアしている

先行行研究と比べてどこがすごい

どうやって有効性を示した左のシステムは14台のカメラを使用 右のシステムはGoProを5台使用

Disney 201558

なかの

Floating Scale Surface Reconstruction6

どんなもの

技術や手法のキモはどこ

流流動的にスケールを変えられる三次元再構成手法

サンプル規模に依存するパラメータがない rarrどのスケールのサンプルにも対応できる

siggraph2014

なかの

A Super Resolution Reconstruction Scheme for Mixed Spatio-Temporal Stereo Video7

どんなもの

技術や手法のキモはどこ

ビデオ超解像アルゴリズム

二台のカメラを使用 一台は低解像度度で高速一台は高解像度度で低速

HHI 3DV ftp siteのBookarrivalとbeergadenを使用どうやって有効性を示した

なかの

What Is a Good Day for Outdoor Photometric Stereo8

どんなもの

先行行研究と比べてどこがすごい

議論論はある

次に読むべき論論文は

屋外における照度度差があるステレオの研究 屋外でステレオを行行う際に有利利or不不利利な日照条件を明らかにする

点光源を用いた研究は行行われていたが屋外での研究はされていなかった

晴れより曇りの方が精度度が良良い雲があるから特徴量量を取りやすい雑音を白色ガウスモデルを想定 季節ごとのデータセットを利利用してみても良良い

Time-lapse photometric stereo and applications [F Shen K Sunkavalli N Bonneel S Rusinkiewicz H Pfisterand X Tong2014] Outdoor photometric stereo [L-F Yu S-K Yeung Y-W Tai D Terzopoulos and T FChan ICCP2013]

どうやって有効性を示した屋外の照明に関するHDR環境マップのデータベースを利利用

Disney 2015424

なかの

COLORBRUSH ANIMATED DIFFUSION FOR INTUITIVE COLORIZATION SIMULATING WATER PAINTING 9

どんなものアニメを水彩画で描いたように変換する 水彩画を描くには経験が必要であるがそれを作成するアルゴリズムを考案絵具が水によりどうにじむかシュミレーションしている

Disney 20141027 ICIP2014

次に読むべき論論文はGabor-space geodesic active contoursrdquo In Algebraic Frames for the Perception-Action Cycle [C Sagiv NA Sochen and YY Zeevi 2000] Practical temporal consistency for image-based graphics applications [M Lang O Wang T Aydin A Smolic and M Gross SIGGRAPH2012] Computer-Generated Watercolor [CJ Curtis SE Anderson JE Seims KW Fleischer and DH Salesin SIGGRAPH1997]

なかの

From Sound to Sight Using Audio Processing to enable Visible Light Communication 10

どんなもの光に情報を載せる技術プロジェクトページがあって光関係の研究が8個載っている

httpwwwdisneyresearchcomprojectvisible-light-communication

ビデオのURL httpwwwdisneyresearchcomwpcontentuploadsPub_InvisibleLightCommunication_Siggraph14_videomp4

• 201211106_KeisukeKawahara
• 201311421_KeitaKanai_02
• 201313095_AkiraIshii_02
• 201413109_YuukiKubo_02
• 201513110_SatoshiHashizume_02
• 鬼輪講マラソン③_1
• 鬼輪講マラソン③_2

2 201313095

Non-linearSpaEalSampling

SVM

12

948

15cm

bull  NakatsumaKShinodaHMakinoYSatoKandMaenoTTouchinterfaceonbackofthehandInprocofSIGGRAPHrsquo11(2011)391ndash391

bull  ButlerAIzadiSandHodgesSSidesightmulE-touchinteracEonaroundsmalldevicesInProcofUISTrsquo08(2008)201ndash204

zSenseampEnablingampShallowampDepthampGestureampRecogniEonampforampGreaterampInputampExpressivityamponampSmartampWearablesamp(CHIrsquo15)

AnushaWithanaRoshanPeirisNipunaSamarasekaraSurangaNanayakkara

h]pswwwyoutubecomwatchv=fQobwL8eSU4

2 201313095

bull  HARRISONCTANDANDMORRISD2010Skinputap-propriaEngthebodyasaninputsurfaceInProceedingsofthe28thinternaEonalconferenceonHumanfactorsincompuEngsystemsACMNewYorkNYUSACHIrsquo10453ndash462

Touchampinterfaceamponampbackampofamptheamphandamp(SIGGRAPH11)

KeiNakatsumaHiroyukiShinodaYasutoshiMakinoKatsunariSatoTakashiMaeno

h]pswwwyoutubecomwatchv=tKNLxh9Yw2M

2 201313095

Pose-IO EMS

Pose-IO

EMS

EMS58deg

46 5 be]er

bull  RoudautARauASterzCPlauthMLopesPandBaudischPGestureoutputeyes-freeoutputusingaforcefeedbacktouchsurfaceProcCHI1325472556

PropriocepEveampInteracEonamp(CHIrsquo15)amp

PedroLopesAlexandraIonWilliMuellerDanielHoffmannPatrikJonellPatrickBaudisch

h]pswwwyoutubecomwatchv=KMxIw7zhlw

2 201313095

EMS

AR EMSEMS

GPS

bull  TamakiEMiyakiTandRekimotoJPossessedHandAhandgesturemanipulaEonsystemusingelectricalsEmuliInProcampAHrsquo10amp(2010)21ndash25

CruiseampControlampforampPedestriansampControllingampWalkingampDirecEonampusingampElectricalampMuscleampSEmulaEonamp(CHIrsquo15)amp

MaxPfeifferTimDunteStefanSchneegassFlorianAltMichaelRohs

h]pswwwyoutubecomwatchv=JSfnm_HoUv4

2 201313095

EMS

EMS

EMS 16automaEccalibraEonsystem

auto-calibraEonsystems 16

8875g

bull  KruijffESchmalsEegDandBeckhausSUsingneuromuscularelectricalsEmulaEonforpseudo-hapEcfeedbackInProceedingsoftheACMsymposiumonVirtualrealitysoywareandtechnologyVRSTrsquo06ACM(NewYorkNYUSA2006)316ndash319

PossessedHandampTechniquesampforampControllingampHumanampHandsampusingampElectricalampMusclesampSEmuliamp(CHIrsquo11)amp

EmiTamakiTakashiMiyakiJunRekimoto

h]psvimeocom27044937

2 201313095

EMS

EMS

RFIDEMS

1276

bull  KruijffESchmalsEegDandBeckhausDUsingneuromuscularelectricalsEmulaEonforpseudo-hapEcfeedbackProcVRST06316mdash319

Affordance++ampallowingampobjectsamptoampcommunicateampdynamicampuseamp(CHIrsquo15)

PedroLopesPatrikJonellPatrickBaudisch

h]pswwwyoutubecomwatchv=d0J7V37zQjY

2 201313095

EMS

EMS

EMS

ReacEonloss

EMS

UsingampNeuromuscularampElectricalampSEmulaEonampforampPseudoHapEcampFeedbackamp(VRSTrsquo06)

ErnstKruijffDieterSchmalsEegSteffiBeckhaus

2 201313095

SVM

106 Per-User

863 13

712

13

bull  SatoMPoupyrevIandHarrisonCToucheenhancingtouchinteracEononhumansscreensliquidsandeverydayobjectsInCHIrsquo12483ndash492

bull  TimCollinsAcEveacousEctouchinterfaceElectronicsLe]ersVol45No20pp1055ndash1056242009

TouchampampampAcEvateampAddingampInteracEvityamptoampExisEngampObjectsampusingampAcEveampAcousEcampSensingamp(UISTrsquo13)

MakotoOnoBuntarouShizukiJiroTanaka

h]pswwwyoutubecomwatchv=XgxXi6w8IQc

2 201313095

13

13

SVM

on-body

per-user 5 967 4987

bull  HarrisonCBenkoHWilsonAOmniTouchwearablemulEtouchinteracEoneverywhereinUIST11441-450

bull  MatsushitaNandRekimotoJHoloWalldesigningafingerhandbodyandobjectsensiEvewallUIST97209-210

ToucheampEnhancingampTouchampInteracEonamponampHumansampScreensampLiquidsampandampEverydayampObjectsamp(CHIrsquo12)

MunehikoSatoIvanPoupyrevChrisHarrison

h]pswwwyoutubecomwatchv=E4tYpXVTjxA

2 201313095

SVM

9 9TapSense 4

95 99

TapSenseDelete

bull  HarrisonCTanDandMorrisDSkinputappropriat-ingthebodyasaninputsurfaceInProcCHI10453-462

TapSenseampEnhancingampFingerampInteracEonamponampTouchampSurfacesamp(UISTrsquo11)

ChrisHarrisonJuliaSchwarzSco]EHudson

h]pswwwyoutubecomwatchv=-oN96cucBr4

2 201313095

13

13

22 SVM

13 FingersWholeArmForearm 876 Fingers877 WholeArm 955

883 Forearm 815

833

GUI

bull  SaponasTSTanDSMorrisDandBalakrishnanRDemonstraEngthefeasibilityofusingforearmelectromyographyformuscle-computerinterfacesInProcCHIrsquo09515-24

SkinputampAppropriaEngamptheampBodyampasampanampInputampSurfaceamp(CHIrsquo10)

ChrisHarrisonDesneyTanDanMorris

h]pswwwyoutubecomwatchv=g3XPUdW9Ryg

2 201313095

Fiberio

10 330 150

148 2

Fiberio

bull  MatsushitaNandRekimotoJHoloWallDesigningaFingerHandBodyObjectSensiEveWallProcUIST97209ndash210

FiberioampAampTouchscreenampthatampSensesampFingerprintsamp(UISTrsquo13)

ChrisEanHolzPatrickBaudisch

h]pswwwyoutubecomwatchv=p1a5yLzuTqA

2 201313095

3D

3D

bull  GeigerMVollertsenFTheMechanismsofLaserFormingCIRPANNALSlsquo93421301-304

bull  WillisKDDXuCWuJKLevinGGrossMDInteracEvefabricaEonnewinterfacesfordigitalfabricaEonProcTEI11pp69-72

LaserOrigamiampLaserCugngamp3DampObjectsamp(CHIrsquo13)

StefanieMuellerBasEanKruckPatrickBaudisch

h]pswwwyoutubecomwatchv=arjRtCjI9AQ

2 201313095

bend

bull  HyunyoungSongFranccediloisGuimbreEegravereChangHuHodLipsonModelCraycapturingfreehandannotaEonsandeditsonphysical3DmodelsProceedingsofthe19thannualACMsymposiumonUserinterfacesoywareandtechnologyOctober15-182006MontreuxSwitzerland

InteracEveampConstrucEonampInteracEveampFabricaEonampofampFuncEonalampMechanicalampDevicesamp(UISTrsquo12)

StefanieMuellerPedroLopesPatrickBaudisch

h]pdlacmorgcitaEoncfmid=23801162380191

2 201313095

3D

3D

bull  SavageVSchmidtRGrossmanTFitzmauriceGandHartmannBAseriesoftubesAddinginteracEvityto3dprintsusinginternalpipesInProcUIST14(2014)

3DampPrinEngampPneumaEcampDeviceampControlsampwithampVariableampAcEvaEonampForceampCapabiliEesamp(CHIrsquo15)amp

MarynelVazquezEricBrockmeyerRutaDesaiChrisHarrisonSco]EHudson

h]pswwwyoutubecomwatchv=-4gFYvhkz0Y

2 201313095

OpenFab 3D

fablets

3 3

bull  CHENDMATUSIKWSITTHI-AMORNPDIDYKPANDLEVIND2013Spec2FabAreducer-tunermodelfortranslat-ingspecificaEonsto3DprintsACMTransGraph324(July)

OpenFabampAampProgrammableampPipelineampforampMulEMaterialampFabricaEonamp(SIGGRAPHrsquo13)

KirilVidimcˇeSzu-PoWangJonathanRagan-KelleyWojciechMatusik

2 201313095

3D

3D

3D

3D14 30 13 67

244

14

3D

bull  MuellerSKruckBBaudischPLaserOrigamiLaser-Cunng3DObjectsProcCHIrsquo132585-2592

faBrickaEonampFastamp3DampPrinEngampofampFuncEonalampObjectsampbyampIntegraEngampConstrucEonampKitampBuildingampBlocksamp(CHIrsquo14)amp

StefanieMuellerTobiasMohrKersEnGuentherJohannesFrohnhofenPatrickBaudisch

h]pswwwyoutubecomwatchv=BlO6YRcLJjE

Touching13 the13 Void13 Direct-shy‐Touch13 Interac4on13 for13 Intangible13 Displays(CHIrsquo10)Li-Wei Chan Hui-Shan Kao Mike Y Chen Ming-Sui Jane Yi-Ping Hung

201413109　久保勇貴 2（鬼コース）13

どんなもの13

空中像へのタッチのエラーに関する調査及び影や音のフィードバックを付与することによるパーフォーマンス向上を示した研究13

先行研究と比べてどこがすごい13

平面画像をタッチする際の奥行きに関するエラーの正確な取得を初めて検証13

技術や手法のキモはどこ13

２つの赤外線カメラを用いた正確なタッチの検出13

どうやって有効だと検証した13

タッチ時の奥行きの正確さに関する被験者実験を実施またタッチする際に影や音を付けた際の反応時間を被験者実験で検証13

議論はある13

ユーザは慣れるまで影や音のフィードバックが必要だがそのあとは必要なくなる13

次に読むべき論文は13

MirageTable13 （CHI12） 13

MirageTable13 Freehand13 Interac4on13 on13 a13 Projected13 13 Augmented13 Reality13 Tabletop(CHIrsquo12)

Hrvoje Benko Ricardo Jota Andrew D Wilson

201413109　久保勇貴 2（鬼コース）13

どんなもの13

テーブル上においてバーチャルな物体をリアルタイムで現実でものを動かすことと同様な動作に操作可能なシステム13

先行研究と比べてどこがすごい13

現実の物体をリアルタイムで画面に取りこむことができ質の高いフリーハンドインタラクションを実現した点13

技術や手法のキモはどこ13

色深度前景頭追跡プロキシパーティクルを駆使したリアルタイムメッシュの作成13

どうやって有効だと検証した13

凹凸など例外な表面に対しての投影した際の画像の質についての評価実験また仮想物体の奥行き知覚に関する実験も行った13

議論はある13

前面のみしかキャプチャしていないため差が生じる握っている場所の再現は未解決な課題である13

次に読むべき論文は13

Hirsch13 et13 al13 201413 (SIGGRAPHrsquo14)13

A13 Compressive13 Light13 Field13 Projec4on13 System13 (SIGGRAPHrsquo14)MaChew13 Hirsch13 Gordon13 Wetzstein13 Ramesh13 Raskar

201413109　久保勇貴 2（鬼コース）13

どんなもの13

通常の3Dディスプレイに比べて解像度輝度コントラストを改善した圧縮ライトフィードディスプレイ13

先行研究と比べてどこがすごい13

多視点立体視を複数でなく１台のプロジェクタを用いて実現した13

技術や手法のキモはどこ13

受動的スクリーンと高速切り替えプロジェクタによる新しい光学設計13

どうやって有効だと検証した13

4つのシーン例を投影したものを示したアニメーションの3D効果について観察を行った13

議論はある13

光路長を広げると観察できる画質が大幅に制限され他のライトフィードビューと混線が生じる13

次に読むべき論文は13

Butler13 et13 al13 201113

Vermeer13 Direct13 Interac4on13 with13 a13 360deg13 Viewable13 3D13 Display(UISTrsquo11) Alex Butler Otmar Hilliges Shahram Izadi Steve Hodges David Molyneaux David Kim

201413109　久保勇貴 2（鬼コース）13

どんなもの13

映し出された3Dオブジェクトとインタラクションを行えるシステム13

先行研究と比べてどこがすごい13

ディスプレイ内の画像とのインタラクションを提案ボリュームディスプレイを支援する新しいセンシング法の提案13

技術や手法のキモはどこ13

パラボラ鏡に取り付けた赤外線カメラセンサによる指先検出13

どうやって有効だと検証した13

アプリケーション例を示した13

議論はある13

パラボラ鏡の大きさよりもディスプレイサイズが小さくなってしまう13

次に読むべき論文は13

Hirsch13 et13 al13 201213

8D13 Interac4ng13 with13 a13 Relightable13 Glasses-shy‐Free13 3D13 Display(CHIrsquo12)Li-Wei Chan Hui-Shan Kao Mike Y Chen Ming-Sui Jane Yi-Ping Hung

201413109　久保勇貴 2（鬼コース）13

どんなもの13

ライトフィードによる入力とライトフィールドによる表示を行うリアルタイム8Dディスプレイ13

先行研究と比べてどこがすごい13

リアルタイムでの8Dディスプレイの実現（先行研究は7fps）13

技術や手法のキモはどこ13

GPUにおけるレンダリング処理13

どうやって有効だと検証した13

MRIデータを用いたディスプレイのデモを示した13

議論はある13

現在はグレースケールの入力のみだがカラーでの入力できればより強力になるだろう13

次に読むべき論文は13

Sahoo13 et13 al13 201513

Control13 of13 Non-shy‐Solid13 Diffusers13 by13 Electrosta4c13 Charging13 (CHIrsquo15) Deepak Ranjan Sahoo Diego Martinez Plasencia Sriram Subramanian

201413109　久保勇貴 2（鬼コース）13

どんなもの13

シャボン玉や霧などの非固体を電場による制御を試みた研究13

先行研究と比べてどこがすごい13

非固体の形や位置の制御法を提案した点13

技術や手法のキモはどこ13

[Intra13 et13 al13 11]中のldquowire-shy‐to-shy‐Cylinderdquoを用いたエアゾール粒子の帯電13

どうやって有効だと検証した13

霧及びシャボン玉によるディスプレイのアプリケーション例で実際に制御して見せた13

議論はある13

風による影響を本手法は打ち消すことができた13

次に読むべき論文は13

Barnum13 et13 al13 201013

A13 Mul4-shy‐Layered13 Display13 with13 Water13 Drops(SIGGRAPHrsquo10)Peter C Barnum Srinivasa G Narasimhan Takeo Kanade

201413109　久保勇貴 2（鬼コース）13

どんなもの13

複数層の落下水滴にプロジェクションマッピングを行いディスプレイとした研究13

先行研究と比べてどこがすごい13

水滴の制御を行うことで単一のプロジェクタによって複数層の映像投影を可能とした点13

技術や手法のキモはどこ13

[Ambravaneswaran13 et13 al13 2002]及び本研究における実験結果に基づく水滴生成13

どうやって有効だと検証した13

複数のディスプレイ例を示した13 例）顔の投影水槽シミュレータなど13

議論はある13

本当の3Dディスプレイにするにはより多くの水滴制御が必要13

次に読むべき論文は13

Lee13 et13 al13 200713

An13 Immaterial13 Depth-shy‐Fused13 3D13 Display(VRSTrsquo07)Cha Lee Stephen DiVerdi Tobias Humlollerer

201413109　久保勇貴 2（鬼コース）13

どんなもの13

２つのスクリーンを駆使し3Dディスプレイを実現するdepth-shy‐fused13 3D(DFD)に関する評価を行いその結果よりディスプレイを提案した研究13

先行研究と比べてどこがすごい13

DFDが任意のスクリーン設定及び見る位置に対して有効であることを示した13

技術や手法のキモはどこ13

６通りのスクリーン組合せから２つを抽出し見え方の違いを検証した点13

どうやって有効だと検証した13

６通りのスクリーンについて立体的に見えるか被験者実験を実施その後それぞれに有意差がみられるか調べた13

議論はある13

ステレオイメージを認めることができなかったユーザに対しても強い3D効果が見られた13

次に読むべき論文は13

Tokuda13 et13 al13 201013

Cloud13 Display13 (ACErsquo10)Yutaka Tokuda Yasuhiro Suzuki Kunihiro Nishimura Tomohiro Tanikawa Michitaka Hirose

201413109　久保勇貴 2（鬼コース）13

どんなもの13

煙の渦輪を用いた空間を埋めるディスプレイ13

先行研究と比べてどこがすごい13

制御可能な手法により高所へのパーティクルを運搬することに着目した点13

技術や手法のキモはどこ13

コンピュータによって制御が行われる空気砲アレイ13

どうやって有効だと検証した13

箱の中で実験を行い安定して渦輪をできるようにした実際にデモを行ったことを示した13

議論はある13

今の試作機をより早くリフレッシュ速度を高めることによりより濃く空間を埋められることを目指す13

次に読むべき論文は13

Sato13 et13 al13 200913

Par]cle13 Display13 System　(JVRC09)13 -shy‐13 A13 Large13 Scale13 Display13 for13 Public13 Space13 -shy‐

Munehiko13 Sato13 Yasuhiro13 Suzuki13 13 Atsushi13 Hiyama13 Tomohiro13 Tanikawa13 Michitaka13 Hirose

201413109　久保勇貴 2（鬼コース）13

どんなもの13

パーティクルディスプレイによる公共スペースのための大画面ディスプレイの提案13

先行研究と比べてどこがすごい13

公共スペースにおける要求と制限に基づいたシステムを提案した点13

技術や手法のキモはどこ13

実験に基づく表示画像のスクロール時間の制御13

どうやって有効だと検証した13

Aという文字の知覚実験によって 適な点滅周期の調査を行った13

議論はある13

現在の試作機を組合せより高解像度にする必要がある13

次に読むべき論文は13

Kwon13 et13 al13 201513

FugaciousFilm13 Exploring13 Aen4ve13 Interac4on13 with13 Ephemeral13 Material13 (CHIrsquo15)Hyosun13 Kwon13 Shashank13 Jaiswal13 Steve13 Benford13 Sue13 Ann13 Seah13

13 Peter13 BenneC13 Boriana13 Koleva13 Holger13 Schnaumldelbach

201413109　久保勇貴 2（鬼コース）13

どんなもの13

膜を押す引く飛び出ることができる新しい石鹸膜インタフェースの提案13

先行研究と比べてどこがすごい13

徐々に消えるインタフェースは高い注意を有するインタラクションを提供するという点を示したこと13

技術や手法のキモはどこ13

水グリセリンを201の対比で混ぜることでldquopoprdquoがきれいになるようにしかつ膜の耐久性を向上させた13

どうやって有効だと検証した13

３目並べを用いた被験者実験を実施13 ユーザは膜を割ると負け膜を自分のマスにするにはタッチ押す引くの書かれた通りの操作を行う13

議論はある13

ユーザに精密な動作を要求することはとりわけ注意を払うことを誘発する13

次に読むべき論文は13

Wetzstein13 et13 al13 201213

Tensor13 Displays13 Compressive13 Light13 Field13 Synthesis13 using13 Mul4layer13 Displays13 with13 Direc4onal13 Backligh4ng(SIGGRAPHrsquo12)

Gordon13 Wetzstein13 Douglas13 Lanman13 MaChew13 Hirsch13 Ramesh13 Raskar

201413109　久保勇貴 2（鬼コース）13

どんなもの13

視点によって異なる立体映像を見ることができる複数の層からなるディスプレイ13

先行研究と比べてどこがすごい13

既存の手法を合成したcomputa(onal13 displaysというディスプレイの新しいフレームワークを提案した13

技術や手法のキモはどこ13

時分割で視差マスクを表示することでユーザの視線ごとに立体像を表現する13

どうやって有効だと検証した13

通常のディスプレイ３層LCDLCD及び指向性バックライトの例による比較13 13

議論はある13

波紋を含むこと色チャンネルが悪影響を与える相互反射不均一などの問題が見られた13

次に読むべき論文は13

Matoba13 et13 al13 1213

SplashDisplay(VRICrsquo12)Yasuo Matoba Taro Tokui Ryo Sato Tochiki Sato Hideki Koike

201413109　久保勇貴 2（鬼コース）13

どんなもの13

パーティクルにCGを投射しパーティクルがテーブル上に投げられると爆発しパーティクルが噴きあがる13

先行研究と比べてどこがすごい13

ビーズがミリメートルからメートル単位までZ軸方向について空中で奥行きを表現する13

技術や手法のキモはどこ13

スピーカによって風力が発生させビーズを舞い上げる点13

どうやって有効だと検証した13

ビーズを投げると花火が打ちあがっているかのようなアプリケーション例を示した13

議論はある13

高いレベルの表現及び幅広い入力範囲を提供できた13

次に読むべき論文は13

Kim13 et13 al13 1413

MARIO13 Mid-shy‐air13 Augmented13 Reality13 Interac4on13 with13 Objects13 (ECrsquo14)Hanyuool13 Kim13 13 Issei13 Takahashi13 Hiroki13 Yamamoto13 Satoshi13 Maekawa13 Takeshi13 Naemura

201413109　久保勇貴 2（鬼コース）13

どんなもの13

350times300times250のテーブル上のスペースにおいて自由に動かせる空中像を造りだすことができる13

先行研究と比べてどこがすごい13

凹面鏡や凹レンズのように曲面でないため画像の歪曲が発生しない13

技術や手法のキモはどこ13

Aerial13 Imaging13 Plate(AIP)を用いた空中像の生成及びそのためのディスプレイ移動装置13

どうやって有効だと検証した13

左右からの視差の考慮及び奥行き表現時の画像提示視野角の検証などを行った13 13

議論はある13

投影しているひよこを叩いたり払いのけたりするような動作がデモ中見られた13

次に読むべき論文は13

Tactile Feedback on Flat Surfaces for the Visually Impaired13Ali Israr Olivier Bau Seung-Chan Kim Ivan Poupyrev13

どのようなものか 視覚障害者のための触覚を用いた視覚代用デバイス 先行研究と比べてどこがすごいか 道案内をしてくれる機械などはあるが日用品の場所を教えたり探すのを手伝ってくれるデバイスはない 技術や手法のキモ タッチパネルとカメラを搭載したデバイス 触覚を与える技術はTeslaTouchを利用 色を基準にオブジェクトの位置を認識 有用性の確認 視覚障害者二人に対して実験このデバイスを使

わなくても各自の方法で物を見つけられるが間違えることが多いこのデバイスを使用することで間違えることなく正確に物の位置を特定できた 課題 一つの色でしか判断できない 触感のあるなしでしか情報を伝えられない 関連論文 TeslaTouch [Bau et al 2010]

20150522 橋爪智 2鬼

Fingernail-Mounted Display of Attraction Force and Texture13Masataka Niwa Tomoko Nozaki Taro Maeda and Hideyuki And13

どのようなものか 指先に取り付けて触感と力を両方表現できるデバイス 先行研究と比べてどこがすごいか 触感と引力をそれぞれ表現するデバイスはあるが両方を一つのデバイスで表現した例は少ない 引力は自由な方向に付加することができる 技術や手法のキモ 偏心に重さを付けた円盤を4枚使用する 5-9Hz 引力　100-200Hz 触感 それぞれの円盤の位相や回転数を調整することで

触感と力 を表現する 4つのモータを使いそれぞれの円盤を独立して制御する 有用性の確認 4人の男性に対して実験80以上の精度で認識できた 関連論文 The nail-mounted attraction forcebump display [Nozaki et al 2008]

20150522 橋爪智 2 鬼

Gilded gait reshaping the urban experience with augmented footsteps13Yuichiro Takeuchi13

どのようなものか 靴に装着し地面の触感をコントロールするデバイス 先行研究と比べてどこがすごいか 単独で動作しなかったり特定の環境のみでしか動作しなかったりするrarr靴単体で動作環境に依存しない 技術や手法のキモ 6個の振動パネルを取り付けゲルでカバー app modulesを取り替えることができ様々な機能を付加できる（GPSsound) 4種類の地面を再現

bull  Hard Ground 振動させない bull  Soft Ground すべてのパネルを振動 bull  Bumpy Ground ジグザグに振動 bull  Godzilla 全てのパネルを振動何回か繰り返す 課題 モーターを使っているため波形をプログラミングできないrarr圧電素子を使用する 関連論文 Haptic Shoes [Fu et al 2010]

20150522 橋爪智 2鬼

ExoInterfaces novel exosceleton haptic interfaces for virtual reality augmented sport and rehabilitation

Dzmitry Tsetserukou Katsunari Sato Susumu Tachi13

どのようなものか 腕に装着し物理的なinteractionを可能にするデバイス 先行研究と比べてどこがすごいか Exoskeleton 力を増幅するためだが重たく危険なこともある String-based wireが視界をまたぐ動きに制限がある rarr腕の動きに制限を与えない安全 技術や手法のキモ 「FlexTorque」人間の筋肉の構造を再現するベルトとモーターを使用する肩の近くに装着することで

腕に負担がかかりにくい 触覚feedback弱いトルク 運動を支援強いトルク 課題 物理的な接触を表現するゲームやスポーツにより没頭させるリハビリのサポートをする視覚障害者の支援（ものの場所を教える） 関連論文 FlexTorque [Dzmitry et al 2010]

20150522 橋爪智 2 鬼

Perception of Ultrasonic Haptic Feedback on the Hand Localisation and Apparent Motion13

Graham Wilson Tom Carter Sriram Subramanian Stephen Brewster13

どのようなものか 超音波を用いた触覚フィードバック有効性の検討を行う 先行研究と比べてどこがすごいか 超音波触覚フィードバックは比較的新しく研究や操作方法に関する知識が少ない 腕を自由に動かすことができ小さいものは着用可能 技術や手法のキモ 88のアレイ状に超音波発生器を設置

有効性の確認 bull  局所的な触感 　　　25箇所に分割しそれぞれに超音波を当てる 　　　触感を感じた989 　　　場所の誤差85mm bull  手のひらを動く触感 上下左右に動く 　　　動いてると感じた629

20150522 橋爪智 2 鬼

Friction Measurements on a Large Area TPaD13Nicholas D Marchuk J Edward Colgate Michael A Peshkin13

どのようなものか 超音波の振動により触感を与える 先行研究と比べてどこがすごいか ガラス板を使うので透明後ろにディスプレイを配置可能 技術や手法のキモ 「Squeeze Film Effect（スクイズ膜効果）」 ガラス板に取り付けた圧電素子の円盤に高周波信号

をかける 実験 振動しない部分＝摩擦が発生しない部分が発生周波数により場所が変わる rarr摩擦を大きさをかける力の大きさから計測 rarr指の場所に合わせて複数の周波数を使い分ける 関連論文 T-PaD[Winfield et al 2007]

20150522 橋爪智 2 鬼

STIMTAC a Tactile Input Device with Programmable Friction13Michel Amberg Freacutedeacuteric Giraud Betty Semail Paolo Olivo Geacutery Casiez Nicolas Roussel13

どのようなものか 触感を与えられるタッチデバイス 先行研究と比べてどこがすごいか LATPaD サイズ大きいノイズが大きい TeslaTouch 高い電圧付加が必要GNDに接続しなければいけない

技術や手法のキモ 「Squeeze Film Effect」超音波を用いて振動を与える 圧電性セラミックを電極にコーディング 指トラッキングは力センサを用いる 活用法 マウスキーボード絵を描く 関連論文 LATPaD[Vincent et al 2011] TeslaTouch[Bau et al 2010]

20150522 橋爪智 2 鬼

Surround Haptics Tactile Feedback for Immersive Gaming Experiences Ali Israr Seung-Chan Kim Ivan Poupyrev Jan Stec13

どのようなものか ゲームに合わせて高解像度の触覚フィードバックをユーザーに与える椅子 先行研究と比べてどこがすごいか 荒く配置した安価な振動アクチュエータで高解像度の触覚フィードバックを行える 一点の振動連続した動き範囲の振動などを再現

技術や手法のキモ 仮想的な振動アクチュエータをいくつかの振動アクチュエータを使って作り出す physical-physicalphysical-virtualvirtual-virtual ゲームにHaptics Engineを導入しHaptics APIを用いてHaptic Displayを操作する 関連論文 Exploring Surround Haptics Displays[Israr et al 2010]

20150522 橋爪智 2 鬼

Audio-Haptic Feedback in Mobile Phones Angela Chang Conor OrsquoSullivan13

どのようなものか haptics機能のついてない携帯電話にオーディオ機能を利用した触覚フィードバックを追加する 先行研究と比べてどこがすごいか 簡単に作れてnon-haptic mobile devicesでも大丈夫 技術や手法のキモ 「MultiFunction Transducer(MFT)」 スピーカーから音と信号の両方を出力できる

bull  Haptic Inheritance 　　音を2つの周波数帯に分ける bull  Synthesis and Matching 　　低周波数帯(20-300Hz)を使い触感を伝える 有効性の検討 42人の人を対象に実験を行う83の人が触感を感じた

20150522 橋爪智 2 鬼

Resolution of Sleep Deprivation Problems using ZZZoo Pillows13Shunsuke Yanaka Motoki Ishida13

どのようなものか 近年不眠症の人が多い rarr誰かと接していると安心し睡眠に導入しやすくなる rarrまるで添い寝をしているようなリアルな抱きまくらを使う 技術や手法のキモ breathing sensation 風船を使って人の呼吸を再現肺の形の風船弱く長い呼吸をする

heating お湯を使って人の体温を再現45 有効性の確認 84人の人が実験 呼吸が睡眠を誘ったかrarr61 体温が睡眠を誘ったかrarr85 関連論文 The Impact of Sleep Disorders on Social Life[Komada et al 2007]

20150522 橋爪智 2 鬼

まとめ13超音波 モーター 風

20150522 橋爪智 2 鬼

コイル 電気刺激 Electrovibration

振動 音 お湯

なかの

Temporally Consistent Disparity and Optical Flow via Efficient Spatio-temporal Filtering1

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示した

議論論はあるか

時間的に一定の視差を算出する手法静止画ステレオよりも精度度が良良いことを示す従来よりも推定精度度が良良いオプティカルフローも算出する

一枚の静止画に対するフィルタリング[1]をステレオ動画に拡張している

ケンブリッジのステレオ動画のデータセットを利利用 実写動画に対する比較も行行うノイズ耐性も検証する

フィルタベースとエネルギーベースの関係性を良良り理理解することで推定精度度を上げる

実装が簡単でリアルタイム視差推定が可能

Fast Cost-Volume Filtering for Visual Correspondence and Beyond [Rhemann C Hosni A Bleyer M Rother C Gelautz M CVPR2011] Real-time Spatiotemporal Stereo Matching Using the Dual-Cross-Bilateral Grid [Richardt C Orr D Davies I Criminisi A Dodgson NA ECCV2010] Secrets of optical flow estimation and their principles [Sun D Roth S Black MJ 2010] Motion estimation with non-local total variation regularization [Werlberger M Pock T Bischof H CVPR2010] Temporally Consistent Disparity Maps from Uncalibrated Stereo Videos [Bleyer M Gelatuz M ISPA2011]

なかの

SymStereo Matching using Induced Symmetry (2014)2

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示した

議論論はあるか

画像の対称性を用いてステレオマッチングを行行う 左右の画像を反転させて重ね合わせることで対称性を測る

絵的な類似の代わりに対称性を使う今まで対称性を用いる手法はなく新規性が大きい

三つのSymmetry-baseの手法で精度度を検証従来手法よりも精度度が向上しているMiddlebury Oxford Corridorfountain-P11のデータセット使用

ステレオの問題である不不連続な箇所オクルージョン部分は未解決である演算時間はやや増加

1-Dラインのコストを考える今までは撮像面に対して平行行な平面でデプスを考えていたが垂直な平面を考える

BT[Birchfield and Tomasi 1998] Census transform[Zabih and Woodfill 1994] Log N[Kovesi 1997] radio-metoric differences[Hirschmuller Scharstein 2009]

なかの

Camouflaging an Object from Many Viewpoints3

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

多くの視点から三次元の物体をカモフラージュするカモフラージュによってオクルージョン部分の不不連続がどの程度度生じるか他の視点ではどれほどになるかの検証

MRF（Markov Random Fields）ベース

新しい三次元物体のカモフラージュモデルを構築 37種類のデータセットを作る

箱形の物体に対してカモフラージュ処理理を施し 結果を評価する

オクルージョン不不連続テクスチャの歪みが問題 照明や画像の貼りつけに制限あり

なかの

Aliasing Detection and Reduction in Plenoptic Imaging4

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

カメラアレイ撮影の角度度のエイリアシングを除去するエイリアシングの探索索と打ち消しを行行う

周波数領領域ではなく空間領領域で探索索を行行う

先行行研究がフィルタデモザイキング再パラメータ調整などの前処理理でエイリアシング除去を行行うのに対しエイリアシング探索索後にリフォーカスの段階でエイリアシングを取り除く

8times8の平行行カメラアレイで検証するカメラ間の 基線長は70mm

今回は基線長が長いデータセットを使った 次はLytroなどのマイクロレンズアレイで検証する

Globally consistent multi-label assignment on the ray space of 4d light fields [S Wanner C Straehle B Goldluecke CVPR2013] Lineassisted light field triangulation and stereo matching [Z Yu X Guo H Lin A Lumsdaine J Yu ICCV 2013]

なかの

Globally Consistent Multi-Label Assignment on the Ray Space of 4D Light Fields5

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

四次元ライトフィールドの光線情報において マルチラベルの領領域分割を行行う

深度度情報光線情報を用いて領領域分割することで 二次元（空間）情報だけでは分割が難しかった 領領域を分割可能とする

The light field camera Extended depth of field aliasing and superresolution [T Bishop P Favaro IEEE Transactions on Pattern Analysis and Machine Intelligence 2012]

なかの

Line Assisted Light Field Triangulation and Stereo Matching6

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

光線情報を利利用してステレオマッチングの精度度を 向上させる手法三角測量量の誤差を減らす

Light Field Stereo Matchingとかいう手法 グラフ構造を作成

Variational light field analysis for disparity estimation and super-resolution [S Wanner and B Goldlumluecke 2013]

なかの

Adaptive stereo similarity fusion using confidence measures 20157

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

ステレオマッチングの新しい方式fusion weightsを提案複数の手法を組み合わせてコスト計算を行行う手法付録に既存手法のコスト関数一覧あり

パラメータに依存する手法を用いないことで高速化を図っている

一つのアルゴリズムでは異異なる特性を持つ領領域全てに対して適切切なマッチングはできない複数を組み合わせることでそれを補う13種と多い

middleburyとKITTIのデータセットで評価

一枚あたり03sと高速だが001sとより高速なアルゴリズムが存在する

Segment-based stereo matching using belief propagation and a self-adapting dissimilarity measure [A Klaus M Sormann K Karner ICPR2006] On building an accurate stereo matching system on graphics hardware [X Mei X Sun M Zhou S Jiao H Wang X Zhang ICCV2011] Similarity measures for depth estimation [K Wegner O Stankiewicz 3DTV-CON2009] On accurate dense stereo-matching using a local adaptive multi-cost approach [C Stentoumis L Grammatikopoulos I Kalisperakis G Karras ISPRS2014] A quantitative evaluation of confidence measures for stereo vision [X Hu P Mordohai PAMI2012]

なかの

SIMILARITY MEASURE FOR DEPTH ESTIMATIOM 20098

どんなもの

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

4種類の視差推定アルゴリズムを組み合わせている 類似度度の選択性の解析

Belief Propagationの枠組みを用いる

名古屋大学の多視点データベースを利利用

HHI Test Material for 3D Video [I Feldmann M Muller F Zilly R Tanger A SmolicP Kauff T Wiegand 2008] Multiview Video Test Sequence and Camera Parameters [Yo-Sung Ho Eun-Kyung Lee and Cheon Lee 2008] 1D Parallel Test Sequences for MPEG-FTV [M Tanimoto T Fujii N Fukushima 2008] Non-parametric Local Transforms for Computing Visual Correspondence [R Zabih J Woodfill 1994]

なかの

Spatiotemporal Stereo via Spatiotemporal Quadric Element (Stequel) Matching9

どんなもの

技術や手法のキモはどこ

新しいマッチング手法を提案動き考慮することなく時間情報を取り込むことができる 時間方向のエピ線を考える

オプティカルフロー推定は3D境界や低テクスチャで弱いが提案手法はロバストである

なかの

Depth Video Enhancement Based on Weighted Mode Filtering10

どんなもの

議論論はある

ノイズを含んだ低解像度度のデプスマップの質を高める手法（超解像度度とデノイズ）時間方向も使用簡単なオプティカルフローを計算し利利用する

非反復復アルゴリズムのためGPUに載せやすく高速化が考えられる

なかの

Fast Bilateral-Space Stereo for Synthetic Defocus11

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

議論論はある

次に読むべき論論文は

高速な自由焦点ぼけ画像の作成

Bilateral-spaceを提案

従来研究よりも10から100倍速くぼけ具合の精度度も良良い

ぼけを作成するというアプリケーションに利利用する距離離という面では提案手法が有益であるが実測的な距離離という面での精度度は悪い背景と前景が同じ色で近くにある場合同一ととらえてしまう

Efficient high-resolution stereo matching using local plane sweeps [S N Sinha D Scharstein and R SzeliskiCVPR2014] Bilateral filtering-based optical flow estimation with occlusion detection [J Xiao H Cheng H Sawhney C Rao and M IsnardiECCV2006] Efficient nonlocal regularization for optical flow [P Krumlahenbumluhl and V KoltunECCV2012] Real-time spatiotemporal stereo matching using the dual-cross-bilateral grid [C Richardt D Orr I Davies A Criminisi and N A DodgsonECCV2010]

どうやって有効性を示した視差推定の精度度はmiddleburyKITTI

なかの

Robust Spatiotemporal Stereo for Dynamic Scenes12

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

ステレオ動画のフレーム間情報を取り入れることでノイズ耐性を向上させるまた動きの大きなものも考える

時間を含めたウインドウの提案自動的にそのような変化に対応する画像領領域を検出する

従来の時空間ステレオと比べ大きな動きによる急激な視差の時間変化に対して頑健である

なかの

Spacetime Stereo A Unifying Framework for Depth from Triangulation13

どんなもの

先行行研究と比べてどこがすごい

space time stereoを提案ステレオカメラの視差推定でも構造光を用いた視差推定でも利利用可能 動的なシーンでの利利用も可能

フレームごとマッチングを取っていたが複数フレームでのマッチングを可能とした

なかの

Learning to Select and Order Vacation Photographs (Disney research)14

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示したあまりにもたくさん撮影した写真たちから自動的にフォトアルバムを作成する研究

複雑な視覚での区別を試みたのはこの論論文が初

５つの異異なるトピックから63の個人的な写真コレクションのデータセットを利利用し定量量的に評価する

写真間の差別かを定義する顔全体の絵何が写っているか写っていないかを評価する

Jointly aligning and segmenting multiple web photo streams for the inference of collective photo storylines [G Kim and E P Xing CVPR2013] Photo sequencing [T Basha Y Moses and S Avidan CVPR2012]

なかの

A Taxonomy and Evaluation of Dense Two-Frame Stereo Correspondence Algorithms15

どんなもの

どうやって有効性を示した

次に読むべき論論文は

ステレオマッチングに関する分類を行行う 新たなデータセットを作成する

というよりも他の手法が有効性を示すことができるようにデータセットを作成した 今ではmiddleburyのデータセットと言えばステレオ業界では超有名

High-resolution stereo datasets with subpixel-accurate ground truth

なかの

Discriminability Limits in Spatio-Temporal Stereo Block Matching1

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

spatio-temporal disparity estimationの根本的な前提の正当性を解析しマッチング処理理の際に動きが助けとなる程度度を決定する

時空間マッチングのエラーを分析し誤りの原因を確率率率で導出する（フレーム数動きの分散画像特徴ノイズの関数）

[34243334]は時空間マッチングの利利点を指摘していたが本論論文はマッチング精度度の向上のために動きを用いる手法の程度度や性質を研究する

6つのステレオビデオを用いて検証を行行った

Spacetime stereo Shape recovery for dynamic scenes [L Zhang B Curless and S Seitz CVPR2003] Spatiotemporal stereo and scene flow via stequel matching [M Sizintsev and R Wildes PAMI2012] Temporally consistent disparity and optical flow via efficient spatio-temporal filtering [A Hosni C Rhemann M Bleyer and M Gelautz PRCAIVT2012] Spacetime stereo A unifying framework for depth from triangulation [PAMI2005] Dynamic depth recovery from multiple synchronized video streams [H Tao H Sawhney and R Kumar CVPR2001] Spatiotemporal descriptor for wide-baseline stereo reconstruction of non-rigid and ambiguous scenes [ECCV2003]

なかの

Depth-Based Patch Scaling for Content-Aware Stereo Image Completion2

どんなもの

どうやって有効性を示した

ステレオでデプスを取り物体の三次元情報を使ってインペインティングを行行う

bookのデータセット背景が繰り返しパターンが多いものを使っている

なかの

Fast Semi-dense Surface Reconstruction from Stereoscopic Video in Laparoscopic Surgery3

どんなもの

手法の流流れ

次に読むべき論論文は

腹腔内手術の際にステレオビデオから高速に物体の三次元再構成を行行う研究

Evaluation of stereo matching costs on images with radiometric differences [Hirschmueller H Scharstein D PAMI2008]

スコープカメラから画像取得GPUで演算する 視差を算出しフィルタにかける距離離に変換 点群を再びフィルタにかけて三次元再構成

なかの

3D Reconstruction from Accidental Motion4

どんなもの

技術や手法のキモはどこ

議論論はある

数秒のビデオ（単眼）から三次元再構成を行行う 手ぶれなどの動きから再構成が可能で特定の動きや機材を必要としない

短い基線長でも再構成が可能（3mmの基線長）

基線長が短いため背景の精度度が低くなる リフォーカス画像作成には十分 練習では上手く動作したが検証がまだ必要

なかの

Panoramic Video from Unstructured Camera Arrays5

どんなもの

技術や手法のキモはどこ

議論論はある

複数のカメラを用いたパノラマ撮影を行行う その際に不不自然さがないような動画を作成する

不不自然さを感じる感覚特性を提示しそれにのっとって対策を講じている

一つのカメラの解像度度と品質を向上させるよりも複数台のカメラを組み合わせることがはるかに簡単で有益である専門家でなくてもGoProのカメラセットを組み合わせることは容易易

カメラの配置は厳密に決められていない完璧な時間同期やローリングシャッターの不不足のような実撮影での問題もクリアしている

先行行研究と比べてどこがすごい

どうやって有効性を示した左のシステムは14台のカメラを使用 右のシステムはGoProを5台使用

Disney 201558

なかの

Floating Scale Surface Reconstruction6

どんなもの

技術や手法のキモはどこ

流流動的にスケールを変えられる三次元再構成手法

サンプル規模に依存するパラメータがない rarrどのスケールのサンプルにも対応できる

siggraph2014

なかの

A Super Resolution Reconstruction Scheme for Mixed Spatio-Temporal Stereo Video7

どんなもの

技術や手法のキモはどこ

ビデオ超解像アルゴリズム

二台のカメラを使用 一台は低解像度度で高速一台は高解像度度で低速

HHI 3DV ftp siteのBookarrivalとbeergadenを使用どうやって有効性を示した

なかの

What Is a Good Day for Outdoor Photometric Stereo8

どんなもの

先行行研究と比べてどこがすごい

議論論はある

次に読むべき論論文は

屋外における照度度差があるステレオの研究 屋外でステレオを行行う際に有利利or不不利利な日照条件を明らかにする

点光源を用いた研究は行行われていたが屋外での研究はされていなかった

晴れより曇りの方が精度度が良良い雲があるから特徴量量を取りやすい雑音を白色ガウスモデルを想定 季節ごとのデータセットを利利用してみても良良い

Time-lapse photometric stereo and applications [F Shen K Sunkavalli N Bonneel S Rusinkiewicz H Pfisterand X Tong2014] Outdoor photometric stereo [L-F Yu S-K Yeung Y-W Tai D Terzopoulos and T FChan ICCP2013]

どうやって有効性を示した屋外の照明に関するHDR環境マップのデータベースを利利用

Disney 2015424

なかの

COLORBRUSH ANIMATED DIFFUSION FOR INTUITIVE COLORIZATION SIMULATING WATER PAINTING 9

どんなものアニメを水彩画で描いたように変換する 水彩画を描くには経験が必要であるがそれを作成するアルゴリズムを考案絵具が水によりどうにじむかシュミレーションしている

Disney 20141027 ICIP2014

次に読むべき論論文はGabor-space geodesic active contoursrdquo In Algebraic Frames for the Perception-Action Cycle [C Sagiv NA Sochen and YY Zeevi 2000] Practical temporal consistency for image-based graphics applications [M Lang O Wang T Aydin A Smolic and M Gross SIGGRAPH2012] Computer-Generated Watercolor [CJ Curtis SE Anderson JE Seims KW Fleischer and DH Salesin SIGGRAPH1997]

なかの

From Sound to Sight Using Audio Processing to enable Visible Light Communication 10

どんなもの光に情報を載せる技術プロジェクトページがあって光関係の研究が8個載っている

httpwwwdisneyresearchcomprojectvisible-light-communication

ビデオのURL httpwwwdisneyresearchcomwpcontentuploadsPub_InvisibleLightCommunication_Siggraph14_videomp4

• 201211106_KeisukeKawahara
• 201311421_KeitaKanai_02
• 201313095_AkiraIshii_02
• 201413109_YuukiKubo_02
• 201513110_SatoshiHashizume_02
• 鬼輪講マラソン③_1
• 鬼輪講マラソン③_2

2 201313095

bull  HARRISONCTANDANDMORRISD2010Skinputap-propriaEngthebodyasaninputsurfaceInProceedingsofthe28thinternaEonalconferenceonHumanfactorsincompuEngsystemsACMNewYorkNYUSACHIrsquo10453ndash462

Touchampinterfaceamponampbackampofamptheamphandamp(SIGGRAPH11)

KeiNakatsumaHiroyukiShinodaYasutoshiMakinoKatsunariSatoTakashiMaeno

h]pswwwyoutubecomwatchv=tKNLxh9Yw2M

2 201313095

Pose-IO EMS

Pose-IO

EMS

EMS58deg

46 5 be]er

bull  RoudautARauASterzCPlauthMLopesPandBaudischPGestureoutputeyes-freeoutputusingaforcefeedbacktouchsurfaceProcCHI1325472556

PropriocepEveampInteracEonamp(CHIrsquo15)amp

PedroLopesAlexandraIonWilliMuellerDanielHoffmannPatrikJonellPatrickBaudisch

h]pswwwyoutubecomwatchv=KMxIw7zhlw

2 201313095

EMS

AR EMSEMS

GPS

bull  TamakiEMiyakiTandRekimotoJPossessedHandAhandgesturemanipulaEonsystemusingelectricalsEmuliInProcampAHrsquo10amp(2010)21ndash25

CruiseampControlampforampPedestriansampControllingampWalkingampDirecEonampusingampElectricalampMuscleampSEmulaEonamp(CHIrsquo15)amp

MaxPfeifferTimDunteStefanSchneegassFlorianAltMichaelRohs

h]pswwwyoutubecomwatchv=JSfnm_HoUv4

2 201313095

EMS

EMS

EMS 16automaEccalibraEonsystem

auto-calibraEonsystems 16

8875g

bull  KruijffESchmalsEegDandBeckhausSUsingneuromuscularelectricalsEmulaEonforpseudo-hapEcfeedbackInProceedingsoftheACMsymposiumonVirtualrealitysoywareandtechnologyVRSTrsquo06ACM(NewYorkNYUSA2006)316ndash319

PossessedHandampTechniquesampforampControllingampHumanampHandsampusingampElectricalampMusclesampSEmuliamp(CHIrsquo11)amp

EmiTamakiTakashiMiyakiJunRekimoto

h]psvimeocom27044937

2 201313095

EMS

EMS

RFIDEMS

1276

bull  KruijffESchmalsEegDandBeckhausDUsingneuromuscularelectricalsEmulaEonforpseudo-hapEcfeedbackProcVRST06316mdash319

Affordance++ampallowingampobjectsamptoampcommunicateampdynamicampuseamp(CHIrsquo15)

PedroLopesPatrikJonellPatrickBaudisch

h]pswwwyoutubecomwatchv=d0J7V37zQjY

2 201313095

EMS

EMS

EMS

ReacEonloss

EMS

UsingampNeuromuscularampElectricalampSEmulaEonampforampPseudoHapEcampFeedbackamp(VRSTrsquo06)

ErnstKruijffDieterSchmalsEegSteffiBeckhaus

2 201313095

SVM

106 Per-User

863 13

712

13

bull  SatoMPoupyrevIandHarrisonCToucheenhancingtouchinteracEononhumansscreensliquidsandeverydayobjectsInCHIrsquo12483ndash492

bull  TimCollinsAcEveacousEctouchinterfaceElectronicsLe]ersVol45No20pp1055ndash1056242009

TouchampampampAcEvateampAddingampInteracEvityamptoampExisEngampObjectsampusingampAcEveampAcousEcampSensingamp(UISTrsquo13)

MakotoOnoBuntarouShizukiJiroTanaka

h]pswwwyoutubecomwatchv=XgxXi6w8IQc

2 201313095

13

13

SVM

on-body

per-user 5 967 4987

bull  HarrisonCBenkoHWilsonAOmniTouchwearablemulEtouchinteracEoneverywhereinUIST11441-450

bull  MatsushitaNandRekimotoJHoloWalldesigningafingerhandbodyandobjectsensiEvewallUIST97209-210

ToucheampEnhancingampTouchampInteracEonamponampHumansampScreensampLiquidsampandampEverydayampObjectsamp(CHIrsquo12)

MunehikoSatoIvanPoupyrevChrisHarrison

h]pswwwyoutubecomwatchv=E4tYpXVTjxA

2 201313095

SVM

9 9TapSense 4

95 99

TapSenseDelete

bull  HarrisonCTanDandMorrisDSkinputappropriat-ingthebodyasaninputsurfaceInProcCHI10453-462

TapSenseampEnhancingampFingerampInteracEonamponampTouchampSurfacesamp(UISTrsquo11)

ChrisHarrisonJuliaSchwarzSco]EHudson

h]pswwwyoutubecomwatchv=-oN96cucBr4

2 201313095

13

13

22 SVM

13 FingersWholeArmForearm 876 Fingers877 WholeArm 955

883 Forearm 815

833

GUI

bull  SaponasTSTanDSMorrisDandBalakrishnanRDemonstraEngthefeasibilityofusingforearmelectromyographyformuscle-computerinterfacesInProcCHIrsquo09515-24

SkinputampAppropriaEngamptheampBodyampasampanampInputampSurfaceamp(CHIrsquo10)

ChrisHarrisonDesneyTanDanMorris

h]pswwwyoutubecomwatchv=g3XPUdW9Ryg

2 201313095

Fiberio

10 330 150

148 2

Fiberio

bull  MatsushitaNandRekimotoJHoloWallDesigningaFingerHandBodyObjectSensiEveWallProcUIST97209ndash210

FiberioampAampTouchscreenampthatampSensesampFingerprintsamp(UISTrsquo13)

ChrisEanHolzPatrickBaudisch

h]pswwwyoutubecomwatchv=p1a5yLzuTqA

2 201313095

3D

3D

bull  GeigerMVollertsenFTheMechanismsofLaserFormingCIRPANNALSlsquo93421301-304

bull  WillisKDDXuCWuJKLevinGGrossMDInteracEvefabricaEonnewinterfacesfordigitalfabricaEonProcTEI11pp69-72

LaserOrigamiampLaserCugngamp3DampObjectsamp(CHIrsquo13)

StefanieMuellerBasEanKruckPatrickBaudisch

h]pswwwyoutubecomwatchv=arjRtCjI9AQ

2 201313095

bend

bull  HyunyoungSongFranccediloisGuimbreEegravereChangHuHodLipsonModelCraycapturingfreehandannotaEonsandeditsonphysical3DmodelsProceedingsofthe19thannualACMsymposiumonUserinterfacesoywareandtechnologyOctober15-182006MontreuxSwitzerland

InteracEveampConstrucEonampInteracEveampFabricaEonampofampFuncEonalampMechanicalampDevicesamp(UISTrsquo12)

StefanieMuellerPedroLopesPatrickBaudisch

h]pdlacmorgcitaEoncfmid=23801162380191

2 201313095

3D

3D

bull  SavageVSchmidtRGrossmanTFitzmauriceGandHartmannBAseriesoftubesAddinginteracEvityto3dprintsusinginternalpipesInProcUIST14(2014)

3DampPrinEngampPneumaEcampDeviceampControlsampwithampVariableampAcEvaEonampForceampCapabiliEesamp(CHIrsquo15)amp

MarynelVazquezEricBrockmeyerRutaDesaiChrisHarrisonSco]EHudson

h]pswwwyoutubecomwatchv=-4gFYvhkz0Y

2 201313095

OpenFab 3D

fablets

3 3

bull  CHENDMATUSIKWSITTHI-AMORNPDIDYKPANDLEVIND2013Spec2FabAreducer-tunermodelfortranslat-ingspecificaEonsto3DprintsACMTransGraph324(July)

OpenFabampAampProgrammableampPipelineampforampMulEMaterialampFabricaEonamp(SIGGRAPHrsquo13)

KirilVidimcˇeSzu-PoWangJonathanRagan-KelleyWojciechMatusik

2 201313095

3D

3D

3D

3D14 30 13 67

244

14

3D

bull  MuellerSKruckBBaudischPLaserOrigamiLaser-Cunng3DObjectsProcCHIrsquo132585-2592

faBrickaEonampFastamp3DampPrinEngampofampFuncEonalampObjectsampbyampIntegraEngampConstrucEonampKitampBuildingampBlocksamp(CHIrsquo14)amp

StefanieMuellerTobiasMohrKersEnGuentherJohannesFrohnhofenPatrickBaudisch

h]pswwwyoutubecomwatchv=BlO6YRcLJjE

Touching13 the13 Void13 Direct-shy‐Touch13 Interac4on13 for13 Intangible13 Displays(CHIrsquo10)Li-Wei Chan Hui-Shan Kao Mike Y Chen Ming-Sui Jane Yi-Ping Hung

201413109　久保勇貴 2（鬼コース）13

どんなもの13

空中像へのタッチのエラーに関する調査及び影や音のフィードバックを付与することによるパーフォーマンス向上を示した研究13

先行研究と比べてどこがすごい13

平面画像をタッチする際の奥行きに関するエラーの正確な取得を初めて検証13

技術や手法のキモはどこ13

２つの赤外線カメラを用いた正確なタッチの検出13

どうやって有効だと検証した13

タッチ時の奥行きの正確さに関する被験者実験を実施またタッチする際に影や音を付けた際の反応時間を被験者実験で検証13

議論はある13

ユーザは慣れるまで影や音のフィードバックが必要だがそのあとは必要なくなる13

次に読むべき論文は13

MirageTable13 （CHI12） 13

MirageTable13 Freehand13 Interac4on13 on13 a13 Projected13 13 Augmented13 Reality13 Tabletop(CHIrsquo12)

Hrvoje Benko Ricardo Jota Andrew D Wilson

201413109　久保勇貴 2（鬼コース）13

どんなもの13

テーブル上においてバーチャルな物体をリアルタイムで現実でものを動かすことと同様な動作に操作可能なシステム13

先行研究と比べてどこがすごい13

現実の物体をリアルタイムで画面に取りこむことができ質の高いフリーハンドインタラクションを実現した点13

技術や手法のキモはどこ13

色深度前景頭追跡プロキシパーティクルを駆使したリアルタイムメッシュの作成13

どうやって有効だと検証した13

凹凸など例外な表面に対しての投影した際の画像の質についての評価実験また仮想物体の奥行き知覚に関する実験も行った13

議論はある13

前面のみしかキャプチャしていないため差が生じる握っている場所の再現は未解決な課題である13

次に読むべき論文は13

Hirsch13 et13 al13 201413 (SIGGRAPHrsquo14)13

A13 Compressive13 Light13 Field13 Projec4on13 System13 (SIGGRAPHrsquo14)MaChew13 Hirsch13 Gordon13 Wetzstein13 Ramesh13 Raskar

201413109　久保勇貴 2（鬼コース）13

どんなもの13

通常の3Dディスプレイに比べて解像度輝度コントラストを改善した圧縮ライトフィードディスプレイ13

先行研究と比べてどこがすごい13

多視点立体視を複数でなく１台のプロジェクタを用いて実現した13

技術や手法のキモはどこ13

受動的スクリーンと高速切り替えプロジェクタによる新しい光学設計13

どうやって有効だと検証した13

4つのシーン例を投影したものを示したアニメーションの3D効果について観察を行った13

議論はある13

光路長を広げると観察できる画質が大幅に制限され他のライトフィードビューと混線が生じる13

次に読むべき論文は13

Butler13 et13 al13 201113

Vermeer13 Direct13 Interac4on13 with13 a13 360deg13 Viewable13 3D13 Display(UISTrsquo11) Alex Butler Otmar Hilliges Shahram Izadi Steve Hodges David Molyneaux David Kim

201413109　久保勇貴 2（鬼コース）13

どんなもの13

映し出された3Dオブジェクトとインタラクションを行えるシステム13

先行研究と比べてどこがすごい13

ディスプレイ内の画像とのインタラクションを提案ボリュームディスプレイを支援する新しいセンシング法の提案13

技術や手法のキモはどこ13

パラボラ鏡に取り付けた赤外線カメラセンサによる指先検出13

どうやって有効だと検証した13

アプリケーション例を示した13

議論はある13

パラボラ鏡の大きさよりもディスプレイサイズが小さくなってしまう13

次に読むべき論文は13

Hirsch13 et13 al13 201213

8D13 Interac4ng13 with13 a13 Relightable13 Glasses-shy‐Free13 3D13 Display(CHIrsquo12)Li-Wei Chan Hui-Shan Kao Mike Y Chen Ming-Sui Jane Yi-Ping Hung

201413109　久保勇貴 2（鬼コース）13

どんなもの13

ライトフィードによる入力とライトフィールドによる表示を行うリアルタイム8Dディスプレイ13

先行研究と比べてどこがすごい13

リアルタイムでの8Dディスプレイの実現（先行研究は7fps）13

技術や手法のキモはどこ13

GPUにおけるレンダリング処理13

どうやって有効だと検証した13

MRIデータを用いたディスプレイのデモを示した13

議論はある13

現在はグレースケールの入力のみだがカラーでの入力できればより強力になるだろう13

次に読むべき論文は13

Sahoo13 et13 al13 201513

Control13 of13 Non-shy‐Solid13 Diffusers13 by13 Electrosta4c13 Charging13 (CHIrsquo15) Deepak Ranjan Sahoo Diego Martinez Plasencia Sriram Subramanian

201413109　久保勇貴 2（鬼コース）13

どんなもの13

シャボン玉や霧などの非固体を電場による制御を試みた研究13

先行研究と比べてどこがすごい13

非固体の形や位置の制御法を提案した点13

技術や手法のキモはどこ13

[Intra13 et13 al13 11]中のldquowire-shy‐to-shy‐Cylinderdquoを用いたエアゾール粒子の帯電13

どうやって有効だと検証した13

霧及びシャボン玉によるディスプレイのアプリケーション例で実際に制御して見せた13

議論はある13

風による影響を本手法は打ち消すことができた13

次に読むべき論文は13

Barnum13 et13 al13 201013

A13 Mul4-shy‐Layered13 Display13 with13 Water13 Drops(SIGGRAPHrsquo10)Peter C Barnum Srinivasa G Narasimhan Takeo Kanade

201413109　久保勇貴 2（鬼コース）13

どんなもの13

複数層の落下水滴にプロジェクションマッピングを行いディスプレイとした研究13

先行研究と比べてどこがすごい13

水滴の制御を行うことで単一のプロジェクタによって複数層の映像投影を可能とした点13

技術や手法のキモはどこ13

[Ambravaneswaran13 et13 al13 2002]及び本研究における実験結果に基づく水滴生成13

どうやって有効だと検証した13

複数のディスプレイ例を示した13 例）顔の投影水槽シミュレータなど13

議論はある13

本当の3Dディスプレイにするにはより多くの水滴制御が必要13

次に読むべき論文は13

Lee13 et13 al13 200713

An13 Immaterial13 Depth-shy‐Fused13 3D13 Display(VRSTrsquo07)Cha Lee Stephen DiVerdi Tobias Humlollerer

201413109　久保勇貴 2（鬼コース）13

どんなもの13

２つのスクリーンを駆使し3Dディスプレイを実現するdepth-shy‐fused13 3D(DFD)に関する評価を行いその結果よりディスプレイを提案した研究13

先行研究と比べてどこがすごい13

DFDが任意のスクリーン設定及び見る位置に対して有効であることを示した13

技術や手法のキモはどこ13

６通りのスクリーン組合せから２つを抽出し見え方の違いを検証した点13

どうやって有効だと検証した13

６通りのスクリーンについて立体的に見えるか被験者実験を実施その後それぞれに有意差がみられるか調べた13

議論はある13

ステレオイメージを認めることができなかったユーザに対しても強い3D効果が見られた13

次に読むべき論文は13

Tokuda13 et13 al13 201013

Cloud13 Display13 (ACErsquo10)Yutaka Tokuda Yasuhiro Suzuki Kunihiro Nishimura Tomohiro Tanikawa Michitaka Hirose

201413109　久保勇貴 2（鬼コース）13

どんなもの13

煙の渦輪を用いた空間を埋めるディスプレイ13

先行研究と比べてどこがすごい13

制御可能な手法により高所へのパーティクルを運搬することに着目した点13

技術や手法のキモはどこ13

コンピュータによって制御が行われる空気砲アレイ13

どうやって有効だと検証した13

箱の中で実験を行い安定して渦輪をできるようにした実際にデモを行ったことを示した13

議論はある13

今の試作機をより早くリフレッシュ速度を高めることによりより濃く空間を埋められることを目指す13

次に読むべき論文は13

Sato13 et13 al13 200913

Par]cle13 Display13 System　(JVRC09)13 -shy‐13 A13 Large13 Scale13 Display13 for13 Public13 Space13 -shy‐

Munehiko13 Sato13 Yasuhiro13 Suzuki13 13 Atsushi13 Hiyama13 Tomohiro13 Tanikawa13 Michitaka13 Hirose

201413109　久保勇貴 2（鬼コース）13

どんなもの13

パーティクルディスプレイによる公共スペースのための大画面ディスプレイの提案13

先行研究と比べてどこがすごい13

公共スペースにおける要求と制限に基づいたシステムを提案した点13

技術や手法のキモはどこ13

実験に基づく表示画像のスクロール時間の制御13

どうやって有効だと検証した13

Aという文字の知覚実験によって 適な点滅周期の調査を行った13

議論はある13

現在の試作機を組合せより高解像度にする必要がある13

次に読むべき論文は13

Kwon13 et13 al13 201513

FugaciousFilm13 Exploring13 Aen4ve13 Interac4on13 with13 Ephemeral13 Material13 (CHIrsquo15)Hyosun13 Kwon13 Shashank13 Jaiswal13 Steve13 Benford13 Sue13 Ann13 Seah13

13 Peter13 BenneC13 Boriana13 Koleva13 Holger13 Schnaumldelbach

201413109　久保勇貴 2（鬼コース）13

どんなもの13

膜を押す引く飛び出ることができる新しい石鹸膜インタフェースの提案13

先行研究と比べてどこがすごい13

徐々に消えるインタフェースは高い注意を有するインタラクションを提供するという点を示したこと13

技術や手法のキモはどこ13

水グリセリンを201の対比で混ぜることでldquopoprdquoがきれいになるようにしかつ膜の耐久性を向上させた13

どうやって有効だと検証した13

３目並べを用いた被験者実験を実施13 ユーザは膜を割ると負け膜を自分のマスにするにはタッチ押す引くの書かれた通りの操作を行う13

議論はある13

ユーザに精密な動作を要求することはとりわけ注意を払うことを誘発する13

次に読むべき論文は13

Wetzstein13 et13 al13 201213

Tensor13 Displays13 Compressive13 Light13 Field13 Synthesis13 using13 Mul4layer13 Displays13 with13 Direc4onal13 Backligh4ng(SIGGRAPHrsquo12)

Gordon13 Wetzstein13 Douglas13 Lanman13 MaChew13 Hirsch13 Ramesh13 Raskar

201413109　久保勇貴 2（鬼コース）13

どんなもの13

視点によって異なる立体映像を見ることができる複数の層からなるディスプレイ13

先行研究と比べてどこがすごい13

既存の手法を合成したcomputa(onal13 displaysというディスプレイの新しいフレームワークを提案した13

技術や手法のキモはどこ13

時分割で視差マスクを表示することでユーザの視線ごとに立体像を表現する13

どうやって有効だと検証した13

通常のディスプレイ３層LCDLCD及び指向性バックライトの例による比較13 13

議論はある13

波紋を含むこと色チャンネルが悪影響を与える相互反射不均一などの問題が見られた13

次に読むべき論文は13

Matoba13 et13 al13 1213

SplashDisplay(VRICrsquo12)Yasuo Matoba Taro Tokui Ryo Sato Tochiki Sato Hideki Koike

201413109　久保勇貴 2（鬼コース）13

どんなもの13

パーティクルにCGを投射しパーティクルがテーブル上に投げられると爆発しパーティクルが噴きあがる13

先行研究と比べてどこがすごい13

ビーズがミリメートルからメートル単位までZ軸方向について空中で奥行きを表現する13

技術や手法のキモはどこ13

スピーカによって風力が発生させビーズを舞い上げる点13

どうやって有効だと検証した13

ビーズを投げると花火が打ちあがっているかのようなアプリケーション例を示した13

議論はある13

高いレベルの表現及び幅広い入力範囲を提供できた13

次に読むべき論文は13

Kim13 et13 al13 1413

MARIO13 Mid-shy‐air13 Augmented13 Reality13 Interac4on13 with13 Objects13 (ECrsquo14)Hanyuool13 Kim13 13 Issei13 Takahashi13 Hiroki13 Yamamoto13 Satoshi13 Maekawa13 Takeshi13 Naemura

201413109　久保勇貴 2（鬼コース）13

どんなもの13

350times300times250のテーブル上のスペースにおいて自由に動かせる空中像を造りだすことができる13

先行研究と比べてどこがすごい13

凹面鏡や凹レンズのように曲面でないため画像の歪曲が発生しない13

技術や手法のキモはどこ13

Aerial13 Imaging13 Plate(AIP)を用いた空中像の生成及びそのためのディスプレイ移動装置13

どうやって有効だと検証した13

左右からの視差の考慮及び奥行き表現時の画像提示視野角の検証などを行った13 13

議論はある13

投影しているひよこを叩いたり払いのけたりするような動作がデモ中見られた13

次に読むべき論文は13

Tactile Feedback on Flat Surfaces for the Visually Impaired13Ali Israr Olivier Bau Seung-Chan Kim Ivan Poupyrev13

どのようなものか 視覚障害者のための触覚を用いた視覚代用デバイス 先行研究と比べてどこがすごいか 道案内をしてくれる機械などはあるが日用品の場所を教えたり探すのを手伝ってくれるデバイスはない 技術や手法のキモ タッチパネルとカメラを搭載したデバイス 触覚を与える技術はTeslaTouchを利用 色を基準にオブジェクトの位置を認識 有用性の確認 視覚障害者二人に対して実験このデバイスを使

わなくても各自の方法で物を見つけられるが間違えることが多いこのデバイスを使用することで間違えることなく正確に物の位置を特定できた 課題 一つの色でしか判断できない 触感のあるなしでしか情報を伝えられない 関連論文 TeslaTouch [Bau et al 2010]

20150522 橋爪智 2鬼

Fingernail-Mounted Display of Attraction Force and Texture13Masataka Niwa Tomoko Nozaki Taro Maeda and Hideyuki And13

どのようなものか 指先に取り付けて触感と力を両方表現できるデバイス 先行研究と比べてどこがすごいか 触感と引力をそれぞれ表現するデバイスはあるが両方を一つのデバイスで表現した例は少ない 引力は自由な方向に付加することができる 技術や手法のキモ 偏心に重さを付けた円盤を4枚使用する 5-9Hz 引力　100-200Hz 触感 それぞれの円盤の位相や回転数を調整することで

触感と力 を表現する 4つのモータを使いそれぞれの円盤を独立して制御する 有用性の確認 4人の男性に対して実験80以上の精度で認識できた 関連論文 The nail-mounted attraction forcebump display [Nozaki et al 2008]

20150522 橋爪智 2 鬼

Gilded gait reshaping the urban experience with augmented footsteps13Yuichiro Takeuchi13

どのようなものか 靴に装着し地面の触感をコントロールするデバイス 先行研究と比べてどこがすごいか 単独で動作しなかったり特定の環境のみでしか動作しなかったりするrarr靴単体で動作環境に依存しない 技術や手法のキモ 6個の振動パネルを取り付けゲルでカバー app modulesを取り替えることができ様々な機能を付加できる（GPSsound) 4種類の地面を再現

bull  Hard Ground 振動させない bull  Soft Ground すべてのパネルを振動 bull  Bumpy Ground ジグザグに振動 bull  Godzilla 全てのパネルを振動何回か繰り返す 課題 モーターを使っているため波形をプログラミングできないrarr圧電素子を使用する 関連論文 Haptic Shoes [Fu et al 2010]

20150522 橋爪智 2鬼

ExoInterfaces novel exosceleton haptic interfaces for virtual reality augmented sport and rehabilitation

Dzmitry Tsetserukou Katsunari Sato Susumu Tachi13

どのようなものか 腕に装着し物理的なinteractionを可能にするデバイス 先行研究と比べてどこがすごいか Exoskeleton 力を増幅するためだが重たく危険なこともある String-based wireが視界をまたぐ動きに制限がある rarr腕の動きに制限を与えない安全 技術や手法のキモ 「FlexTorque」人間の筋肉の構造を再現するベルトとモーターを使用する肩の近くに装着することで

腕に負担がかかりにくい 触覚feedback弱いトルク 運動を支援強いトルク 課題 物理的な接触を表現するゲームやスポーツにより没頭させるリハビリのサポートをする視覚障害者の支援（ものの場所を教える） 関連論文 FlexTorque [Dzmitry et al 2010]

20150522 橋爪智 2 鬼

Perception of Ultrasonic Haptic Feedback on the Hand Localisation and Apparent Motion13

Graham Wilson Tom Carter Sriram Subramanian Stephen Brewster13

どのようなものか 超音波を用いた触覚フィードバック有効性の検討を行う 先行研究と比べてどこがすごいか 超音波触覚フィードバックは比較的新しく研究や操作方法に関する知識が少ない 腕を自由に動かすことができ小さいものは着用可能 技術や手法のキモ 88のアレイ状に超音波発生器を設置

有効性の確認 bull  局所的な触感 　　　25箇所に分割しそれぞれに超音波を当てる 　　　触感を感じた989 　　　場所の誤差85mm bull  手のひらを動く触感 上下左右に動く 　　　動いてると感じた629

20150522 橋爪智 2 鬼

Friction Measurements on a Large Area TPaD13Nicholas D Marchuk J Edward Colgate Michael A Peshkin13

どのようなものか 超音波の振動により触感を与える 先行研究と比べてどこがすごいか ガラス板を使うので透明後ろにディスプレイを配置可能 技術や手法のキモ 「Squeeze Film Effect（スクイズ膜効果）」 ガラス板に取り付けた圧電素子の円盤に高周波信号

をかける 実験 振動しない部分＝摩擦が発生しない部分が発生周波数により場所が変わる rarr摩擦を大きさをかける力の大きさから計測 rarr指の場所に合わせて複数の周波数を使い分ける 関連論文 T-PaD[Winfield et al 2007]

20150522 橋爪智 2 鬼

STIMTAC a Tactile Input Device with Programmable Friction13Michel Amberg Freacutedeacuteric Giraud Betty Semail Paolo Olivo Geacutery Casiez Nicolas Roussel13

どのようなものか 触感を与えられるタッチデバイス 先行研究と比べてどこがすごいか LATPaD サイズ大きいノイズが大きい TeslaTouch 高い電圧付加が必要GNDに接続しなければいけない

技術や手法のキモ 「Squeeze Film Effect」超音波を用いて振動を与える 圧電性セラミックを電極にコーディング 指トラッキングは力センサを用いる 活用法 マウスキーボード絵を描く 関連論文 LATPaD[Vincent et al 2011] TeslaTouch[Bau et al 2010]

20150522 橋爪智 2 鬼

Surround Haptics Tactile Feedback for Immersive Gaming Experiences Ali Israr Seung-Chan Kim Ivan Poupyrev Jan Stec13

どのようなものか ゲームに合わせて高解像度の触覚フィードバックをユーザーに与える椅子 先行研究と比べてどこがすごいか 荒く配置した安価な振動アクチュエータで高解像度の触覚フィードバックを行える 一点の振動連続した動き範囲の振動などを再現

技術や手法のキモ 仮想的な振動アクチュエータをいくつかの振動アクチュエータを使って作り出す physical-physicalphysical-virtualvirtual-virtual ゲームにHaptics Engineを導入しHaptics APIを用いてHaptic Displayを操作する 関連論文 Exploring Surround Haptics Displays[Israr et al 2010]

20150522 橋爪智 2 鬼

Audio-Haptic Feedback in Mobile Phones Angela Chang Conor OrsquoSullivan13

どのようなものか haptics機能のついてない携帯電話にオーディオ機能を利用した触覚フィードバックを追加する 先行研究と比べてどこがすごいか 簡単に作れてnon-haptic mobile devicesでも大丈夫 技術や手法のキモ 「MultiFunction Transducer(MFT)」 スピーカーから音と信号の両方を出力できる

bull  Haptic Inheritance 　　音を2つの周波数帯に分ける bull  Synthesis and Matching 　　低周波数帯(20-300Hz)を使い触感を伝える 有効性の検討 42人の人を対象に実験を行う83の人が触感を感じた

20150522 橋爪智 2 鬼

Resolution of Sleep Deprivation Problems using ZZZoo Pillows13Shunsuke Yanaka Motoki Ishida13

どのようなものか 近年不眠症の人が多い rarr誰かと接していると安心し睡眠に導入しやすくなる rarrまるで添い寝をしているようなリアルな抱きまくらを使う 技術や手法のキモ breathing sensation 風船を使って人の呼吸を再現肺の形の風船弱く長い呼吸をする

heating お湯を使って人の体温を再現45 有効性の確認 84人の人が実験 呼吸が睡眠を誘ったかrarr61 体温が睡眠を誘ったかrarr85 関連論文 The Impact of Sleep Disorders on Social Life[Komada et al 2007]

20150522 橋爪智 2 鬼

まとめ13超音波 モーター 風

20150522 橋爪智 2 鬼

コイル 電気刺激 Electrovibration

振動 音 お湯

なかの

Temporally Consistent Disparity and Optical Flow via Efficient Spatio-temporal Filtering1

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示した

議論論はあるか

時間的に一定の視差を算出する手法静止画ステレオよりも精度度が良良いことを示す従来よりも推定精度度が良良いオプティカルフローも算出する

一枚の静止画に対するフィルタリング[1]をステレオ動画に拡張している

ケンブリッジのステレオ動画のデータセットを利利用 実写動画に対する比較も行行うノイズ耐性も検証する

フィルタベースとエネルギーベースの関係性を良良り理理解することで推定精度度を上げる

実装が簡単でリアルタイム視差推定が可能

Fast Cost-Volume Filtering for Visual Correspondence and Beyond [Rhemann C Hosni A Bleyer M Rother C Gelautz M CVPR2011] Real-time Spatiotemporal Stereo Matching Using the Dual-Cross-Bilateral Grid [Richardt C Orr D Davies I Criminisi A Dodgson NA ECCV2010] Secrets of optical flow estimation and their principles [Sun D Roth S Black MJ 2010] Motion estimation with non-local total variation regularization [Werlberger M Pock T Bischof H CVPR2010] Temporally Consistent Disparity Maps from Uncalibrated Stereo Videos [Bleyer M Gelatuz M ISPA2011]

なかの

SymStereo Matching using Induced Symmetry (2014)2

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示した

議論論はあるか

画像の対称性を用いてステレオマッチングを行行う 左右の画像を反転させて重ね合わせることで対称性を測る

絵的な類似の代わりに対称性を使う今まで対称性を用いる手法はなく新規性が大きい

三つのSymmetry-baseの手法で精度度を検証従来手法よりも精度度が向上しているMiddlebury Oxford Corridorfountain-P11のデータセット使用

ステレオの問題である不不連続な箇所オクルージョン部分は未解決である演算時間はやや増加

1-Dラインのコストを考える今までは撮像面に対して平行行な平面でデプスを考えていたが垂直な平面を考える

BT[Birchfield and Tomasi 1998] Census transform[Zabih and Woodfill 1994] Log N[Kovesi 1997] radio-metoric differences[Hirschmuller Scharstein 2009]

なかの

Camouflaging an Object from Many Viewpoints3

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

多くの視点から三次元の物体をカモフラージュするカモフラージュによってオクルージョン部分の不不連続がどの程度度生じるか他の視点ではどれほどになるかの検証

MRF（Markov Random Fields）ベース

新しい三次元物体のカモフラージュモデルを構築 37種類のデータセットを作る

箱形の物体に対してカモフラージュ処理理を施し 結果を評価する

オクルージョン不不連続テクスチャの歪みが問題 照明や画像の貼りつけに制限あり

なかの

Aliasing Detection and Reduction in Plenoptic Imaging4

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

カメラアレイ撮影の角度度のエイリアシングを除去するエイリアシングの探索索と打ち消しを行行う

周波数領領域ではなく空間領領域で探索索を行行う

先行行研究がフィルタデモザイキング再パラメータ調整などの前処理理でエイリアシング除去を行行うのに対しエイリアシング探索索後にリフォーカスの段階でエイリアシングを取り除く

8times8の平行行カメラアレイで検証するカメラ間の 基線長は70mm

今回は基線長が長いデータセットを使った 次はLytroなどのマイクロレンズアレイで検証する

Globally consistent multi-label assignment on the ray space of 4d light fields [S Wanner C Straehle B Goldluecke CVPR2013] Lineassisted light field triangulation and stereo matching [Z Yu X Guo H Lin A Lumsdaine J Yu ICCV 2013]

なかの

Globally Consistent Multi-Label Assignment on the Ray Space of 4D Light Fields5

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

四次元ライトフィールドの光線情報において マルチラベルの領領域分割を行行う

深度度情報光線情報を用いて領領域分割することで 二次元（空間）情報だけでは分割が難しかった 領領域を分割可能とする

The light field camera Extended depth of field aliasing and superresolution [T Bishop P Favaro IEEE Transactions on Pattern Analysis and Machine Intelligence 2012]

なかの

Line Assisted Light Field Triangulation and Stereo Matching6

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

光線情報を利利用してステレオマッチングの精度度を 向上させる手法三角測量量の誤差を減らす

Light Field Stereo Matchingとかいう手法 グラフ構造を作成

Variational light field analysis for disparity estimation and super-resolution [S Wanner and B Goldlumluecke 2013]

なかの

Adaptive stereo similarity fusion using confidence measures 20157

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

ステレオマッチングの新しい方式fusion weightsを提案複数の手法を組み合わせてコスト計算を行行う手法付録に既存手法のコスト関数一覧あり

パラメータに依存する手法を用いないことで高速化を図っている

一つのアルゴリズムでは異異なる特性を持つ領領域全てに対して適切切なマッチングはできない複数を組み合わせることでそれを補う13種と多い

middleburyとKITTIのデータセットで評価

一枚あたり03sと高速だが001sとより高速なアルゴリズムが存在する

Segment-based stereo matching using belief propagation and a self-adapting dissimilarity measure [A Klaus M Sormann K Karner ICPR2006] On building an accurate stereo matching system on graphics hardware [X Mei X Sun M Zhou S Jiao H Wang X Zhang ICCV2011] Similarity measures for depth estimation [K Wegner O Stankiewicz 3DTV-CON2009] On accurate dense stereo-matching using a local adaptive multi-cost approach [C Stentoumis L Grammatikopoulos I Kalisperakis G Karras ISPRS2014] A quantitative evaluation of confidence measures for stereo vision [X Hu P Mordohai PAMI2012]

なかの

SIMILARITY MEASURE FOR DEPTH ESTIMATIOM 20098

どんなもの

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

4種類の視差推定アルゴリズムを組み合わせている 類似度度の選択性の解析

Belief Propagationの枠組みを用いる

名古屋大学の多視点データベースを利利用

HHI Test Material for 3D Video [I Feldmann M Muller F Zilly R Tanger A SmolicP Kauff T Wiegand 2008] Multiview Video Test Sequence and Camera Parameters [Yo-Sung Ho Eun-Kyung Lee and Cheon Lee 2008] 1D Parallel Test Sequences for MPEG-FTV [M Tanimoto T Fujii N Fukushima 2008] Non-parametric Local Transforms for Computing Visual Correspondence [R Zabih J Woodfill 1994]

なかの

Spatiotemporal Stereo via Spatiotemporal Quadric Element (Stequel) Matching9

どんなもの

技術や手法のキモはどこ

新しいマッチング手法を提案動き考慮することなく時間情報を取り込むことができる 時間方向のエピ線を考える

オプティカルフロー推定は3D境界や低テクスチャで弱いが提案手法はロバストである

なかの

Depth Video Enhancement Based on Weighted Mode Filtering10

どんなもの

議論論はある

ノイズを含んだ低解像度度のデプスマップの質を高める手法（超解像度度とデノイズ）時間方向も使用簡単なオプティカルフローを計算し利利用する

非反復復アルゴリズムのためGPUに載せやすく高速化が考えられる

なかの

Fast Bilateral-Space Stereo for Synthetic Defocus11

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

議論論はある

次に読むべき論論文は

高速な自由焦点ぼけ画像の作成

Bilateral-spaceを提案

従来研究よりも10から100倍速くぼけ具合の精度度も良良い

ぼけを作成するというアプリケーションに利利用する距離離という面では提案手法が有益であるが実測的な距離離という面での精度度は悪い背景と前景が同じ色で近くにある場合同一ととらえてしまう

Efficient high-resolution stereo matching using local plane sweeps [S N Sinha D Scharstein and R SzeliskiCVPR2014] Bilateral filtering-based optical flow estimation with occlusion detection [J Xiao H Cheng H Sawhney C Rao and M IsnardiECCV2006] Efficient nonlocal regularization for optical flow [P Krumlahenbumluhl and V KoltunECCV2012] Real-time spatiotemporal stereo matching using the dual-cross-bilateral grid [C Richardt D Orr I Davies A Criminisi and N A DodgsonECCV2010]

どうやって有効性を示した視差推定の精度度はmiddleburyKITTI

なかの

Robust Spatiotemporal Stereo for Dynamic Scenes12

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

ステレオ動画のフレーム間情報を取り入れることでノイズ耐性を向上させるまた動きの大きなものも考える

時間を含めたウインドウの提案自動的にそのような変化に対応する画像領領域を検出する

従来の時空間ステレオと比べ大きな動きによる急激な視差の時間変化に対して頑健である

なかの

Spacetime Stereo A Unifying Framework for Depth from Triangulation13

どんなもの

先行行研究と比べてどこがすごい

space time stereoを提案ステレオカメラの視差推定でも構造光を用いた視差推定でも利利用可能 動的なシーンでの利利用も可能

フレームごとマッチングを取っていたが複数フレームでのマッチングを可能とした

なかの

Learning to Select and Order Vacation Photographs (Disney research)14

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示したあまりにもたくさん撮影した写真たちから自動的にフォトアルバムを作成する研究

複雑な視覚での区別を試みたのはこの論論文が初

５つの異異なるトピックから63の個人的な写真コレクションのデータセットを利利用し定量量的に評価する

写真間の差別かを定義する顔全体の絵何が写っているか写っていないかを評価する

Jointly aligning and segmenting multiple web photo streams for the inference of collective photo storylines [G Kim and E P Xing CVPR2013] Photo sequencing [T Basha Y Moses and S Avidan CVPR2012]

なかの

A Taxonomy and Evaluation of Dense Two-Frame Stereo Correspondence Algorithms15

どんなもの

どうやって有効性を示した

次に読むべき論論文は

ステレオマッチングに関する分類を行行う 新たなデータセットを作成する

というよりも他の手法が有効性を示すことができるようにデータセットを作成した 今ではmiddleburyのデータセットと言えばステレオ業界では超有名

High-resolution stereo datasets with subpixel-accurate ground truth

なかの

Discriminability Limits in Spatio-Temporal Stereo Block Matching1

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

spatio-temporal disparity estimationの根本的な前提の正当性を解析しマッチング処理理の際に動きが助けとなる程度度を決定する

時空間マッチングのエラーを分析し誤りの原因を確率率率で導出する（フレーム数動きの分散画像特徴ノイズの関数）

[34243334]は時空間マッチングの利利点を指摘していたが本論論文はマッチング精度度の向上のために動きを用いる手法の程度度や性質を研究する

6つのステレオビデオを用いて検証を行行った

Spacetime stereo Shape recovery for dynamic scenes [L Zhang B Curless and S Seitz CVPR2003] Spatiotemporal stereo and scene flow via stequel matching [M Sizintsev and R Wildes PAMI2012] Temporally consistent disparity and optical flow via efficient spatio-temporal filtering [A Hosni C Rhemann M Bleyer and M Gelautz PRCAIVT2012] Spacetime stereo A unifying framework for depth from triangulation [PAMI2005] Dynamic depth recovery from multiple synchronized video streams [H Tao H Sawhney and R Kumar CVPR2001] Spatiotemporal descriptor for wide-baseline stereo reconstruction of non-rigid and ambiguous scenes [ECCV2003]

なかの

Depth-Based Patch Scaling for Content-Aware Stereo Image Completion2

どんなもの

どうやって有効性を示した

ステレオでデプスを取り物体の三次元情報を使ってインペインティングを行行う

bookのデータセット背景が繰り返しパターンが多いものを使っている

なかの

Fast Semi-dense Surface Reconstruction from Stereoscopic Video in Laparoscopic Surgery3

どんなもの

手法の流流れ

次に読むべき論論文は

腹腔内手術の際にステレオビデオから高速に物体の三次元再構成を行行う研究

Evaluation of stereo matching costs on images with radiometric differences [Hirschmueller H Scharstein D PAMI2008]

スコープカメラから画像取得GPUで演算する 視差を算出しフィルタにかける距離離に変換 点群を再びフィルタにかけて三次元再構成

なかの

3D Reconstruction from Accidental Motion4

どんなもの

技術や手法のキモはどこ

議論論はある

数秒のビデオ（単眼）から三次元再構成を行行う 手ぶれなどの動きから再構成が可能で特定の動きや機材を必要としない

短い基線長でも再構成が可能（3mmの基線長）

基線長が短いため背景の精度度が低くなる リフォーカス画像作成には十分 練習では上手く動作したが検証がまだ必要

なかの

Panoramic Video from Unstructured Camera Arrays5

どんなもの

技術や手法のキモはどこ

議論論はある

複数のカメラを用いたパノラマ撮影を行行う その際に不不自然さがないような動画を作成する

不不自然さを感じる感覚特性を提示しそれにのっとって対策を講じている

一つのカメラの解像度度と品質を向上させるよりも複数台のカメラを組み合わせることがはるかに簡単で有益である専門家でなくてもGoProのカメラセットを組み合わせることは容易易

カメラの配置は厳密に決められていない完璧な時間同期やローリングシャッターの不不足のような実撮影での問題もクリアしている

先行行研究と比べてどこがすごい

どうやって有効性を示した左のシステムは14台のカメラを使用 右のシステムはGoProを5台使用

Disney 201558

なかの

Floating Scale Surface Reconstruction6

どんなもの

技術や手法のキモはどこ

流流動的にスケールを変えられる三次元再構成手法

サンプル規模に依存するパラメータがない rarrどのスケールのサンプルにも対応できる

siggraph2014

なかの

A Super Resolution Reconstruction Scheme for Mixed Spatio-Temporal Stereo Video7

どんなもの

技術や手法のキモはどこ

ビデオ超解像アルゴリズム

二台のカメラを使用 一台は低解像度度で高速一台は高解像度度で低速

HHI 3DV ftp siteのBookarrivalとbeergadenを使用どうやって有効性を示した

なかの

What Is a Good Day for Outdoor Photometric Stereo8

どんなもの

先行行研究と比べてどこがすごい

議論論はある

次に読むべき論論文は

屋外における照度度差があるステレオの研究 屋外でステレオを行行う際に有利利or不不利利な日照条件を明らかにする

点光源を用いた研究は行行われていたが屋外での研究はされていなかった

晴れより曇りの方が精度度が良良い雲があるから特徴量量を取りやすい雑音を白色ガウスモデルを想定 季節ごとのデータセットを利利用してみても良良い

Time-lapse photometric stereo and applications [F Shen K Sunkavalli N Bonneel S Rusinkiewicz H Pfisterand X Tong2014] Outdoor photometric stereo [L-F Yu S-K Yeung Y-W Tai D Terzopoulos and T FChan ICCP2013]

どうやって有効性を示した屋外の照明に関するHDR環境マップのデータベースを利利用

Disney 2015424

なかの

COLORBRUSH ANIMATED DIFFUSION FOR INTUITIVE COLORIZATION SIMULATING WATER PAINTING 9

どんなものアニメを水彩画で描いたように変換する 水彩画を描くには経験が必要であるがそれを作成するアルゴリズムを考案絵具が水によりどうにじむかシュミレーションしている

Disney 20141027 ICIP2014

次に読むべき論論文はGabor-space geodesic active contoursrdquo In Algebraic Frames for the Perception-Action Cycle [C Sagiv NA Sochen and YY Zeevi 2000] Practical temporal consistency for image-based graphics applications [M Lang O Wang T Aydin A Smolic and M Gross SIGGRAPH2012] Computer-Generated Watercolor [CJ Curtis SE Anderson JE Seims KW Fleischer and DH Salesin SIGGRAPH1997]

なかの

From Sound to Sight Using Audio Processing to enable Visible Light Communication 10

どんなもの光に情報を載せる技術プロジェクトページがあって光関係の研究が8個載っている

httpwwwdisneyresearchcomprojectvisible-light-communication

ビデオのURL httpwwwdisneyresearchcomwpcontentuploadsPub_InvisibleLightCommunication_Siggraph14_videomp4

• 201211106_KeisukeKawahara
• 201311421_KeitaKanai_02
• 201313095_AkiraIshii_02
• 201413109_YuukiKubo_02
• 201513110_SatoshiHashizume_02
• 鬼輪講マラソン③_1
• 鬼輪講マラソン③_2

2 201313095

Pose-IO EMS

Pose-IO

EMS

EMS58deg

46 5 be]er

bull  RoudautARauASterzCPlauthMLopesPandBaudischPGestureoutputeyes-freeoutputusingaforcefeedbacktouchsurfaceProcCHI1325472556

PropriocepEveampInteracEonamp(CHIrsquo15)amp

PedroLopesAlexandraIonWilliMuellerDanielHoffmannPatrikJonellPatrickBaudisch

h]pswwwyoutubecomwatchv=KMxIw7zhlw

2 201313095

EMS

AR EMSEMS

GPS

bull  TamakiEMiyakiTandRekimotoJPossessedHandAhandgesturemanipulaEonsystemusingelectricalsEmuliInProcampAHrsquo10amp(2010)21ndash25

CruiseampControlampforampPedestriansampControllingampWalkingampDirecEonampusingampElectricalampMuscleampSEmulaEonamp(CHIrsquo15)amp

MaxPfeifferTimDunteStefanSchneegassFlorianAltMichaelRohs

h]pswwwyoutubecomwatchv=JSfnm_HoUv4

2 201313095

EMS

EMS

EMS 16automaEccalibraEonsystem

auto-calibraEonsystems 16

8875g

bull  KruijffESchmalsEegDandBeckhausSUsingneuromuscularelectricalsEmulaEonforpseudo-hapEcfeedbackInProceedingsoftheACMsymposiumonVirtualrealitysoywareandtechnologyVRSTrsquo06ACM(NewYorkNYUSA2006)316ndash319

PossessedHandampTechniquesampforampControllingampHumanampHandsampusingampElectricalampMusclesampSEmuliamp(CHIrsquo11)amp

EmiTamakiTakashiMiyakiJunRekimoto

h]psvimeocom27044937

2 201313095

EMS

EMS

RFIDEMS

1276

bull  KruijffESchmalsEegDandBeckhausDUsingneuromuscularelectricalsEmulaEonforpseudo-hapEcfeedbackProcVRST06316mdash319

Affordance++ampallowingampobjectsamptoampcommunicateampdynamicampuseamp(CHIrsquo15)

PedroLopesPatrikJonellPatrickBaudisch

h]pswwwyoutubecomwatchv=d0J7V37zQjY

2 201313095

EMS

EMS

EMS

ReacEonloss

EMS

UsingampNeuromuscularampElectricalampSEmulaEonampforampPseudoHapEcampFeedbackamp(VRSTrsquo06)

ErnstKruijffDieterSchmalsEegSteffiBeckhaus

2 201313095

SVM

106 Per-User

863 13

712

13

bull  SatoMPoupyrevIandHarrisonCToucheenhancingtouchinteracEononhumansscreensliquidsandeverydayobjectsInCHIrsquo12483ndash492

bull  TimCollinsAcEveacousEctouchinterfaceElectronicsLe]ersVol45No20pp1055ndash1056242009

TouchampampampAcEvateampAddingampInteracEvityamptoampExisEngampObjectsampusingampAcEveampAcousEcampSensingamp(UISTrsquo13)

MakotoOnoBuntarouShizukiJiroTanaka

h]pswwwyoutubecomwatchv=XgxXi6w8IQc

2 201313095

13

13

SVM

on-body

per-user 5 967 4987

bull  HarrisonCBenkoHWilsonAOmniTouchwearablemulEtouchinteracEoneverywhereinUIST11441-450

bull  MatsushitaNandRekimotoJHoloWalldesigningafingerhandbodyandobjectsensiEvewallUIST97209-210

ToucheampEnhancingampTouchampInteracEonamponampHumansampScreensampLiquidsampandampEverydayampObjectsamp(CHIrsquo12)

MunehikoSatoIvanPoupyrevChrisHarrison

h]pswwwyoutubecomwatchv=E4tYpXVTjxA

2 201313095

SVM

9 9TapSense 4

95 99

TapSenseDelete

bull  HarrisonCTanDandMorrisDSkinputappropriat-ingthebodyasaninputsurfaceInProcCHI10453-462

TapSenseampEnhancingampFingerampInteracEonamponampTouchampSurfacesamp(UISTrsquo11)

ChrisHarrisonJuliaSchwarzSco]EHudson

h]pswwwyoutubecomwatchv=-oN96cucBr4

2 201313095

13

13

22 SVM

13 FingersWholeArmForearm 876 Fingers877 WholeArm 955

883 Forearm 815

833

GUI

bull  SaponasTSTanDSMorrisDandBalakrishnanRDemonstraEngthefeasibilityofusingforearmelectromyographyformuscle-computerinterfacesInProcCHIrsquo09515-24

SkinputampAppropriaEngamptheampBodyampasampanampInputampSurfaceamp(CHIrsquo10)

ChrisHarrisonDesneyTanDanMorris

h]pswwwyoutubecomwatchv=g3XPUdW9Ryg

2 201313095

Fiberio

10 330 150

148 2

Fiberio

bull  MatsushitaNandRekimotoJHoloWallDesigningaFingerHandBodyObjectSensiEveWallProcUIST97209ndash210

FiberioampAampTouchscreenampthatampSensesampFingerprintsamp(UISTrsquo13)

ChrisEanHolzPatrickBaudisch

h]pswwwyoutubecomwatchv=p1a5yLzuTqA

2 201313095

3D

3D

bull  GeigerMVollertsenFTheMechanismsofLaserFormingCIRPANNALSlsquo93421301-304

bull  WillisKDDXuCWuJKLevinGGrossMDInteracEvefabricaEonnewinterfacesfordigitalfabricaEonProcTEI11pp69-72

LaserOrigamiampLaserCugngamp3DampObjectsamp(CHIrsquo13)

StefanieMuellerBasEanKruckPatrickBaudisch

h]pswwwyoutubecomwatchv=arjRtCjI9AQ

2 201313095

bend

bull  HyunyoungSongFranccediloisGuimbreEegravereChangHuHodLipsonModelCraycapturingfreehandannotaEonsandeditsonphysical3DmodelsProceedingsofthe19thannualACMsymposiumonUserinterfacesoywareandtechnologyOctober15-182006MontreuxSwitzerland

InteracEveampConstrucEonampInteracEveampFabricaEonampofampFuncEonalampMechanicalampDevicesamp(UISTrsquo12)

StefanieMuellerPedroLopesPatrickBaudisch

h]pdlacmorgcitaEoncfmid=23801162380191

2 201313095

3D

3D

bull  SavageVSchmidtRGrossmanTFitzmauriceGandHartmannBAseriesoftubesAddinginteracEvityto3dprintsusinginternalpipesInProcUIST14(2014)

3DampPrinEngampPneumaEcampDeviceampControlsampwithampVariableampAcEvaEonampForceampCapabiliEesamp(CHIrsquo15)amp

MarynelVazquezEricBrockmeyerRutaDesaiChrisHarrisonSco]EHudson

h]pswwwyoutubecomwatchv=-4gFYvhkz0Y

2 201313095

OpenFab 3D

fablets

3 3

bull  CHENDMATUSIKWSITTHI-AMORNPDIDYKPANDLEVIND2013Spec2FabAreducer-tunermodelfortranslat-ingspecificaEonsto3DprintsACMTransGraph324(July)

OpenFabampAampProgrammableampPipelineampforampMulEMaterialampFabricaEonamp(SIGGRAPHrsquo13)

KirilVidimcˇeSzu-PoWangJonathanRagan-KelleyWojciechMatusik

2 201313095

3D

3D

3D

3D14 30 13 67

244

14

3D

bull  MuellerSKruckBBaudischPLaserOrigamiLaser-Cunng3DObjectsProcCHIrsquo132585-2592

faBrickaEonampFastamp3DampPrinEngampofampFuncEonalampObjectsampbyampIntegraEngampConstrucEonampKitampBuildingampBlocksamp(CHIrsquo14)amp

StefanieMuellerTobiasMohrKersEnGuentherJohannesFrohnhofenPatrickBaudisch

h]pswwwyoutubecomwatchv=BlO6YRcLJjE

Touching13 the13 Void13 Direct-shy‐Touch13 Interac4on13 for13 Intangible13 Displays(CHIrsquo10)Li-Wei Chan Hui-Shan Kao Mike Y Chen Ming-Sui Jane Yi-Ping Hung

201413109　久保勇貴 2（鬼コース）13

どんなもの13

空中像へのタッチのエラーに関する調査及び影や音のフィードバックを付与することによるパーフォーマンス向上を示した研究13

先行研究と比べてどこがすごい13

平面画像をタッチする際の奥行きに関するエラーの正確な取得を初めて検証13

技術や手法のキモはどこ13

２つの赤外線カメラを用いた正確なタッチの検出13

どうやって有効だと検証した13

タッチ時の奥行きの正確さに関する被験者実験を実施またタッチする際に影や音を付けた際の反応時間を被験者実験で検証13

議論はある13

ユーザは慣れるまで影や音のフィードバックが必要だがそのあとは必要なくなる13

次に読むべき論文は13

MirageTable13 （CHI12） 13

MirageTable13 Freehand13 Interac4on13 on13 a13 Projected13 13 Augmented13 Reality13 Tabletop(CHIrsquo12)

Hrvoje Benko Ricardo Jota Andrew D Wilson

201413109　久保勇貴 2（鬼コース）13

どんなもの13

テーブル上においてバーチャルな物体をリアルタイムで現実でものを動かすことと同様な動作に操作可能なシステム13

先行研究と比べてどこがすごい13

現実の物体をリアルタイムで画面に取りこむことができ質の高いフリーハンドインタラクションを実現した点13

技術や手法のキモはどこ13

色深度前景頭追跡プロキシパーティクルを駆使したリアルタイムメッシュの作成13

どうやって有効だと検証した13

凹凸など例外な表面に対しての投影した際の画像の質についての評価実験また仮想物体の奥行き知覚に関する実験も行った13

議論はある13

前面のみしかキャプチャしていないため差が生じる握っている場所の再現は未解決な課題である13

次に読むべき論文は13

Hirsch13 et13 al13 201413 (SIGGRAPHrsquo14)13

A13 Compressive13 Light13 Field13 Projec4on13 System13 (SIGGRAPHrsquo14)MaChew13 Hirsch13 Gordon13 Wetzstein13 Ramesh13 Raskar

201413109　久保勇貴 2（鬼コース）13

どんなもの13

通常の3Dディスプレイに比べて解像度輝度コントラストを改善した圧縮ライトフィードディスプレイ13

先行研究と比べてどこがすごい13

多視点立体視を複数でなく１台のプロジェクタを用いて実現した13

技術や手法のキモはどこ13

受動的スクリーンと高速切り替えプロジェクタによる新しい光学設計13

どうやって有効だと検証した13

4つのシーン例を投影したものを示したアニメーションの3D効果について観察を行った13

議論はある13

光路長を広げると観察できる画質が大幅に制限され他のライトフィードビューと混線が生じる13

次に読むべき論文は13

Butler13 et13 al13 201113

Vermeer13 Direct13 Interac4on13 with13 a13 360deg13 Viewable13 3D13 Display(UISTrsquo11) Alex Butler Otmar Hilliges Shahram Izadi Steve Hodges David Molyneaux David Kim

201413109　久保勇貴 2（鬼コース）13

どんなもの13

映し出された3Dオブジェクトとインタラクションを行えるシステム13

先行研究と比べてどこがすごい13

ディスプレイ内の画像とのインタラクションを提案ボリュームディスプレイを支援する新しいセンシング法の提案13

技術や手法のキモはどこ13

パラボラ鏡に取り付けた赤外線カメラセンサによる指先検出13

どうやって有効だと検証した13

アプリケーション例を示した13

議論はある13

パラボラ鏡の大きさよりもディスプレイサイズが小さくなってしまう13

次に読むべき論文は13

Hirsch13 et13 al13 201213

8D13 Interac4ng13 with13 a13 Relightable13 Glasses-shy‐Free13 3D13 Display(CHIrsquo12)Li-Wei Chan Hui-Shan Kao Mike Y Chen Ming-Sui Jane Yi-Ping Hung

201413109　久保勇貴 2（鬼コース）13

どんなもの13

ライトフィードによる入力とライトフィールドによる表示を行うリアルタイム8Dディスプレイ13

先行研究と比べてどこがすごい13

リアルタイムでの8Dディスプレイの実現（先行研究は7fps）13

技術や手法のキモはどこ13

GPUにおけるレンダリング処理13

どうやって有効だと検証した13

MRIデータを用いたディスプレイのデモを示した13

議論はある13

現在はグレースケールの入力のみだがカラーでの入力できればより強力になるだろう13

次に読むべき論文は13

Sahoo13 et13 al13 201513

Control13 of13 Non-shy‐Solid13 Diffusers13 by13 Electrosta4c13 Charging13 (CHIrsquo15) Deepak Ranjan Sahoo Diego Martinez Plasencia Sriram Subramanian

201413109　久保勇貴 2（鬼コース）13

どんなもの13

シャボン玉や霧などの非固体を電場による制御を試みた研究13

先行研究と比べてどこがすごい13

非固体の形や位置の制御法を提案した点13

技術や手法のキモはどこ13

[Intra13 et13 al13 11]中のldquowire-shy‐to-shy‐Cylinderdquoを用いたエアゾール粒子の帯電13

どうやって有効だと検証した13

霧及びシャボン玉によるディスプレイのアプリケーション例で実際に制御して見せた13

議論はある13

風による影響を本手法は打ち消すことができた13

次に読むべき論文は13

Barnum13 et13 al13 201013

A13 Mul4-shy‐Layered13 Display13 with13 Water13 Drops(SIGGRAPHrsquo10)Peter C Barnum Srinivasa G Narasimhan Takeo Kanade

201413109　久保勇貴 2（鬼コース）13

どんなもの13

複数層の落下水滴にプロジェクションマッピングを行いディスプレイとした研究13

先行研究と比べてどこがすごい13

水滴の制御を行うことで単一のプロジェクタによって複数層の映像投影を可能とした点13

技術や手法のキモはどこ13

[Ambravaneswaran13 et13 al13 2002]及び本研究における実験結果に基づく水滴生成13

どうやって有効だと検証した13

複数のディスプレイ例を示した13 例）顔の投影水槽シミュレータなど13

議論はある13

本当の3Dディスプレイにするにはより多くの水滴制御が必要13

次に読むべき論文は13

Lee13 et13 al13 200713

An13 Immaterial13 Depth-shy‐Fused13 3D13 Display(VRSTrsquo07)Cha Lee Stephen DiVerdi Tobias Humlollerer

201413109　久保勇貴 2（鬼コース）13

どんなもの13

２つのスクリーンを駆使し3Dディスプレイを実現するdepth-shy‐fused13 3D(DFD)に関する評価を行いその結果よりディスプレイを提案した研究13

先行研究と比べてどこがすごい13

DFDが任意のスクリーン設定及び見る位置に対して有効であることを示した13

技術や手法のキモはどこ13

６通りのスクリーン組合せから２つを抽出し見え方の違いを検証した点13

どうやって有効だと検証した13

６通りのスクリーンについて立体的に見えるか被験者実験を実施その後それぞれに有意差がみられるか調べた13

議論はある13

ステレオイメージを認めることができなかったユーザに対しても強い3D効果が見られた13

次に読むべき論文は13

Tokuda13 et13 al13 201013

Cloud13 Display13 (ACErsquo10)Yutaka Tokuda Yasuhiro Suzuki Kunihiro Nishimura Tomohiro Tanikawa Michitaka Hirose

201413109　久保勇貴 2（鬼コース）13

どんなもの13

煙の渦輪を用いた空間を埋めるディスプレイ13

先行研究と比べてどこがすごい13

制御可能な手法により高所へのパーティクルを運搬することに着目した点13

技術や手法のキモはどこ13

コンピュータによって制御が行われる空気砲アレイ13

どうやって有効だと検証した13

箱の中で実験を行い安定して渦輪をできるようにした実際にデモを行ったことを示した13

議論はある13

今の試作機をより早くリフレッシュ速度を高めることによりより濃く空間を埋められることを目指す13

次に読むべき論文は13

Sato13 et13 al13 200913

Par]cle13 Display13 System　(JVRC09)13 -shy‐13 A13 Large13 Scale13 Display13 for13 Public13 Space13 -shy‐

Munehiko13 Sato13 Yasuhiro13 Suzuki13 13 Atsushi13 Hiyama13 Tomohiro13 Tanikawa13 Michitaka13 Hirose

201413109　久保勇貴 2（鬼コース）13

どんなもの13

パーティクルディスプレイによる公共スペースのための大画面ディスプレイの提案13

先行研究と比べてどこがすごい13

公共スペースにおける要求と制限に基づいたシステムを提案した点13

技術や手法のキモはどこ13

実験に基づく表示画像のスクロール時間の制御13

どうやって有効だと検証した13

Aという文字の知覚実験によって 適な点滅周期の調査を行った13

議論はある13

現在の試作機を組合せより高解像度にする必要がある13

次に読むべき論文は13

Kwon13 et13 al13 201513

FugaciousFilm13 Exploring13 Aen4ve13 Interac4on13 with13 Ephemeral13 Material13 (CHIrsquo15)Hyosun13 Kwon13 Shashank13 Jaiswal13 Steve13 Benford13 Sue13 Ann13 Seah13

13 Peter13 BenneC13 Boriana13 Koleva13 Holger13 Schnaumldelbach

201413109　久保勇貴 2（鬼コース）13

どんなもの13

膜を押す引く飛び出ることができる新しい石鹸膜インタフェースの提案13

先行研究と比べてどこがすごい13

徐々に消えるインタフェースは高い注意を有するインタラクションを提供するという点を示したこと13

技術や手法のキモはどこ13

水グリセリンを201の対比で混ぜることでldquopoprdquoがきれいになるようにしかつ膜の耐久性を向上させた13

どうやって有効だと検証した13

３目並べを用いた被験者実験を実施13 ユーザは膜を割ると負け膜を自分のマスにするにはタッチ押す引くの書かれた通りの操作を行う13

議論はある13

ユーザに精密な動作を要求することはとりわけ注意を払うことを誘発する13

次に読むべき論文は13

Wetzstein13 et13 al13 201213

Tensor13 Displays13 Compressive13 Light13 Field13 Synthesis13 using13 Mul4layer13 Displays13 with13 Direc4onal13 Backligh4ng(SIGGRAPHrsquo12)

Gordon13 Wetzstein13 Douglas13 Lanman13 MaChew13 Hirsch13 Ramesh13 Raskar

201413109　久保勇貴 2（鬼コース）13

どんなもの13

視点によって異なる立体映像を見ることができる複数の層からなるディスプレイ13

先行研究と比べてどこがすごい13

既存の手法を合成したcomputa(onal13 displaysというディスプレイの新しいフレームワークを提案した13

技術や手法のキモはどこ13

時分割で視差マスクを表示することでユーザの視線ごとに立体像を表現する13

どうやって有効だと検証した13

通常のディスプレイ３層LCDLCD及び指向性バックライトの例による比較13 13

議論はある13

波紋を含むこと色チャンネルが悪影響を与える相互反射不均一などの問題が見られた13

次に読むべき論文は13

Matoba13 et13 al13 1213

SplashDisplay(VRICrsquo12)Yasuo Matoba Taro Tokui Ryo Sato Tochiki Sato Hideki Koike

201413109　久保勇貴 2（鬼コース）13

どんなもの13

パーティクルにCGを投射しパーティクルがテーブル上に投げられると爆発しパーティクルが噴きあがる13

先行研究と比べてどこがすごい13

ビーズがミリメートルからメートル単位までZ軸方向について空中で奥行きを表現する13

技術や手法のキモはどこ13

スピーカによって風力が発生させビーズを舞い上げる点13

どうやって有効だと検証した13

ビーズを投げると花火が打ちあがっているかのようなアプリケーション例を示した13

議論はある13

高いレベルの表現及び幅広い入力範囲を提供できた13

次に読むべき論文は13

Kim13 et13 al13 1413

MARIO13 Mid-shy‐air13 Augmented13 Reality13 Interac4on13 with13 Objects13 (ECrsquo14)Hanyuool13 Kim13 13 Issei13 Takahashi13 Hiroki13 Yamamoto13 Satoshi13 Maekawa13 Takeshi13 Naemura

201413109　久保勇貴 2（鬼コース）13

どんなもの13

350times300times250のテーブル上のスペースにおいて自由に動かせる空中像を造りだすことができる13

先行研究と比べてどこがすごい13

凹面鏡や凹レンズのように曲面でないため画像の歪曲が発生しない13

技術や手法のキモはどこ13

Aerial13 Imaging13 Plate(AIP)を用いた空中像の生成及びそのためのディスプレイ移動装置13

どうやって有効だと検証した13

左右からの視差の考慮及び奥行き表現時の画像提示視野角の検証などを行った13 13

議論はある13

投影しているひよこを叩いたり払いのけたりするような動作がデモ中見られた13

次に読むべき論文は13

Tactile Feedback on Flat Surfaces for the Visually Impaired13Ali Israr Olivier Bau Seung-Chan Kim Ivan Poupyrev13

どのようなものか 視覚障害者のための触覚を用いた視覚代用デバイス 先行研究と比べてどこがすごいか 道案内をしてくれる機械などはあるが日用品の場所を教えたり探すのを手伝ってくれるデバイスはない 技術や手法のキモ タッチパネルとカメラを搭載したデバイス 触覚を与える技術はTeslaTouchを利用 色を基準にオブジェクトの位置を認識 有用性の確認 視覚障害者二人に対して実験このデバイスを使

わなくても各自の方法で物を見つけられるが間違えることが多いこのデバイスを使用することで間違えることなく正確に物の位置を特定できた 課題 一つの色でしか判断できない 触感のあるなしでしか情報を伝えられない 関連論文 TeslaTouch [Bau et al 2010]

20150522 橋爪智 2鬼

Fingernail-Mounted Display of Attraction Force and Texture13Masataka Niwa Tomoko Nozaki Taro Maeda and Hideyuki And13

どのようなものか 指先に取り付けて触感と力を両方表現できるデバイス 先行研究と比べてどこがすごいか 触感と引力をそれぞれ表現するデバイスはあるが両方を一つのデバイスで表現した例は少ない 引力は自由な方向に付加することができる 技術や手法のキモ 偏心に重さを付けた円盤を4枚使用する 5-9Hz 引力　100-200Hz 触感 それぞれの円盤の位相や回転数を調整することで

触感と力 を表現する 4つのモータを使いそれぞれの円盤を独立して制御する 有用性の確認 4人の男性に対して実験80以上の精度で認識できた 関連論文 The nail-mounted attraction forcebump display [Nozaki et al 2008]

20150522 橋爪智 2 鬼

Gilded gait reshaping the urban experience with augmented footsteps13Yuichiro Takeuchi13

どのようなものか 靴に装着し地面の触感をコントロールするデバイス 先行研究と比べてどこがすごいか 単独で動作しなかったり特定の環境のみでしか動作しなかったりするrarr靴単体で動作環境に依存しない 技術や手法のキモ 6個の振動パネルを取り付けゲルでカバー app modulesを取り替えることができ様々な機能を付加できる（GPSsound) 4種類の地面を再現

bull  Hard Ground 振動させない bull  Soft Ground すべてのパネルを振動 bull  Bumpy Ground ジグザグに振動 bull  Godzilla 全てのパネルを振動何回か繰り返す 課題 モーターを使っているため波形をプログラミングできないrarr圧電素子を使用する 関連論文 Haptic Shoes [Fu et al 2010]

20150522 橋爪智 2鬼

ExoInterfaces novel exosceleton haptic interfaces for virtual reality augmented sport and rehabilitation

Dzmitry Tsetserukou Katsunari Sato Susumu Tachi13

どのようなものか 腕に装着し物理的なinteractionを可能にするデバイス 先行研究と比べてどこがすごいか Exoskeleton 力を増幅するためだが重たく危険なこともある String-based wireが視界をまたぐ動きに制限がある rarr腕の動きに制限を与えない安全 技術や手法のキモ 「FlexTorque」人間の筋肉の構造を再現するベルトとモーターを使用する肩の近くに装着することで

腕に負担がかかりにくい 触覚feedback弱いトルク 運動を支援強いトルク 課題 物理的な接触を表現するゲームやスポーツにより没頭させるリハビリのサポートをする視覚障害者の支援（ものの場所を教える） 関連論文 FlexTorque [Dzmitry et al 2010]

20150522 橋爪智 2 鬼

Perception of Ultrasonic Haptic Feedback on the Hand Localisation and Apparent Motion13

Graham Wilson Tom Carter Sriram Subramanian Stephen Brewster13

どのようなものか 超音波を用いた触覚フィードバック有効性の検討を行う 先行研究と比べてどこがすごいか 超音波触覚フィードバックは比較的新しく研究や操作方法に関する知識が少ない 腕を自由に動かすことができ小さいものは着用可能 技術や手法のキモ 88のアレイ状に超音波発生器を設置

有効性の確認 bull  局所的な触感 　　　25箇所に分割しそれぞれに超音波を当てる 　　　触感を感じた989 　　　場所の誤差85mm bull  手のひらを動く触感 上下左右に動く 　　　動いてると感じた629

20150522 橋爪智 2 鬼

Friction Measurements on a Large Area TPaD13Nicholas D Marchuk J Edward Colgate Michael A Peshkin13

どのようなものか 超音波の振動により触感を与える 先行研究と比べてどこがすごいか ガラス板を使うので透明後ろにディスプレイを配置可能 技術や手法のキモ 「Squeeze Film Effect（スクイズ膜効果）」 ガラス板に取り付けた圧電素子の円盤に高周波信号

をかける 実験 振動しない部分＝摩擦が発生しない部分が発生周波数により場所が変わる rarr摩擦を大きさをかける力の大きさから計測 rarr指の場所に合わせて複数の周波数を使い分ける 関連論文 T-PaD[Winfield et al 2007]

20150522 橋爪智 2 鬼

STIMTAC a Tactile Input Device with Programmable Friction13Michel Amberg Freacutedeacuteric Giraud Betty Semail Paolo Olivo Geacutery Casiez Nicolas Roussel13

どのようなものか 触感を与えられるタッチデバイス 先行研究と比べてどこがすごいか LATPaD サイズ大きいノイズが大きい TeslaTouch 高い電圧付加が必要GNDに接続しなければいけない

技術や手法のキモ 「Squeeze Film Effect」超音波を用いて振動を与える 圧電性セラミックを電極にコーディング 指トラッキングは力センサを用いる 活用法 マウスキーボード絵を描く 関連論文 LATPaD[Vincent et al 2011] TeslaTouch[Bau et al 2010]

20150522 橋爪智 2 鬼

Surround Haptics Tactile Feedback for Immersive Gaming Experiences Ali Israr Seung-Chan Kim Ivan Poupyrev Jan Stec13

どのようなものか ゲームに合わせて高解像度の触覚フィードバックをユーザーに与える椅子 先行研究と比べてどこがすごいか 荒く配置した安価な振動アクチュエータで高解像度の触覚フィードバックを行える 一点の振動連続した動き範囲の振動などを再現

技術や手法のキモ 仮想的な振動アクチュエータをいくつかの振動アクチュエータを使って作り出す physical-physicalphysical-virtualvirtual-virtual ゲームにHaptics Engineを導入しHaptics APIを用いてHaptic Displayを操作する 関連論文 Exploring Surround Haptics Displays[Israr et al 2010]

20150522 橋爪智 2 鬼

Audio-Haptic Feedback in Mobile Phones Angela Chang Conor OrsquoSullivan13

どのようなものか haptics機能のついてない携帯電話にオーディオ機能を利用した触覚フィードバックを追加する 先行研究と比べてどこがすごいか 簡単に作れてnon-haptic mobile devicesでも大丈夫 技術や手法のキモ 「MultiFunction Transducer(MFT)」 スピーカーから音と信号の両方を出力できる

bull  Haptic Inheritance 　　音を2つの周波数帯に分ける bull  Synthesis and Matching 　　低周波数帯(20-300Hz)を使い触感を伝える 有効性の検討 42人の人を対象に実験を行う83の人が触感を感じた

20150522 橋爪智 2 鬼

Resolution of Sleep Deprivation Problems using ZZZoo Pillows13Shunsuke Yanaka Motoki Ishida13

どのようなものか 近年不眠症の人が多い rarr誰かと接していると安心し睡眠に導入しやすくなる rarrまるで添い寝をしているようなリアルな抱きまくらを使う 技術や手法のキモ breathing sensation 風船を使って人の呼吸を再現肺の形の風船弱く長い呼吸をする

heating お湯を使って人の体温を再現45 有効性の確認 84人の人が実験 呼吸が睡眠を誘ったかrarr61 体温が睡眠を誘ったかrarr85 関連論文 The Impact of Sleep Disorders on Social Life[Komada et al 2007]

20150522 橋爪智 2 鬼

まとめ13超音波 モーター 風

20150522 橋爪智 2 鬼

コイル 電気刺激 Electrovibration

振動 音 お湯

なかの

Temporally Consistent Disparity and Optical Flow via Efficient Spatio-temporal Filtering1

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示した

議論論はあるか

時間的に一定の視差を算出する手法静止画ステレオよりも精度度が良良いことを示す従来よりも推定精度度が良良いオプティカルフローも算出する

一枚の静止画に対するフィルタリング[1]をステレオ動画に拡張している

ケンブリッジのステレオ動画のデータセットを利利用 実写動画に対する比較も行行うノイズ耐性も検証する

フィルタベースとエネルギーベースの関係性を良良り理理解することで推定精度度を上げる

実装が簡単でリアルタイム視差推定が可能

Fast Cost-Volume Filtering for Visual Correspondence and Beyond [Rhemann C Hosni A Bleyer M Rother C Gelautz M CVPR2011] Real-time Spatiotemporal Stereo Matching Using the Dual-Cross-Bilateral Grid [Richardt C Orr D Davies I Criminisi A Dodgson NA ECCV2010] Secrets of optical flow estimation and their principles [Sun D Roth S Black MJ 2010] Motion estimation with non-local total variation regularization [Werlberger M Pock T Bischof H CVPR2010] Temporally Consistent Disparity Maps from Uncalibrated Stereo Videos [Bleyer M Gelatuz M ISPA2011]

なかの

SymStereo Matching using Induced Symmetry (2014)2

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示した

議論論はあるか

画像の対称性を用いてステレオマッチングを行行う 左右の画像を反転させて重ね合わせることで対称性を測る

絵的な類似の代わりに対称性を使う今まで対称性を用いる手法はなく新規性が大きい

三つのSymmetry-baseの手法で精度度を検証従来手法よりも精度度が向上しているMiddlebury Oxford Corridorfountain-P11のデータセット使用

ステレオの問題である不不連続な箇所オクルージョン部分は未解決である演算時間はやや増加

1-Dラインのコストを考える今までは撮像面に対して平行行な平面でデプスを考えていたが垂直な平面を考える

BT[Birchfield and Tomasi 1998] Census transform[Zabih and Woodfill 1994] Log N[Kovesi 1997] radio-metoric differences[Hirschmuller Scharstein 2009]

なかの

Camouflaging an Object from Many Viewpoints3

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

多くの視点から三次元の物体をカモフラージュするカモフラージュによってオクルージョン部分の不不連続がどの程度度生じるか他の視点ではどれほどになるかの検証

MRF（Markov Random Fields）ベース

新しい三次元物体のカモフラージュモデルを構築 37種類のデータセットを作る

箱形の物体に対してカモフラージュ処理理を施し 結果を評価する

オクルージョン不不連続テクスチャの歪みが問題 照明や画像の貼りつけに制限あり

なかの

Aliasing Detection and Reduction in Plenoptic Imaging4

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

カメラアレイ撮影の角度度のエイリアシングを除去するエイリアシングの探索索と打ち消しを行行う

周波数領領域ではなく空間領領域で探索索を行行う

先行行研究がフィルタデモザイキング再パラメータ調整などの前処理理でエイリアシング除去を行行うのに対しエイリアシング探索索後にリフォーカスの段階でエイリアシングを取り除く

8times8の平行行カメラアレイで検証するカメラ間の 基線長は70mm

今回は基線長が長いデータセットを使った 次はLytroなどのマイクロレンズアレイで検証する

Globally consistent multi-label assignment on the ray space of 4d light fields [S Wanner C Straehle B Goldluecke CVPR2013] Lineassisted light field triangulation and stereo matching [Z Yu X Guo H Lin A Lumsdaine J Yu ICCV 2013]

なかの

Globally Consistent Multi-Label Assignment on the Ray Space of 4D Light Fields5

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

四次元ライトフィールドの光線情報において マルチラベルの領領域分割を行行う

深度度情報光線情報を用いて領領域分割することで 二次元（空間）情報だけでは分割が難しかった 領領域を分割可能とする

The light field camera Extended depth of field aliasing and superresolution [T Bishop P Favaro IEEE Transactions on Pattern Analysis and Machine Intelligence 2012]

なかの

Line Assisted Light Field Triangulation and Stereo Matching6

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

光線情報を利利用してステレオマッチングの精度度を 向上させる手法三角測量量の誤差を減らす

Light Field Stereo Matchingとかいう手法 グラフ構造を作成

Variational light field analysis for disparity estimation and super-resolution [S Wanner and B Goldlumluecke 2013]

なかの

Adaptive stereo similarity fusion using confidence measures 20157

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

ステレオマッチングの新しい方式fusion weightsを提案複数の手法を組み合わせてコスト計算を行行う手法付録に既存手法のコスト関数一覧あり

パラメータに依存する手法を用いないことで高速化を図っている

一つのアルゴリズムでは異異なる特性を持つ領領域全てに対して適切切なマッチングはできない複数を組み合わせることでそれを補う13種と多い

middleburyとKITTIのデータセットで評価

一枚あたり03sと高速だが001sとより高速なアルゴリズムが存在する

Segment-based stereo matching using belief propagation and a self-adapting dissimilarity measure [A Klaus M Sormann K Karner ICPR2006] On building an accurate stereo matching system on graphics hardware [X Mei X Sun M Zhou S Jiao H Wang X Zhang ICCV2011] Similarity measures for depth estimation [K Wegner O Stankiewicz 3DTV-CON2009] On accurate dense stereo-matching using a local adaptive multi-cost approach [C Stentoumis L Grammatikopoulos I Kalisperakis G Karras ISPRS2014] A quantitative evaluation of confidence measures for stereo vision [X Hu P Mordohai PAMI2012]

なかの

SIMILARITY MEASURE FOR DEPTH ESTIMATIOM 20098

どんなもの

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

4種類の視差推定アルゴリズムを組み合わせている 類似度度の選択性の解析

Belief Propagationの枠組みを用いる

名古屋大学の多視点データベースを利利用

HHI Test Material for 3D Video [I Feldmann M Muller F Zilly R Tanger A SmolicP Kauff T Wiegand 2008] Multiview Video Test Sequence and Camera Parameters [Yo-Sung Ho Eun-Kyung Lee and Cheon Lee 2008] 1D Parallel Test Sequences for MPEG-FTV [M Tanimoto T Fujii N Fukushima 2008] Non-parametric Local Transforms for Computing Visual Correspondence [R Zabih J Woodfill 1994]

なかの

Spatiotemporal Stereo via Spatiotemporal Quadric Element (Stequel) Matching9

どんなもの

技術や手法のキモはどこ

新しいマッチング手法を提案動き考慮することなく時間情報を取り込むことができる 時間方向のエピ線を考える

オプティカルフロー推定は3D境界や低テクスチャで弱いが提案手法はロバストである

なかの

Depth Video Enhancement Based on Weighted Mode Filtering10

どんなもの

議論論はある

ノイズを含んだ低解像度度のデプスマップの質を高める手法（超解像度度とデノイズ）時間方向も使用簡単なオプティカルフローを計算し利利用する

非反復復アルゴリズムのためGPUに載せやすく高速化が考えられる

なかの

Fast Bilateral-Space Stereo for Synthetic Defocus11

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

議論論はある

次に読むべき論論文は

高速な自由焦点ぼけ画像の作成

Bilateral-spaceを提案

従来研究よりも10から100倍速くぼけ具合の精度度も良良い

ぼけを作成するというアプリケーションに利利用する距離離という面では提案手法が有益であるが実測的な距離離という面での精度度は悪い背景と前景が同じ色で近くにある場合同一ととらえてしまう

Efficient high-resolution stereo matching using local plane sweeps [S N Sinha D Scharstein and R SzeliskiCVPR2014] Bilateral filtering-based optical flow estimation with occlusion detection [J Xiao H Cheng H Sawhney C Rao and M IsnardiECCV2006] Efficient nonlocal regularization for optical flow [P Krumlahenbumluhl and V KoltunECCV2012] Real-time spatiotemporal stereo matching using the dual-cross-bilateral grid [C Richardt D Orr I Davies A Criminisi and N A DodgsonECCV2010]

どうやって有効性を示した視差推定の精度度はmiddleburyKITTI

なかの

Robust Spatiotemporal Stereo for Dynamic Scenes12

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

ステレオ動画のフレーム間情報を取り入れることでノイズ耐性を向上させるまた動きの大きなものも考える

時間を含めたウインドウの提案自動的にそのような変化に対応する画像領領域を検出する

従来の時空間ステレオと比べ大きな動きによる急激な視差の時間変化に対して頑健である

なかの

Spacetime Stereo A Unifying Framework for Depth from Triangulation13

どんなもの

先行行研究と比べてどこがすごい

space time stereoを提案ステレオカメラの視差推定でも構造光を用いた視差推定でも利利用可能 動的なシーンでの利利用も可能

フレームごとマッチングを取っていたが複数フレームでのマッチングを可能とした

なかの

Learning to Select and Order Vacation Photographs (Disney research)14

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示したあまりにもたくさん撮影した写真たちから自動的にフォトアルバムを作成する研究

複雑な視覚での区別を試みたのはこの論論文が初

５つの異異なるトピックから63の個人的な写真コレクションのデータセットを利利用し定量量的に評価する

写真間の差別かを定義する顔全体の絵何が写っているか写っていないかを評価する

Jointly aligning and segmenting multiple web photo streams for the inference of collective photo storylines [G Kim and E P Xing CVPR2013] Photo sequencing [T Basha Y Moses and S Avidan CVPR2012]

なかの

A Taxonomy and Evaluation of Dense Two-Frame Stereo Correspondence Algorithms15

どんなもの

どうやって有効性を示した

次に読むべき論論文は

ステレオマッチングに関する分類を行行う 新たなデータセットを作成する

というよりも他の手法が有効性を示すことができるようにデータセットを作成した 今ではmiddleburyのデータセットと言えばステレオ業界では超有名

High-resolution stereo datasets with subpixel-accurate ground truth

なかの

Discriminability Limits in Spatio-Temporal Stereo Block Matching1

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

spatio-temporal disparity estimationの根本的な前提の正当性を解析しマッチング処理理の際に動きが助けとなる程度度を決定する

時空間マッチングのエラーを分析し誤りの原因を確率率率で導出する（フレーム数動きの分散画像特徴ノイズの関数）

[34243334]は時空間マッチングの利利点を指摘していたが本論論文はマッチング精度度の向上のために動きを用いる手法の程度度や性質を研究する

6つのステレオビデオを用いて検証を行行った

Spacetime stereo Shape recovery for dynamic scenes [L Zhang B Curless and S Seitz CVPR2003] Spatiotemporal stereo and scene flow via stequel matching [M Sizintsev and R Wildes PAMI2012] Temporally consistent disparity and optical flow via efficient spatio-temporal filtering [A Hosni C Rhemann M Bleyer and M Gelautz PRCAIVT2012] Spacetime stereo A unifying framework for depth from triangulation [PAMI2005] Dynamic depth recovery from multiple synchronized video streams [H Tao H Sawhney and R Kumar CVPR2001] Spatiotemporal descriptor for wide-baseline stereo reconstruction of non-rigid and ambiguous scenes [ECCV2003]

なかの

Depth-Based Patch Scaling for Content-Aware Stereo Image Completion2

どんなもの

どうやって有効性を示した

ステレオでデプスを取り物体の三次元情報を使ってインペインティングを行行う

bookのデータセット背景が繰り返しパターンが多いものを使っている

なかの

Fast Semi-dense Surface Reconstruction from Stereoscopic Video in Laparoscopic Surgery3

どんなもの

手法の流流れ

次に読むべき論論文は

腹腔内手術の際にステレオビデオから高速に物体の三次元再構成を行行う研究

Evaluation of stereo matching costs on images with radiometric differences [Hirschmueller H Scharstein D PAMI2008]

スコープカメラから画像取得GPUで演算する 視差を算出しフィルタにかける距離離に変換 点群を再びフィルタにかけて三次元再構成

なかの

3D Reconstruction from Accidental Motion4

どんなもの

技術や手法のキモはどこ

議論論はある

数秒のビデオ（単眼）から三次元再構成を行行う 手ぶれなどの動きから再構成が可能で特定の動きや機材を必要としない

短い基線長でも再構成が可能（3mmの基線長）

基線長が短いため背景の精度度が低くなる リフォーカス画像作成には十分 練習では上手く動作したが検証がまだ必要

なかの

Panoramic Video from Unstructured Camera Arrays5

どんなもの

技術や手法のキモはどこ

議論論はある

複数のカメラを用いたパノラマ撮影を行行う その際に不不自然さがないような動画を作成する

不不自然さを感じる感覚特性を提示しそれにのっとって対策を講じている

一つのカメラの解像度度と品質を向上させるよりも複数台のカメラを組み合わせることがはるかに簡単で有益である専門家でなくてもGoProのカメラセットを組み合わせることは容易易

カメラの配置は厳密に決められていない完璧な時間同期やローリングシャッターの不不足のような実撮影での問題もクリアしている

先行行研究と比べてどこがすごい

どうやって有効性を示した左のシステムは14台のカメラを使用 右のシステムはGoProを5台使用

Disney 201558

なかの

Floating Scale Surface Reconstruction6

どんなもの

技術や手法のキモはどこ

流流動的にスケールを変えられる三次元再構成手法

サンプル規模に依存するパラメータがない rarrどのスケールのサンプルにも対応できる

siggraph2014

なかの

A Super Resolution Reconstruction Scheme for Mixed Spatio-Temporal Stereo Video7

どんなもの

技術や手法のキモはどこ

ビデオ超解像アルゴリズム

二台のカメラを使用 一台は低解像度度で高速一台は高解像度度で低速

HHI 3DV ftp siteのBookarrivalとbeergadenを使用どうやって有効性を示した

なかの

What Is a Good Day for Outdoor Photometric Stereo8

どんなもの

先行行研究と比べてどこがすごい

議論論はある

次に読むべき論論文は

屋外における照度度差があるステレオの研究 屋外でステレオを行行う際に有利利or不不利利な日照条件を明らかにする

点光源を用いた研究は行行われていたが屋外での研究はされていなかった

晴れより曇りの方が精度度が良良い雲があるから特徴量量を取りやすい雑音を白色ガウスモデルを想定 季節ごとのデータセットを利利用してみても良良い

Time-lapse photometric stereo and applications [F Shen K Sunkavalli N Bonneel S Rusinkiewicz H Pfisterand X Tong2014] Outdoor photometric stereo [L-F Yu S-K Yeung Y-W Tai D Terzopoulos and T FChan ICCP2013]

どうやって有効性を示した屋外の照明に関するHDR環境マップのデータベースを利利用

Disney 2015424

なかの

COLORBRUSH ANIMATED DIFFUSION FOR INTUITIVE COLORIZATION SIMULATING WATER PAINTING 9

どんなものアニメを水彩画で描いたように変換する 水彩画を描くには経験が必要であるがそれを作成するアルゴリズムを考案絵具が水によりどうにじむかシュミレーションしている

Disney 20141027 ICIP2014

次に読むべき論論文はGabor-space geodesic active contoursrdquo In Algebraic Frames for the Perception-Action Cycle [C Sagiv NA Sochen and YY Zeevi 2000] Practical temporal consistency for image-based graphics applications [M Lang O Wang T Aydin A Smolic and M Gross SIGGRAPH2012] Computer-Generated Watercolor [CJ Curtis SE Anderson JE Seims KW Fleischer and DH Salesin SIGGRAPH1997]

なかの

From Sound to Sight Using Audio Processing to enable Visible Light Communication 10

どんなもの光に情報を載せる技術プロジェクトページがあって光関係の研究が8個載っている

httpwwwdisneyresearchcomprojectvisible-light-communication

ビデオのURL httpwwwdisneyresearchcomwpcontentuploadsPub_InvisibleLightCommunication_Siggraph14_videomp4

• 201211106_KeisukeKawahara
• 201311421_KeitaKanai_02
• 201313095_AkiraIshii_02
• 201413109_YuukiKubo_02
• 201513110_SatoshiHashizume_02
• 鬼輪講マラソン③_1
• 鬼輪講マラソン③_2

2 201313095

EMS

AR EMSEMS

GPS

bull  TamakiEMiyakiTandRekimotoJPossessedHandAhandgesturemanipulaEonsystemusingelectricalsEmuliInProcampAHrsquo10amp(2010)21ndash25

CruiseampControlampforampPedestriansampControllingampWalkingampDirecEonampusingampElectricalampMuscleampSEmulaEonamp(CHIrsquo15)amp

MaxPfeifferTimDunteStefanSchneegassFlorianAltMichaelRohs

h]pswwwyoutubecomwatchv=JSfnm_HoUv4

2 201313095

EMS

EMS

EMS 16automaEccalibraEonsystem

auto-calibraEonsystems 16

8875g

bull  KruijffESchmalsEegDandBeckhausSUsingneuromuscularelectricalsEmulaEonforpseudo-hapEcfeedbackInProceedingsoftheACMsymposiumonVirtualrealitysoywareandtechnologyVRSTrsquo06ACM(NewYorkNYUSA2006)316ndash319

PossessedHandampTechniquesampforampControllingampHumanampHandsampusingampElectricalampMusclesampSEmuliamp(CHIrsquo11)amp

EmiTamakiTakashiMiyakiJunRekimoto

h]psvimeocom27044937

2 201313095

EMS

EMS

RFIDEMS

1276

bull  KruijffESchmalsEegDandBeckhausDUsingneuromuscularelectricalsEmulaEonforpseudo-hapEcfeedbackProcVRST06316mdash319

Affordance++ampallowingampobjectsamptoampcommunicateampdynamicampuseamp(CHIrsquo15)

PedroLopesPatrikJonellPatrickBaudisch

h]pswwwyoutubecomwatchv=d0J7V37zQjY

2 201313095

EMS

EMS

EMS

ReacEonloss

EMS

UsingampNeuromuscularampElectricalampSEmulaEonampforampPseudoHapEcampFeedbackamp(VRSTrsquo06)

ErnstKruijffDieterSchmalsEegSteffiBeckhaus

2 201313095

SVM

106 Per-User

863 13

712

13

bull  SatoMPoupyrevIandHarrisonCToucheenhancingtouchinteracEononhumansscreensliquidsandeverydayobjectsInCHIrsquo12483ndash492

bull  TimCollinsAcEveacousEctouchinterfaceElectronicsLe]ersVol45No20pp1055ndash1056242009

TouchampampampAcEvateampAddingampInteracEvityamptoampExisEngampObjectsampusingampAcEveampAcousEcampSensingamp(UISTrsquo13)

MakotoOnoBuntarouShizukiJiroTanaka

h]pswwwyoutubecomwatchv=XgxXi6w8IQc

2 201313095

13

13

SVM

on-body

per-user 5 967 4987

bull  HarrisonCBenkoHWilsonAOmniTouchwearablemulEtouchinteracEoneverywhereinUIST11441-450

bull  MatsushitaNandRekimotoJHoloWalldesigningafingerhandbodyandobjectsensiEvewallUIST97209-210

ToucheampEnhancingampTouchampInteracEonamponampHumansampScreensampLiquidsampandampEverydayampObjectsamp(CHIrsquo12)

MunehikoSatoIvanPoupyrevChrisHarrison

h]pswwwyoutubecomwatchv=E4tYpXVTjxA

2 201313095

SVM

9 9TapSense 4

95 99

TapSenseDelete

bull  HarrisonCTanDandMorrisDSkinputappropriat-ingthebodyasaninputsurfaceInProcCHI10453-462

TapSenseampEnhancingampFingerampInteracEonamponampTouchampSurfacesamp(UISTrsquo11)

ChrisHarrisonJuliaSchwarzSco]EHudson

h]pswwwyoutubecomwatchv=-oN96cucBr4

2 201313095

13

13

22 SVM

13 FingersWholeArmForearm 876 Fingers877 WholeArm 955

883 Forearm 815

833

GUI

bull  SaponasTSTanDSMorrisDandBalakrishnanRDemonstraEngthefeasibilityofusingforearmelectromyographyformuscle-computerinterfacesInProcCHIrsquo09515-24

SkinputampAppropriaEngamptheampBodyampasampanampInputampSurfaceamp(CHIrsquo10)

ChrisHarrisonDesneyTanDanMorris

h]pswwwyoutubecomwatchv=g3XPUdW9Ryg

2 201313095

Fiberio

10 330 150

148 2

Fiberio

bull  MatsushitaNandRekimotoJHoloWallDesigningaFingerHandBodyObjectSensiEveWallProcUIST97209ndash210

FiberioampAampTouchscreenampthatampSensesampFingerprintsamp(UISTrsquo13)

ChrisEanHolzPatrickBaudisch

h]pswwwyoutubecomwatchv=p1a5yLzuTqA

2 201313095

3D

3D

bull  GeigerMVollertsenFTheMechanismsofLaserFormingCIRPANNALSlsquo93421301-304

bull  WillisKDDXuCWuJKLevinGGrossMDInteracEvefabricaEonnewinterfacesfordigitalfabricaEonProcTEI11pp69-72

LaserOrigamiampLaserCugngamp3DampObjectsamp(CHIrsquo13)

StefanieMuellerBasEanKruckPatrickBaudisch

h]pswwwyoutubecomwatchv=arjRtCjI9AQ

2 201313095

bend

bull  HyunyoungSongFranccediloisGuimbreEegravereChangHuHodLipsonModelCraycapturingfreehandannotaEonsandeditsonphysical3DmodelsProceedingsofthe19thannualACMsymposiumonUserinterfacesoywareandtechnologyOctober15-182006MontreuxSwitzerland

InteracEveampConstrucEonampInteracEveampFabricaEonampofampFuncEonalampMechanicalampDevicesamp(UISTrsquo12)

StefanieMuellerPedroLopesPatrickBaudisch

h]pdlacmorgcitaEoncfmid=23801162380191

2 201313095

3D

3D

bull  SavageVSchmidtRGrossmanTFitzmauriceGandHartmannBAseriesoftubesAddinginteracEvityto3dprintsusinginternalpipesInProcUIST14(2014)

3DampPrinEngampPneumaEcampDeviceampControlsampwithampVariableampAcEvaEonampForceampCapabiliEesamp(CHIrsquo15)amp

MarynelVazquezEricBrockmeyerRutaDesaiChrisHarrisonSco]EHudson

h]pswwwyoutubecomwatchv=-4gFYvhkz0Y

2 201313095

OpenFab 3D

fablets

3 3

bull  CHENDMATUSIKWSITTHI-AMORNPDIDYKPANDLEVIND2013Spec2FabAreducer-tunermodelfortranslat-ingspecificaEonsto3DprintsACMTransGraph324(July)

OpenFabampAampProgrammableampPipelineampforampMulEMaterialampFabricaEonamp(SIGGRAPHrsquo13)

KirilVidimcˇeSzu-PoWangJonathanRagan-KelleyWojciechMatusik

2 201313095

3D

3D

3D

3D14 30 13 67

244

14

3D

bull  MuellerSKruckBBaudischPLaserOrigamiLaser-Cunng3DObjectsProcCHIrsquo132585-2592

faBrickaEonampFastamp3DampPrinEngampofampFuncEonalampObjectsampbyampIntegraEngampConstrucEonampKitampBuildingampBlocksamp(CHIrsquo14)amp

StefanieMuellerTobiasMohrKersEnGuentherJohannesFrohnhofenPatrickBaudisch

h]pswwwyoutubecomwatchv=BlO6YRcLJjE

Touching13 the13 Void13 Direct-shy‐Touch13 Interac4on13 for13 Intangible13 Displays(CHIrsquo10)Li-Wei Chan Hui-Shan Kao Mike Y Chen Ming-Sui Jane Yi-Ping Hung

201413109　久保勇貴 2（鬼コース）13

どんなもの13

空中像へのタッチのエラーに関する調査及び影や音のフィードバックを付与することによるパーフォーマンス向上を示した研究13

先行研究と比べてどこがすごい13

平面画像をタッチする際の奥行きに関するエラーの正確な取得を初めて検証13

技術や手法のキモはどこ13

２つの赤外線カメラを用いた正確なタッチの検出13

どうやって有効だと検証した13

タッチ時の奥行きの正確さに関する被験者実験を実施またタッチする際に影や音を付けた際の反応時間を被験者実験で検証13

議論はある13

ユーザは慣れるまで影や音のフィードバックが必要だがそのあとは必要なくなる13

次に読むべき論文は13

MirageTable13 （CHI12） 13

MirageTable13 Freehand13 Interac4on13 on13 a13 Projected13 13 Augmented13 Reality13 Tabletop(CHIrsquo12)

Hrvoje Benko Ricardo Jota Andrew D Wilson

201413109　久保勇貴 2（鬼コース）13

どんなもの13

テーブル上においてバーチャルな物体をリアルタイムで現実でものを動かすことと同様な動作に操作可能なシステム13

先行研究と比べてどこがすごい13

現実の物体をリアルタイムで画面に取りこむことができ質の高いフリーハンドインタラクションを実現した点13

技術や手法のキモはどこ13

色深度前景頭追跡プロキシパーティクルを駆使したリアルタイムメッシュの作成13

どうやって有効だと検証した13

凹凸など例外な表面に対しての投影した際の画像の質についての評価実験また仮想物体の奥行き知覚に関する実験も行った13

議論はある13

前面のみしかキャプチャしていないため差が生じる握っている場所の再現は未解決な課題である13

次に読むべき論文は13

Hirsch13 et13 al13 201413 (SIGGRAPHrsquo14)13

A13 Compressive13 Light13 Field13 Projec4on13 System13 (SIGGRAPHrsquo14)MaChew13 Hirsch13 Gordon13 Wetzstein13 Ramesh13 Raskar

201413109　久保勇貴 2（鬼コース）13

どんなもの13

通常の3Dディスプレイに比べて解像度輝度コントラストを改善した圧縮ライトフィードディスプレイ13

先行研究と比べてどこがすごい13

多視点立体視を複数でなく１台のプロジェクタを用いて実現した13

技術や手法のキモはどこ13

受動的スクリーンと高速切り替えプロジェクタによる新しい光学設計13

どうやって有効だと検証した13

4つのシーン例を投影したものを示したアニメーションの3D効果について観察を行った13

議論はある13

光路長を広げると観察できる画質が大幅に制限され他のライトフィードビューと混線が生じる13

次に読むべき論文は13

Butler13 et13 al13 201113

Vermeer13 Direct13 Interac4on13 with13 a13 360deg13 Viewable13 3D13 Display(UISTrsquo11) Alex Butler Otmar Hilliges Shahram Izadi Steve Hodges David Molyneaux David Kim

201413109　久保勇貴 2（鬼コース）13

どんなもの13

映し出された3Dオブジェクトとインタラクションを行えるシステム13

先行研究と比べてどこがすごい13

ディスプレイ内の画像とのインタラクションを提案ボリュームディスプレイを支援する新しいセンシング法の提案13

技術や手法のキモはどこ13

パラボラ鏡に取り付けた赤外線カメラセンサによる指先検出13

どうやって有効だと検証した13

アプリケーション例を示した13

議論はある13

パラボラ鏡の大きさよりもディスプレイサイズが小さくなってしまう13

次に読むべき論文は13

Hirsch13 et13 al13 201213

8D13 Interac4ng13 with13 a13 Relightable13 Glasses-shy‐Free13 3D13 Display(CHIrsquo12)Li-Wei Chan Hui-Shan Kao Mike Y Chen Ming-Sui Jane Yi-Ping Hung

201413109　久保勇貴 2（鬼コース）13

どんなもの13

ライトフィードによる入力とライトフィールドによる表示を行うリアルタイム8Dディスプレイ13

先行研究と比べてどこがすごい13

リアルタイムでの8Dディスプレイの実現（先行研究は7fps）13

技術や手法のキモはどこ13

GPUにおけるレンダリング処理13

どうやって有効だと検証した13

MRIデータを用いたディスプレイのデモを示した13

議論はある13

現在はグレースケールの入力のみだがカラーでの入力できればより強力になるだろう13

次に読むべき論文は13

Sahoo13 et13 al13 201513

Control13 of13 Non-shy‐Solid13 Diffusers13 by13 Electrosta4c13 Charging13 (CHIrsquo15) Deepak Ranjan Sahoo Diego Martinez Plasencia Sriram Subramanian

201413109　久保勇貴 2（鬼コース）13

どんなもの13

シャボン玉や霧などの非固体を電場による制御を試みた研究13

先行研究と比べてどこがすごい13

非固体の形や位置の制御法を提案した点13

技術や手法のキモはどこ13

[Intra13 et13 al13 11]中のldquowire-shy‐to-shy‐Cylinderdquoを用いたエアゾール粒子の帯電13

どうやって有効だと検証した13

霧及びシャボン玉によるディスプレイのアプリケーション例で実際に制御して見せた13

議論はある13

風による影響を本手法は打ち消すことができた13

次に読むべき論文は13

Barnum13 et13 al13 201013

A13 Mul4-shy‐Layered13 Display13 with13 Water13 Drops(SIGGRAPHrsquo10)Peter C Barnum Srinivasa G Narasimhan Takeo Kanade

201413109　久保勇貴 2（鬼コース）13

どんなもの13

複数層の落下水滴にプロジェクションマッピングを行いディスプレイとした研究13

先行研究と比べてどこがすごい13

水滴の制御を行うことで単一のプロジェクタによって複数層の映像投影を可能とした点13

技術や手法のキモはどこ13

[Ambravaneswaran13 et13 al13 2002]及び本研究における実験結果に基づく水滴生成13

どうやって有効だと検証した13

複数のディスプレイ例を示した13 例）顔の投影水槽シミュレータなど13

議論はある13

本当の3Dディスプレイにするにはより多くの水滴制御が必要13

次に読むべき論文は13

Lee13 et13 al13 200713

An13 Immaterial13 Depth-shy‐Fused13 3D13 Display(VRSTrsquo07)Cha Lee Stephen DiVerdi Tobias Humlollerer

201413109　久保勇貴 2（鬼コース）13

どんなもの13

２つのスクリーンを駆使し3Dディスプレイを実現するdepth-shy‐fused13 3D(DFD)に関する評価を行いその結果よりディスプレイを提案した研究13

先行研究と比べてどこがすごい13

DFDが任意のスクリーン設定及び見る位置に対して有効であることを示した13

技術や手法のキモはどこ13

６通りのスクリーン組合せから２つを抽出し見え方の違いを検証した点13

どうやって有効だと検証した13

６通りのスクリーンについて立体的に見えるか被験者実験を実施その後それぞれに有意差がみられるか調べた13

議論はある13

ステレオイメージを認めることができなかったユーザに対しても強い3D効果が見られた13

次に読むべき論文は13

Tokuda13 et13 al13 201013

Cloud13 Display13 (ACErsquo10)Yutaka Tokuda Yasuhiro Suzuki Kunihiro Nishimura Tomohiro Tanikawa Michitaka Hirose

201413109　久保勇貴 2（鬼コース）13

どんなもの13

煙の渦輪を用いた空間を埋めるディスプレイ13

先行研究と比べてどこがすごい13

制御可能な手法により高所へのパーティクルを運搬することに着目した点13

技術や手法のキモはどこ13

コンピュータによって制御が行われる空気砲アレイ13

どうやって有効だと検証した13

箱の中で実験を行い安定して渦輪をできるようにした実際にデモを行ったことを示した13

議論はある13

今の試作機をより早くリフレッシュ速度を高めることによりより濃く空間を埋められることを目指す13

次に読むべき論文は13

Sato13 et13 al13 200913

Par]cle13 Display13 System　(JVRC09)13 -shy‐13 A13 Large13 Scale13 Display13 for13 Public13 Space13 -shy‐

Munehiko13 Sato13 Yasuhiro13 Suzuki13 13 Atsushi13 Hiyama13 Tomohiro13 Tanikawa13 Michitaka13 Hirose

201413109　久保勇貴 2（鬼コース）13

どんなもの13

パーティクルディスプレイによる公共スペースのための大画面ディスプレイの提案13

先行研究と比べてどこがすごい13

公共スペースにおける要求と制限に基づいたシステムを提案した点13

技術や手法のキモはどこ13

実験に基づく表示画像のスクロール時間の制御13

どうやって有効だと検証した13

Aという文字の知覚実験によって 適な点滅周期の調査を行った13

議論はある13

現在の試作機を組合せより高解像度にする必要がある13

次に読むべき論文は13

Kwon13 et13 al13 201513

FugaciousFilm13 Exploring13 Aen4ve13 Interac4on13 with13 Ephemeral13 Material13 (CHIrsquo15)Hyosun13 Kwon13 Shashank13 Jaiswal13 Steve13 Benford13 Sue13 Ann13 Seah13

13 Peter13 BenneC13 Boriana13 Koleva13 Holger13 Schnaumldelbach

201413109　久保勇貴 2（鬼コース）13

どんなもの13

膜を押す引く飛び出ることができる新しい石鹸膜インタフェースの提案13

先行研究と比べてどこがすごい13

徐々に消えるインタフェースは高い注意を有するインタラクションを提供するという点を示したこと13

技術や手法のキモはどこ13

水グリセリンを201の対比で混ぜることでldquopoprdquoがきれいになるようにしかつ膜の耐久性を向上させた13

どうやって有効だと検証した13

３目並べを用いた被験者実験を実施13 ユーザは膜を割ると負け膜を自分のマスにするにはタッチ押す引くの書かれた通りの操作を行う13

議論はある13

ユーザに精密な動作を要求することはとりわけ注意を払うことを誘発する13

次に読むべき論文は13

Wetzstein13 et13 al13 201213

Tensor13 Displays13 Compressive13 Light13 Field13 Synthesis13 using13 Mul4layer13 Displays13 with13 Direc4onal13 Backligh4ng(SIGGRAPHrsquo12)

Gordon13 Wetzstein13 Douglas13 Lanman13 MaChew13 Hirsch13 Ramesh13 Raskar

201413109　久保勇貴 2（鬼コース）13

どんなもの13

視点によって異なる立体映像を見ることができる複数の層からなるディスプレイ13

先行研究と比べてどこがすごい13

既存の手法を合成したcomputa(onal13 displaysというディスプレイの新しいフレームワークを提案した13

技術や手法のキモはどこ13

時分割で視差マスクを表示することでユーザの視線ごとに立体像を表現する13

どうやって有効だと検証した13

通常のディスプレイ３層LCDLCD及び指向性バックライトの例による比較13 13

議論はある13

波紋を含むこと色チャンネルが悪影響を与える相互反射不均一などの問題が見られた13

次に読むべき論文は13

Matoba13 et13 al13 1213

SplashDisplay(VRICrsquo12)Yasuo Matoba Taro Tokui Ryo Sato Tochiki Sato Hideki Koike

201413109　久保勇貴 2（鬼コース）13

どんなもの13

パーティクルにCGを投射しパーティクルがテーブル上に投げられると爆発しパーティクルが噴きあがる13

先行研究と比べてどこがすごい13

ビーズがミリメートルからメートル単位までZ軸方向について空中で奥行きを表現する13

技術や手法のキモはどこ13

スピーカによって風力が発生させビーズを舞い上げる点13

どうやって有効だと検証した13

ビーズを投げると花火が打ちあがっているかのようなアプリケーション例を示した13

議論はある13

高いレベルの表現及び幅広い入力範囲を提供できた13

次に読むべき論文は13

Kim13 et13 al13 1413

MARIO13 Mid-shy‐air13 Augmented13 Reality13 Interac4on13 with13 Objects13 (ECrsquo14)Hanyuool13 Kim13 13 Issei13 Takahashi13 Hiroki13 Yamamoto13 Satoshi13 Maekawa13 Takeshi13 Naemura

201413109　久保勇貴 2（鬼コース）13

どんなもの13

350times300times250のテーブル上のスペースにおいて自由に動かせる空中像を造りだすことができる13

先行研究と比べてどこがすごい13

凹面鏡や凹レンズのように曲面でないため画像の歪曲が発生しない13

技術や手法のキモはどこ13

Aerial13 Imaging13 Plate(AIP)を用いた空中像の生成及びそのためのディスプレイ移動装置13

どうやって有効だと検証した13

左右からの視差の考慮及び奥行き表現時の画像提示視野角の検証などを行った13 13

議論はある13

投影しているひよこを叩いたり払いのけたりするような動作がデモ中見られた13

次に読むべき論文は13

Tactile Feedback on Flat Surfaces for the Visually Impaired13Ali Israr Olivier Bau Seung-Chan Kim Ivan Poupyrev13

どのようなものか 視覚障害者のための触覚を用いた視覚代用デバイス 先行研究と比べてどこがすごいか 道案内をしてくれる機械などはあるが日用品の場所を教えたり探すのを手伝ってくれるデバイスはない 技術や手法のキモ タッチパネルとカメラを搭載したデバイス 触覚を与える技術はTeslaTouchを利用 色を基準にオブジェクトの位置を認識 有用性の確認 視覚障害者二人に対して実験このデバイスを使

わなくても各自の方法で物を見つけられるが間違えることが多いこのデバイスを使用することで間違えることなく正確に物の位置を特定できた 課題 一つの色でしか判断できない 触感のあるなしでしか情報を伝えられない 関連論文 TeslaTouch [Bau et al 2010]

20150522 橋爪智 2鬼

Fingernail-Mounted Display of Attraction Force and Texture13Masataka Niwa Tomoko Nozaki Taro Maeda and Hideyuki And13

どのようなものか 指先に取り付けて触感と力を両方表現できるデバイス 先行研究と比べてどこがすごいか 触感と引力をそれぞれ表現するデバイスはあるが両方を一つのデバイスで表現した例は少ない 引力は自由な方向に付加することができる 技術や手法のキモ 偏心に重さを付けた円盤を4枚使用する 5-9Hz 引力　100-200Hz 触感 それぞれの円盤の位相や回転数を調整することで

触感と力 を表現する 4つのモータを使いそれぞれの円盤を独立して制御する 有用性の確認 4人の男性に対して実験80以上の精度で認識できた 関連論文 The nail-mounted attraction forcebump display [Nozaki et al 2008]

20150522 橋爪智 2 鬼

Gilded gait reshaping the urban experience with augmented footsteps13Yuichiro Takeuchi13

どのようなものか 靴に装着し地面の触感をコントロールするデバイス 先行研究と比べてどこがすごいか 単独で動作しなかったり特定の環境のみでしか動作しなかったりするrarr靴単体で動作環境に依存しない 技術や手法のキモ 6個の振動パネルを取り付けゲルでカバー app modulesを取り替えることができ様々な機能を付加できる（GPSsound) 4種類の地面を再現

bull  Hard Ground 振動させない bull  Soft Ground すべてのパネルを振動 bull  Bumpy Ground ジグザグに振動 bull  Godzilla 全てのパネルを振動何回か繰り返す 課題 モーターを使っているため波形をプログラミングできないrarr圧電素子を使用する 関連論文 Haptic Shoes [Fu et al 2010]

20150522 橋爪智 2鬼

ExoInterfaces novel exosceleton haptic interfaces for virtual reality augmented sport and rehabilitation

Dzmitry Tsetserukou Katsunari Sato Susumu Tachi13

どのようなものか 腕に装着し物理的なinteractionを可能にするデバイス 先行研究と比べてどこがすごいか Exoskeleton 力を増幅するためだが重たく危険なこともある String-based wireが視界をまたぐ動きに制限がある rarr腕の動きに制限を与えない安全 技術や手法のキモ 「FlexTorque」人間の筋肉の構造を再現するベルトとモーターを使用する肩の近くに装着することで

腕に負担がかかりにくい 触覚feedback弱いトルク 運動を支援強いトルク 課題 物理的な接触を表現するゲームやスポーツにより没頭させるリハビリのサポートをする視覚障害者の支援（ものの場所を教える） 関連論文 FlexTorque [Dzmitry et al 2010]

20150522 橋爪智 2 鬼

Perception of Ultrasonic Haptic Feedback on the Hand Localisation and Apparent Motion13

Graham Wilson Tom Carter Sriram Subramanian Stephen Brewster13

どのようなものか 超音波を用いた触覚フィードバック有効性の検討を行う 先行研究と比べてどこがすごいか 超音波触覚フィードバックは比較的新しく研究や操作方法に関する知識が少ない 腕を自由に動かすことができ小さいものは着用可能 技術や手法のキモ 88のアレイ状に超音波発生器を設置

有効性の確認 bull  局所的な触感 　　　25箇所に分割しそれぞれに超音波を当てる 　　　触感を感じた989 　　　場所の誤差85mm bull  手のひらを動く触感 上下左右に動く 　　　動いてると感じた629

20150522 橋爪智 2 鬼

Friction Measurements on a Large Area TPaD13Nicholas D Marchuk J Edward Colgate Michael A Peshkin13

どのようなものか 超音波の振動により触感を与える 先行研究と比べてどこがすごいか ガラス板を使うので透明後ろにディスプレイを配置可能 技術や手法のキモ 「Squeeze Film Effect（スクイズ膜効果）」 ガラス板に取り付けた圧電素子の円盤に高周波信号

をかける 実験 振動しない部分＝摩擦が発生しない部分が発生周波数により場所が変わる rarr摩擦を大きさをかける力の大きさから計測 rarr指の場所に合わせて複数の周波数を使い分ける 関連論文 T-PaD[Winfield et al 2007]

20150522 橋爪智 2 鬼

STIMTAC a Tactile Input Device with Programmable Friction13Michel Amberg Freacutedeacuteric Giraud Betty Semail Paolo Olivo Geacutery Casiez Nicolas Roussel13

どのようなものか 触感を与えられるタッチデバイス 先行研究と比べてどこがすごいか LATPaD サイズ大きいノイズが大きい TeslaTouch 高い電圧付加が必要GNDに接続しなければいけない

技術や手法のキモ 「Squeeze Film Effect」超音波を用いて振動を与える 圧電性セラミックを電極にコーディング 指トラッキングは力センサを用いる 活用法 マウスキーボード絵を描く 関連論文 LATPaD[Vincent et al 2011] TeslaTouch[Bau et al 2010]

20150522 橋爪智 2 鬼

Surround Haptics Tactile Feedback for Immersive Gaming Experiences Ali Israr Seung-Chan Kim Ivan Poupyrev Jan Stec13

どのようなものか ゲームに合わせて高解像度の触覚フィードバックをユーザーに与える椅子 先行研究と比べてどこがすごいか 荒く配置した安価な振動アクチュエータで高解像度の触覚フィードバックを行える 一点の振動連続した動き範囲の振動などを再現

技術や手法のキモ 仮想的な振動アクチュエータをいくつかの振動アクチュエータを使って作り出す physical-physicalphysical-virtualvirtual-virtual ゲームにHaptics Engineを導入しHaptics APIを用いてHaptic Displayを操作する 関連論文 Exploring Surround Haptics Displays[Israr et al 2010]

20150522 橋爪智 2 鬼

Audio-Haptic Feedback in Mobile Phones Angela Chang Conor OrsquoSullivan13

どのようなものか haptics機能のついてない携帯電話にオーディオ機能を利用した触覚フィードバックを追加する 先行研究と比べてどこがすごいか 簡単に作れてnon-haptic mobile devicesでも大丈夫 技術や手法のキモ 「MultiFunction Transducer(MFT)」 スピーカーから音と信号の両方を出力できる

bull  Haptic Inheritance 　　音を2つの周波数帯に分ける bull  Synthesis and Matching 　　低周波数帯(20-300Hz)を使い触感を伝える 有効性の検討 42人の人を対象に実験を行う83の人が触感を感じた

20150522 橋爪智 2 鬼

Resolution of Sleep Deprivation Problems using ZZZoo Pillows13Shunsuke Yanaka Motoki Ishida13

どのようなものか 近年不眠症の人が多い rarr誰かと接していると安心し睡眠に導入しやすくなる rarrまるで添い寝をしているようなリアルな抱きまくらを使う 技術や手法のキモ breathing sensation 風船を使って人の呼吸を再現肺の形の風船弱く長い呼吸をする

heating お湯を使って人の体温を再現45 有効性の確認 84人の人が実験 呼吸が睡眠を誘ったかrarr61 体温が睡眠を誘ったかrarr85 関連論文 The Impact of Sleep Disorders on Social Life[Komada et al 2007]

20150522 橋爪智 2 鬼

まとめ13超音波 モーター 風

20150522 橋爪智 2 鬼

コイル 電気刺激 Electrovibration

振動 音 お湯

なかの

Temporally Consistent Disparity and Optical Flow via Efficient Spatio-temporal Filtering1

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示した

議論論はあるか

時間的に一定の視差を算出する手法静止画ステレオよりも精度度が良良いことを示す従来よりも推定精度度が良良いオプティカルフローも算出する

一枚の静止画に対するフィルタリング[1]をステレオ動画に拡張している

ケンブリッジのステレオ動画のデータセットを利利用 実写動画に対する比較も行行うノイズ耐性も検証する

フィルタベースとエネルギーベースの関係性を良良り理理解することで推定精度度を上げる

実装が簡単でリアルタイム視差推定が可能

Fast Cost-Volume Filtering for Visual Correspondence and Beyond [Rhemann C Hosni A Bleyer M Rother C Gelautz M CVPR2011] Real-time Spatiotemporal Stereo Matching Using the Dual-Cross-Bilateral Grid [Richardt C Orr D Davies I Criminisi A Dodgson NA ECCV2010] Secrets of optical flow estimation and their principles [Sun D Roth S Black MJ 2010] Motion estimation with non-local total variation regularization [Werlberger M Pock T Bischof H CVPR2010] Temporally Consistent Disparity Maps from Uncalibrated Stereo Videos [Bleyer M Gelatuz M ISPA2011]

なかの

SymStereo Matching using Induced Symmetry (2014)2

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示した

議論論はあるか

画像の対称性を用いてステレオマッチングを行行う 左右の画像を反転させて重ね合わせることで対称性を測る

絵的な類似の代わりに対称性を使う今まで対称性を用いる手法はなく新規性が大きい

三つのSymmetry-baseの手法で精度度を検証従来手法よりも精度度が向上しているMiddlebury Oxford Corridorfountain-P11のデータセット使用

ステレオの問題である不不連続な箇所オクルージョン部分は未解決である演算時間はやや増加

1-Dラインのコストを考える今までは撮像面に対して平行行な平面でデプスを考えていたが垂直な平面を考える

BT[Birchfield and Tomasi 1998] Census transform[Zabih and Woodfill 1994] Log N[Kovesi 1997] radio-metoric differences[Hirschmuller Scharstein 2009]

なかの

Camouflaging an Object from Many Viewpoints3

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

多くの視点から三次元の物体をカモフラージュするカモフラージュによってオクルージョン部分の不不連続がどの程度度生じるか他の視点ではどれほどになるかの検証

MRF（Markov Random Fields）ベース

新しい三次元物体のカモフラージュモデルを構築 37種類のデータセットを作る

箱形の物体に対してカモフラージュ処理理を施し 結果を評価する

オクルージョン不不連続テクスチャの歪みが問題 照明や画像の貼りつけに制限あり

なかの

Aliasing Detection and Reduction in Plenoptic Imaging4

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

カメラアレイ撮影の角度度のエイリアシングを除去するエイリアシングの探索索と打ち消しを行行う

周波数領領域ではなく空間領領域で探索索を行行う

先行行研究がフィルタデモザイキング再パラメータ調整などの前処理理でエイリアシング除去を行行うのに対しエイリアシング探索索後にリフォーカスの段階でエイリアシングを取り除く

8times8の平行行カメラアレイで検証するカメラ間の 基線長は70mm

今回は基線長が長いデータセットを使った 次はLytroなどのマイクロレンズアレイで検証する

Globally consistent multi-label assignment on the ray space of 4d light fields [S Wanner C Straehle B Goldluecke CVPR2013] Lineassisted light field triangulation and stereo matching [Z Yu X Guo H Lin A Lumsdaine J Yu ICCV 2013]

なかの

Globally Consistent Multi-Label Assignment on the Ray Space of 4D Light Fields5

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

四次元ライトフィールドの光線情報において マルチラベルの領領域分割を行行う

深度度情報光線情報を用いて領領域分割することで 二次元（空間）情報だけでは分割が難しかった 領領域を分割可能とする

The light field camera Extended depth of field aliasing and superresolution [T Bishop P Favaro IEEE Transactions on Pattern Analysis and Machine Intelligence 2012]

なかの

Line Assisted Light Field Triangulation and Stereo Matching6

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

光線情報を利利用してステレオマッチングの精度度を 向上させる手法三角測量量の誤差を減らす

Light Field Stereo Matchingとかいう手法 グラフ構造を作成

Variational light field analysis for disparity estimation and super-resolution [S Wanner and B Goldlumluecke 2013]

なかの

Adaptive stereo similarity fusion using confidence measures 20157

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

ステレオマッチングの新しい方式fusion weightsを提案複数の手法を組み合わせてコスト計算を行行う手法付録に既存手法のコスト関数一覧あり

パラメータに依存する手法を用いないことで高速化を図っている

一つのアルゴリズムでは異異なる特性を持つ領領域全てに対して適切切なマッチングはできない複数を組み合わせることでそれを補う13種と多い

middleburyとKITTIのデータセットで評価

一枚あたり03sと高速だが001sとより高速なアルゴリズムが存在する

Segment-based stereo matching using belief propagation and a self-adapting dissimilarity measure [A Klaus M Sormann K Karner ICPR2006] On building an accurate stereo matching system on graphics hardware [X Mei X Sun M Zhou S Jiao H Wang X Zhang ICCV2011] Similarity measures for depth estimation [K Wegner O Stankiewicz 3DTV-CON2009] On accurate dense stereo-matching using a local adaptive multi-cost approach [C Stentoumis L Grammatikopoulos I Kalisperakis G Karras ISPRS2014] A quantitative evaluation of confidence measures for stereo vision [X Hu P Mordohai PAMI2012]

なかの

SIMILARITY MEASURE FOR DEPTH ESTIMATIOM 20098

どんなもの

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

4種類の視差推定アルゴリズムを組み合わせている 類似度度の選択性の解析

Belief Propagationの枠組みを用いる

名古屋大学の多視点データベースを利利用

HHI Test Material for 3D Video [I Feldmann M Muller F Zilly R Tanger A SmolicP Kauff T Wiegand 2008] Multiview Video Test Sequence and Camera Parameters [Yo-Sung Ho Eun-Kyung Lee and Cheon Lee 2008] 1D Parallel Test Sequences for MPEG-FTV [M Tanimoto T Fujii N Fukushima 2008] Non-parametric Local Transforms for Computing Visual Correspondence [R Zabih J Woodfill 1994]

なかの

Spatiotemporal Stereo via Spatiotemporal Quadric Element (Stequel) Matching9

どんなもの

技術や手法のキモはどこ

新しいマッチング手法を提案動き考慮することなく時間情報を取り込むことができる 時間方向のエピ線を考える

オプティカルフロー推定は3D境界や低テクスチャで弱いが提案手法はロバストである

なかの

Depth Video Enhancement Based on Weighted Mode Filtering10

どんなもの

議論論はある

ノイズを含んだ低解像度度のデプスマップの質を高める手法（超解像度度とデノイズ）時間方向も使用簡単なオプティカルフローを計算し利利用する

非反復復アルゴリズムのためGPUに載せやすく高速化が考えられる

なかの

Fast Bilateral-Space Stereo for Synthetic Defocus11

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

議論論はある

次に読むべき論論文は

高速な自由焦点ぼけ画像の作成

Bilateral-spaceを提案

従来研究よりも10から100倍速くぼけ具合の精度度も良良い

ぼけを作成するというアプリケーションに利利用する距離離という面では提案手法が有益であるが実測的な距離離という面での精度度は悪い背景と前景が同じ色で近くにある場合同一ととらえてしまう

Efficient high-resolution stereo matching using local plane sweeps [S N Sinha D Scharstein and R SzeliskiCVPR2014] Bilateral filtering-based optical flow estimation with occlusion detection [J Xiao H Cheng H Sawhney C Rao and M IsnardiECCV2006] Efficient nonlocal regularization for optical flow [P Krumlahenbumluhl and V KoltunECCV2012] Real-time spatiotemporal stereo matching using the dual-cross-bilateral grid [C Richardt D Orr I Davies A Criminisi and N A DodgsonECCV2010]

どうやって有効性を示した視差推定の精度度はmiddleburyKITTI

なかの

Robust Spatiotemporal Stereo for Dynamic Scenes12

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

ステレオ動画のフレーム間情報を取り入れることでノイズ耐性を向上させるまた動きの大きなものも考える

時間を含めたウインドウの提案自動的にそのような変化に対応する画像領領域を検出する

従来の時空間ステレオと比べ大きな動きによる急激な視差の時間変化に対して頑健である

なかの

Spacetime Stereo A Unifying Framework for Depth from Triangulation13

どんなもの

先行行研究と比べてどこがすごい

space time stereoを提案ステレオカメラの視差推定でも構造光を用いた視差推定でも利利用可能 動的なシーンでの利利用も可能

フレームごとマッチングを取っていたが複数フレームでのマッチングを可能とした

なかの

Learning to Select and Order Vacation Photographs (Disney research)14

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示したあまりにもたくさん撮影した写真たちから自動的にフォトアルバムを作成する研究

複雑な視覚での区別を試みたのはこの論論文が初

５つの異異なるトピックから63の個人的な写真コレクションのデータセットを利利用し定量量的に評価する

写真間の差別かを定義する顔全体の絵何が写っているか写っていないかを評価する

Jointly aligning and segmenting multiple web photo streams for the inference of collective photo storylines [G Kim and E P Xing CVPR2013] Photo sequencing [T Basha Y Moses and S Avidan CVPR2012]

なかの

A Taxonomy and Evaluation of Dense Two-Frame Stereo Correspondence Algorithms15

どんなもの

どうやって有効性を示した

次に読むべき論論文は

ステレオマッチングに関する分類を行行う 新たなデータセットを作成する

というよりも他の手法が有効性を示すことができるようにデータセットを作成した 今ではmiddleburyのデータセットと言えばステレオ業界では超有名

High-resolution stereo datasets with subpixel-accurate ground truth

なかの

Discriminability Limits in Spatio-Temporal Stereo Block Matching1

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

spatio-temporal disparity estimationの根本的な前提の正当性を解析しマッチング処理理の際に動きが助けとなる程度度を決定する

時空間マッチングのエラーを分析し誤りの原因を確率率率で導出する（フレーム数動きの分散画像特徴ノイズの関数）

[34243334]は時空間マッチングの利利点を指摘していたが本論論文はマッチング精度度の向上のために動きを用いる手法の程度度や性質を研究する

6つのステレオビデオを用いて検証を行行った

Spacetime stereo Shape recovery for dynamic scenes [L Zhang B Curless and S Seitz CVPR2003] Spatiotemporal stereo and scene flow via stequel matching [M Sizintsev and R Wildes PAMI2012] Temporally consistent disparity and optical flow via efficient spatio-temporal filtering [A Hosni C Rhemann M Bleyer and M Gelautz PRCAIVT2012] Spacetime stereo A unifying framework for depth from triangulation [PAMI2005] Dynamic depth recovery from multiple synchronized video streams [H Tao H Sawhney and R Kumar CVPR2001] Spatiotemporal descriptor for wide-baseline stereo reconstruction of non-rigid and ambiguous scenes [ECCV2003]

なかの

Depth-Based Patch Scaling for Content-Aware Stereo Image Completion2

どんなもの

どうやって有効性を示した

ステレオでデプスを取り物体の三次元情報を使ってインペインティングを行行う

bookのデータセット背景が繰り返しパターンが多いものを使っている

なかの

Fast Semi-dense Surface Reconstruction from Stereoscopic Video in Laparoscopic Surgery3

どんなもの

手法の流流れ

次に読むべき論論文は

腹腔内手術の際にステレオビデオから高速に物体の三次元再構成を行行う研究

Evaluation of stereo matching costs on images with radiometric differences [Hirschmueller H Scharstein D PAMI2008]

スコープカメラから画像取得GPUで演算する 視差を算出しフィルタにかける距離離に変換 点群を再びフィルタにかけて三次元再構成

なかの

3D Reconstruction from Accidental Motion4

どんなもの

技術や手法のキモはどこ

議論論はある

数秒のビデオ（単眼）から三次元再構成を行行う 手ぶれなどの動きから再構成が可能で特定の動きや機材を必要としない

短い基線長でも再構成が可能（3mmの基線長）

基線長が短いため背景の精度度が低くなる リフォーカス画像作成には十分 練習では上手く動作したが検証がまだ必要

なかの

Panoramic Video from Unstructured Camera Arrays5

どんなもの

技術や手法のキモはどこ

議論論はある

複数のカメラを用いたパノラマ撮影を行行う その際に不不自然さがないような動画を作成する

不不自然さを感じる感覚特性を提示しそれにのっとって対策を講じている

一つのカメラの解像度度と品質を向上させるよりも複数台のカメラを組み合わせることがはるかに簡単で有益である専門家でなくてもGoProのカメラセットを組み合わせることは容易易

カメラの配置は厳密に決められていない完璧な時間同期やローリングシャッターの不不足のような実撮影での問題もクリアしている

先行行研究と比べてどこがすごい

どうやって有効性を示した左のシステムは14台のカメラを使用 右のシステムはGoProを5台使用

Disney 201558

なかの

Floating Scale Surface Reconstruction6

どんなもの

技術や手法のキモはどこ

流流動的にスケールを変えられる三次元再構成手法

サンプル規模に依存するパラメータがない rarrどのスケールのサンプルにも対応できる

siggraph2014

なかの

A Super Resolution Reconstruction Scheme for Mixed Spatio-Temporal Stereo Video7

どんなもの

技術や手法のキモはどこ

ビデオ超解像アルゴリズム

二台のカメラを使用 一台は低解像度度で高速一台は高解像度度で低速

HHI 3DV ftp siteのBookarrivalとbeergadenを使用どうやって有効性を示した

なかの

What Is a Good Day for Outdoor Photometric Stereo8

どんなもの

先行行研究と比べてどこがすごい

議論論はある

次に読むべき論論文は

屋外における照度度差があるステレオの研究 屋外でステレオを行行う際に有利利or不不利利な日照条件を明らかにする

点光源を用いた研究は行行われていたが屋外での研究はされていなかった

晴れより曇りの方が精度度が良良い雲があるから特徴量量を取りやすい雑音を白色ガウスモデルを想定 季節ごとのデータセットを利利用してみても良良い

Time-lapse photometric stereo and applications [F Shen K Sunkavalli N Bonneel S Rusinkiewicz H Pfisterand X Tong2014] Outdoor photometric stereo [L-F Yu S-K Yeung Y-W Tai D Terzopoulos and T FChan ICCP2013]

どうやって有効性を示した屋外の照明に関するHDR環境マップのデータベースを利利用

Disney 2015424

なかの

COLORBRUSH ANIMATED DIFFUSION FOR INTUITIVE COLORIZATION SIMULATING WATER PAINTING 9

どんなものアニメを水彩画で描いたように変換する 水彩画を描くには経験が必要であるがそれを作成するアルゴリズムを考案絵具が水によりどうにじむかシュミレーションしている

Disney 20141027 ICIP2014

次に読むべき論論文はGabor-space geodesic active contoursrdquo In Algebraic Frames for the Perception-Action Cycle [C Sagiv NA Sochen and YY Zeevi 2000] Practical temporal consistency for image-based graphics applications [M Lang O Wang T Aydin A Smolic and M Gross SIGGRAPH2012] Computer-Generated Watercolor [CJ Curtis SE Anderson JE Seims KW Fleischer and DH Salesin SIGGRAPH1997]

なかの

From Sound to Sight Using Audio Processing to enable Visible Light Communication 10

どんなもの光に情報を載せる技術プロジェクトページがあって光関係の研究が8個載っている

httpwwwdisneyresearchcomprojectvisible-light-communication

ビデオのURL httpwwwdisneyresearchcomwpcontentuploadsPub_InvisibleLightCommunication_Siggraph14_videomp4

• 201211106_KeisukeKawahara
• 201311421_KeitaKanai_02
• 201313095_AkiraIshii_02
• 201413109_YuukiKubo_02
• 201513110_SatoshiHashizume_02
• 鬼輪講マラソン③_1
• 鬼輪講マラソン③_2

2 201313095

EMS

EMS

EMS 16automaEccalibraEonsystem

auto-calibraEonsystems 16

8875g

bull  KruijffESchmalsEegDandBeckhausSUsingneuromuscularelectricalsEmulaEonforpseudo-hapEcfeedbackInProceedingsoftheACMsymposiumonVirtualrealitysoywareandtechnologyVRSTrsquo06ACM(NewYorkNYUSA2006)316ndash319

PossessedHandampTechniquesampforampControllingampHumanampHandsampusingampElectricalampMusclesampSEmuliamp(CHIrsquo11)amp

EmiTamakiTakashiMiyakiJunRekimoto

h]psvimeocom27044937

2 201313095

EMS

EMS

RFIDEMS

1276

bull  KruijffESchmalsEegDandBeckhausDUsingneuromuscularelectricalsEmulaEonforpseudo-hapEcfeedbackProcVRST06316mdash319

Affordance++ampallowingampobjectsamptoampcommunicateampdynamicampuseamp(CHIrsquo15)

PedroLopesPatrikJonellPatrickBaudisch

h]pswwwyoutubecomwatchv=d0J7V37zQjY

2 201313095

EMS

EMS

EMS

ReacEonloss

EMS

UsingampNeuromuscularampElectricalampSEmulaEonampforampPseudoHapEcampFeedbackamp(VRSTrsquo06)

ErnstKruijffDieterSchmalsEegSteffiBeckhaus

2 201313095

SVM

106 Per-User

863 13

712

13

bull  SatoMPoupyrevIandHarrisonCToucheenhancingtouchinteracEononhumansscreensliquidsandeverydayobjectsInCHIrsquo12483ndash492

bull  TimCollinsAcEveacousEctouchinterfaceElectronicsLe]ersVol45No20pp1055ndash1056242009

TouchampampampAcEvateampAddingampInteracEvityamptoampExisEngampObjectsampusingampAcEveampAcousEcampSensingamp(UISTrsquo13)

MakotoOnoBuntarouShizukiJiroTanaka

h]pswwwyoutubecomwatchv=XgxXi6w8IQc

2 201313095

13

13

SVM

on-body

per-user 5 967 4987

bull  HarrisonCBenkoHWilsonAOmniTouchwearablemulEtouchinteracEoneverywhereinUIST11441-450

bull  MatsushitaNandRekimotoJHoloWalldesigningafingerhandbodyandobjectsensiEvewallUIST97209-210

ToucheampEnhancingampTouchampInteracEonamponampHumansampScreensampLiquidsampandampEverydayampObjectsamp(CHIrsquo12)

MunehikoSatoIvanPoupyrevChrisHarrison

h]pswwwyoutubecomwatchv=E4tYpXVTjxA

2 201313095

SVM

9 9TapSense 4

95 99

TapSenseDelete

bull  HarrisonCTanDandMorrisDSkinputappropriat-ingthebodyasaninputsurfaceInProcCHI10453-462

TapSenseampEnhancingampFingerampInteracEonamponampTouchampSurfacesamp(UISTrsquo11)

ChrisHarrisonJuliaSchwarzSco]EHudson

h]pswwwyoutubecomwatchv=-oN96cucBr4

2 201313095

13

13

22 SVM

13 FingersWholeArmForearm 876 Fingers877 WholeArm 955

883 Forearm 815

833

GUI

bull  SaponasTSTanDSMorrisDandBalakrishnanRDemonstraEngthefeasibilityofusingforearmelectromyographyformuscle-computerinterfacesInProcCHIrsquo09515-24

SkinputampAppropriaEngamptheampBodyampasampanampInputampSurfaceamp(CHIrsquo10)

ChrisHarrisonDesneyTanDanMorris

h]pswwwyoutubecomwatchv=g3XPUdW9Ryg

2 201313095

Fiberio

10 330 150

148 2

Fiberio

bull  MatsushitaNandRekimotoJHoloWallDesigningaFingerHandBodyObjectSensiEveWallProcUIST97209ndash210

FiberioampAampTouchscreenampthatampSensesampFingerprintsamp(UISTrsquo13)

ChrisEanHolzPatrickBaudisch

h]pswwwyoutubecomwatchv=p1a5yLzuTqA

2 201313095

3D

3D

bull  GeigerMVollertsenFTheMechanismsofLaserFormingCIRPANNALSlsquo93421301-304

bull  WillisKDDXuCWuJKLevinGGrossMDInteracEvefabricaEonnewinterfacesfordigitalfabricaEonProcTEI11pp69-72

LaserOrigamiampLaserCugngamp3DampObjectsamp(CHIrsquo13)

StefanieMuellerBasEanKruckPatrickBaudisch

h]pswwwyoutubecomwatchv=arjRtCjI9AQ

2 201313095

bend

bull  HyunyoungSongFranccediloisGuimbreEegravereChangHuHodLipsonModelCraycapturingfreehandannotaEonsandeditsonphysical3DmodelsProceedingsofthe19thannualACMsymposiumonUserinterfacesoywareandtechnologyOctober15-182006MontreuxSwitzerland

InteracEveampConstrucEonampInteracEveampFabricaEonampofampFuncEonalampMechanicalampDevicesamp(UISTrsquo12)

StefanieMuellerPedroLopesPatrickBaudisch

h]pdlacmorgcitaEoncfmid=23801162380191

2 201313095

3D

3D

bull  SavageVSchmidtRGrossmanTFitzmauriceGandHartmannBAseriesoftubesAddinginteracEvityto3dprintsusinginternalpipesInProcUIST14(2014)

3DampPrinEngampPneumaEcampDeviceampControlsampwithampVariableampAcEvaEonampForceampCapabiliEesamp(CHIrsquo15)amp

MarynelVazquezEricBrockmeyerRutaDesaiChrisHarrisonSco]EHudson

h]pswwwyoutubecomwatchv=-4gFYvhkz0Y

2 201313095

OpenFab 3D

fablets

3 3

bull  CHENDMATUSIKWSITTHI-AMORNPDIDYKPANDLEVIND2013Spec2FabAreducer-tunermodelfortranslat-ingspecificaEonsto3DprintsACMTransGraph324(July)

OpenFabampAampProgrammableampPipelineampforampMulEMaterialampFabricaEonamp(SIGGRAPHrsquo13)

KirilVidimcˇeSzu-PoWangJonathanRagan-KelleyWojciechMatusik

2 201313095

3D

3D

3D

3D14 30 13 67

244

14

3D

bull  MuellerSKruckBBaudischPLaserOrigamiLaser-Cunng3DObjectsProcCHIrsquo132585-2592

faBrickaEonampFastamp3DampPrinEngampofampFuncEonalampObjectsampbyampIntegraEngampConstrucEonampKitampBuildingampBlocksamp(CHIrsquo14)amp

StefanieMuellerTobiasMohrKersEnGuentherJohannesFrohnhofenPatrickBaudisch

h]pswwwyoutubecomwatchv=BlO6YRcLJjE

Touching13 the13 Void13 Direct-shy‐Touch13 Interac4on13 for13 Intangible13 Displays(CHIrsquo10)Li-Wei Chan Hui-Shan Kao Mike Y Chen Ming-Sui Jane Yi-Ping Hung

201413109　久保勇貴 2（鬼コース）13

どんなもの13

空中像へのタッチのエラーに関する調査及び影や音のフィードバックを付与することによるパーフォーマンス向上を示した研究13

先行研究と比べてどこがすごい13

平面画像をタッチする際の奥行きに関するエラーの正確な取得を初めて検証13

技術や手法のキモはどこ13

２つの赤外線カメラを用いた正確なタッチの検出13

どうやって有効だと検証した13

タッチ時の奥行きの正確さに関する被験者実験を実施またタッチする際に影や音を付けた際の反応時間を被験者実験で検証13

議論はある13

ユーザは慣れるまで影や音のフィードバックが必要だがそのあとは必要なくなる13

次に読むべき論文は13

MirageTable13 （CHI12） 13

MirageTable13 Freehand13 Interac4on13 on13 a13 Projected13 13 Augmented13 Reality13 Tabletop(CHIrsquo12)

Hrvoje Benko Ricardo Jota Andrew D Wilson

201413109　久保勇貴 2（鬼コース）13

どんなもの13

テーブル上においてバーチャルな物体をリアルタイムで現実でものを動かすことと同様な動作に操作可能なシステム13

先行研究と比べてどこがすごい13

現実の物体をリアルタイムで画面に取りこむことができ質の高いフリーハンドインタラクションを実現した点13

技術や手法のキモはどこ13

色深度前景頭追跡プロキシパーティクルを駆使したリアルタイムメッシュの作成13

どうやって有効だと検証した13

凹凸など例外な表面に対しての投影した際の画像の質についての評価実験また仮想物体の奥行き知覚に関する実験も行った13

議論はある13

前面のみしかキャプチャしていないため差が生じる握っている場所の再現は未解決な課題である13

次に読むべき論文は13

Hirsch13 et13 al13 201413 (SIGGRAPHrsquo14)13

A13 Compressive13 Light13 Field13 Projec4on13 System13 (SIGGRAPHrsquo14)MaChew13 Hirsch13 Gordon13 Wetzstein13 Ramesh13 Raskar

201413109　久保勇貴 2（鬼コース）13

どんなもの13

通常の3Dディスプレイに比べて解像度輝度コントラストを改善した圧縮ライトフィードディスプレイ13

先行研究と比べてどこがすごい13

多視点立体視を複数でなく１台のプロジェクタを用いて実現した13

技術や手法のキモはどこ13

受動的スクリーンと高速切り替えプロジェクタによる新しい光学設計13

どうやって有効だと検証した13

4つのシーン例を投影したものを示したアニメーションの3D効果について観察を行った13

議論はある13

光路長を広げると観察できる画質が大幅に制限され他のライトフィードビューと混線が生じる13

次に読むべき論文は13

Butler13 et13 al13 201113

Vermeer13 Direct13 Interac4on13 with13 a13 360deg13 Viewable13 3D13 Display(UISTrsquo11) Alex Butler Otmar Hilliges Shahram Izadi Steve Hodges David Molyneaux David Kim

201413109　久保勇貴 2（鬼コース）13

どんなもの13

映し出された3Dオブジェクトとインタラクションを行えるシステム13

先行研究と比べてどこがすごい13

ディスプレイ内の画像とのインタラクションを提案ボリュームディスプレイを支援する新しいセンシング法の提案13

技術や手法のキモはどこ13

パラボラ鏡に取り付けた赤外線カメラセンサによる指先検出13

どうやって有効だと検証した13

アプリケーション例を示した13

議論はある13

パラボラ鏡の大きさよりもディスプレイサイズが小さくなってしまう13

次に読むべき論文は13

Hirsch13 et13 al13 201213

8D13 Interac4ng13 with13 a13 Relightable13 Glasses-shy‐Free13 3D13 Display(CHIrsquo12)Li-Wei Chan Hui-Shan Kao Mike Y Chen Ming-Sui Jane Yi-Ping Hung

201413109　久保勇貴 2（鬼コース）13

どんなもの13

ライトフィードによる入力とライトフィールドによる表示を行うリアルタイム8Dディスプレイ13

先行研究と比べてどこがすごい13

リアルタイムでの8Dディスプレイの実現（先行研究は7fps）13

技術や手法のキモはどこ13

GPUにおけるレンダリング処理13

どうやって有効だと検証した13

MRIデータを用いたディスプレイのデモを示した13

議論はある13

現在はグレースケールの入力のみだがカラーでの入力できればより強力になるだろう13

次に読むべき論文は13

Sahoo13 et13 al13 201513

Control13 of13 Non-shy‐Solid13 Diffusers13 by13 Electrosta4c13 Charging13 (CHIrsquo15) Deepak Ranjan Sahoo Diego Martinez Plasencia Sriram Subramanian

201413109　久保勇貴 2（鬼コース）13

どんなもの13

シャボン玉や霧などの非固体を電場による制御を試みた研究13

先行研究と比べてどこがすごい13

非固体の形や位置の制御法を提案した点13

技術や手法のキモはどこ13

[Intra13 et13 al13 11]中のldquowire-shy‐to-shy‐Cylinderdquoを用いたエアゾール粒子の帯電13

どうやって有効だと検証した13

霧及びシャボン玉によるディスプレイのアプリケーション例で実際に制御して見せた13

議論はある13

風による影響を本手法は打ち消すことができた13

次に読むべき論文は13

Barnum13 et13 al13 201013

A13 Mul4-shy‐Layered13 Display13 with13 Water13 Drops(SIGGRAPHrsquo10)Peter C Barnum Srinivasa G Narasimhan Takeo Kanade

201413109　久保勇貴 2（鬼コース）13

どんなもの13

複数層の落下水滴にプロジェクションマッピングを行いディスプレイとした研究13

先行研究と比べてどこがすごい13

水滴の制御を行うことで単一のプロジェクタによって複数層の映像投影を可能とした点13

技術や手法のキモはどこ13

[Ambravaneswaran13 et13 al13 2002]及び本研究における実験結果に基づく水滴生成13

どうやって有効だと検証した13

複数のディスプレイ例を示した13 例）顔の投影水槽シミュレータなど13

議論はある13

本当の3Dディスプレイにするにはより多くの水滴制御が必要13

次に読むべき論文は13

Lee13 et13 al13 200713

An13 Immaterial13 Depth-shy‐Fused13 3D13 Display(VRSTrsquo07)Cha Lee Stephen DiVerdi Tobias Humlollerer

201413109　久保勇貴 2（鬼コース）13

どんなもの13

２つのスクリーンを駆使し3Dディスプレイを実現するdepth-shy‐fused13 3D(DFD)に関する評価を行いその結果よりディスプレイを提案した研究13

先行研究と比べてどこがすごい13

DFDが任意のスクリーン設定及び見る位置に対して有効であることを示した13

技術や手法のキモはどこ13

６通りのスクリーン組合せから２つを抽出し見え方の違いを検証した点13

どうやって有効だと検証した13

６通りのスクリーンについて立体的に見えるか被験者実験を実施その後それぞれに有意差がみられるか調べた13

議論はある13

ステレオイメージを認めることができなかったユーザに対しても強い3D効果が見られた13

次に読むべき論文は13

Tokuda13 et13 al13 201013

Cloud13 Display13 (ACErsquo10)Yutaka Tokuda Yasuhiro Suzuki Kunihiro Nishimura Tomohiro Tanikawa Michitaka Hirose

201413109　久保勇貴 2（鬼コース）13

どんなもの13

煙の渦輪を用いた空間を埋めるディスプレイ13

先行研究と比べてどこがすごい13

制御可能な手法により高所へのパーティクルを運搬することに着目した点13

技術や手法のキモはどこ13

コンピュータによって制御が行われる空気砲アレイ13

どうやって有効だと検証した13

箱の中で実験を行い安定して渦輪をできるようにした実際にデモを行ったことを示した13

議論はある13

今の試作機をより早くリフレッシュ速度を高めることによりより濃く空間を埋められることを目指す13

次に読むべき論文は13

Sato13 et13 al13 200913

Par]cle13 Display13 System　(JVRC09)13 -shy‐13 A13 Large13 Scale13 Display13 for13 Public13 Space13 -shy‐

Munehiko13 Sato13 Yasuhiro13 Suzuki13 13 Atsushi13 Hiyama13 Tomohiro13 Tanikawa13 Michitaka13 Hirose

201413109　久保勇貴 2（鬼コース）13

どんなもの13

パーティクルディスプレイによる公共スペースのための大画面ディスプレイの提案13

先行研究と比べてどこがすごい13

公共スペースにおける要求と制限に基づいたシステムを提案した点13

技術や手法のキモはどこ13

実験に基づく表示画像のスクロール時間の制御13

どうやって有効だと検証した13

Aという文字の知覚実験によって 適な点滅周期の調査を行った13

議論はある13

現在の試作機を組合せより高解像度にする必要がある13

次に読むべき論文は13

Kwon13 et13 al13 201513

FugaciousFilm13 Exploring13 Aen4ve13 Interac4on13 with13 Ephemeral13 Material13 (CHIrsquo15)Hyosun13 Kwon13 Shashank13 Jaiswal13 Steve13 Benford13 Sue13 Ann13 Seah13

13 Peter13 BenneC13 Boriana13 Koleva13 Holger13 Schnaumldelbach

201413109　久保勇貴 2（鬼コース）13

どんなもの13

膜を押す引く飛び出ることができる新しい石鹸膜インタフェースの提案13

先行研究と比べてどこがすごい13

徐々に消えるインタフェースは高い注意を有するインタラクションを提供するという点を示したこと13

技術や手法のキモはどこ13

水グリセリンを201の対比で混ぜることでldquopoprdquoがきれいになるようにしかつ膜の耐久性を向上させた13

どうやって有効だと検証した13

３目並べを用いた被験者実験を実施13 ユーザは膜を割ると負け膜を自分のマスにするにはタッチ押す引くの書かれた通りの操作を行う13

議論はある13

ユーザに精密な動作を要求することはとりわけ注意を払うことを誘発する13

次に読むべき論文は13

Wetzstein13 et13 al13 201213

Tensor13 Displays13 Compressive13 Light13 Field13 Synthesis13 using13 Mul4layer13 Displays13 with13 Direc4onal13 Backligh4ng(SIGGRAPHrsquo12)

Gordon13 Wetzstein13 Douglas13 Lanman13 MaChew13 Hirsch13 Ramesh13 Raskar

201413109　久保勇貴 2（鬼コース）13

どんなもの13

視点によって異なる立体映像を見ることができる複数の層からなるディスプレイ13

先行研究と比べてどこがすごい13

既存の手法を合成したcomputa(onal13 displaysというディスプレイの新しいフレームワークを提案した13

技術や手法のキモはどこ13

時分割で視差マスクを表示することでユーザの視線ごとに立体像を表現する13

どうやって有効だと検証した13

通常のディスプレイ３層LCDLCD及び指向性バックライトの例による比較13 13

議論はある13

波紋を含むこと色チャンネルが悪影響を与える相互反射不均一などの問題が見られた13

次に読むべき論文は13

Matoba13 et13 al13 1213

SplashDisplay(VRICrsquo12)Yasuo Matoba Taro Tokui Ryo Sato Tochiki Sato Hideki Koike

201413109　久保勇貴 2（鬼コース）13

どんなもの13

パーティクルにCGを投射しパーティクルがテーブル上に投げられると爆発しパーティクルが噴きあがる13

先行研究と比べてどこがすごい13

ビーズがミリメートルからメートル単位までZ軸方向について空中で奥行きを表現する13

技術や手法のキモはどこ13

スピーカによって風力が発生させビーズを舞い上げる点13

どうやって有効だと検証した13

ビーズを投げると花火が打ちあがっているかのようなアプリケーション例を示した13

議論はある13

高いレベルの表現及び幅広い入力範囲を提供できた13

次に読むべき論文は13

Kim13 et13 al13 1413

MARIO13 Mid-shy‐air13 Augmented13 Reality13 Interac4on13 with13 Objects13 (ECrsquo14)Hanyuool13 Kim13 13 Issei13 Takahashi13 Hiroki13 Yamamoto13 Satoshi13 Maekawa13 Takeshi13 Naemura

201413109　久保勇貴 2（鬼コース）13

どんなもの13

350times300times250のテーブル上のスペースにおいて自由に動かせる空中像を造りだすことができる13

先行研究と比べてどこがすごい13

凹面鏡や凹レンズのように曲面でないため画像の歪曲が発生しない13

技術や手法のキモはどこ13

Aerial13 Imaging13 Plate(AIP)を用いた空中像の生成及びそのためのディスプレイ移動装置13

どうやって有効だと検証した13

左右からの視差の考慮及び奥行き表現時の画像提示視野角の検証などを行った13 13

議論はある13

投影しているひよこを叩いたり払いのけたりするような動作がデモ中見られた13

次に読むべき論文は13

Tactile Feedback on Flat Surfaces for the Visually Impaired13Ali Israr Olivier Bau Seung-Chan Kim Ivan Poupyrev13

どのようなものか 視覚障害者のための触覚を用いた視覚代用デバイス 先行研究と比べてどこがすごいか 道案内をしてくれる機械などはあるが日用品の場所を教えたり探すのを手伝ってくれるデバイスはない 技術や手法のキモ タッチパネルとカメラを搭載したデバイス 触覚を与える技術はTeslaTouchを利用 色を基準にオブジェクトの位置を認識 有用性の確認 視覚障害者二人に対して実験このデバイスを使

わなくても各自の方法で物を見つけられるが間違えることが多いこのデバイスを使用することで間違えることなく正確に物の位置を特定できた 課題 一つの色でしか判断できない 触感のあるなしでしか情報を伝えられない 関連論文 TeslaTouch [Bau et al 2010]

20150522 橋爪智 2鬼

Fingernail-Mounted Display of Attraction Force and Texture13Masataka Niwa Tomoko Nozaki Taro Maeda and Hideyuki And13

どのようなものか 指先に取り付けて触感と力を両方表現できるデバイス 先行研究と比べてどこがすごいか 触感と引力をそれぞれ表現するデバイスはあるが両方を一つのデバイスで表現した例は少ない 引力は自由な方向に付加することができる 技術や手法のキモ 偏心に重さを付けた円盤を4枚使用する 5-9Hz 引力　100-200Hz 触感 それぞれの円盤の位相や回転数を調整することで

触感と力 を表現する 4つのモータを使いそれぞれの円盤を独立して制御する 有用性の確認 4人の男性に対して実験80以上の精度で認識できた 関連論文 The nail-mounted attraction forcebump display [Nozaki et al 2008]

20150522 橋爪智 2 鬼

Gilded gait reshaping the urban experience with augmented footsteps13Yuichiro Takeuchi13

どのようなものか 靴に装着し地面の触感をコントロールするデバイス 先行研究と比べてどこがすごいか 単独で動作しなかったり特定の環境のみでしか動作しなかったりするrarr靴単体で動作環境に依存しない 技術や手法のキモ 6個の振動パネルを取り付けゲルでカバー app modulesを取り替えることができ様々な機能を付加できる（GPSsound) 4種類の地面を再現

bull  Hard Ground 振動させない bull  Soft Ground すべてのパネルを振動 bull  Bumpy Ground ジグザグに振動 bull  Godzilla 全てのパネルを振動何回か繰り返す 課題 モーターを使っているため波形をプログラミングできないrarr圧電素子を使用する 関連論文 Haptic Shoes [Fu et al 2010]

20150522 橋爪智 2鬼

ExoInterfaces novel exosceleton haptic interfaces for virtual reality augmented sport and rehabilitation

Dzmitry Tsetserukou Katsunari Sato Susumu Tachi13

どのようなものか 腕に装着し物理的なinteractionを可能にするデバイス 先行研究と比べてどこがすごいか Exoskeleton 力を増幅するためだが重たく危険なこともある String-based wireが視界をまたぐ動きに制限がある rarr腕の動きに制限を与えない安全 技術や手法のキモ 「FlexTorque」人間の筋肉の構造を再現するベルトとモーターを使用する肩の近くに装着することで

腕に負担がかかりにくい 触覚feedback弱いトルク 運動を支援強いトルク 課題 物理的な接触を表現するゲームやスポーツにより没頭させるリハビリのサポートをする視覚障害者の支援（ものの場所を教える） 関連論文 FlexTorque [Dzmitry et al 2010]

20150522 橋爪智 2 鬼

Perception of Ultrasonic Haptic Feedback on the Hand Localisation and Apparent Motion13

Graham Wilson Tom Carter Sriram Subramanian Stephen Brewster13

どのようなものか 超音波を用いた触覚フィードバック有効性の検討を行う 先行研究と比べてどこがすごいか 超音波触覚フィードバックは比較的新しく研究や操作方法に関する知識が少ない 腕を自由に動かすことができ小さいものは着用可能 技術や手法のキモ 88のアレイ状に超音波発生器を設置

有効性の確認 bull  局所的な触感 　　　25箇所に分割しそれぞれに超音波を当てる 　　　触感を感じた989 　　　場所の誤差85mm bull  手のひらを動く触感 上下左右に動く 　　　動いてると感じた629

20150522 橋爪智 2 鬼

Friction Measurements on a Large Area TPaD13Nicholas D Marchuk J Edward Colgate Michael A Peshkin13

どのようなものか 超音波の振動により触感を与える 先行研究と比べてどこがすごいか ガラス板を使うので透明後ろにディスプレイを配置可能 技術や手法のキモ 「Squeeze Film Effect（スクイズ膜効果）」 ガラス板に取り付けた圧電素子の円盤に高周波信号

をかける 実験 振動しない部分＝摩擦が発生しない部分が発生周波数により場所が変わる rarr摩擦を大きさをかける力の大きさから計測 rarr指の場所に合わせて複数の周波数を使い分ける 関連論文 T-PaD[Winfield et al 2007]

20150522 橋爪智 2 鬼

STIMTAC a Tactile Input Device with Programmable Friction13Michel Amberg Freacutedeacuteric Giraud Betty Semail Paolo Olivo Geacutery Casiez Nicolas Roussel13

どのようなものか 触感を与えられるタッチデバイス 先行研究と比べてどこがすごいか LATPaD サイズ大きいノイズが大きい TeslaTouch 高い電圧付加が必要GNDに接続しなければいけない

技術や手法のキモ 「Squeeze Film Effect」超音波を用いて振動を与える 圧電性セラミックを電極にコーディング 指トラッキングは力センサを用いる 活用法 マウスキーボード絵を描く 関連論文 LATPaD[Vincent et al 2011] TeslaTouch[Bau et al 2010]

20150522 橋爪智 2 鬼

Surround Haptics Tactile Feedback for Immersive Gaming Experiences Ali Israr Seung-Chan Kim Ivan Poupyrev Jan Stec13

どのようなものか ゲームに合わせて高解像度の触覚フィードバックをユーザーに与える椅子 先行研究と比べてどこがすごいか 荒く配置した安価な振動アクチュエータで高解像度の触覚フィードバックを行える 一点の振動連続した動き範囲の振動などを再現

技術や手法のキモ 仮想的な振動アクチュエータをいくつかの振動アクチュエータを使って作り出す physical-physicalphysical-virtualvirtual-virtual ゲームにHaptics Engineを導入しHaptics APIを用いてHaptic Displayを操作する 関連論文 Exploring Surround Haptics Displays[Israr et al 2010]

20150522 橋爪智 2 鬼

Audio-Haptic Feedback in Mobile Phones Angela Chang Conor OrsquoSullivan13

どのようなものか haptics機能のついてない携帯電話にオーディオ機能を利用した触覚フィードバックを追加する 先行研究と比べてどこがすごいか 簡単に作れてnon-haptic mobile devicesでも大丈夫 技術や手法のキモ 「MultiFunction Transducer(MFT)」 スピーカーから音と信号の両方を出力できる

bull  Haptic Inheritance 　　音を2つの周波数帯に分ける bull  Synthesis and Matching 　　低周波数帯(20-300Hz)を使い触感を伝える 有効性の検討 42人の人を対象に実験を行う83の人が触感を感じた

20150522 橋爪智 2 鬼

Resolution of Sleep Deprivation Problems using ZZZoo Pillows13Shunsuke Yanaka Motoki Ishida13

どのようなものか 近年不眠症の人が多い rarr誰かと接していると安心し睡眠に導入しやすくなる rarrまるで添い寝をしているようなリアルな抱きまくらを使う 技術や手法のキモ breathing sensation 風船を使って人の呼吸を再現肺の形の風船弱く長い呼吸をする

heating お湯を使って人の体温を再現45 有効性の確認 84人の人が実験 呼吸が睡眠を誘ったかrarr61 体温が睡眠を誘ったかrarr85 関連論文 The Impact of Sleep Disorders on Social Life[Komada et al 2007]

20150522 橋爪智 2 鬼

まとめ13超音波 モーター 風

20150522 橋爪智 2 鬼

コイル 電気刺激 Electrovibration

振動 音 お湯

なかの

Temporally Consistent Disparity and Optical Flow via Efficient Spatio-temporal Filtering1

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示した

議論論はあるか

時間的に一定の視差を算出する手法静止画ステレオよりも精度度が良良いことを示す従来よりも推定精度度が良良いオプティカルフローも算出する

一枚の静止画に対するフィルタリング[1]をステレオ動画に拡張している

ケンブリッジのステレオ動画のデータセットを利利用 実写動画に対する比較も行行うノイズ耐性も検証する

フィルタベースとエネルギーベースの関係性を良良り理理解することで推定精度度を上げる

実装が簡単でリアルタイム視差推定が可能

Fast Cost-Volume Filtering for Visual Correspondence and Beyond [Rhemann C Hosni A Bleyer M Rother C Gelautz M CVPR2011] Real-time Spatiotemporal Stereo Matching Using the Dual-Cross-Bilateral Grid [Richardt C Orr D Davies I Criminisi A Dodgson NA ECCV2010] Secrets of optical flow estimation and their principles [Sun D Roth S Black MJ 2010] Motion estimation with non-local total variation regularization [Werlberger M Pock T Bischof H CVPR2010] Temporally Consistent Disparity Maps from Uncalibrated Stereo Videos [Bleyer M Gelatuz M ISPA2011]

なかの

SymStereo Matching using Induced Symmetry (2014)2

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示した

議論論はあるか

画像の対称性を用いてステレオマッチングを行行う 左右の画像を反転させて重ね合わせることで対称性を測る

絵的な類似の代わりに対称性を使う今まで対称性を用いる手法はなく新規性が大きい

三つのSymmetry-baseの手法で精度度を検証従来手法よりも精度度が向上しているMiddlebury Oxford Corridorfountain-P11のデータセット使用

ステレオの問題である不不連続な箇所オクルージョン部分は未解決である演算時間はやや増加

1-Dラインのコストを考える今までは撮像面に対して平行行な平面でデプスを考えていたが垂直な平面を考える

BT[Birchfield and Tomasi 1998] Census transform[Zabih and Woodfill 1994] Log N[Kovesi 1997] radio-metoric differences[Hirschmuller Scharstein 2009]

なかの

Camouflaging an Object from Many Viewpoints3

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

多くの視点から三次元の物体をカモフラージュするカモフラージュによってオクルージョン部分の不不連続がどの程度度生じるか他の視点ではどれほどになるかの検証

MRF（Markov Random Fields）ベース

新しい三次元物体のカモフラージュモデルを構築 37種類のデータセットを作る

箱形の物体に対してカモフラージュ処理理を施し 結果を評価する

オクルージョン不不連続テクスチャの歪みが問題 照明や画像の貼りつけに制限あり

なかの

Aliasing Detection and Reduction in Plenoptic Imaging4

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

カメラアレイ撮影の角度度のエイリアシングを除去するエイリアシングの探索索と打ち消しを行行う

周波数領領域ではなく空間領領域で探索索を行行う

先行行研究がフィルタデモザイキング再パラメータ調整などの前処理理でエイリアシング除去を行行うのに対しエイリアシング探索索後にリフォーカスの段階でエイリアシングを取り除く

8times8の平行行カメラアレイで検証するカメラ間の 基線長は70mm

今回は基線長が長いデータセットを使った 次はLytroなどのマイクロレンズアレイで検証する

Globally consistent multi-label assignment on the ray space of 4d light fields [S Wanner C Straehle B Goldluecke CVPR2013] Lineassisted light field triangulation and stereo matching [Z Yu X Guo H Lin A Lumsdaine J Yu ICCV 2013]

なかの

Globally Consistent Multi-Label Assignment on the Ray Space of 4D Light Fields5

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

四次元ライトフィールドの光線情報において マルチラベルの領領域分割を行行う

深度度情報光線情報を用いて領領域分割することで 二次元（空間）情報だけでは分割が難しかった 領領域を分割可能とする

The light field camera Extended depth of field aliasing and superresolution [T Bishop P Favaro IEEE Transactions on Pattern Analysis and Machine Intelligence 2012]

なかの

Line Assisted Light Field Triangulation and Stereo Matching6

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

光線情報を利利用してステレオマッチングの精度度を 向上させる手法三角測量量の誤差を減らす

Light Field Stereo Matchingとかいう手法 グラフ構造を作成

Variational light field analysis for disparity estimation and super-resolution [S Wanner and B Goldlumluecke 2013]

なかの

Adaptive stereo similarity fusion using confidence measures 20157

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

ステレオマッチングの新しい方式fusion weightsを提案複数の手法を組み合わせてコスト計算を行行う手法付録に既存手法のコスト関数一覧あり

パラメータに依存する手法を用いないことで高速化を図っている

一つのアルゴリズムでは異異なる特性を持つ領領域全てに対して適切切なマッチングはできない複数を組み合わせることでそれを補う13種と多い

middleburyとKITTIのデータセットで評価

一枚あたり03sと高速だが001sとより高速なアルゴリズムが存在する

Segment-based stereo matching using belief propagation and a self-adapting dissimilarity measure [A Klaus M Sormann K Karner ICPR2006] On building an accurate stereo matching system on graphics hardware [X Mei X Sun M Zhou S Jiao H Wang X Zhang ICCV2011] Similarity measures for depth estimation [K Wegner O Stankiewicz 3DTV-CON2009] On accurate dense stereo-matching using a local adaptive multi-cost approach [C Stentoumis L Grammatikopoulos I Kalisperakis G Karras ISPRS2014] A quantitative evaluation of confidence measures for stereo vision [X Hu P Mordohai PAMI2012]

なかの

SIMILARITY MEASURE FOR DEPTH ESTIMATIOM 20098

どんなもの

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

4種類の視差推定アルゴリズムを組み合わせている 類似度度の選択性の解析

Belief Propagationの枠組みを用いる

名古屋大学の多視点データベースを利利用

HHI Test Material for 3D Video [I Feldmann M Muller F Zilly R Tanger A SmolicP Kauff T Wiegand 2008] Multiview Video Test Sequence and Camera Parameters [Yo-Sung Ho Eun-Kyung Lee and Cheon Lee 2008] 1D Parallel Test Sequences for MPEG-FTV [M Tanimoto T Fujii N Fukushima 2008] Non-parametric Local Transforms for Computing Visual Correspondence [R Zabih J Woodfill 1994]

なかの

Spatiotemporal Stereo via Spatiotemporal Quadric Element (Stequel) Matching9

どんなもの

技術や手法のキモはどこ

新しいマッチング手法を提案動き考慮することなく時間情報を取り込むことができる 時間方向のエピ線を考える

オプティカルフロー推定は3D境界や低テクスチャで弱いが提案手法はロバストである

なかの

Depth Video Enhancement Based on Weighted Mode Filtering10

どんなもの

議論論はある

ノイズを含んだ低解像度度のデプスマップの質を高める手法（超解像度度とデノイズ）時間方向も使用簡単なオプティカルフローを計算し利利用する

非反復復アルゴリズムのためGPUに載せやすく高速化が考えられる

なかの

Fast Bilateral-Space Stereo for Synthetic Defocus11

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

議論論はある

次に読むべき論論文は

高速な自由焦点ぼけ画像の作成

Bilateral-spaceを提案

従来研究よりも10から100倍速くぼけ具合の精度度も良良い

ぼけを作成するというアプリケーションに利利用する距離離という面では提案手法が有益であるが実測的な距離離という面での精度度は悪い背景と前景が同じ色で近くにある場合同一ととらえてしまう

Efficient high-resolution stereo matching using local plane sweeps [S N Sinha D Scharstein and R SzeliskiCVPR2014] Bilateral filtering-based optical flow estimation with occlusion detection [J Xiao H Cheng H Sawhney C Rao and M IsnardiECCV2006] Efficient nonlocal regularization for optical flow [P Krumlahenbumluhl and V KoltunECCV2012] Real-time spatiotemporal stereo matching using the dual-cross-bilateral grid [C Richardt D Orr I Davies A Criminisi and N A DodgsonECCV2010]

どうやって有効性を示した視差推定の精度度はmiddleburyKITTI

なかの

Robust Spatiotemporal Stereo for Dynamic Scenes12

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

ステレオ動画のフレーム間情報を取り入れることでノイズ耐性を向上させるまた動きの大きなものも考える

時間を含めたウインドウの提案自動的にそのような変化に対応する画像領領域を検出する

従来の時空間ステレオと比べ大きな動きによる急激な視差の時間変化に対して頑健である

なかの

Spacetime Stereo A Unifying Framework for Depth from Triangulation13

どんなもの

先行行研究と比べてどこがすごい

space time stereoを提案ステレオカメラの視差推定でも構造光を用いた視差推定でも利利用可能 動的なシーンでの利利用も可能

フレームごとマッチングを取っていたが複数フレームでのマッチングを可能とした

なかの

Learning to Select and Order Vacation Photographs (Disney research)14

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示したあまりにもたくさん撮影した写真たちから自動的にフォトアルバムを作成する研究

複雑な視覚での区別を試みたのはこの論論文が初

５つの異異なるトピックから63の個人的な写真コレクションのデータセットを利利用し定量量的に評価する

写真間の差別かを定義する顔全体の絵何が写っているか写っていないかを評価する

Jointly aligning and segmenting multiple web photo streams for the inference of collective photo storylines [G Kim and E P Xing CVPR2013] Photo sequencing [T Basha Y Moses and S Avidan CVPR2012]

なかの

A Taxonomy and Evaluation of Dense Two-Frame Stereo Correspondence Algorithms15

どんなもの

どうやって有効性を示した

次に読むべき論論文は

ステレオマッチングに関する分類を行行う 新たなデータセットを作成する

というよりも他の手法が有効性を示すことができるようにデータセットを作成した 今ではmiddleburyのデータセットと言えばステレオ業界では超有名

High-resolution stereo datasets with subpixel-accurate ground truth

なかの

Discriminability Limits in Spatio-Temporal Stereo Block Matching1

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

spatio-temporal disparity estimationの根本的な前提の正当性を解析しマッチング処理理の際に動きが助けとなる程度度を決定する

時空間マッチングのエラーを分析し誤りの原因を確率率率で導出する（フレーム数動きの分散画像特徴ノイズの関数）

[34243334]は時空間マッチングの利利点を指摘していたが本論論文はマッチング精度度の向上のために動きを用いる手法の程度度や性質を研究する

6つのステレオビデオを用いて検証を行行った

Spacetime stereo Shape recovery for dynamic scenes [L Zhang B Curless and S Seitz CVPR2003] Spatiotemporal stereo and scene flow via stequel matching [M Sizintsev and R Wildes PAMI2012] Temporally consistent disparity and optical flow via efficient spatio-temporal filtering [A Hosni C Rhemann M Bleyer and M Gelautz PRCAIVT2012] Spacetime stereo A unifying framework for depth from triangulation [PAMI2005] Dynamic depth recovery from multiple synchronized video streams [H Tao H Sawhney and R Kumar CVPR2001] Spatiotemporal descriptor for wide-baseline stereo reconstruction of non-rigid and ambiguous scenes [ECCV2003]

なかの

Depth-Based Patch Scaling for Content-Aware Stereo Image Completion2

どんなもの

どうやって有効性を示した

ステレオでデプスを取り物体の三次元情報を使ってインペインティングを行行う

bookのデータセット背景が繰り返しパターンが多いものを使っている

なかの

Fast Semi-dense Surface Reconstruction from Stereoscopic Video in Laparoscopic Surgery3

どんなもの

手法の流流れ

次に読むべき論論文は

腹腔内手術の際にステレオビデオから高速に物体の三次元再構成を行行う研究

Evaluation of stereo matching costs on images with radiometric differences [Hirschmueller H Scharstein D PAMI2008]

スコープカメラから画像取得GPUで演算する 視差を算出しフィルタにかける距離離に変換 点群を再びフィルタにかけて三次元再構成

なかの

3D Reconstruction from Accidental Motion4

どんなもの

技術や手法のキモはどこ

議論論はある

数秒のビデオ（単眼）から三次元再構成を行行う 手ぶれなどの動きから再構成が可能で特定の動きや機材を必要としない

短い基線長でも再構成が可能（3mmの基線長）

基線長が短いため背景の精度度が低くなる リフォーカス画像作成には十分 練習では上手く動作したが検証がまだ必要

なかの

Panoramic Video from Unstructured Camera Arrays5

どんなもの

技術や手法のキモはどこ

議論論はある

複数のカメラを用いたパノラマ撮影を行行う その際に不不自然さがないような動画を作成する

不不自然さを感じる感覚特性を提示しそれにのっとって対策を講じている

一つのカメラの解像度度と品質を向上させるよりも複数台のカメラを組み合わせることがはるかに簡単で有益である専門家でなくてもGoProのカメラセットを組み合わせることは容易易

カメラの配置は厳密に決められていない完璧な時間同期やローリングシャッターの不不足のような実撮影での問題もクリアしている

先行行研究と比べてどこがすごい

どうやって有効性を示した左のシステムは14台のカメラを使用 右のシステムはGoProを5台使用

Disney 201558

なかの

Floating Scale Surface Reconstruction6

どんなもの

技術や手法のキモはどこ

流流動的にスケールを変えられる三次元再構成手法

サンプル規模に依存するパラメータがない rarrどのスケールのサンプルにも対応できる

siggraph2014

なかの

A Super Resolution Reconstruction Scheme for Mixed Spatio-Temporal Stereo Video7

どんなもの

技術や手法のキモはどこ

ビデオ超解像アルゴリズム

二台のカメラを使用 一台は低解像度度で高速一台は高解像度度で低速

HHI 3DV ftp siteのBookarrivalとbeergadenを使用どうやって有効性を示した

なかの

What Is a Good Day for Outdoor Photometric Stereo8

どんなもの

先行行研究と比べてどこがすごい

議論論はある

次に読むべき論論文は

屋外における照度度差があるステレオの研究 屋外でステレオを行行う際に有利利or不不利利な日照条件を明らかにする

点光源を用いた研究は行行われていたが屋外での研究はされていなかった

晴れより曇りの方が精度度が良良い雲があるから特徴量量を取りやすい雑音を白色ガウスモデルを想定 季節ごとのデータセットを利利用してみても良良い

Time-lapse photometric stereo and applications [F Shen K Sunkavalli N Bonneel S Rusinkiewicz H Pfisterand X Tong2014] Outdoor photometric stereo [L-F Yu S-K Yeung Y-W Tai D Terzopoulos and T FChan ICCP2013]

どうやって有効性を示した屋外の照明に関するHDR環境マップのデータベースを利利用

Disney 2015424

なかの

COLORBRUSH ANIMATED DIFFUSION FOR INTUITIVE COLORIZATION SIMULATING WATER PAINTING 9

どんなものアニメを水彩画で描いたように変換する 水彩画を描くには経験が必要であるがそれを作成するアルゴリズムを考案絵具が水によりどうにじむかシュミレーションしている

Disney 20141027 ICIP2014

次に読むべき論論文はGabor-space geodesic active contoursrdquo In Algebraic Frames for the Perception-Action Cycle [C Sagiv NA Sochen and YY Zeevi 2000] Practical temporal consistency for image-based graphics applications [M Lang O Wang T Aydin A Smolic and M Gross SIGGRAPH2012] Computer-Generated Watercolor [CJ Curtis SE Anderson JE Seims KW Fleischer and DH Salesin SIGGRAPH1997]

なかの

From Sound to Sight Using Audio Processing to enable Visible Light Communication 10

どんなもの光に情報を載せる技術プロジェクトページがあって光関係の研究が8個載っている

httpwwwdisneyresearchcomprojectvisible-light-communication

ビデオのURL httpwwwdisneyresearchcomwpcontentuploadsPub_InvisibleLightCommunication_Siggraph14_videomp4

• 201211106_KeisukeKawahara
• 201311421_KeitaKanai_02
• 201313095_AkiraIshii_02
• 201413109_YuukiKubo_02
• 201513110_SatoshiHashizume_02
• 鬼輪講マラソン③_1
• 鬼輪講マラソン③_2

2 201313095

EMS

EMS

RFIDEMS

1276

bull  KruijffESchmalsEegDandBeckhausDUsingneuromuscularelectricalsEmulaEonforpseudo-hapEcfeedbackProcVRST06316mdash319

Affordance++ampallowingampobjectsamptoampcommunicateampdynamicampuseamp(CHIrsquo15)

PedroLopesPatrikJonellPatrickBaudisch

h]pswwwyoutubecomwatchv=d0J7V37zQjY

2 201313095

EMS

EMS

EMS

ReacEonloss

EMS

UsingampNeuromuscularampElectricalampSEmulaEonampforampPseudoHapEcampFeedbackamp(VRSTrsquo06)

ErnstKruijffDieterSchmalsEegSteffiBeckhaus

2 201313095

SVM

106 Per-User

863 13

712

13

bull  SatoMPoupyrevIandHarrisonCToucheenhancingtouchinteracEononhumansscreensliquidsandeverydayobjectsInCHIrsquo12483ndash492

bull  TimCollinsAcEveacousEctouchinterfaceElectronicsLe]ersVol45No20pp1055ndash1056242009

TouchampampampAcEvateampAddingampInteracEvityamptoampExisEngampObjectsampusingampAcEveampAcousEcampSensingamp(UISTrsquo13)

MakotoOnoBuntarouShizukiJiroTanaka

h]pswwwyoutubecomwatchv=XgxXi6w8IQc

2 201313095

13

13

SVM

on-body

per-user 5 967 4987

bull  HarrisonCBenkoHWilsonAOmniTouchwearablemulEtouchinteracEoneverywhereinUIST11441-450

bull  MatsushitaNandRekimotoJHoloWalldesigningafingerhandbodyandobjectsensiEvewallUIST97209-210

ToucheampEnhancingampTouchampInteracEonamponampHumansampScreensampLiquidsampandampEverydayampObjectsamp(CHIrsquo12)

MunehikoSatoIvanPoupyrevChrisHarrison

h]pswwwyoutubecomwatchv=E4tYpXVTjxA

2 201313095

SVM

9 9TapSense 4

95 99

TapSenseDelete

bull  HarrisonCTanDandMorrisDSkinputappropriat-ingthebodyasaninputsurfaceInProcCHI10453-462

TapSenseampEnhancingampFingerampInteracEonamponampTouchampSurfacesamp(UISTrsquo11)

ChrisHarrisonJuliaSchwarzSco]EHudson

h]pswwwyoutubecomwatchv=-oN96cucBr4

2 201313095

13

13

22 SVM

13 FingersWholeArmForearm 876 Fingers877 WholeArm 955

883 Forearm 815

833

GUI

bull  SaponasTSTanDSMorrisDandBalakrishnanRDemonstraEngthefeasibilityofusingforearmelectromyographyformuscle-computerinterfacesInProcCHIrsquo09515-24

SkinputampAppropriaEngamptheampBodyampasampanampInputampSurfaceamp(CHIrsquo10)

ChrisHarrisonDesneyTanDanMorris

h]pswwwyoutubecomwatchv=g3XPUdW9Ryg

2 201313095

Fiberio

10 330 150

148 2

Fiberio

bull  MatsushitaNandRekimotoJHoloWallDesigningaFingerHandBodyObjectSensiEveWallProcUIST97209ndash210

FiberioampAampTouchscreenampthatampSensesampFingerprintsamp(UISTrsquo13)

ChrisEanHolzPatrickBaudisch

h]pswwwyoutubecomwatchv=p1a5yLzuTqA

2 201313095

3D

3D

bull  GeigerMVollertsenFTheMechanismsofLaserFormingCIRPANNALSlsquo93421301-304

bull  WillisKDDXuCWuJKLevinGGrossMDInteracEvefabricaEonnewinterfacesfordigitalfabricaEonProcTEI11pp69-72

LaserOrigamiampLaserCugngamp3DampObjectsamp(CHIrsquo13)

StefanieMuellerBasEanKruckPatrickBaudisch

h]pswwwyoutubecomwatchv=arjRtCjI9AQ

2 201313095

bend

bull  HyunyoungSongFranccediloisGuimbreEegravereChangHuHodLipsonModelCraycapturingfreehandannotaEonsandeditsonphysical3DmodelsProceedingsofthe19thannualACMsymposiumonUserinterfacesoywareandtechnologyOctober15-182006MontreuxSwitzerland

InteracEveampConstrucEonampInteracEveampFabricaEonampofampFuncEonalampMechanicalampDevicesamp(UISTrsquo12)

StefanieMuellerPedroLopesPatrickBaudisch

h]pdlacmorgcitaEoncfmid=23801162380191

2 201313095

3D

3D

bull  SavageVSchmidtRGrossmanTFitzmauriceGandHartmannBAseriesoftubesAddinginteracEvityto3dprintsusinginternalpipesInProcUIST14(2014)

3DampPrinEngampPneumaEcampDeviceampControlsampwithampVariableampAcEvaEonampForceampCapabiliEesamp(CHIrsquo15)amp

MarynelVazquezEricBrockmeyerRutaDesaiChrisHarrisonSco]EHudson

h]pswwwyoutubecomwatchv=-4gFYvhkz0Y

2 201313095

OpenFab 3D

fablets

3 3

bull  CHENDMATUSIKWSITTHI-AMORNPDIDYKPANDLEVIND2013Spec2FabAreducer-tunermodelfortranslat-ingspecificaEonsto3DprintsACMTransGraph324(July)

OpenFabampAampProgrammableampPipelineampforampMulEMaterialampFabricaEonamp(SIGGRAPHrsquo13)

KirilVidimcˇeSzu-PoWangJonathanRagan-KelleyWojciechMatusik

2 201313095

3D

3D

3D

3D14 30 13 67

244

14

3D

bull  MuellerSKruckBBaudischPLaserOrigamiLaser-Cunng3DObjectsProcCHIrsquo132585-2592

faBrickaEonampFastamp3DampPrinEngampofampFuncEonalampObjectsampbyampIntegraEngampConstrucEonampKitampBuildingampBlocksamp(CHIrsquo14)amp

StefanieMuellerTobiasMohrKersEnGuentherJohannesFrohnhofenPatrickBaudisch

h]pswwwyoutubecomwatchv=BlO6YRcLJjE

Touching13 the13 Void13 Direct-shy‐Touch13 Interac4on13 for13 Intangible13 Displays(CHIrsquo10)Li-Wei Chan Hui-Shan Kao Mike Y Chen Ming-Sui Jane Yi-Ping Hung

201413109　久保勇貴 2（鬼コース）13

どんなもの13

空中像へのタッチのエラーに関する調査及び影や音のフィードバックを付与することによるパーフォーマンス向上を示した研究13

先行研究と比べてどこがすごい13

平面画像をタッチする際の奥行きに関するエラーの正確な取得を初めて検証13

技術や手法のキモはどこ13

２つの赤外線カメラを用いた正確なタッチの検出13

どうやって有効だと検証した13

タッチ時の奥行きの正確さに関する被験者実験を実施またタッチする際に影や音を付けた際の反応時間を被験者実験で検証13

議論はある13

ユーザは慣れるまで影や音のフィードバックが必要だがそのあとは必要なくなる13

次に読むべき論文は13

MirageTable13 （CHI12） 13

MirageTable13 Freehand13 Interac4on13 on13 a13 Projected13 13 Augmented13 Reality13 Tabletop(CHIrsquo12)

Hrvoje Benko Ricardo Jota Andrew D Wilson

201413109　久保勇貴 2（鬼コース）13

どんなもの13

テーブル上においてバーチャルな物体をリアルタイムで現実でものを動かすことと同様な動作に操作可能なシステム13

先行研究と比べてどこがすごい13

現実の物体をリアルタイムで画面に取りこむことができ質の高いフリーハンドインタラクションを実現した点13

技術や手法のキモはどこ13

色深度前景頭追跡プロキシパーティクルを駆使したリアルタイムメッシュの作成13

どうやって有効だと検証した13

凹凸など例外な表面に対しての投影した際の画像の質についての評価実験また仮想物体の奥行き知覚に関する実験も行った13

議論はある13

前面のみしかキャプチャしていないため差が生じる握っている場所の再現は未解決な課題である13

次に読むべき論文は13

Hirsch13 et13 al13 201413 (SIGGRAPHrsquo14)13

A13 Compressive13 Light13 Field13 Projec4on13 System13 (SIGGRAPHrsquo14)MaChew13 Hirsch13 Gordon13 Wetzstein13 Ramesh13 Raskar

201413109　久保勇貴 2（鬼コース）13

どんなもの13

通常の3Dディスプレイに比べて解像度輝度コントラストを改善した圧縮ライトフィードディスプレイ13

先行研究と比べてどこがすごい13

多視点立体視を複数でなく１台のプロジェクタを用いて実現した13

技術や手法のキモはどこ13

受動的スクリーンと高速切り替えプロジェクタによる新しい光学設計13

どうやって有効だと検証した13

4つのシーン例を投影したものを示したアニメーションの3D効果について観察を行った13

議論はある13

光路長を広げると観察できる画質が大幅に制限され他のライトフィードビューと混線が生じる13

次に読むべき論文は13

Butler13 et13 al13 201113

Vermeer13 Direct13 Interac4on13 with13 a13 360deg13 Viewable13 3D13 Display(UISTrsquo11) Alex Butler Otmar Hilliges Shahram Izadi Steve Hodges David Molyneaux David Kim

201413109　久保勇貴 2（鬼コース）13

どんなもの13

映し出された3Dオブジェクトとインタラクションを行えるシステム13

先行研究と比べてどこがすごい13

ディスプレイ内の画像とのインタラクションを提案ボリュームディスプレイを支援する新しいセンシング法の提案13

技術や手法のキモはどこ13

パラボラ鏡に取り付けた赤外線カメラセンサによる指先検出13

どうやって有効だと検証した13

アプリケーション例を示した13

議論はある13

パラボラ鏡の大きさよりもディスプレイサイズが小さくなってしまう13

次に読むべき論文は13

Hirsch13 et13 al13 201213

8D13 Interac4ng13 with13 a13 Relightable13 Glasses-shy‐Free13 3D13 Display(CHIrsquo12)Li-Wei Chan Hui-Shan Kao Mike Y Chen Ming-Sui Jane Yi-Ping Hung

201413109　久保勇貴 2（鬼コース）13

どんなもの13

ライトフィードによる入力とライトフィールドによる表示を行うリアルタイム8Dディスプレイ13

先行研究と比べてどこがすごい13

リアルタイムでの8Dディスプレイの実現（先行研究は7fps）13

技術や手法のキモはどこ13

GPUにおけるレンダリング処理13

どうやって有効だと検証した13

MRIデータを用いたディスプレイのデモを示した13

議論はある13

現在はグレースケールの入力のみだがカラーでの入力できればより強力になるだろう13

次に読むべき論文は13

Sahoo13 et13 al13 201513

Control13 of13 Non-shy‐Solid13 Diffusers13 by13 Electrosta4c13 Charging13 (CHIrsquo15) Deepak Ranjan Sahoo Diego Martinez Plasencia Sriram Subramanian

201413109　久保勇貴 2（鬼コース）13

どんなもの13

シャボン玉や霧などの非固体を電場による制御を試みた研究13

先行研究と比べてどこがすごい13

非固体の形や位置の制御法を提案した点13

技術や手法のキモはどこ13

[Intra13 et13 al13 11]中のldquowire-shy‐to-shy‐Cylinderdquoを用いたエアゾール粒子の帯電13

どうやって有効だと検証した13

霧及びシャボン玉によるディスプレイのアプリケーション例で実際に制御して見せた13

議論はある13

風による影響を本手法は打ち消すことができた13

次に読むべき論文は13

Barnum13 et13 al13 201013

A13 Mul4-shy‐Layered13 Display13 with13 Water13 Drops(SIGGRAPHrsquo10)Peter C Barnum Srinivasa G Narasimhan Takeo Kanade

201413109　久保勇貴 2（鬼コース）13

どんなもの13

複数層の落下水滴にプロジェクションマッピングを行いディスプレイとした研究13

先行研究と比べてどこがすごい13

水滴の制御を行うことで単一のプロジェクタによって複数層の映像投影を可能とした点13

技術や手法のキモはどこ13

[Ambravaneswaran13 et13 al13 2002]及び本研究における実験結果に基づく水滴生成13

どうやって有効だと検証した13

複数のディスプレイ例を示した13 例）顔の投影水槽シミュレータなど13

議論はある13

本当の3Dディスプレイにするにはより多くの水滴制御が必要13

次に読むべき論文は13

Lee13 et13 al13 200713

An13 Immaterial13 Depth-shy‐Fused13 3D13 Display(VRSTrsquo07)Cha Lee Stephen DiVerdi Tobias Humlollerer

201413109　久保勇貴 2（鬼コース）13

どんなもの13

２つのスクリーンを駆使し3Dディスプレイを実現するdepth-shy‐fused13 3D(DFD)に関する評価を行いその結果よりディスプレイを提案した研究13

先行研究と比べてどこがすごい13

DFDが任意のスクリーン設定及び見る位置に対して有効であることを示した13

技術や手法のキモはどこ13

６通りのスクリーン組合せから２つを抽出し見え方の違いを検証した点13

どうやって有効だと検証した13

６通りのスクリーンについて立体的に見えるか被験者実験を実施その後それぞれに有意差がみられるか調べた13

議論はある13

ステレオイメージを認めることができなかったユーザに対しても強い3D効果が見られた13

次に読むべき論文は13

Tokuda13 et13 al13 201013

Cloud13 Display13 (ACErsquo10)Yutaka Tokuda Yasuhiro Suzuki Kunihiro Nishimura Tomohiro Tanikawa Michitaka Hirose

201413109　久保勇貴 2（鬼コース）13

どんなもの13

煙の渦輪を用いた空間を埋めるディスプレイ13

先行研究と比べてどこがすごい13

制御可能な手法により高所へのパーティクルを運搬することに着目した点13

技術や手法のキモはどこ13

コンピュータによって制御が行われる空気砲アレイ13

どうやって有効だと検証した13

箱の中で実験を行い安定して渦輪をできるようにした実際にデモを行ったことを示した13

議論はある13

今の試作機をより早くリフレッシュ速度を高めることによりより濃く空間を埋められることを目指す13

次に読むべき論文は13

Sato13 et13 al13 200913

Par]cle13 Display13 System　(JVRC09)13 -shy‐13 A13 Large13 Scale13 Display13 for13 Public13 Space13 -shy‐

Munehiko13 Sato13 Yasuhiro13 Suzuki13 13 Atsushi13 Hiyama13 Tomohiro13 Tanikawa13 Michitaka13 Hirose

201413109　久保勇貴 2（鬼コース）13

どんなもの13

パーティクルディスプレイによる公共スペースのための大画面ディスプレイの提案13

先行研究と比べてどこがすごい13

公共スペースにおける要求と制限に基づいたシステムを提案した点13

技術や手法のキモはどこ13

実験に基づく表示画像のスクロール時間の制御13

どうやって有効だと検証した13

Aという文字の知覚実験によって 適な点滅周期の調査を行った13

議論はある13

現在の試作機を組合せより高解像度にする必要がある13

次に読むべき論文は13

Kwon13 et13 al13 201513

FugaciousFilm13 Exploring13 Aen4ve13 Interac4on13 with13 Ephemeral13 Material13 (CHIrsquo15)Hyosun13 Kwon13 Shashank13 Jaiswal13 Steve13 Benford13 Sue13 Ann13 Seah13

13 Peter13 BenneC13 Boriana13 Koleva13 Holger13 Schnaumldelbach

201413109　久保勇貴 2（鬼コース）13

どんなもの13

膜を押す引く飛び出ることができる新しい石鹸膜インタフェースの提案13

先行研究と比べてどこがすごい13

徐々に消えるインタフェースは高い注意を有するインタラクションを提供するという点を示したこと13

技術や手法のキモはどこ13

水グリセリンを201の対比で混ぜることでldquopoprdquoがきれいになるようにしかつ膜の耐久性を向上させた13

どうやって有効だと検証した13

３目並べを用いた被験者実験を実施13 ユーザは膜を割ると負け膜を自分のマスにするにはタッチ押す引くの書かれた通りの操作を行う13

議論はある13

ユーザに精密な動作を要求することはとりわけ注意を払うことを誘発する13

次に読むべき論文は13

Wetzstein13 et13 al13 201213

Tensor13 Displays13 Compressive13 Light13 Field13 Synthesis13 using13 Mul4layer13 Displays13 with13 Direc4onal13 Backligh4ng(SIGGRAPHrsquo12)

Gordon13 Wetzstein13 Douglas13 Lanman13 MaChew13 Hirsch13 Ramesh13 Raskar

201413109　久保勇貴 2（鬼コース）13

どんなもの13

視点によって異なる立体映像を見ることができる複数の層からなるディスプレイ13

先行研究と比べてどこがすごい13

既存の手法を合成したcomputa(onal13 displaysというディスプレイの新しいフレームワークを提案した13

技術や手法のキモはどこ13

時分割で視差マスクを表示することでユーザの視線ごとに立体像を表現する13

どうやって有効だと検証した13

通常のディスプレイ３層LCDLCD及び指向性バックライトの例による比較13 13

議論はある13

波紋を含むこと色チャンネルが悪影響を与える相互反射不均一などの問題が見られた13

次に読むべき論文は13

Matoba13 et13 al13 1213

SplashDisplay(VRICrsquo12)Yasuo Matoba Taro Tokui Ryo Sato Tochiki Sato Hideki Koike

201413109　久保勇貴 2（鬼コース）13

どんなもの13

パーティクルにCGを投射しパーティクルがテーブル上に投げられると爆発しパーティクルが噴きあがる13

先行研究と比べてどこがすごい13

ビーズがミリメートルからメートル単位までZ軸方向について空中で奥行きを表現する13

技術や手法のキモはどこ13

スピーカによって風力が発生させビーズを舞い上げる点13

どうやって有効だと検証した13

ビーズを投げると花火が打ちあがっているかのようなアプリケーション例を示した13

議論はある13

高いレベルの表現及び幅広い入力範囲を提供できた13

次に読むべき論文は13

Kim13 et13 al13 1413

MARIO13 Mid-shy‐air13 Augmented13 Reality13 Interac4on13 with13 Objects13 (ECrsquo14)Hanyuool13 Kim13 13 Issei13 Takahashi13 Hiroki13 Yamamoto13 Satoshi13 Maekawa13 Takeshi13 Naemura

201413109　久保勇貴 2（鬼コース）13

どんなもの13

350times300times250のテーブル上のスペースにおいて自由に動かせる空中像を造りだすことができる13

先行研究と比べてどこがすごい13

凹面鏡や凹レンズのように曲面でないため画像の歪曲が発生しない13

技術や手法のキモはどこ13

Aerial13 Imaging13 Plate(AIP)を用いた空中像の生成及びそのためのディスプレイ移動装置13

どうやって有効だと検証した13

左右からの視差の考慮及び奥行き表現時の画像提示視野角の検証などを行った13 13

議論はある13

投影しているひよこを叩いたり払いのけたりするような動作がデモ中見られた13

次に読むべき論文は13

Tactile Feedback on Flat Surfaces for the Visually Impaired13Ali Israr Olivier Bau Seung-Chan Kim Ivan Poupyrev13

どのようなものか 視覚障害者のための触覚を用いた視覚代用デバイス 先行研究と比べてどこがすごいか 道案内をしてくれる機械などはあるが日用品の場所を教えたり探すのを手伝ってくれるデバイスはない 技術や手法のキモ タッチパネルとカメラを搭載したデバイス 触覚を与える技術はTeslaTouchを利用 色を基準にオブジェクトの位置を認識 有用性の確認 視覚障害者二人に対して実験このデバイスを使

わなくても各自の方法で物を見つけられるが間違えることが多いこのデバイスを使用することで間違えることなく正確に物の位置を特定できた 課題 一つの色でしか判断できない 触感のあるなしでしか情報を伝えられない 関連論文 TeslaTouch [Bau et al 2010]

20150522 橋爪智 2鬼

Fingernail-Mounted Display of Attraction Force and Texture13Masataka Niwa Tomoko Nozaki Taro Maeda and Hideyuki And13

どのようなものか 指先に取り付けて触感と力を両方表現できるデバイス 先行研究と比べてどこがすごいか 触感と引力をそれぞれ表現するデバイスはあるが両方を一つのデバイスで表現した例は少ない 引力は自由な方向に付加することができる 技術や手法のキモ 偏心に重さを付けた円盤を4枚使用する 5-9Hz 引力　100-200Hz 触感 それぞれの円盤の位相や回転数を調整することで

触感と力 を表現する 4つのモータを使いそれぞれの円盤を独立して制御する 有用性の確認 4人の男性に対して実験80以上の精度で認識できた 関連論文 The nail-mounted attraction forcebump display [Nozaki et al 2008]

20150522 橋爪智 2 鬼

Gilded gait reshaping the urban experience with augmented footsteps13Yuichiro Takeuchi13

どのようなものか 靴に装着し地面の触感をコントロールするデバイス 先行研究と比べてどこがすごいか 単独で動作しなかったり特定の環境のみでしか動作しなかったりするrarr靴単体で動作環境に依存しない 技術や手法のキモ 6個の振動パネルを取り付けゲルでカバー app modulesを取り替えることができ様々な機能を付加できる（GPSsound) 4種類の地面を再現

bull  Hard Ground 振動させない bull  Soft Ground すべてのパネルを振動 bull  Bumpy Ground ジグザグに振動 bull  Godzilla 全てのパネルを振動何回か繰り返す 課題 モーターを使っているため波形をプログラミングできないrarr圧電素子を使用する 関連論文 Haptic Shoes [Fu et al 2010]

20150522 橋爪智 2鬼

ExoInterfaces novel exosceleton haptic interfaces for virtual reality augmented sport and rehabilitation

Dzmitry Tsetserukou Katsunari Sato Susumu Tachi13

どのようなものか 腕に装着し物理的なinteractionを可能にするデバイス 先行研究と比べてどこがすごいか Exoskeleton 力を増幅するためだが重たく危険なこともある String-based wireが視界をまたぐ動きに制限がある rarr腕の動きに制限を与えない安全 技術や手法のキモ 「FlexTorque」人間の筋肉の構造を再現するベルトとモーターを使用する肩の近くに装着することで

腕に負担がかかりにくい 触覚feedback弱いトルク 運動を支援強いトルク 課題 物理的な接触を表現するゲームやスポーツにより没頭させるリハビリのサポートをする視覚障害者の支援（ものの場所を教える） 関連論文 FlexTorque [Dzmitry et al 2010]

20150522 橋爪智 2 鬼

Perception of Ultrasonic Haptic Feedback on the Hand Localisation and Apparent Motion13

Graham Wilson Tom Carter Sriram Subramanian Stephen Brewster13

どのようなものか 超音波を用いた触覚フィードバック有効性の検討を行う 先行研究と比べてどこがすごいか 超音波触覚フィードバックは比較的新しく研究や操作方法に関する知識が少ない 腕を自由に動かすことができ小さいものは着用可能 技術や手法のキモ 88のアレイ状に超音波発生器を設置

有効性の確認 bull  局所的な触感 　　　25箇所に分割しそれぞれに超音波を当てる 　　　触感を感じた989 　　　場所の誤差85mm bull  手のひらを動く触感 上下左右に動く 　　　動いてると感じた629

20150522 橋爪智 2 鬼

Friction Measurements on a Large Area TPaD13Nicholas D Marchuk J Edward Colgate Michael A Peshkin13

どのようなものか 超音波の振動により触感を与える 先行研究と比べてどこがすごいか ガラス板を使うので透明後ろにディスプレイを配置可能 技術や手法のキモ 「Squeeze Film Effect（スクイズ膜効果）」 ガラス板に取り付けた圧電素子の円盤に高周波信号

をかける 実験 振動しない部分＝摩擦が発生しない部分が発生周波数により場所が変わる rarr摩擦を大きさをかける力の大きさから計測 rarr指の場所に合わせて複数の周波数を使い分ける 関連論文 T-PaD[Winfield et al 2007]

20150522 橋爪智 2 鬼

STIMTAC a Tactile Input Device with Programmable Friction13Michel Amberg Freacutedeacuteric Giraud Betty Semail Paolo Olivo Geacutery Casiez Nicolas Roussel13

どのようなものか 触感を与えられるタッチデバイス 先行研究と比べてどこがすごいか LATPaD サイズ大きいノイズが大きい TeslaTouch 高い電圧付加が必要GNDに接続しなければいけない

技術や手法のキモ 「Squeeze Film Effect」超音波を用いて振動を与える 圧電性セラミックを電極にコーディング 指トラッキングは力センサを用いる 活用法 マウスキーボード絵を描く 関連論文 LATPaD[Vincent et al 2011] TeslaTouch[Bau et al 2010]

20150522 橋爪智 2 鬼

Surround Haptics Tactile Feedback for Immersive Gaming Experiences Ali Israr Seung-Chan Kim Ivan Poupyrev Jan Stec13

どのようなものか ゲームに合わせて高解像度の触覚フィードバックをユーザーに与える椅子 先行研究と比べてどこがすごいか 荒く配置した安価な振動アクチュエータで高解像度の触覚フィードバックを行える 一点の振動連続した動き範囲の振動などを再現

技術や手法のキモ 仮想的な振動アクチュエータをいくつかの振動アクチュエータを使って作り出す physical-physicalphysical-virtualvirtual-virtual ゲームにHaptics Engineを導入しHaptics APIを用いてHaptic Displayを操作する 関連論文 Exploring Surround Haptics Displays[Israr et al 2010]

20150522 橋爪智 2 鬼

Audio-Haptic Feedback in Mobile Phones Angela Chang Conor OrsquoSullivan13

どのようなものか haptics機能のついてない携帯電話にオーディオ機能を利用した触覚フィードバックを追加する 先行研究と比べてどこがすごいか 簡単に作れてnon-haptic mobile devicesでも大丈夫 技術や手法のキモ 「MultiFunction Transducer(MFT)」 スピーカーから音と信号の両方を出力できる

bull  Haptic Inheritance 　　音を2つの周波数帯に分ける bull  Synthesis and Matching 　　低周波数帯(20-300Hz)を使い触感を伝える 有効性の検討 42人の人を対象に実験を行う83の人が触感を感じた

20150522 橋爪智 2 鬼

Resolution of Sleep Deprivation Problems using ZZZoo Pillows13Shunsuke Yanaka Motoki Ishida13

どのようなものか 近年不眠症の人が多い rarr誰かと接していると安心し睡眠に導入しやすくなる rarrまるで添い寝をしているようなリアルな抱きまくらを使う 技術や手法のキモ breathing sensation 風船を使って人の呼吸を再現肺の形の風船弱く長い呼吸をする

heating お湯を使って人の体温を再現45 有効性の確認 84人の人が実験 呼吸が睡眠を誘ったかrarr61 体温が睡眠を誘ったかrarr85 関連論文 The Impact of Sleep Disorders on Social Life[Komada et al 2007]

20150522 橋爪智 2 鬼

まとめ13超音波 モーター 風

20150522 橋爪智 2 鬼

コイル 電気刺激 Electrovibration

振動 音 お湯

なかの

Temporally Consistent Disparity and Optical Flow via Efficient Spatio-temporal Filtering1

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示した

議論論はあるか

時間的に一定の視差を算出する手法静止画ステレオよりも精度度が良良いことを示す従来よりも推定精度度が良良いオプティカルフローも算出する

一枚の静止画に対するフィルタリング[1]をステレオ動画に拡張している

ケンブリッジのステレオ動画のデータセットを利利用 実写動画に対する比較も行行うノイズ耐性も検証する

フィルタベースとエネルギーベースの関係性を良良り理理解することで推定精度度を上げる

実装が簡単でリアルタイム視差推定が可能

Fast Cost-Volume Filtering for Visual Correspondence and Beyond [Rhemann C Hosni A Bleyer M Rother C Gelautz M CVPR2011] Real-time Spatiotemporal Stereo Matching Using the Dual-Cross-Bilateral Grid [Richardt C Orr D Davies I Criminisi A Dodgson NA ECCV2010] Secrets of optical flow estimation and their principles [Sun D Roth S Black MJ 2010] Motion estimation with non-local total variation regularization [Werlberger M Pock T Bischof H CVPR2010] Temporally Consistent Disparity Maps from Uncalibrated Stereo Videos [Bleyer M Gelatuz M ISPA2011]

なかの

SymStereo Matching using Induced Symmetry (2014)2

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示した

議論論はあるか

画像の対称性を用いてステレオマッチングを行行う 左右の画像を反転させて重ね合わせることで対称性を測る

絵的な類似の代わりに対称性を使う今まで対称性を用いる手法はなく新規性が大きい

三つのSymmetry-baseの手法で精度度を検証従来手法よりも精度度が向上しているMiddlebury Oxford Corridorfountain-P11のデータセット使用

ステレオの問題である不不連続な箇所オクルージョン部分は未解決である演算時間はやや増加

1-Dラインのコストを考える今までは撮像面に対して平行行な平面でデプスを考えていたが垂直な平面を考える

BT[Birchfield and Tomasi 1998] Census transform[Zabih and Woodfill 1994] Log N[Kovesi 1997] radio-metoric differences[Hirschmuller Scharstein 2009]

なかの

Camouflaging an Object from Many Viewpoints3

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

多くの視点から三次元の物体をカモフラージュするカモフラージュによってオクルージョン部分の不不連続がどの程度度生じるか他の視点ではどれほどになるかの検証

MRF（Markov Random Fields）ベース

新しい三次元物体のカモフラージュモデルを構築 37種類のデータセットを作る

箱形の物体に対してカモフラージュ処理理を施し 結果を評価する

オクルージョン不不連続テクスチャの歪みが問題 照明や画像の貼りつけに制限あり

なかの

Aliasing Detection and Reduction in Plenoptic Imaging4

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

カメラアレイ撮影の角度度のエイリアシングを除去するエイリアシングの探索索と打ち消しを行行う

周波数領領域ではなく空間領領域で探索索を行行う

先行行研究がフィルタデモザイキング再パラメータ調整などの前処理理でエイリアシング除去を行行うのに対しエイリアシング探索索後にリフォーカスの段階でエイリアシングを取り除く

8times8の平行行カメラアレイで検証するカメラ間の 基線長は70mm

今回は基線長が長いデータセットを使った 次はLytroなどのマイクロレンズアレイで検証する

Globally consistent multi-label assignment on the ray space of 4d light fields [S Wanner C Straehle B Goldluecke CVPR2013] Lineassisted light field triangulation and stereo matching [Z Yu X Guo H Lin A Lumsdaine J Yu ICCV 2013]

なかの

Globally Consistent Multi-Label Assignment on the Ray Space of 4D Light Fields5

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

四次元ライトフィールドの光線情報において マルチラベルの領領域分割を行行う

深度度情報光線情報を用いて領領域分割することで 二次元（空間）情報だけでは分割が難しかった 領領域を分割可能とする

The light field camera Extended depth of field aliasing and superresolution [T Bishop P Favaro IEEE Transactions on Pattern Analysis and Machine Intelligence 2012]

なかの

Line Assisted Light Field Triangulation and Stereo Matching6

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

光線情報を利利用してステレオマッチングの精度度を 向上させる手法三角測量量の誤差を減らす

Light Field Stereo Matchingとかいう手法 グラフ構造を作成

Variational light field analysis for disparity estimation and super-resolution [S Wanner and B Goldlumluecke 2013]

なかの

Adaptive stereo similarity fusion using confidence measures 20157

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

ステレオマッチングの新しい方式fusion weightsを提案複数の手法を組み合わせてコスト計算を行行う手法付録に既存手法のコスト関数一覧あり

パラメータに依存する手法を用いないことで高速化を図っている

一つのアルゴリズムでは異異なる特性を持つ領領域全てに対して適切切なマッチングはできない複数を組み合わせることでそれを補う13種と多い

middleburyとKITTIのデータセットで評価

一枚あたり03sと高速だが001sとより高速なアルゴリズムが存在する

Segment-based stereo matching using belief propagation and a self-adapting dissimilarity measure [A Klaus M Sormann K Karner ICPR2006] On building an accurate stereo matching system on graphics hardware [X Mei X Sun M Zhou S Jiao H Wang X Zhang ICCV2011] Similarity measures for depth estimation [K Wegner O Stankiewicz 3DTV-CON2009] On accurate dense stereo-matching using a local adaptive multi-cost approach [C Stentoumis L Grammatikopoulos I Kalisperakis G Karras ISPRS2014] A quantitative evaluation of confidence measures for stereo vision [X Hu P Mordohai PAMI2012]

なかの

SIMILARITY MEASURE FOR DEPTH ESTIMATIOM 20098

どんなもの

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

4種類の視差推定アルゴリズムを組み合わせている 類似度度の選択性の解析

Belief Propagationの枠組みを用いる

名古屋大学の多視点データベースを利利用

HHI Test Material for 3D Video [I Feldmann M Muller F Zilly R Tanger A SmolicP Kauff T Wiegand 2008] Multiview Video Test Sequence and Camera Parameters [Yo-Sung Ho Eun-Kyung Lee and Cheon Lee 2008] 1D Parallel Test Sequences for MPEG-FTV [M Tanimoto T Fujii N Fukushima 2008] Non-parametric Local Transforms for Computing Visual Correspondence [R Zabih J Woodfill 1994]

なかの

Spatiotemporal Stereo via Spatiotemporal Quadric Element (Stequel) Matching9

どんなもの

技術や手法のキモはどこ

新しいマッチング手法を提案動き考慮することなく時間情報を取り込むことができる 時間方向のエピ線を考える

オプティカルフロー推定は3D境界や低テクスチャで弱いが提案手法はロバストである

なかの

Depth Video Enhancement Based on Weighted Mode Filtering10

どんなもの

議論論はある

ノイズを含んだ低解像度度のデプスマップの質を高める手法（超解像度度とデノイズ）時間方向も使用簡単なオプティカルフローを計算し利利用する

非反復復アルゴリズムのためGPUに載せやすく高速化が考えられる

なかの

Fast Bilateral-Space Stereo for Synthetic Defocus11

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

議論論はある

次に読むべき論論文は

高速な自由焦点ぼけ画像の作成

Bilateral-spaceを提案

従来研究よりも10から100倍速くぼけ具合の精度度も良良い

ぼけを作成するというアプリケーションに利利用する距離離という面では提案手法が有益であるが実測的な距離離という面での精度度は悪い背景と前景が同じ色で近くにある場合同一ととらえてしまう

Efficient high-resolution stereo matching using local plane sweeps [S N Sinha D Scharstein and R SzeliskiCVPR2014] Bilateral filtering-based optical flow estimation with occlusion detection [J Xiao H Cheng H Sawhney C Rao and M IsnardiECCV2006] Efficient nonlocal regularization for optical flow [P Krumlahenbumluhl and V KoltunECCV2012] Real-time spatiotemporal stereo matching using the dual-cross-bilateral grid [C Richardt D Orr I Davies A Criminisi and N A DodgsonECCV2010]

どうやって有効性を示した視差推定の精度度はmiddleburyKITTI

なかの

Robust Spatiotemporal Stereo for Dynamic Scenes12

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

ステレオ動画のフレーム間情報を取り入れることでノイズ耐性を向上させるまた動きの大きなものも考える

時間を含めたウインドウの提案自動的にそのような変化に対応する画像領領域を検出する

従来の時空間ステレオと比べ大きな動きによる急激な視差の時間変化に対して頑健である

なかの

Spacetime Stereo A Unifying Framework for Depth from Triangulation13

どんなもの

先行行研究と比べてどこがすごい

space time stereoを提案ステレオカメラの視差推定でも構造光を用いた視差推定でも利利用可能 動的なシーンでの利利用も可能

フレームごとマッチングを取っていたが複数フレームでのマッチングを可能とした

なかの

Learning to Select and Order Vacation Photographs (Disney research)14

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示したあまりにもたくさん撮影した写真たちから自動的にフォトアルバムを作成する研究

複雑な視覚での区別を試みたのはこの論論文が初

５つの異異なるトピックから63の個人的な写真コレクションのデータセットを利利用し定量量的に評価する

写真間の差別かを定義する顔全体の絵何が写っているか写っていないかを評価する

Jointly aligning and segmenting multiple web photo streams for the inference of collective photo storylines [G Kim and E P Xing CVPR2013] Photo sequencing [T Basha Y Moses and S Avidan CVPR2012]

なかの

A Taxonomy and Evaluation of Dense Two-Frame Stereo Correspondence Algorithms15

どんなもの

どうやって有効性を示した

次に読むべき論論文は

ステレオマッチングに関する分類を行行う 新たなデータセットを作成する

というよりも他の手法が有効性を示すことができるようにデータセットを作成した 今ではmiddleburyのデータセットと言えばステレオ業界では超有名

High-resolution stereo datasets with subpixel-accurate ground truth

なかの

Discriminability Limits in Spatio-Temporal Stereo Block Matching1

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

spatio-temporal disparity estimationの根本的な前提の正当性を解析しマッチング処理理の際に動きが助けとなる程度度を決定する

時空間マッチングのエラーを分析し誤りの原因を確率率率で導出する（フレーム数動きの分散画像特徴ノイズの関数）

[34243334]は時空間マッチングの利利点を指摘していたが本論論文はマッチング精度度の向上のために動きを用いる手法の程度度や性質を研究する

6つのステレオビデオを用いて検証を行行った

Spacetime stereo Shape recovery for dynamic scenes [L Zhang B Curless and S Seitz CVPR2003] Spatiotemporal stereo and scene flow via stequel matching [M Sizintsev and R Wildes PAMI2012] Temporally consistent disparity and optical flow via efficient spatio-temporal filtering [A Hosni C Rhemann M Bleyer and M Gelautz PRCAIVT2012] Spacetime stereo A unifying framework for depth from triangulation [PAMI2005] Dynamic depth recovery from multiple synchronized video streams [H Tao H Sawhney and R Kumar CVPR2001] Spatiotemporal descriptor for wide-baseline stereo reconstruction of non-rigid and ambiguous scenes [ECCV2003]

なかの

Depth-Based Patch Scaling for Content-Aware Stereo Image Completion2

どんなもの

どうやって有効性を示した

ステレオでデプスを取り物体の三次元情報を使ってインペインティングを行行う

bookのデータセット背景が繰り返しパターンが多いものを使っている

なかの

Fast Semi-dense Surface Reconstruction from Stereoscopic Video in Laparoscopic Surgery3

どんなもの

手法の流流れ

次に読むべき論論文は

腹腔内手術の際にステレオビデオから高速に物体の三次元再構成を行行う研究

Evaluation of stereo matching costs on images with radiometric differences [Hirschmueller H Scharstein D PAMI2008]

スコープカメラから画像取得GPUで演算する 視差を算出しフィルタにかける距離離に変換 点群を再びフィルタにかけて三次元再構成

なかの

3D Reconstruction from Accidental Motion4

どんなもの

技術や手法のキモはどこ

議論論はある

数秒のビデオ（単眼）から三次元再構成を行行う 手ぶれなどの動きから再構成が可能で特定の動きや機材を必要としない

短い基線長でも再構成が可能（3mmの基線長）

基線長が短いため背景の精度度が低くなる リフォーカス画像作成には十分 練習では上手く動作したが検証がまだ必要

なかの

Panoramic Video from Unstructured Camera Arrays5

どんなもの

技術や手法のキモはどこ

議論論はある

複数のカメラを用いたパノラマ撮影を行行う その際に不不自然さがないような動画を作成する

不不自然さを感じる感覚特性を提示しそれにのっとって対策を講じている

一つのカメラの解像度度と品質を向上させるよりも複数台のカメラを組み合わせることがはるかに簡単で有益である専門家でなくてもGoProのカメラセットを組み合わせることは容易易

カメラの配置は厳密に決められていない完璧な時間同期やローリングシャッターの不不足のような実撮影での問題もクリアしている

先行行研究と比べてどこがすごい

どうやって有効性を示した左のシステムは14台のカメラを使用 右のシステムはGoProを5台使用

Disney 201558

なかの

Floating Scale Surface Reconstruction6

どんなもの

技術や手法のキモはどこ

流流動的にスケールを変えられる三次元再構成手法

サンプル規模に依存するパラメータがない rarrどのスケールのサンプルにも対応できる

siggraph2014

なかの

A Super Resolution Reconstruction Scheme for Mixed Spatio-Temporal Stereo Video7

どんなもの

技術や手法のキモはどこ

ビデオ超解像アルゴリズム

二台のカメラを使用 一台は低解像度度で高速一台は高解像度度で低速

HHI 3DV ftp siteのBookarrivalとbeergadenを使用どうやって有効性を示した

なかの

What Is a Good Day for Outdoor Photometric Stereo8

どんなもの

先行行研究と比べてどこがすごい

議論論はある

次に読むべき論論文は

屋外における照度度差があるステレオの研究 屋外でステレオを行行う際に有利利or不不利利な日照条件を明らかにする

点光源を用いた研究は行行われていたが屋外での研究はされていなかった

晴れより曇りの方が精度度が良良い雲があるから特徴量量を取りやすい雑音を白色ガウスモデルを想定 季節ごとのデータセットを利利用してみても良良い

Time-lapse photometric stereo and applications [F Shen K Sunkavalli N Bonneel S Rusinkiewicz H Pfisterand X Tong2014] Outdoor photometric stereo [L-F Yu S-K Yeung Y-W Tai D Terzopoulos and T FChan ICCP2013]

どうやって有効性を示した屋外の照明に関するHDR環境マップのデータベースを利利用

Disney 2015424

なかの

COLORBRUSH ANIMATED DIFFUSION FOR INTUITIVE COLORIZATION SIMULATING WATER PAINTING 9

どんなものアニメを水彩画で描いたように変換する 水彩画を描くには経験が必要であるがそれを作成するアルゴリズムを考案絵具が水によりどうにじむかシュミレーションしている

Disney 20141027 ICIP2014

次に読むべき論論文はGabor-space geodesic active contoursrdquo In Algebraic Frames for the Perception-Action Cycle [C Sagiv NA Sochen and YY Zeevi 2000] Practical temporal consistency for image-based graphics applications [M Lang O Wang T Aydin A Smolic and M Gross SIGGRAPH2012] Computer-Generated Watercolor [CJ Curtis SE Anderson JE Seims KW Fleischer and DH Salesin SIGGRAPH1997]

なかの

From Sound to Sight Using Audio Processing to enable Visible Light Communication 10

どんなもの光に情報を載せる技術プロジェクトページがあって光関係の研究が8個載っている

httpwwwdisneyresearchcomprojectvisible-light-communication

ビデオのURL httpwwwdisneyresearchcomwpcontentuploadsPub_InvisibleLightCommunication_Siggraph14_videomp4

• 201211106_KeisukeKawahara
• 201311421_KeitaKanai_02
• 201313095_AkiraIshii_02
• 201413109_YuukiKubo_02
• 201513110_SatoshiHashizume_02
• 鬼輪講マラソン③_1
• 鬼輪講マラソン③_2

2 201313095

EMS

EMS

EMS

ReacEonloss

EMS

UsingampNeuromuscularampElectricalampSEmulaEonampforampPseudoHapEcampFeedbackamp(VRSTrsquo06)

ErnstKruijffDieterSchmalsEegSteffiBeckhaus

2 201313095

SVM

106 Per-User

863 13

712

13

bull  SatoMPoupyrevIandHarrisonCToucheenhancingtouchinteracEononhumansscreensliquidsandeverydayobjectsInCHIrsquo12483ndash492

bull  TimCollinsAcEveacousEctouchinterfaceElectronicsLe]ersVol45No20pp1055ndash1056242009

TouchampampampAcEvateampAddingampInteracEvityamptoampExisEngampObjectsampusingampAcEveampAcousEcampSensingamp(UISTrsquo13)

MakotoOnoBuntarouShizukiJiroTanaka

h]pswwwyoutubecomwatchv=XgxXi6w8IQc

2 201313095

13

13

SVM

on-body

per-user 5 967 4987

bull  HarrisonCBenkoHWilsonAOmniTouchwearablemulEtouchinteracEoneverywhereinUIST11441-450

bull  MatsushitaNandRekimotoJHoloWalldesigningafingerhandbodyandobjectsensiEvewallUIST97209-210

ToucheampEnhancingampTouchampInteracEonamponampHumansampScreensampLiquidsampandampEverydayampObjectsamp(CHIrsquo12)

MunehikoSatoIvanPoupyrevChrisHarrison

h]pswwwyoutubecomwatchv=E4tYpXVTjxA

2 201313095

SVM

9 9TapSense 4

95 99

TapSenseDelete

bull  HarrisonCTanDandMorrisDSkinputappropriat-ingthebodyasaninputsurfaceInProcCHI10453-462

TapSenseampEnhancingampFingerampInteracEonamponampTouchampSurfacesamp(UISTrsquo11)

ChrisHarrisonJuliaSchwarzSco]EHudson

h]pswwwyoutubecomwatchv=-oN96cucBr4

2 201313095

13

13

22 SVM

13 FingersWholeArmForearm 876 Fingers877 WholeArm 955

883 Forearm 815

833

GUI

bull  SaponasTSTanDSMorrisDandBalakrishnanRDemonstraEngthefeasibilityofusingforearmelectromyographyformuscle-computerinterfacesInProcCHIrsquo09515-24

SkinputampAppropriaEngamptheampBodyampasampanampInputampSurfaceamp(CHIrsquo10)

ChrisHarrisonDesneyTanDanMorris

h]pswwwyoutubecomwatchv=g3XPUdW9Ryg

2 201313095

Fiberio

10 330 150

148 2

Fiberio

bull  MatsushitaNandRekimotoJHoloWallDesigningaFingerHandBodyObjectSensiEveWallProcUIST97209ndash210

FiberioampAampTouchscreenampthatampSensesampFingerprintsamp(UISTrsquo13)

ChrisEanHolzPatrickBaudisch

h]pswwwyoutubecomwatchv=p1a5yLzuTqA

2 201313095

3D

3D

bull  GeigerMVollertsenFTheMechanismsofLaserFormingCIRPANNALSlsquo93421301-304

bull  WillisKDDXuCWuJKLevinGGrossMDInteracEvefabricaEonnewinterfacesfordigitalfabricaEonProcTEI11pp69-72

LaserOrigamiampLaserCugngamp3DampObjectsamp(CHIrsquo13)

StefanieMuellerBasEanKruckPatrickBaudisch

h]pswwwyoutubecomwatchv=arjRtCjI9AQ

2 201313095

bend

bull  HyunyoungSongFranccediloisGuimbreEegravereChangHuHodLipsonModelCraycapturingfreehandannotaEonsandeditsonphysical3DmodelsProceedingsofthe19thannualACMsymposiumonUserinterfacesoywareandtechnologyOctober15-182006MontreuxSwitzerland

InteracEveampConstrucEonampInteracEveampFabricaEonampofampFuncEonalampMechanicalampDevicesamp(UISTrsquo12)

StefanieMuellerPedroLopesPatrickBaudisch

h]pdlacmorgcitaEoncfmid=23801162380191

2 201313095

3D

3D

bull  SavageVSchmidtRGrossmanTFitzmauriceGandHartmannBAseriesoftubesAddinginteracEvityto3dprintsusinginternalpipesInProcUIST14(2014)

3DampPrinEngampPneumaEcampDeviceampControlsampwithampVariableampAcEvaEonampForceampCapabiliEesamp(CHIrsquo15)amp

MarynelVazquezEricBrockmeyerRutaDesaiChrisHarrisonSco]EHudson

h]pswwwyoutubecomwatchv=-4gFYvhkz0Y

2 201313095

OpenFab 3D

fablets

3 3

bull  CHENDMATUSIKWSITTHI-AMORNPDIDYKPANDLEVIND2013Spec2FabAreducer-tunermodelfortranslat-ingspecificaEonsto3DprintsACMTransGraph324(July)

OpenFabampAampProgrammableampPipelineampforampMulEMaterialampFabricaEonamp(SIGGRAPHrsquo13)

KirilVidimcˇeSzu-PoWangJonathanRagan-KelleyWojciechMatusik

2 201313095

3D

3D

3D

3D14 30 13 67

244

14

3D

bull  MuellerSKruckBBaudischPLaserOrigamiLaser-Cunng3DObjectsProcCHIrsquo132585-2592

faBrickaEonampFastamp3DampPrinEngampofampFuncEonalampObjectsampbyampIntegraEngampConstrucEonampKitampBuildingampBlocksamp(CHIrsquo14)amp

StefanieMuellerTobiasMohrKersEnGuentherJohannesFrohnhofenPatrickBaudisch

h]pswwwyoutubecomwatchv=BlO6YRcLJjE

Touching13 the13 Void13 Direct-shy‐Touch13 Interac4on13 for13 Intangible13 Displays(CHIrsquo10)Li-Wei Chan Hui-Shan Kao Mike Y Chen Ming-Sui Jane Yi-Ping Hung

201413109　久保勇貴 2（鬼コース）13

どんなもの13

空中像へのタッチのエラーに関する調査及び影や音のフィードバックを付与することによるパーフォーマンス向上を示した研究13

先行研究と比べてどこがすごい13

平面画像をタッチする際の奥行きに関するエラーの正確な取得を初めて検証13

技術や手法のキモはどこ13

２つの赤外線カメラを用いた正確なタッチの検出13

どうやって有効だと検証した13

タッチ時の奥行きの正確さに関する被験者実験を実施またタッチする際に影や音を付けた際の反応時間を被験者実験で検証13

議論はある13

ユーザは慣れるまで影や音のフィードバックが必要だがそのあとは必要なくなる13

次に読むべき論文は13

MirageTable13 （CHI12） 13

MirageTable13 Freehand13 Interac4on13 on13 a13 Projected13 13 Augmented13 Reality13 Tabletop(CHIrsquo12)

Hrvoje Benko Ricardo Jota Andrew D Wilson

201413109　久保勇貴 2（鬼コース）13

どんなもの13

テーブル上においてバーチャルな物体をリアルタイムで現実でものを動かすことと同様な動作に操作可能なシステム13

先行研究と比べてどこがすごい13

現実の物体をリアルタイムで画面に取りこむことができ質の高いフリーハンドインタラクションを実現した点13

技術や手法のキモはどこ13

色深度前景頭追跡プロキシパーティクルを駆使したリアルタイムメッシュの作成13

どうやって有効だと検証した13

凹凸など例外な表面に対しての投影した際の画像の質についての評価実験また仮想物体の奥行き知覚に関する実験も行った13

議論はある13

前面のみしかキャプチャしていないため差が生じる握っている場所の再現は未解決な課題である13

次に読むべき論文は13

Hirsch13 et13 al13 201413 (SIGGRAPHrsquo14)13

A13 Compressive13 Light13 Field13 Projec4on13 System13 (SIGGRAPHrsquo14)MaChew13 Hirsch13 Gordon13 Wetzstein13 Ramesh13 Raskar

201413109　久保勇貴 2（鬼コース）13

どんなもの13

通常の3Dディスプレイに比べて解像度輝度コントラストを改善した圧縮ライトフィードディスプレイ13

先行研究と比べてどこがすごい13

多視点立体視を複数でなく１台のプロジェクタを用いて実現した13

技術や手法のキモはどこ13

受動的スクリーンと高速切り替えプロジェクタによる新しい光学設計13

どうやって有効だと検証した13

4つのシーン例を投影したものを示したアニメーションの3D効果について観察を行った13

議論はある13

光路長を広げると観察できる画質が大幅に制限され他のライトフィードビューと混線が生じる13

次に読むべき論文は13

Butler13 et13 al13 201113

Vermeer13 Direct13 Interac4on13 with13 a13 360deg13 Viewable13 3D13 Display(UISTrsquo11) Alex Butler Otmar Hilliges Shahram Izadi Steve Hodges David Molyneaux David Kim

201413109　久保勇貴 2（鬼コース）13

どんなもの13

映し出された3Dオブジェクトとインタラクションを行えるシステム13

先行研究と比べてどこがすごい13

ディスプレイ内の画像とのインタラクションを提案ボリュームディスプレイを支援する新しいセンシング法の提案13

技術や手法のキモはどこ13

パラボラ鏡に取り付けた赤外線カメラセンサによる指先検出13

どうやって有効だと検証した13

アプリケーション例を示した13

議論はある13

パラボラ鏡の大きさよりもディスプレイサイズが小さくなってしまう13

次に読むべき論文は13

Hirsch13 et13 al13 201213

8D13 Interac4ng13 with13 a13 Relightable13 Glasses-shy‐Free13 3D13 Display(CHIrsquo12)Li-Wei Chan Hui-Shan Kao Mike Y Chen Ming-Sui Jane Yi-Ping Hung

201413109　久保勇貴 2（鬼コース）13

どんなもの13

ライトフィードによる入力とライトフィールドによる表示を行うリアルタイム8Dディスプレイ13

先行研究と比べてどこがすごい13

リアルタイムでの8Dディスプレイの実現（先行研究は7fps）13

技術や手法のキモはどこ13

GPUにおけるレンダリング処理13

どうやって有効だと検証した13

MRIデータを用いたディスプレイのデモを示した13

議論はある13

現在はグレースケールの入力のみだがカラーでの入力できればより強力になるだろう13

次に読むべき論文は13

Sahoo13 et13 al13 201513

Control13 of13 Non-shy‐Solid13 Diffusers13 by13 Electrosta4c13 Charging13 (CHIrsquo15) Deepak Ranjan Sahoo Diego Martinez Plasencia Sriram Subramanian

201413109　久保勇貴 2（鬼コース）13

どんなもの13

シャボン玉や霧などの非固体を電場による制御を試みた研究13

先行研究と比べてどこがすごい13

非固体の形や位置の制御法を提案した点13

技術や手法のキモはどこ13

[Intra13 et13 al13 11]中のldquowire-shy‐to-shy‐Cylinderdquoを用いたエアゾール粒子の帯電13

どうやって有効だと検証した13

霧及びシャボン玉によるディスプレイのアプリケーション例で実際に制御して見せた13

議論はある13

風による影響を本手法は打ち消すことができた13

次に読むべき論文は13

Barnum13 et13 al13 201013

A13 Mul4-shy‐Layered13 Display13 with13 Water13 Drops(SIGGRAPHrsquo10)Peter C Barnum Srinivasa G Narasimhan Takeo Kanade

201413109　久保勇貴 2（鬼コース）13

どんなもの13

複数層の落下水滴にプロジェクションマッピングを行いディスプレイとした研究13

先行研究と比べてどこがすごい13

水滴の制御を行うことで単一のプロジェクタによって複数層の映像投影を可能とした点13

技術や手法のキモはどこ13

[Ambravaneswaran13 et13 al13 2002]及び本研究における実験結果に基づく水滴生成13

どうやって有効だと検証した13

複数のディスプレイ例を示した13 例）顔の投影水槽シミュレータなど13

議論はある13

本当の3Dディスプレイにするにはより多くの水滴制御が必要13

次に読むべき論文は13

Lee13 et13 al13 200713

An13 Immaterial13 Depth-shy‐Fused13 3D13 Display(VRSTrsquo07)Cha Lee Stephen DiVerdi Tobias Humlollerer

201413109　久保勇貴 2（鬼コース）13

どんなもの13

２つのスクリーンを駆使し3Dディスプレイを実現するdepth-shy‐fused13 3D(DFD)に関する評価を行いその結果よりディスプレイを提案した研究13

先行研究と比べてどこがすごい13

DFDが任意のスクリーン設定及び見る位置に対して有効であることを示した13

技術や手法のキモはどこ13

６通りのスクリーン組合せから２つを抽出し見え方の違いを検証した点13

どうやって有効だと検証した13

６通りのスクリーンについて立体的に見えるか被験者実験を実施その後それぞれに有意差がみられるか調べた13

議論はある13

ステレオイメージを認めることができなかったユーザに対しても強い3D効果が見られた13

次に読むべき論文は13

Tokuda13 et13 al13 201013

Cloud13 Display13 (ACErsquo10)Yutaka Tokuda Yasuhiro Suzuki Kunihiro Nishimura Tomohiro Tanikawa Michitaka Hirose

201413109　久保勇貴 2（鬼コース）13

どんなもの13

煙の渦輪を用いた空間を埋めるディスプレイ13

先行研究と比べてどこがすごい13

制御可能な手法により高所へのパーティクルを運搬することに着目した点13

技術や手法のキモはどこ13

コンピュータによって制御が行われる空気砲アレイ13

どうやって有効だと検証した13

箱の中で実験を行い安定して渦輪をできるようにした実際にデモを行ったことを示した13

議論はある13

今の試作機をより早くリフレッシュ速度を高めることによりより濃く空間を埋められることを目指す13

次に読むべき論文は13

Sato13 et13 al13 200913

Par]cle13 Display13 System　(JVRC09)13 -shy‐13 A13 Large13 Scale13 Display13 for13 Public13 Space13 -shy‐

Munehiko13 Sato13 Yasuhiro13 Suzuki13 13 Atsushi13 Hiyama13 Tomohiro13 Tanikawa13 Michitaka13 Hirose

201413109　久保勇貴 2（鬼コース）13

どんなもの13

パーティクルディスプレイによる公共スペースのための大画面ディスプレイの提案13

先行研究と比べてどこがすごい13

公共スペースにおける要求と制限に基づいたシステムを提案した点13

技術や手法のキモはどこ13

実験に基づく表示画像のスクロール時間の制御13

どうやって有効だと検証した13

Aという文字の知覚実験によって 適な点滅周期の調査を行った13

議論はある13

現在の試作機を組合せより高解像度にする必要がある13

次に読むべき論文は13

Kwon13 et13 al13 201513

FugaciousFilm13 Exploring13 Aen4ve13 Interac4on13 with13 Ephemeral13 Material13 (CHIrsquo15)Hyosun13 Kwon13 Shashank13 Jaiswal13 Steve13 Benford13 Sue13 Ann13 Seah13

13 Peter13 BenneC13 Boriana13 Koleva13 Holger13 Schnaumldelbach

201413109　久保勇貴 2（鬼コース）13

どんなもの13

膜を押す引く飛び出ることができる新しい石鹸膜インタフェースの提案13

先行研究と比べてどこがすごい13

徐々に消えるインタフェースは高い注意を有するインタラクションを提供するという点を示したこと13

技術や手法のキモはどこ13

水グリセリンを201の対比で混ぜることでldquopoprdquoがきれいになるようにしかつ膜の耐久性を向上させた13

どうやって有効だと検証した13

３目並べを用いた被験者実験を実施13 ユーザは膜を割ると負け膜を自分のマスにするにはタッチ押す引くの書かれた通りの操作を行う13

議論はある13

ユーザに精密な動作を要求することはとりわけ注意を払うことを誘発する13

次に読むべき論文は13

Wetzstein13 et13 al13 201213

Tensor13 Displays13 Compressive13 Light13 Field13 Synthesis13 using13 Mul4layer13 Displays13 with13 Direc4onal13 Backligh4ng(SIGGRAPHrsquo12)

Gordon13 Wetzstein13 Douglas13 Lanman13 MaChew13 Hirsch13 Ramesh13 Raskar

201413109　久保勇貴 2（鬼コース）13

どんなもの13

視点によって異なる立体映像を見ることができる複数の層からなるディスプレイ13

先行研究と比べてどこがすごい13

既存の手法を合成したcomputa(onal13 displaysというディスプレイの新しいフレームワークを提案した13

技術や手法のキモはどこ13

時分割で視差マスクを表示することでユーザの視線ごとに立体像を表現する13

どうやって有効だと検証した13

通常のディスプレイ３層LCDLCD及び指向性バックライトの例による比較13 13

議論はある13

波紋を含むこと色チャンネルが悪影響を与える相互反射不均一などの問題が見られた13

次に読むべき論文は13

Matoba13 et13 al13 1213

SplashDisplay(VRICrsquo12)Yasuo Matoba Taro Tokui Ryo Sato Tochiki Sato Hideki Koike

201413109　久保勇貴 2（鬼コース）13

どんなもの13

パーティクルにCGを投射しパーティクルがテーブル上に投げられると爆発しパーティクルが噴きあがる13

先行研究と比べてどこがすごい13

ビーズがミリメートルからメートル単位までZ軸方向について空中で奥行きを表現する13

技術や手法のキモはどこ13

スピーカによって風力が発生させビーズを舞い上げる点13

どうやって有効だと検証した13

ビーズを投げると花火が打ちあがっているかのようなアプリケーション例を示した13

議論はある13

高いレベルの表現及び幅広い入力範囲を提供できた13

次に読むべき論文は13

Kim13 et13 al13 1413

MARIO13 Mid-shy‐air13 Augmented13 Reality13 Interac4on13 with13 Objects13 (ECrsquo14)Hanyuool13 Kim13 13 Issei13 Takahashi13 Hiroki13 Yamamoto13 Satoshi13 Maekawa13 Takeshi13 Naemura

201413109　久保勇貴 2（鬼コース）13

どんなもの13

350times300times250のテーブル上のスペースにおいて自由に動かせる空中像を造りだすことができる13

先行研究と比べてどこがすごい13

凹面鏡や凹レンズのように曲面でないため画像の歪曲が発生しない13

技術や手法のキモはどこ13

Aerial13 Imaging13 Plate(AIP)を用いた空中像の生成及びそのためのディスプレイ移動装置13

どうやって有効だと検証した13

左右からの視差の考慮及び奥行き表現時の画像提示視野角の検証などを行った13 13

議論はある13

投影しているひよこを叩いたり払いのけたりするような動作がデモ中見られた13

次に読むべき論文は13

Tactile Feedback on Flat Surfaces for the Visually Impaired13Ali Israr Olivier Bau Seung-Chan Kim Ivan Poupyrev13

どのようなものか 視覚障害者のための触覚を用いた視覚代用デバイス 先行研究と比べてどこがすごいか 道案内をしてくれる機械などはあるが日用品の場所を教えたり探すのを手伝ってくれるデバイスはない 技術や手法のキモ タッチパネルとカメラを搭載したデバイス 触覚を与える技術はTeslaTouchを利用 色を基準にオブジェクトの位置を認識 有用性の確認 視覚障害者二人に対して実験このデバイスを使

わなくても各自の方法で物を見つけられるが間違えることが多いこのデバイスを使用することで間違えることなく正確に物の位置を特定できた 課題 一つの色でしか判断できない 触感のあるなしでしか情報を伝えられない 関連論文 TeslaTouch [Bau et al 2010]

20150522 橋爪智 2鬼

Fingernail-Mounted Display of Attraction Force and Texture13Masataka Niwa Tomoko Nozaki Taro Maeda and Hideyuki And13

どのようなものか 指先に取り付けて触感と力を両方表現できるデバイス 先行研究と比べてどこがすごいか 触感と引力をそれぞれ表現するデバイスはあるが両方を一つのデバイスで表現した例は少ない 引力は自由な方向に付加することができる 技術や手法のキモ 偏心に重さを付けた円盤を4枚使用する 5-9Hz 引力　100-200Hz 触感 それぞれの円盤の位相や回転数を調整することで

触感と力 を表現する 4つのモータを使いそれぞれの円盤を独立して制御する 有用性の確認 4人の男性に対して実験80以上の精度で認識できた 関連論文 The nail-mounted attraction forcebump display [Nozaki et al 2008]

20150522 橋爪智 2 鬼

Gilded gait reshaping the urban experience with augmented footsteps13Yuichiro Takeuchi13

どのようなものか 靴に装着し地面の触感をコントロールするデバイス 先行研究と比べてどこがすごいか 単独で動作しなかったり特定の環境のみでしか動作しなかったりするrarr靴単体で動作環境に依存しない 技術や手法のキモ 6個の振動パネルを取り付けゲルでカバー app modulesを取り替えることができ様々な機能を付加できる（GPSsound) 4種類の地面を再現

bull  Hard Ground 振動させない bull  Soft Ground すべてのパネルを振動 bull  Bumpy Ground ジグザグに振動 bull  Godzilla 全てのパネルを振動何回か繰り返す 課題 モーターを使っているため波形をプログラミングできないrarr圧電素子を使用する 関連論文 Haptic Shoes [Fu et al 2010]

20150522 橋爪智 2鬼

ExoInterfaces novel exosceleton haptic interfaces for virtual reality augmented sport and rehabilitation

Dzmitry Tsetserukou Katsunari Sato Susumu Tachi13

どのようなものか 腕に装着し物理的なinteractionを可能にするデバイス 先行研究と比べてどこがすごいか Exoskeleton 力を増幅するためだが重たく危険なこともある String-based wireが視界をまたぐ動きに制限がある rarr腕の動きに制限を与えない安全 技術や手法のキモ 「FlexTorque」人間の筋肉の構造を再現するベルトとモーターを使用する肩の近くに装着することで

腕に負担がかかりにくい 触覚feedback弱いトルク 運動を支援強いトルク 課題 物理的な接触を表現するゲームやスポーツにより没頭させるリハビリのサポートをする視覚障害者の支援（ものの場所を教える） 関連論文 FlexTorque [Dzmitry et al 2010]

20150522 橋爪智 2 鬼

Perception of Ultrasonic Haptic Feedback on the Hand Localisation and Apparent Motion13

Graham Wilson Tom Carter Sriram Subramanian Stephen Brewster13

どのようなものか 超音波を用いた触覚フィードバック有効性の検討を行う 先行研究と比べてどこがすごいか 超音波触覚フィードバックは比較的新しく研究や操作方法に関する知識が少ない 腕を自由に動かすことができ小さいものは着用可能 技術や手法のキモ 88のアレイ状に超音波発生器を設置

有効性の確認 bull  局所的な触感 　　　25箇所に分割しそれぞれに超音波を当てる 　　　触感を感じた989 　　　場所の誤差85mm bull  手のひらを動く触感 上下左右に動く 　　　動いてると感じた629

20150522 橋爪智 2 鬼

Friction Measurements on a Large Area TPaD13Nicholas D Marchuk J Edward Colgate Michael A Peshkin13

どのようなものか 超音波の振動により触感を与える 先行研究と比べてどこがすごいか ガラス板を使うので透明後ろにディスプレイを配置可能 技術や手法のキモ 「Squeeze Film Effect（スクイズ膜効果）」 ガラス板に取り付けた圧電素子の円盤に高周波信号

をかける 実験 振動しない部分＝摩擦が発生しない部分が発生周波数により場所が変わる rarr摩擦を大きさをかける力の大きさから計測 rarr指の場所に合わせて複数の周波数を使い分ける 関連論文 T-PaD[Winfield et al 2007]

20150522 橋爪智 2 鬼

STIMTAC a Tactile Input Device with Programmable Friction13Michel Amberg Freacutedeacuteric Giraud Betty Semail Paolo Olivo Geacutery Casiez Nicolas Roussel13

どのようなものか 触感を与えられるタッチデバイス 先行研究と比べてどこがすごいか LATPaD サイズ大きいノイズが大きい TeslaTouch 高い電圧付加が必要GNDに接続しなければいけない

技術や手法のキモ 「Squeeze Film Effect」超音波を用いて振動を与える 圧電性セラミックを電極にコーディング 指トラッキングは力センサを用いる 活用法 マウスキーボード絵を描く 関連論文 LATPaD[Vincent et al 2011] TeslaTouch[Bau et al 2010]

20150522 橋爪智 2 鬼

Surround Haptics Tactile Feedback for Immersive Gaming Experiences Ali Israr Seung-Chan Kim Ivan Poupyrev Jan Stec13

どのようなものか ゲームに合わせて高解像度の触覚フィードバックをユーザーに与える椅子 先行研究と比べてどこがすごいか 荒く配置した安価な振動アクチュエータで高解像度の触覚フィードバックを行える 一点の振動連続した動き範囲の振動などを再現

技術や手法のキモ 仮想的な振動アクチュエータをいくつかの振動アクチュエータを使って作り出す physical-physicalphysical-virtualvirtual-virtual ゲームにHaptics Engineを導入しHaptics APIを用いてHaptic Displayを操作する 関連論文 Exploring Surround Haptics Displays[Israr et al 2010]

20150522 橋爪智 2 鬼

Audio-Haptic Feedback in Mobile Phones Angela Chang Conor OrsquoSullivan13

どのようなものか haptics機能のついてない携帯電話にオーディオ機能を利用した触覚フィードバックを追加する 先行研究と比べてどこがすごいか 簡単に作れてnon-haptic mobile devicesでも大丈夫 技術や手法のキモ 「MultiFunction Transducer(MFT)」 スピーカーから音と信号の両方を出力できる

bull  Haptic Inheritance 　　音を2つの周波数帯に分ける bull  Synthesis and Matching 　　低周波数帯(20-300Hz)を使い触感を伝える 有効性の検討 42人の人を対象に実験を行う83の人が触感を感じた

20150522 橋爪智 2 鬼

Resolution of Sleep Deprivation Problems using ZZZoo Pillows13Shunsuke Yanaka Motoki Ishida13

どのようなものか 近年不眠症の人が多い rarr誰かと接していると安心し睡眠に導入しやすくなる rarrまるで添い寝をしているようなリアルな抱きまくらを使う 技術や手法のキモ breathing sensation 風船を使って人の呼吸を再現肺の形の風船弱く長い呼吸をする

heating お湯を使って人の体温を再現45 有効性の確認 84人の人が実験 呼吸が睡眠を誘ったかrarr61 体温が睡眠を誘ったかrarr85 関連論文 The Impact of Sleep Disorders on Social Life[Komada et al 2007]

20150522 橋爪智 2 鬼

まとめ13超音波 モーター 風

20150522 橋爪智 2 鬼

コイル 電気刺激 Electrovibration

振動 音 お湯

なかの

Temporally Consistent Disparity and Optical Flow via Efficient Spatio-temporal Filtering1

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示した

議論論はあるか

時間的に一定の視差を算出する手法静止画ステレオよりも精度度が良良いことを示す従来よりも推定精度度が良良いオプティカルフローも算出する

一枚の静止画に対するフィルタリング[1]をステレオ動画に拡張している

ケンブリッジのステレオ動画のデータセットを利利用 実写動画に対する比較も行行うノイズ耐性も検証する

フィルタベースとエネルギーベースの関係性を良良り理理解することで推定精度度を上げる

実装が簡単でリアルタイム視差推定が可能

Fast Cost-Volume Filtering for Visual Correspondence and Beyond [Rhemann C Hosni A Bleyer M Rother C Gelautz M CVPR2011] Real-time Spatiotemporal Stereo Matching Using the Dual-Cross-Bilateral Grid [Richardt C Orr D Davies I Criminisi A Dodgson NA ECCV2010] Secrets of optical flow estimation and their principles [Sun D Roth S Black MJ 2010] Motion estimation with non-local total variation regularization [Werlberger M Pock T Bischof H CVPR2010] Temporally Consistent Disparity Maps from Uncalibrated Stereo Videos [Bleyer M Gelatuz M ISPA2011]

なかの

SymStereo Matching using Induced Symmetry (2014)2

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示した

議論論はあるか

画像の対称性を用いてステレオマッチングを行行う 左右の画像を反転させて重ね合わせることで対称性を測る

絵的な類似の代わりに対称性を使う今まで対称性を用いる手法はなく新規性が大きい

三つのSymmetry-baseの手法で精度度を検証従来手法よりも精度度が向上しているMiddlebury Oxford Corridorfountain-P11のデータセット使用

ステレオの問題である不不連続な箇所オクルージョン部分は未解決である演算時間はやや増加

1-Dラインのコストを考える今までは撮像面に対して平行行な平面でデプスを考えていたが垂直な平面を考える

BT[Birchfield and Tomasi 1998] Census transform[Zabih and Woodfill 1994] Log N[Kovesi 1997] radio-metoric differences[Hirschmuller Scharstein 2009]

なかの

Camouflaging an Object from Many Viewpoints3

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

多くの視点から三次元の物体をカモフラージュするカモフラージュによってオクルージョン部分の不不連続がどの程度度生じるか他の視点ではどれほどになるかの検証

MRF（Markov Random Fields）ベース

新しい三次元物体のカモフラージュモデルを構築 37種類のデータセットを作る

箱形の物体に対してカモフラージュ処理理を施し 結果を評価する

オクルージョン不不連続テクスチャの歪みが問題 照明や画像の貼りつけに制限あり

なかの

Aliasing Detection and Reduction in Plenoptic Imaging4

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

カメラアレイ撮影の角度度のエイリアシングを除去するエイリアシングの探索索と打ち消しを行行う

周波数領領域ではなく空間領領域で探索索を行行う

先行行研究がフィルタデモザイキング再パラメータ調整などの前処理理でエイリアシング除去を行行うのに対しエイリアシング探索索後にリフォーカスの段階でエイリアシングを取り除く

8times8の平行行カメラアレイで検証するカメラ間の 基線長は70mm

今回は基線長が長いデータセットを使った 次はLytroなどのマイクロレンズアレイで検証する

Globally consistent multi-label assignment on the ray space of 4d light fields [S Wanner C Straehle B Goldluecke CVPR2013] Lineassisted light field triangulation and stereo matching [Z Yu X Guo H Lin A Lumsdaine J Yu ICCV 2013]

なかの

Globally Consistent Multi-Label Assignment on the Ray Space of 4D Light Fields5

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

四次元ライトフィールドの光線情報において マルチラベルの領領域分割を行行う

深度度情報光線情報を用いて領領域分割することで 二次元（空間）情報だけでは分割が難しかった 領領域を分割可能とする

The light field camera Extended depth of field aliasing and superresolution [T Bishop P Favaro IEEE Transactions on Pattern Analysis and Machine Intelligence 2012]

なかの

Line Assisted Light Field Triangulation and Stereo Matching6

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

光線情報を利利用してステレオマッチングの精度度を 向上させる手法三角測量量の誤差を減らす

Light Field Stereo Matchingとかいう手法 グラフ構造を作成

Variational light field analysis for disparity estimation and super-resolution [S Wanner and B Goldlumluecke 2013]

なかの

Adaptive stereo similarity fusion using confidence measures 20157

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

ステレオマッチングの新しい方式fusion weightsを提案複数の手法を組み合わせてコスト計算を行行う手法付録に既存手法のコスト関数一覧あり

パラメータに依存する手法を用いないことで高速化を図っている

一つのアルゴリズムでは異異なる特性を持つ領領域全てに対して適切切なマッチングはできない複数を組み合わせることでそれを補う13種と多い

middleburyとKITTIのデータセットで評価

一枚あたり03sと高速だが001sとより高速なアルゴリズムが存在する

Segment-based stereo matching using belief propagation and a self-adapting dissimilarity measure [A Klaus M Sormann K Karner ICPR2006] On building an accurate stereo matching system on graphics hardware [X Mei X Sun M Zhou S Jiao H Wang X Zhang ICCV2011] Similarity measures for depth estimation [K Wegner O Stankiewicz 3DTV-CON2009] On accurate dense stereo-matching using a local adaptive multi-cost approach [C Stentoumis L Grammatikopoulos I Kalisperakis G Karras ISPRS2014] A quantitative evaluation of confidence measures for stereo vision [X Hu P Mordohai PAMI2012]

なかの

SIMILARITY MEASURE FOR DEPTH ESTIMATIOM 20098

どんなもの

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

4種類の視差推定アルゴリズムを組み合わせている 類似度度の選択性の解析

Belief Propagationの枠組みを用いる

名古屋大学の多視点データベースを利利用

HHI Test Material for 3D Video [I Feldmann M Muller F Zilly R Tanger A SmolicP Kauff T Wiegand 2008] Multiview Video Test Sequence and Camera Parameters [Yo-Sung Ho Eun-Kyung Lee and Cheon Lee 2008] 1D Parallel Test Sequences for MPEG-FTV [M Tanimoto T Fujii N Fukushima 2008] Non-parametric Local Transforms for Computing Visual Correspondence [R Zabih J Woodfill 1994]

なかの

Spatiotemporal Stereo via Spatiotemporal Quadric Element (Stequel) Matching9

どんなもの

技術や手法のキモはどこ

新しいマッチング手法を提案動き考慮することなく時間情報を取り込むことができる 時間方向のエピ線を考える

オプティカルフロー推定は3D境界や低テクスチャで弱いが提案手法はロバストである

なかの

Depth Video Enhancement Based on Weighted Mode Filtering10

どんなもの

議論論はある

ノイズを含んだ低解像度度のデプスマップの質を高める手法（超解像度度とデノイズ）時間方向も使用簡単なオプティカルフローを計算し利利用する

非反復復アルゴリズムのためGPUに載せやすく高速化が考えられる

なかの

Fast Bilateral-Space Stereo for Synthetic Defocus11

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

議論論はある

次に読むべき論論文は

高速な自由焦点ぼけ画像の作成

Bilateral-spaceを提案

従来研究よりも10から100倍速くぼけ具合の精度度も良良い

ぼけを作成するというアプリケーションに利利用する距離離という面では提案手法が有益であるが実測的な距離離という面での精度度は悪い背景と前景が同じ色で近くにある場合同一ととらえてしまう

Efficient high-resolution stereo matching using local plane sweeps [S N Sinha D Scharstein and R SzeliskiCVPR2014] Bilateral filtering-based optical flow estimation with occlusion detection [J Xiao H Cheng H Sawhney C Rao and M IsnardiECCV2006] Efficient nonlocal regularization for optical flow [P Krumlahenbumluhl and V KoltunECCV2012] Real-time spatiotemporal stereo matching using the dual-cross-bilateral grid [C Richardt D Orr I Davies A Criminisi and N A DodgsonECCV2010]

どうやって有効性を示した視差推定の精度度はmiddleburyKITTI

なかの

Robust Spatiotemporal Stereo for Dynamic Scenes12

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

ステレオ動画のフレーム間情報を取り入れることでノイズ耐性を向上させるまた動きの大きなものも考える

時間を含めたウインドウの提案自動的にそのような変化に対応する画像領領域を検出する

従来の時空間ステレオと比べ大きな動きによる急激な視差の時間変化に対して頑健である

なかの

Spacetime Stereo A Unifying Framework for Depth from Triangulation13

どんなもの

先行行研究と比べてどこがすごい

space time stereoを提案ステレオカメラの視差推定でも構造光を用いた視差推定でも利利用可能 動的なシーンでの利利用も可能

フレームごとマッチングを取っていたが複数フレームでのマッチングを可能とした

なかの

Learning to Select and Order Vacation Photographs (Disney research)14

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示したあまりにもたくさん撮影した写真たちから自動的にフォトアルバムを作成する研究

複雑な視覚での区別を試みたのはこの論論文が初

５つの異異なるトピックから63の個人的な写真コレクションのデータセットを利利用し定量量的に評価する

写真間の差別かを定義する顔全体の絵何が写っているか写っていないかを評価する

Jointly aligning and segmenting multiple web photo streams for the inference of collective photo storylines [G Kim and E P Xing CVPR2013] Photo sequencing [T Basha Y Moses and S Avidan CVPR2012]

なかの

A Taxonomy and Evaluation of Dense Two-Frame Stereo Correspondence Algorithms15

どんなもの

どうやって有効性を示した

次に読むべき論論文は

ステレオマッチングに関する分類を行行う 新たなデータセットを作成する

というよりも他の手法が有効性を示すことができるようにデータセットを作成した 今ではmiddleburyのデータセットと言えばステレオ業界では超有名

High-resolution stereo datasets with subpixel-accurate ground truth

なかの

Discriminability Limits in Spatio-Temporal Stereo Block Matching1

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

spatio-temporal disparity estimationの根本的な前提の正当性を解析しマッチング処理理の際に動きが助けとなる程度度を決定する

時空間マッチングのエラーを分析し誤りの原因を確率率率で導出する（フレーム数動きの分散画像特徴ノイズの関数）

[34243334]は時空間マッチングの利利点を指摘していたが本論論文はマッチング精度度の向上のために動きを用いる手法の程度度や性質を研究する

6つのステレオビデオを用いて検証を行行った

Spacetime stereo Shape recovery for dynamic scenes [L Zhang B Curless and S Seitz CVPR2003] Spatiotemporal stereo and scene flow via stequel matching [M Sizintsev and R Wildes PAMI2012] Temporally consistent disparity and optical flow via efficient spatio-temporal filtering [A Hosni C Rhemann M Bleyer and M Gelautz PRCAIVT2012] Spacetime stereo A unifying framework for depth from triangulation [PAMI2005] Dynamic depth recovery from multiple synchronized video streams [H Tao H Sawhney and R Kumar CVPR2001] Spatiotemporal descriptor for wide-baseline stereo reconstruction of non-rigid and ambiguous scenes [ECCV2003]

なかの

Depth-Based Patch Scaling for Content-Aware Stereo Image Completion2

どんなもの

どうやって有効性を示した

ステレオでデプスを取り物体の三次元情報を使ってインペインティングを行行う

bookのデータセット背景が繰り返しパターンが多いものを使っている

なかの

Fast Semi-dense Surface Reconstruction from Stereoscopic Video in Laparoscopic Surgery3

どんなもの

手法の流流れ

次に読むべき論論文は

腹腔内手術の際にステレオビデオから高速に物体の三次元再構成を行行う研究

Evaluation of stereo matching costs on images with radiometric differences [Hirschmueller H Scharstein D PAMI2008]

スコープカメラから画像取得GPUで演算する 視差を算出しフィルタにかける距離離に変換 点群を再びフィルタにかけて三次元再構成

なかの

3D Reconstruction from Accidental Motion4

どんなもの

技術や手法のキモはどこ

議論論はある

数秒のビデオ（単眼）から三次元再構成を行行う 手ぶれなどの動きから再構成が可能で特定の動きや機材を必要としない

短い基線長でも再構成が可能（3mmの基線長）

基線長が短いため背景の精度度が低くなる リフォーカス画像作成には十分 練習では上手く動作したが検証がまだ必要

なかの

Panoramic Video from Unstructured Camera Arrays5

どんなもの

技術や手法のキモはどこ

議論論はある

複数のカメラを用いたパノラマ撮影を行行う その際に不不自然さがないような動画を作成する

不不自然さを感じる感覚特性を提示しそれにのっとって対策を講じている

一つのカメラの解像度度と品質を向上させるよりも複数台のカメラを組み合わせることがはるかに簡単で有益である専門家でなくてもGoProのカメラセットを組み合わせることは容易易

カメラの配置は厳密に決められていない完璧な時間同期やローリングシャッターの不不足のような実撮影での問題もクリアしている

先行行研究と比べてどこがすごい

どうやって有効性を示した左のシステムは14台のカメラを使用 右のシステムはGoProを5台使用

Disney 201558

なかの

Floating Scale Surface Reconstruction6

どんなもの

技術や手法のキモはどこ

流流動的にスケールを変えられる三次元再構成手法

サンプル規模に依存するパラメータがない rarrどのスケールのサンプルにも対応できる

siggraph2014

なかの

A Super Resolution Reconstruction Scheme for Mixed Spatio-Temporal Stereo Video7

どんなもの

技術や手法のキモはどこ

ビデオ超解像アルゴリズム

二台のカメラを使用 一台は低解像度度で高速一台は高解像度度で低速

HHI 3DV ftp siteのBookarrivalとbeergadenを使用どうやって有効性を示した

なかの

What Is a Good Day for Outdoor Photometric Stereo8

どんなもの

先行行研究と比べてどこがすごい

議論論はある

次に読むべき論論文は

屋外における照度度差があるステレオの研究 屋外でステレオを行行う際に有利利or不不利利な日照条件を明らかにする

点光源を用いた研究は行行われていたが屋外での研究はされていなかった

晴れより曇りの方が精度度が良良い雲があるから特徴量量を取りやすい雑音を白色ガウスモデルを想定 季節ごとのデータセットを利利用してみても良良い

Time-lapse photometric stereo and applications [F Shen K Sunkavalli N Bonneel S Rusinkiewicz H Pfisterand X Tong2014] Outdoor photometric stereo [L-F Yu S-K Yeung Y-W Tai D Terzopoulos and T FChan ICCP2013]

どうやって有効性を示した屋外の照明に関するHDR環境マップのデータベースを利利用

Disney 2015424

なかの

COLORBRUSH ANIMATED DIFFUSION FOR INTUITIVE COLORIZATION SIMULATING WATER PAINTING 9

どんなものアニメを水彩画で描いたように変換する 水彩画を描くには経験が必要であるがそれを作成するアルゴリズムを考案絵具が水によりどうにじむかシュミレーションしている

Disney 20141027 ICIP2014

次に読むべき論論文はGabor-space geodesic active contoursrdquo In Algebraic Frames for the Perception-Action Cycle [C Sagiv NA Sochen and YY Zeevi 2000] Practical temporal consistency for image-based graphics applications [M Lang O Wang T Aydin A Smolic and M Gross SIGGRAPH2012] Computer-Generated Watercolor [CJ Curtis SE Anderson JE Seims KW Fleischer and DH Salesin SIGGRAPH1997]

なかの

From Sound to Sight Using Audio Processing to enable Visible Light Communication 10

どんなもの光に情報を載せる技術プロジェクトページがあって光関係の研究が8個載っている

httpwwwdisneyresearchcomprojectvisible-light-communication

ビデオのURL httpwwwdisneyresearchcomwpcontentuploadsPub_InvisibleLightCommunication_Siggraph14_videomp4

• 201211106_KeisukeKawahara
• 201311421_KeitaKanai_02
• 201313095_AkiraIshii_02
• 201413109_YuukiKubo_02
• 201513110_SatoshiHashizume_02
• 鬼輪講マラソン③_1
• 鬼輪講マラソン③_2

2 201313095

SVM

106 Per-User

863 13

712

13

bull  SatoMPoupyrevIandHarrisonCToucheenhancingtouchinteracEononhumansscreensliquidsandeverydayobjectsInCHIrsquo12483ndash492

bull  TimCollinsAcEveacousEctouchinterfaceElectronicsLe]ersVol45No20pp1055ndash1056242009

TouchampampampAcEvateampAddingampInteracEvityamptoampExisEngampObjectsampusingampAcEveampAcousEcampSensingamp(UISTrsquo13)

MakotoOnoBuntarouShizukiJiroTanaka

h]pswwwyoutubecomwatchv=XgxXi6w8IQc

2 201313095

13

13

SVM

on-body

per-user 5 967 4987

bull  HarrisonCBenkoHWilsonAOmniTouchwearablemulEtouchinteracEoneverywhereinUIST11441-450

bull  MatsushitaNandRekimotoJHoloWalldesigningafingerhandbodyandobjectsensiEvewallUIST97209-210

ToucheampEnhancingampTouchampInteracEonamponampHumansampScreensampLiquidsampandampEverydayampObjectsamp(CHIrsquo12)

MunehikoSatoIvanPoupyrevChrisHarrison

h]pswwwyoutubecomwatchv=E4tYpXVTjxA

2 201313095

SVM

9 9TapSense 4

95 99

TapSenseDelete

bull  HarrisonCTanDandMorrisDSkinputappropriat-ingthebodyasaninputsurfaceInProcCHI10453-462

TapSenseampEnhancingampFingerampInteracEonamponampTouchampSurfacesamp(UISTrsquo11)

ChrisHarrisonJuliaSchwarzSco]EHudson

h]pswwwyoutubecomwatchv=-oN96cucBr4

2 201313095

13

13

22 SVM

13 FingersWholeArmForearm 876 Fingers877 WholeArm 955

883 Forearm 815

833

GUI

bull  SaponasTSTanDSMorrisDandBalakrishnanRDemonstraEngthefeasibilityofusingforearmelectromyographyformuscle-computerinterfacesInProcCHIrsquo09515-24

SkinputampAppropriaEngamptheampBodyampasampanampInputampSurfaceamp(CHIrsquo10)

ChrisHarrisonDesneyTanDanMorris

h]pswwwyoutubecomwatchv=g3XPUdW9Ryg

2 201313095

Fiberio

10 330 150

148 2

Fiberio

bull  MatsushitaNandRekimotoJHoloWallDesigningaFingerHandBodyObjectSensiEveWallProcUIST97209ndash210

FiberioampAampTouchscreenampthatampSensesampFingerprintsamp(UISTrsquo13)

ChrisEanHolzPatrickBaudisch

h]pswwwyoutubecomwatchv=p1a5yLzuTqA

2 201313095

3D

3D

bull  GeigerMVollertsenFTheMechanismsofLaserFormingCIRPANNALSlsquo93421301-304

bull  WillisKDDXuCWuJKLevinGGrossMDInteracEvefabricaEonnewinterfacesfordigitalfabricaEonProcTEI11pp69-72

LaserOrigamiampLaserCugngamp3DampObjectsamp(CHIrsquo13)

StefanieMuellerBasEanKruckPatrickBaudisch

h]pswwwyoutubecomwatchv=arjRtCjI9AQ

2 201313095

bend

bull  HyunyoungSongFranccediloisGuimbreEegravereChangHuHodLipsonModelCraycapturingfreehandannotaEonsandeditsonphysical3DmodelsProceedingsofthe19thannualACMsymposiumonUserinterfacesoywareandtechnologyOctober15-182006MontreuxSwitzerland

InteracEveampConstrucEonampInteracEveampFabricaEonampofampFuncEonalampMechanicalampDevicesamp(UISTrsquo12)

StefanieMuellerPedroLopesPatrickBaudisch

h]pdlacmorgcitaEoncfmid=23801162380191

2 201313095

3D

3D

bull  SavageVSchmidtRGrossmanTFitzmauriceGandHartmannBAseriesoftubesAddinginteracEvityto3dprintsusinginternalpipesInProcUIST14(2014)

3DampPrinEngampPneumaEcampDeviceampControlsampwithampVariableampAcEvaEonampForceampCapabiliEesamp(CHIrsquo15)amp

MarynelVazquezEricBrockmeyerRutaDesaiChrisHarrisonSco]EHudson

h]pswwwyoutubecomwatchv=-4gFYvhkz0Y

2 201313095

OpenFab 3D

fablets

3 3

bull  CHENDMATUSIKWSITTHI-AMORNPDIDYKPANDLEVIND2013Spec2FabAreducer-tunermodelfortranslat-ingspecificaEonsto3DprintsACMTransGraph324(July)

OpenFabampAampProgrammableampPipelineampforampMulEMaterialampFabricaEonamp(SIGGRAPHrsquo13)

KirilVidimcˇeSzu-PoWangJonathanRagan-KelleyWojciechMatusik

2 201313095

3D

3D

3D

3D14 30 13 67

244

14

3D

bull  MuellerSKruckBBaudischPLaserOrigamiLaser-Cunng3DObjectsProcCHIrsquo132585-2592

faBrickaEonampFastamp3DampPrinEngampofampFuncEonalampObjectsampbyampIntegraEngampConstrucEonampKitampBuildingampBlocksamp(CHIrsquo14)amp

StefanieMuellerTobiasMohrKersEnGuentherJohannesFrohnhofenPatrickBaudisch

h]pswwwyoutubecomwatchv=BlO6YRcLJjE

Touching13 the13 Void13 Direct-shy‐Touch13 Interac4on13 for13 Intangible13 Displays(CHIrsquo10)Li-Wei Chan Hui-Shan Kao Mike Y Chen Ming-Sui Jane Yi-Ping Hung

201413109　久保勇貴 2（鬼コース）13

どんなもの13

空中像へのタッチのエラーに関する調査及び影や音のフィードバックを付与することによるパーフォーマンス向上を示した研究13

先行研究と比べてどこがすごい13

平面画像をタッチする際の奥行きに関するエラーの正確な取得を初めて検証13

技術や手法のキモはどこ13

２つの赤外線カメラを用いた正確なタッチの検出13

どうやって有効だと検証した13

タッチ時の奥行きの正確さに関する被験者実験を実施またタッチする際に影や音を付けた際の反応時間を被験者実験で検証13

議論はある13

ユーザは慣れるまで影や音のフィードバックが必要だがそのあとは必要なくなる13

次に読むべき論文は13

MirageTable13 （CHI12） 13

MirageTable13 Freehand13 Interac4on13 on13 a13 Projected13 13 Augmented13 Reality13 Tabletop(CHIrsquo12)

Hrvoje Benko Ricardo Jota Andrew D Wilson

201413109　久保勇貴 2（鬼コース）13

どんなもの13

テーブル上においてバーチャルな物体をリアルタイムで現実でものを動かすことと同様な動作に操作可能なシステム13

先行研究と比べてどこがすごい13

現実の物体をリアルタイムで画面に取りこむことができ質の高いフリーハンドインタラクションを実現した点13

技術や手法のキモはどこ13

色深度前景頭追跡プロキシパーティクルを駆使したリアルタイムメッシュの作成13

どうやって有効だと検証した13

凹凸など例外な表面に対しての投影した際の画像の質についての評価実験また仮想物体の奥行き知覚に関する実験も行った13

議論はある13

前面のみしかキャプチャしていないため差が生じる握っている場所の再現は未解決な課題である13

次に読むべき論文は13

Hirsch13 et13 al13 201413 (SIGGRAPHrsquo14)13

A13 Compressive13 Light13 Field13 Projec4on13 System13 (SIGGRAPHrsquo14)MaChew13 Hirsch13 Gordon13 Wetzstein13 Ramesh13 Raskar

201413109　久保勇貴 2（鬼コース）13

どんなもの13

通常の3Dディスプレイに比べて解像度輝度コントラストを改善した圧縮ライトフィードディスプレイ13

先行研究と比べてどこがすごい13

多視点立体視を複数でなく１台のプロジェクタを用いて実現した13

技術や手法のキモはどこ13

受動的スクリーンと高速切り替えプロジェクタによる新しい光学設計13

どうやって有効だと検証した13

4つのシーン例を投影したものを示したアニメーションの3D効果について観察を行った13

議論はある13

光路長を広げると観察できる画質が大幅に制限され他のライトフィードビューと混線が生じる13

次に読むべき論文は13

Butler13 et13 al13 201113

Vermeer13 Direct13 Interac4on13 with13 a13 360deg13 Viewable13 3D13 Display(UISTrsquo11) Alex Butler Otmar Hilliges Shahram Izadi Steve Hodges David Molyneaux David Kim

201413109　久保勇貴 2（鬼コース）13

どんなもの13

映し出された3Dオブジェクトとインタラクションを行えるシステム13

先行研究と比べてどこがすごい13

ディスプレイ内の画像とのインタラクションを提案ボリュームディスプレイを支援する新しいセンシング法の提案13

技術や手法のキモはどこ13

パラボラ鏡に取り付けた赤外線カメラセンサによる指先検出13

どうやって有効だと検証した13

アプリケーション例を示した13

議論はある13

パラボラ鏡の大きさよりもディスプレイサイズが小さくなってしまう13

次に読むべき論文は13

Hirsch13 et13 al13 201213

8D13 Interac4ng13 with13 a13 Relightable13 Glasses-shy‐Free13 3D13 Display(CHIrsquo12)Li-Wei Chan Hui-Shan Kao Mike Y Chen Ming-Sui Jane Yi-Ping Hung

201413109　久保勇貴 2（鬼コース）13

どんなもの13

ライトフィードによる入力とライトフィールドによる表示を行うリアルタイム8Dディスプレイ13

先行研究と比べてどこがすごい13

リアルタイムでの8Dディスプレイの実現（先行研究は7fps）13

技術や手法のキモはどこ13

GPUにおけるレンダリング処理13

どうやって有効だと検証した13

MRIデータを用いたディスプレイのデモを示した13

議論はある13

現在はグレースケールの入力のみだがカラーでの入力できればより強力になるだろう13

次に読むべき論文は13

Sahoo13 et13 al13 201513

Control13 of13 Non-shy‐Solid13 Diffusers13 by13 Electrosta4c13 Charging13 (CHIrsquo15) Deepak Ranjan Sahoo Diego Martinez Plasencia Sriram Subramanian

201413109　久保勇貴 2（鬼コース）13

どんなもの13

シャボン玉や霧などの非固体を電場による制御を試みた研究13

先行研究と比べてどこがすごい13

非固体の形や位置の制御法を提案した点13

技術や手法のキモはどこ13

[Intra13 et13 al13 11]中のldquowire-shy‐to-shy‐Cylinderdquoを用いたエアゾール粒子の帯電13

どうやって有効だと検証した13

霧及びシャボン玉によるディスプレイのアプリケーション例で実際に制御して見せた13

議論はある13

風による影響を本手法は打ち消すことができた13

次に読むべき論文は13

Barnum13 et13 al13 201013

A13 Mul4-shy‐Layered13 Display13 with13 Water13 Drops(SIGGRAPHrsquo10)Peter C Barnum Srinivasa G Narasimhan Takeo Kanade

201413109　久保勇貴 2（鬼コース）13

どんなもの13

複数層の落下水滴にプロジェクションマッピングを行いディスプレイとした研究13

先行研究と比べてどこがすごい13

水滴の制御を行うことで単一のプロジェクタによって複数層の映像投影を可能とした点13

技術や手法のキモはどこ13

[Ambravaneswaran13 et13 al13 2002]及び本研究における実験結果に基づく水滴生成13

どうやって有効だと検証した13

複数のディスプレイ例を示した13 例）顔の投影水槽シミュレータなど13

議論はある13

本当の3Dディスプレイにするにはより多くの水滴制御が必要13

次に読むべき論文は13

Lee13 et13 al13 200713

An13 Immaterial13 Depth-shy‐Fused13 3D13 Display(VRSTrsquo07)Cha Lee Stephen DiVerdi Tobias Humlollerer

201413109　久保勇貴 2（鬼コース）13

どんなもの13

２つのスクリーンを駆使し3Dディスプレイを実現するdepth-shy‐fused13 3D(DFD)に関する評価を行いその結果よりディスプレイを提案した研究13

先行研究と比べてどこがすごい13

DFDが任意のスクリーン設定及び見る位置に対して有効であることを示した13

技術や手法のキモはどこ13

６通りのスクリーン組合せから２つを抽出し見え方の違いを検証した点13

どうやって有効だと検証した13

６通りのスクリーンについて立体的に見えるか被験者実験を実施その後それぞれに有意差がみられるか調べた13

議論はある13

ステレオイメージを認めることができなかったユーザに対しても強い3D効果が見られた13

次に読むべき論文は13

Tokuda13 et13 al13 201013

Cloud13 Display13 (ACErsquo10)Yutaka Tokuda Yasuhiro Suzuki Kunihiro Nishimura Tomohiro Tanikawa Michitaka Hirose

201413109　久保勇貴 2（鬼コース）13

どんなもの13

煙の渦輪を用いた空間を埋めるディスプレイ13

先行研究と比べてどこがすごい13

制御可能な手法により高所へのパーティクルを運搬することに着目した点13

技術や手法のキモはどこ13

コンピュータによって制御が行われる空気砲アレイ13

どうやって有効だと検証した13

箱の中で実験を行い安定して渦輪をできるようにした実際にデモを行ったことを示した13

議論はある13

今の試作機をより早くリフレッシュ速度を高めることによりより濃く空間を埋められることを目指す13

次に読むべき論文は13

Sato13 et13 al13 200913

Par]cle13 Display13 System　(JVRC09)13 -shy‐13 A13 Large13 Scale13 Display13 for13 Public13 Space13 -shy‐

Munehiko13 Sato13 Yasuhiro13 Suzuki13 13 Atsushi13 Hiyama13 Tomohiro13 Tanikawa13 Michitaka13 Hirose

201413109　久保勇貴 2（鬼コース）13

どんなもの13

パーティクルディスプレイによる公共スペースのための大画面ディスプレイの提案13

先行研究と比べてどこがすごい13

公共スペースにおける要求と制限に基づいたシステムを提案した点13

技術や手法のキモはどこ13

実験に基づく表示画像のスクロール時間の制御13

どうやって有効だと検証した13

Aという文字の知覚実験によって 適な点滅周期の調査を行った13

議論はある13

現在の試作機を組合せより高解像度にする必要がある13

次に読むべき論文は13

Kwon13 et13 al13 201513

FugaciousFilm13 Exploring13 Aen4ve13 Interac4on13 with13 Ephemeral13 Material13 (CHIrsquo15)Hyosun13 Kwon13 Shashank13 Jaiswal13 Steve13 Benford13 Sue13 Ann13 Seah13

13 Peter13 BenneC13 Boriana13 Koleva13 Holger13 Schnaumldelbach

201413109　久保勇貴 2（鬼コース）13

どんなもの13

膜を押す引く飛び出ることができる新しい石鹸膜インタフェースの提案13

先行研究と比べてどこがすごい13

徐々に消えるインタフェースは高い注意を有するインタラクションを提供するという点を示したこと13

技術や手法のキモはどこ13

水グリセリンを201の対比で混ぜることでldquopoprdquoがきれいになるようにしかつ膜の耐久性を向上させた13

どうやって有効だと検証した13

３目並べを用いた被験者実験を実施13 ユーザは膜を割ると負け膜を自分のマスにするにはタッチ押す引くの書かれた通りの操作を行う13

議論はある13

ユーザに精密な動作を要求することはとりわけ注意を払うことを誘発する13

次に読むべき論文は13

Wetzstein13 et13 al13 201213

Tensor13 Displays13 Compressive13 Light13 Field13 Synthesis13 using13 Mul4layer13 Displays13 with13 Direc4onal13 Backligh4ng(SIGGRAPHrsquo12)

Gordon13 Wetzstein13 Douglas13 Lanman13 MaChew13 Hirsch13 Ramesh13 Raskar

201413109　久保勇貴 2（鬼コース）13

どんなもの13

視点によって異なる立体映像を見ることができる複数の層からなるディスプレイ13

先行研究と比べてどこがすごい13

既存の手法を合成したcomputa(onal13 displaysというディスプレイの新しいフレームワークを提案した13

技術や手法のキモはどこ13

時分割で視差マスクを表示することでユーザの視線ごとに立体像を表現する13

どうやって有効だと検証した13

通常のディスプレイ３層LCDLCD及び指向性バックライトの例による比較13 13

議論はある13

波紋を含むこと色チャンネルが悪影響を与える相互反射不均一などの問題が見られた13

次に読むべき論文は13

Matoba13 et13 al13 1213

SplashDisplay(VRICrsquo12)Yasuo Matoba Taro Tokui Ryo Sato Tochiki Sato Hideki Koike

201413109　久保勇貴 2（鬼コース）13

どんなもの13

パーティクルにCGを投射しパーティクルがテーブル上に投げられると爆発しパーティクルが噴きあがる13

先行研究と比べてどこがすごい13

ビーズがミリメートルからメートル単位までZ軸方向について空中で奥行きを表現する13

技術や手法のキモはどこ13

スピーカによって風力が発生させビーズを舞い上げる点13

どうやって有効だと検証した13

ビーズを投げると花火が打ちあがっているかのようなアプリケーション例を示した13

議論はある13

高いレベルの表現及び幅広い入力範囲を提供できた13

次に読むべき論文は13

Kim13 et13 al13 1413

MARIO13 Mid-shy‐air13 Augmented13 Reality13 Interac4on13 with13 Objects13 (ECrsquo14)Hanyuool13 Kim13 13 Issei13 Takahashi13 Hiroki13 Yamamoto13 Satoshi13 Maekawa13 Takeshi13 Naemura

201413109　久保勇貴 2（鬼コース）13

どんなもの13

350times300times250のテーブル上のスペースにおいて自由に動かせる空中像を造りだすことができる13

先行研究と比べてどこがすごい13

凹面鏡や凹レンズのように曲面でないため画像の歪曲が発生しない13

技術や手法のキモはどこ13

Aerial13 Imaging13 Plate(AIP)を用いた空中像の生成及びそのためのディスプレイ移動装置13

どうやって有効だと検証した13

左右からの視差の考慮及び奥行き表現時の画像提示視野角の検証などを行った13 13

議論はある13

投影しているひよこを叩いたり払いのけたりするような動作がデモ中見られた13

次に読むべき論文は13

Tactile Feedback on Flat Surfaces for the Visually Impaired13Ali Israr Olivier Bau Seung-Chan Kim Ivan Poupyrev13

どのようなものか 視覚障害者のための触覚を用いた視覚代用デバイス 先行研究と比べてどこがすごいか 道案内をしてくれる機械などはあるが日用品の場所を教えたり探すのを手伝ってくれるデバイスはない 技術や手法のキモ タッチパネルとカメラを搭載したデバイス 触覚を与える技術はTeslaTouchを利用 色を基準にオブジェクトの位置を認識 有用性の確認 視覚障害者二人に対して実験このデバイスを使

わなくても各自の方法で物を見つけられるが間違えることが多いこのデバイスを使用することで間違えることなく正確に物の位置を特定できた 課題 一つの色でしか判断できない 触感のあるなしでしか情報を伝えられない 関連論文 TeslaTouch [Bau et al 2010]

20150522 橋爪智 2鬼

Fingernail-Mounted Display of Attraction Force and Texture13Masataka Niwa Tomoko Nozaki Taro Maeda and Hideyuki And13

どのようなものか 指先に取り付けて触感と力を両方表現できるデバイス 先行研究と比べてどこがすごいか 触感と引力をそれぞれ表現するデバイスはあるが両方を一つのデバイスで表現した例は少ない 引力は自由な方向に付加することができる 技術や手法のキモ 偏心に重さを付けた円盤を4枚使用する 5-9Hz 引力　100-200Hz 触感 それぞれの円盤の位相や回転数を調整することで

触感と力 を表現する 4つのモータを使いそれぞれの円盤を独立して制御する 有用性の確認 4人の男性に対して実験80以上の精度で認識できた 関連論文 The nail-mounted attraction forcebump display [Nozaki et al 2008]

20150522 橋爪智 2 鬼

Gilded gait reshaping the urban experience with augmented footsteps13Yuichiro Takeuchi13

どのようなものか 靴に装着し地面の触感をコントロールするデバイス 先行研究と比べてどこがすごいか 単独で動作しなかったり特定の環境のみでしか動作しなかったりするrarr靴単体で動作環境に依存しない 技術や手法のキモ 6個の振動パネルを取り付けゲルでカバー app modulesを取り替えることができ様々な機能を付加できる（GPSsound) 4種類の地面を再現

bull  Hard Ground 振動させない bull  Soft Ground すべてのパネルを振動 bull  Bumpy Ground ジグザグに振動 bull  Godzilla 全てのパネルを振動何回か繰り返す 課題 モーターを使っているため波形をプログラミングできないrarr圧電素子を使用する 関連論文 Haptic Shoes [Fu et al 2010]

20150522 橋爪智 2鬼

ExoInterfaces novel exosceleton haptic interfaces for virtual reality augmented sport and rehabilitation

Dzmitry Tsetserukou Katsunari Sato Susumu Tachi13

どのようなものか 腕に装着し物理的なinteractionを可能にするデバイス 先行研究と比べてどこがすごいか Exoskeleton 力を増幅するためだが重たく危険なこともある String-based wireが視界をまたぐ動きに制限がある rarr腕の動きに制限を与えない安全 技術や手法のキモ 「FlexTorque」人間の筋肉の構造を再現するベルトとモーターを使用する肩の近くに装着することで

腕に負担がかかりにくい 触覚feedback弱いトルク 運動を支援強いトルク 課題 物理的な接触を表現するゲームやスポーツにより没頭させるリハビリのサポートをする視覚障害者の支援（ものの場所を教える） 関連論文 FlexTorque [Dzmitry et al 2010]

20150522 橋爪智 2 鬼

Perception of Ultrasonic Haptic Feedback on the Hand Localisation and Apparent Motion13

Graham Wilson Tom Carter Sriram Subramanian Stephen Brewster13

どのようなものか 超音波を用いた触覚フィードバック有効性の検討を行う 先行研究と比べてどこがすごいか 超音波触覚フィードバックは比較的新しく研究や操作方法に関する知識が少ない 腕を自由に動かすことができ小さいものは着用可能 技術や手法のキモ 88のアレイ状に超音波発生器を設置

有効性の確認 bull  局所的な触感 　　　25箇所に分割しそれぞれに超音波を当てる 　　　触感を感じた989 　　　場所の誤差85mm bull  手のひらを動く触感 上下左右に動く 　　　動いてると感じた629

20150522 橋爪智 2 鬼

Friction Measurements on a Large Area TPaD13Nicholas D Marchuk J Edward Colgate Michael A Peshkin13

どのようなものか 超音波の振動により触感を与える 先行研究と比べてどこがすごいか ガラス板を使うので透明後ろにディスプレイを配置可能 技術や手法のキモ 「Squeeze Film Effect（スクイズ膜効果）」 ガラス板に取り付けた圧電素子の円盤に高周波信号

をかける 実験 振動しない部分＝摩擦が発生しない部分が発生周波数により場所が変わる rarr摩擦を大きさをかける力の大きさから計測 rarr指の場所に合わせて複数の周波数を使い分ける 関連論文 T-PaD[Winfield et al 2007]

20150522 橋爪智 2 鬼

STIMTAC a Tactile Input Device with Programmable Friction13Michel Amberg Freacutedeacuteric Giraud Betty Semail Paolo Olivo Geacutery Casiez Nicolas Roussel13

どのようなものか 触感を与えられるタッチデバイス 先行研究と比べてどこがすごいか LATPaD サイズ大きいノイズが大きい TeslaTouch 高い電圧付加が必要GNDに接続しなければいけない

技術や手法のキモ 「Squeeze Film Effect」超音波を用いて振動を与える 圧電性セラミックを電極にコーディング 指トラッキングは力センサを用いる 活用法 マウスキーボード絵を描く 関連論文 LATPaD[Vincent et al 2011] TeslaTouch[Bau et al 2010]

20150522 橋爪智 2 鬼

Surround Haptics Tactile Feedback for Immersive Gaming Experiences Ali Israr Seung-Chan Kim Ivan Poupyrev Jan Stec13

どのようなものか ゲームに合わせて高解像度の触覚フィードバックをユーザーに与える椅子 先行研究と比べてどこがすごいか 荒く配置した安価な振動アクチュエータで高解像度の触覚フィードバックを行える 一点の振動連続した動き範囲の振動などを再現

技術や手法のキモ 仮想的な振動アクチュエータをいくつかの振動アクチュエータを使って作り出す physical-physicalphysical-virtualvirtual-virtual ゲームにHaptics Engineを導入しHaptics APIを用いてHaptic Displayを操作する 関連論文 Exploring Surround Haptics Displays[Israr et al 2010]

20150522 橋爪智 2 鬼

Audio-Haptic Feedback in Mobile Phones Angela Chang Conor OrsquoSullivan13

どのようなものか haptics機能のついてない携帯電話にオーディオ機能を利用した触覚フィードバックを追加する 先行研究と比べてどこがすごいか 簡単に作れてnon-haptic mobile devicesでも大丈夫 技術や手法のキモ 「MultiFunction Transducer(MFT)」 スピーカーから音と信号の両方を出力できる

bull  Haptic Inheritance 　　音を2つの周波数帯に分ける bull  Synthesis and Matching 　　低周波数帯(20-300Hz)を使い触感を伝える 有効性の検討 42人の人を対象に実験を行う83の人が触感を感じた

20150522 橋爪智 2 鬼

Resolution of Sleep Deprivation Problems using ZZZoo Pillows13Shunsuke Yanaka Motoki Ishida13

どのようなものか 近年不眠症の人が多い rarr誰かと接していると安心し睡眠に導入しやすくなる rarrまるで添い寝をしているようなリアルな抱きまくらを使う 技術や手法のキモ breathing sensation 風船を使って人の呼吸を再現肺の形の風船弱く長い呼吸をする

heating お湯を使って人の体温を再現45 有効性の確認 84人の人が実験 呼吸が睡眠を誘ったかrarr61 体温が睡眠を誘ったかrarr85 関連論文 The Impact of Sleep Disorders on Social Life[Komada et al 2007]

20150522 橋爪智 2 鬼

まとめ13超音波 モーター 風

20150522 橋爪智 2 鬼

コイル 電気刺激 Electrovibration

振動 音 お湯

なかの

Temporally Consistent Disparity and Optical Flow via Efficient Spatio-temporal Filtering1

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示した

議論論はあるか

時間的に一定の視差を算出する手法静止画ステレオよりも精度度が良良いことを示す従来よりも推定精度度が良良いオプティカルフローも算出する

一枚の静止画に対するフィルタリング[1]をステレオ動画に拡張している

ケンブリッジのステレオ動画のデータセットを利利用 実写動画に対する比較も行行うノイズ耐性も検証する

フィルタベースとエネルギーベースの関係性を良良り理理解することで推定精度度を上げる

実装が簡単でリアルタイム視差推定が可能

Fast Cost-Volume Filtering for Visual Correspondence and Beyond [Rhemann C Hosni A Bleyer M Rother C Gelautz M CVPR2011] Real-time Spatiotemporal Stereo Matching Using the Dual-Cross-Bilateral Grid [Richardt C Orr D Davies I Criminisi A Dodgson NA ECCV2010] Secrets of optical flow estimation and their principles [Sun D Roth S Black MJ 2010] Motion estimation with non-local total variation regularization [Werlberger M Pock T Bischof H CVPR2010] Temporally Consistent Disparity Maps from Uncalibrated Stereo Videos [Bleyer M Gelatuz M ISPA2011]

なかの

SymStereo Matching using Induced Symmetry (2014)2

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示した

議論論はあるか

画像の対称性を用いてステレオマッチングを行行う 左右の画像を反転させて重ね合わせることで対称性を測る

絵的な類似の代わりに対称性を使う今まで対称性を用いる手法はなく新規性が大きい

三つのSymmetry-baseの手法で精度度を検証従来手法よりも精度度が向上しているMiddlebury Oxford Corridorfountain-P11のデータセット使用

ステレオの問題である不不連続な箇所オクルージョン部分は未解決である演算時間はやや増加

1-Dラインのコストを考える今までは撮像面に対して平行行な平面でデプスを考えていたが垂直な平面を考える

BT[Birchfield and Tomasi 1998] Census transform[Zabih and Woodfill 1994] Log N[Kovesi 1997] radio-metoric differences[Hirschmuller Scharstein 2009]

なかの

Camouflaging an Object from Many Viewpoints3

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

多くの視点から三次元の物体をカモフラージュするカモフラージュによってオクルージョン部分の不不連続がどの程度度生じるか他の視点ではどれほどになるかの検証

MRF（Markov Random Fields）ベース

新しい三次元物体のカモフラージュモデルを構築 37種類のデータセットを作る

箱形の物体に対してカモフラージュ処理理を施し 結果を評価する

オクルージョン不不連続テクスチャの歪みが問題 照明や画像の貼りつけに制限あり

なかの

Aliasing Detection and Reduction in Plenoptic Imaging4

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

カメラアレイ撮影の角度度のエイリアシングを除去するエイリアシングの探索索と打ち消しを行行う

周波数領領域ではなく空間領領域で探索索を行行う

先行行研究がフィルタデモザイキング再パラメータ調整などの前処理理でエイリアシング除去を行行うのに対しエイリアシング探索索後にリフォーカスの段階でエイリアシングを取り除く

8times8の平行行カメラアレイで検証するカメラ間の 基線長は70mm

今回は基線長が長いデータセットを使った 次はLytroなどのマイクロレンズアレイで検証する

Globally consistent multi-label assignment on the ray space of 4d light fields [S Wanner C Straehle B Goldluecke CVPR2013] Lineassisted light field triangulation and stereo matching [Z Yu X Guo H Lin A Lumsdaine J Yu ICCV 2013]

なかの

Globally Consistent Multi-Label Assignment on the Ray Space of 4D Light Fields5

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

四次元ライトフィールドの光線情報において マルチラベルの領領域分割を行行う

深度度情報光線情報を用いて領領域分割することで 二次元（空間）情報だけでは分割が難しかった 領領域を分割可能とする

The light field camera Extended depth of field aliasing and superresolution [T Bishop P Favaro IEEE Transactions on Pattern Analysis and Machine Intelligence 2012]

なかの

Line Assisted Light Field Triangulation and Stereo Matching6

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

光線情報を利利用してステレオマッチングの精度度を 向上させる手法三角測量量の誤差を減らす

Light Field Stereo Matchingとかいう手法 グラフ構造を作成

Variational light field analysis for disparity estimation and super-resolution [S Wanner and B Goldlumluecke 2013]

なかの

Adaptive stereo similarity fusion using confidence measures 20157

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

ステレオマッチングの新しい方式fusion weightsを提案複数の手法を組み合わせてコスト計算を行行う手法付録に既存手法のコスト関数一覧あり

パラメータに依存する手法を用いないことで高速化を図っている

一つのアルゴリズムでは異異なる特性を持つ領領域全てに対して適切切なマッチングはできない複数を組み合わせることでそれを補う13種と多い

middleburyとKITTIのデータセットで評価

一枚あたり03sと高速だが001sとより高速なアルゴリズムが存在する

Segment-based stereo matching using belief propagation and a self-adapting dissimilarity measure [A Klaus M Sormann K Karner ICPR2006] On building an accurate stereo matching system on graphics hardware [X Mei X Sun M Zhou S Jiao H Wang X Zhang ICCV2011] Similarity measures for depth estimation [K Wegner O Stankiewicz 3DTV-CON2009] On accurate dense stereo-matching using a local adaptive multi-cost approach [C Stentoumis L Grammatikopoulos I Kalisperakis G Karras ISPRS2014] A quantitative evaluation of confidence measures for stereo vision [X Hu P Mordohai PAMI2012]

なかの

SIMILARITY MEASURE FOR DEPTH ESTIMATIOM 20098

どんなもの

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

4種類の視差推定アルゴリズムを組み合わせている 類似度度の選択性の解析

Belief Propagationの枠組みを用いる

名古屋大学の多視点データベースを利利用

HHI Test Material for 3D Video [I Feldmann M Muller F Zilly R Tanger A SmolicP Kauff T Wiegand 2008] Multiview Video Test Sequence and Camera Parameters [Yo-Sung Ho Eun-Kyung Lee and Cheon Lee 2008] 1D Parallel Test Sequences for MPEG-FTV [M Tanimoto T Fujii N Fukushima 2008] Non-parametric Local Transforms for Computing Visual Correspondence [R Zabih J Woodfill 1994]

なかの

Spatiotemporal Stereo via Spatiotemporal Quadric Element (Stequel) Matching9

どんなもの

技術や手法のキモはどこ

新しいマッチング手法を提案動き考慮することなく時間情報を取り込むことができる 時間方向のエピ線を考える

オプティカルフロー推定は3D境界や低テクスチャで弱いが提案手法はロバストである

なかの

Depth Video Enhancement Based on Weighted Mode Filtering10

どんなもの

議論論はある

ノイズを含んだ低解像度度のデプスマップの質を高める手法（超解像度度とデノイズ）時間方向も使用簡単なオプティカルフローを計算し利利用する

非反復復アルゴリズムのためGPUに載せやすく高速化が考えられる

なかの

Fast Bilateral-Space Stereo for Synthetic Defocus11

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

議論論はある

次に読むべき論論文は

高速な自由焦点ぼけ画像の作成

Bilateral-spaceを提案

従来研究よりも10から100倍速くぼけ具合の精度度も良良い

ぼけを作成するというアプリケーションに利利用する距離離という面では提案手法が有益であるが実測的な距離離という面での精度度は悪い背景と前景が同じ色で近くにある場合同一ととらえてしまう

Efficient high-resolution stereo matching using local plane sweeps [S N Sinha D Scharstein and R SzeliskiCVPR2014] Bilateral filtering-based optical flow estimation with occlusion detection [J Xiao H Cheng H Sawhney C Rao and M IsnardiECCV2006] Efficient nonlocal regularization for optical flow [P Krumlahenbumluhl and V KoltunECCV2012] Real-time spatiotemporal stereo matching using the dual-cross-bilateral grid [C Richardt D Orr I Davies A Criminisi and N A DodgsonECCV2010]

どうやって有効性を示した視差推定の精度度はmiddleburyKITTI

なかの

Robust Spatiotemporal Stereo for Dynamic Scenes12

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

ステレオ動画のフレーム間情報を取り入れることでノイズ耐性を向上させるまた動きの大きなものも考える

時間を含めたウインドウの提案自動的にそのような変化に対応する画像領領域を検出する

従来の時空間ステレオと比べ大きな動きによる急激な視差の時間変化に対して頑健である

なかの

Spacetime Stereo A Unifying Framework for Depth from Triangulation13

どんなもの

先行行研究と比べてどこがすごい

space time stereoを提案ステレオカメラの視差推定でも構造光を用いた視差推定でも利利用可能 動的なシーンでの利利用も可能

フレームごとマッチングを取っていたが複数フレームでのマッチングを可能とした

なかの

Learning to Select and Order Vacation Photographs (Disney research)14

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示したあまりにもたくさん撮影した写真たちから自動的にフォトアルバムを作成する研究

複雑な視覚での区別を試みたのはこの論論文が初

５つの異異なるトピックから63の個人的な写真コレクションのデータセットを利利用し定量量的に評価する

写真間の差別かを定義する顔全体の絵何が写っているか写っていないかを評価する

Jointly aligning and segmenting multiple web photo streams for the inference of collective photo storylines [G Kim and E P Xing CVPR2013] Photo sequencing [T Basha Y Moses and S Avidan CVPR2012]

なかの

A Taxonomy and Evaluation of Dense Two-Frame Stereo Correspondence Algorithms15

どんなもの

どうやって有効性を示した

次に読むべき論論文は

ステレオマッチングに関する分類を行行う 新たなデータセットを作成する

というよりも他の手法が有効性を示すことができるようにデータセットを作成した 今ではmiddleburyのデータセットと言えばステレオ業界では超有名

High-resolution stereo datasets with subpixel-accurate ground truth

なかの

Discriminability Limits in Spatio-Temporal Stereo Block Matching1

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

spatio-temporal disparity estimationの根本的な前提の正当性を解析しマッチング処理理の際に動きが助けとなる程度度を決定する

時空間マッチングのエラーを分析し誤りの原因を確率率率で導出する（フレーム数動きの分散画像特徴ノイズの関数）

[34243334]は時空間マッチングの利利点を指摘していたが本論論文はマッチング精度度の向上のために動きを用いる手法の程度度や性質を研究する

6つのステレオビデオを用いて検証を行行った

Spacetime stereo Shape recovery for dynamic scenes [L Zhang B Curless and S Seitz CVPR2003] Spatiotemporal stereo and scene flow via stequel matching [M Sizintsev and R Wildes PAMI2012] Temporally consistent disparity and optical flow via efficient spatio-temporal filtering [A Hosni C Rhemann M Bleyer and M Gelautz PRCAIVT2012] Spacetime stereo A unifying framework for depth from triangulation [PAMI2005] Dynamic depth recovery from multiple synchronized video streams [H Tao H Sawhney and R Kumar CVPR2001] Spatiotemporal descriptor for wide-baseline stereo reconstruction of non-rigid and ambiguous scenes [ECCV2003]

なかの

Depth-Based Patch Scaling for Content-Aware Stereo Image Completion2

どんなもの

どうやって有効性を示した

ステレオでデプスを取り物体の三次元情報を使ってインペインティングを行行う

bookのデータセット背景が繰り返しパターンが多いものを使っている

なかの

Fast Semi-dense Surface Reconstruction from Stereoscopic Video in Laparoscopic Surgery3

どんなもの

手法の流流れ

次に読むべき論論文は

腹腔内手術の際にステレオビデオから高速に物体の三次元再構成を行行う研究

Evaluation of stereo matching costs on images with radiometric differences [Hirschmueller H Scharstein D PAMI2008]

スコープカメラから画像取得GPUで演算する 視差を算出しフィルタにかける距離離に変換 点群を再びフィルタにかけて三次元再構成

なかの

3D Reconstruction from Accidental Motion4

どんなもの

技術や手法のキモはどこ

議論論はある

数秒のビデオ（単眼）から三次元再構成を行行う 手ぶれなどの動きから再構成が可能で特定の動きや機材を必要としない

短い基線長でも再構成が可能（3mmの基線長）

基線長が短いため背景の精度度が低くなる リフォーカス画像作成には十分 練習では上手く動作したが検証がまだ必要

なかの

Panoramic Video from Unstructured Camera Arrays5

どんなもの

技術や手法のキモはどこ

議論論はある

複数のカメラを用いたパノラマ撮影を行行う その際に不不自然さがないような動画を作成する

不不自然さを感じる感覚特性を提示しそれにのっとって対策を講じている

一つのカメラの解像度度と品質を向上させるよりも複数台のカメラを組み合わせることがはるかに簡単で有益である専門家でなくてもGoProのカメラセットを組み合わせることは容易易

カメラの配置は厳密に決められていない完璧な時間同期やローリングシャッターの不不足のような実撮影での問題もクリアしている

先行行研究と比べてどこがすごい

どうやって有効性を示した左のシステムは14台のカメラを使用 右のシステムはGoProを5台使用

Disney 201558

なかの

Floating Scale Surface Reconstruction6

どんなもの

技術や手法のキモはどこ

流流動的にスケールを変えられる三次元再構成手法

サンプル規模に依存するパラメータがない rarrどのスケールのサンプルにも対応できる

siggraph2014

なかの

A Super Resolution Reconstruction Scheme for Mixed Spatio-Temporal Stereo Video7

どんなもの

技術や手法のキモはどこ

ビデオ超解像アルゴリズム

二台のカメラを使用 一台は低解像度度で高速一台は高解像度度で低速

HHI 3DV ftp siteのBookarrivalとbeergadenを使用どうやって有効性を示した

なかの

What Is a Good Day for Outdoor Photometric Stereo8

どんなもの

先行行研究と比べてどこがすごい

議論論はある

次に読むべき論論文は

屋外における照度度差があるステレオの研究 屋外でステレオを行行う際に有利利or不不利利な日照条件を明らかにする

点光源を用いた研究は行行われていたが屋外での研究はされていなかった

晴れより曇りの方が精度度が良良い雲があるから特徴量量を取りやすい雑音を白色ガウスモデルを想定 季節ごとのデータセットを利利用してみても良良い

Time-lapse photometric stereo and applications [F Shen K Sunkavalli N Bonneel S Rusinkiewicz H Pfisterand X Tong2014] Outdoor photometric stereo [L-F Yu S-K Yeung Y-W Tai D Terzopoulos and T FChan ICCP2013]

どうやって有効性を示した屋外の照明に関するHDR環境マップのデータベースを利利用

Disney 2015424

なかの

COLORBRUSH ANIMATED DIFFUSION FOR INTUITIVE COLORIZATION SIMULATING WATER PAINTING 9

どんなものアニメを水彩画で描いたように変換する 水彩画を描くには経験が必要であるがそれを作成するアルゴリズムを考案絵具が水によりどうにじむかシュミレーションしている

Disney 20141027 ICIP2014

次に読むべき論論文はGabor-space geodesic active contoursrdquo In Algebraic Frames for the Perception-Action Cycle [C Sagiv NA Sochen and YY Zeevi 2000] Practical temporal consistency for image-based graphics applications [M Lang O Wang T Aydin A Smolic and M Gross SIGGRAPH2012] Computer-Generated Watercolor [CJ Curtis SE Anderson JE Seims KW Fleischer and DH Salesin SIGGRAPH1997]

なかの

From Sound to Sight Using Audio Processing to enable Visible Light Communication 10

どんなもの光に情報を載せる技術プロジェクトページがあって光関係の研究が8個載っている

httpwwwdisneyresearchcomprojectvisible-light-communication

ビデオのURL httpwwwdisneyresearchcomwpcontentuploadsPub_InvisibleLightCommunication_Siggraph14_videomp4

• 201211106_KeisukeKawahara
• 201311421_KeitaKanai_02
• 201313095_AkiraIshii_02
• 201413109_YuukiKubo_02
• 201513110_SatoshiHashizume_02
• 鬼輪講マラソン③_1
• 鬼輪講マラソン③_2

2 201313095

13

13

SVM

on-body

per-user 5 967 4987

bull  HarrisonCBenkoHWilsonAOmniTouchwearablemulEtouchinteracEoneverywhereinUIST11441-450

bull  MatsushitaNandRekimotoJHoloWalldesigningafingerhandbodyandobjectsensiEvewallUIST97209-210

ToucheampEnhancingampTouchampInteracEonamponampHumansampScreensampLiquidsampandampEverydayampObjectsamp(CHIrsquo12)

MunehikoSatoIvanPoupyrevChrisHarrison

h]pswwwyoutubecomwatchv=E4tYpXVTjxA

2 201313095

SVM

9 9TapSense 4

95 99

TapSenseDelete

bull  HarrisonCTanDandMorrisDSkinputappropriat-ingthebodyasaninputsurfaceInProcCHI10453-462

TapSenseampEnhancingampFingerampInteracEonamponampTouchampSurfacesamp(UISTrsquo11)

ChrisHarrisonJuliaSchwarzSco]EHudson

h]pswwwyoutubecomwatchv=-oN96cucBr4

2 201313095

13

13

22 SVM

13 FingersWholeArmForearm 876 Fingers877 WholeArm 955

883 Forearm 815

833

GUI

bull  SaponasTSTanDSMorrisDandBalakrishnanRDemonstraEngthefeasibilityofusingforearmelectromyographyformuscle-computerinterfacesInProcCHIrsquo09515-24

SkinputampAppropriaEngamptheampBodyampasampanampInputampSurfaceamp(CHIrsquo10)

ChrisHarrisonDesneyTanDanMorris

h]pswwwyoutubecomwatchv=g3XPUdW9Ryg

2 201313095

Fiberio

10 330 150

148 2

Fiberio

bull  MatsushitaNandRekimotoJHoloWallDesigningaFingerHandBodyObjectSensiEveWallProcUIST97209ndash210

FiberioampAampTouchscreenampthatampSensesampFingerprintsamp(UISTrsquo13)

ChrisEanHolzPatrickBaudisch

h]pswwwyoutubecomwatchv=p1a5yLzuTqA

2 201313095

3D

3D

bull  GeigerMVollertsenFTheMechanismsofLaserFormingCIRPANNALSlsquo93421301-304

bull  WillisKDDXuCWuJKLevinGGrossMDInteracEvefabricaEonnewinterfacesfordigitalfabricaEonProcTEI11pp69-72

LaserOrigamiampLaserCugngamp3DampObjectsamp(CHIrsquo13)

StefanieMuellerBasEanKruckPatrickBaudisch

h]pswwwyoutubecomwatchv=arjRtCjI9AQ

2 201313095

bend

bull  HyunyoungSongFranccediloisGuimbreEegravereChangHuHodLipsonModelCraycapturingfreehandannotaEonsandeditsonphysical3DmodelsProceedingsofthe19thannualACMsymposiumonUserinterfacesoywareandtechnologyOctober15-182006MontreuxSwitzerland

InteracEveampConstrucEonampInteracEveampFabricaEonampofampFuncEonalampMechanicalampDevicesamp(UISTrsquo12)

StefanieMuellerPedroLopesPatrickBaudisch

h]pdlacmorgcitaEoncfmid=23801162380191

2 201313095

3D

3D

bull  SavageVSchmidtRGrossmanTFitzmauriceGandHartmannBAseriesoftubesAddinginteracEvityto3dprintsusinginternalpipesInProcUIST14(2014)

3DampPrinEngampPneumaEcampDeviceampControlsampwithampVariableampAcEvaEonampForceampCapabiliEesamp(CHIrsquo15)amp

MarynelVazquezEricBrockmeyerRutaDesaiChrisHarrisonSco]EHudson

h]pswwwyoutubecomwatchv=-4gFYvhkz0Y

2 201313095

OpenFab 3D

fablets

3 3

bull  CHENDMATUSIKWSITTHI-AMORNPDIDYKPANDLEVIND2013Spec2FabAreducer-tunermodelfortranslat-ingspecificaEonsto3DprintsACMTransGraph324(July)

OpenFabampAampProgrammableampPipelineampforampMulEMaterialampFabricaEonamp(SIGGRAPHrsquo13)

KirilVidimcˇeSzu-PoWangJonathanRagan-KelleyWojciechMatusik

2 201313095

3D

3D

3D

3D14 30 13 67

244

14

3D

bull  MuellerSKruckBBaudischPLaserOrigamiLaser-Cunng3DObjectsProcCHIrsquo132585-2592

faBrickaEonampFastamp3DampPrinEngampofampFuncEonalampObjectsampbyampIntegraEngampConstrucEonampKitampBuildingampBlocksamp(CHIrsquo14)amp

StefanieMuellerTobiasMohrKersEnGuentherJohannesFrohnhofenPatrickBaudisch

h]pswwwyoutubecomwatchv=BlO6YRcLJjE

Touching13 the13 Void13 Direct-shy‐Touch13 Interac4on13 for13 Intangible13 Displays(CHIrsquo10)Li-Wei Chan Hui-Shan Kao Mike Y Chen Ming-Sui Jane Yi-Ping Hung

201413109　久保勇貴 2（鬼コース）13

どんなもの13

空中像へのタッチのエラーに関する調査及び影や音のフィードバックを付与することによるパーフォーマンス向上を示した研究13

先行研究と比べてどこがすごい13

平面画像をタッチする際の奥行きに関するエラーの正確な取得を初めて検証13

技術や手法のキモはどこ13

２つの赤外線カメラを用いた正確なタッチの検出13

どうやって有効だと検証した13

タッチ時の奥行きの正確さに関する被験者実験を実施またタッチする際に影や音を付けた際の反応時間を被験者実験で検証13

議論はある13

ユーザは慣れるまで影や音のフィードバックが必要だがそのあとは必要なくなる13

次に読むべき論文は13

MirageTable13 （CHI12） 13

MirageTable13 Freehand13 Interac4on13 on13 a13 Projected13 13 Augmented13 Reality13 Tabletop(CHIrsquo12)

Hrvoje Benko Ricardo Jota Andrew D Wilson

201413109　久保勇貴 2（鬼コース）13

どんなもの13

テーブル上においてバーチャルな物体をリアルタイムで現実でものを動かすことと同様な動作に操作可能なシステム13

先行研究と比べてどこがすごい13

現実の物体をリアルタイムで画面に取りこむことができ質の高いフリーハンドインタラクションを実現した点13

技術や手法のキモはどこ13

色深度前景頭追跡プロキシパーティクルを駆使したリアルタイムメッシュの作成13

どうやって有効だと検証した13

凹凸など例外な表面に対しての投影した際の画像の質についての評価実験また仮想物体の奥行き知覚に関する実験も行った13

議論はある13

前面のみしかキャプチャしていないため差が生じる握っている場所の再現は未解決な課題である13

次に読むべき論文は13

Hirsch13 et13 al13 201413 (SIGGRAPHrsquo14)13

A13 Compressive13 Light13 Field13 Projec4on13 System13 (SIGGRAPHrsquo14)MaChew13 Hirsch13 Gordon13 Wetzstein13 Ramesh13 Raskar

201413109　久保勇貴 2（鬼コース）13

どんなもの13

通常の3Dディスプレイに比べて解像度輝度コントラストを改善した圧縮ライトフィードディスプレイ13

先行研究と比べてどこがすごい13

多視点立体視を複数でなく１台のプロジェクタを用いて実現した13

技術や手法のキモはどこ13

受動的スクリーンと高速切り替えプロジェクタによる新しい光学設計13

どうやって有効だと検証した13

4つのシーン例を投影したものを示したアニメーションの3D効果について観察を行った13

議論はある13

光路長を広げると観察できる画質が大幅に制限され他のライトフィードビューと混線が生じる13

次に読むべき論文は13

Butler13 et13 al13 201113

Vermeer13 Direct13 Interac4on13 with13 a13 360deg13 Viewable13 3D13 Display(UISTrsquo11) Alex Butler Otmar Hilliges Shahram Izadi Steve Hodges David Molyneaux David Kim

201413109　久保勇貴 2（鬼コース）13

どんなもの13

映し出された3Dオブジェクトとインタラクションを行えるシステム13

先行研究と比べてどこがすごい13

ディスプレイ内の画像とのインタラクションを提案ボリュームディスプレイを支援する新しいセンシング法の提案13

技術や手法のキモはどこ13

パラボラ鏡に取り付けた赤外線カメラセンサによる指先検出13

どうやって有効だと検証した13

アプリケーション例を示した13

議論はある13

パラボラ鏡の大きさよりもディスプレイサイズが小さくなってしまう13

次に読むべき論文は13

Hirsch13 et13 al13 201213

8D13 Interac4ng13 with13 a13 Relightable13 Glasses-shy‐Free13 3D13 Display(CHIrsquo12)Li-Wei Chan Hui-Shan Kao Mike Y Chen Ming-Sui Jane Yi-Ping Hung

201413109　久保勇貴 2（鬼コース）13

どんなもの13

ライトフィードによる入力とライトフィールドによる表示を行うリアルタイム8Dディスプレイ13

先行研究と比べてどこがすごい13

リアルタイムでの8Dディスプレイの実現（先行研究は7fps）13

技術や手法のキモはどこ13

GPUにおけるレンダリング処理13

どうやって有効だと検証した13

MRIデータを用いたディスプレイのデモを示した13

議論はある13

現在はグレースケールの入力のみだがカラーでの入力できればより強力になるだろう13

次に読むべき論文は13

Sahoo13 et13 al13 201513

Control13 of13 Non-shy‐Solid13 Diffusers13 by13 Electrosta4c13 Charging13 (CHIrsquo15) Deepak Ranjan Sahoo Diego Martinez Plasencia Sriram Subramanian

201413109　久保勇貴 2（鬼コース）13

どんなもの13

シャボン玉や霧などの非固体を電場による制御を試みた研究13

先行研究と比べてどこがすごい13

非固体の形や位置の制御法を提案した点13

技術や手法のキモはどこ13

[Intra13 et13 al13 11]中のldquowire-shy‐to-shy‐Cylinderdquoを用いたエアゾール粒子の帯電13

どうやって有効だと検証した13

霧及びシャボン玉によるディスプレイのアプリケーション例で実際に制御して見せた13

議論はある13

風による影響を本手法は打ち消すことができた13

次に読むべき論文は13

Barnum13 et13 al13 201013

A13 Mul4-shy‐Layered13 Display13 with13 Water13 Drops(SIGGRAPHrsquo10)Peter C Barnum Srinivasa G Narasimhan Takeo Kanade

201413109　久保勇貴 2（鬼コース）13

どんなもの13

複数層の落下水滴にプロジェクションマッピングを行いディスプレイとした研究13

先行研究と比べてどこがすごい13

水滴の制御を行うことで単一のプロジェクタによって複数層の映像投影を可能とした点13

技術や手法のキモはどこ13

[Ambravaneswaran13 et13 al13 2002]及び本研究における実験結果に基づく水滴生成13

どうやって有効だと検証した13

複数のディスプレイ例を示した13 例）顔の投影水槽シミュレータなど13

議論はある13

本当の3Dディスプレイにするにはより多くの水滴制御が必要13

次に読むべき論文は13

Lee13 et13 al13 200713

An13 Immaterial13 Depth-shy‐Fused13 3D13 Display(VRSTrsquo07)Cha Lee Stephen DiVerdi Tobias Humlollerer

201413109　久保勇貴 2（鬼コース）13

どんなもの13

２つのスクリーンを駆使し3Dディスプレイを実現するdepth-shy‐fused13 3D(DFD)に関する評価を行いその結果よりディスプレイを提案した研究13

先行研究と比べてどこがすごい13

DFDが任意のスクリーン設定及び見る位置に対して有効であることを示した13

技術や手法のキモはどこ13

６通りのスクリーン組合せから２つを抽出し見え方の違いを検証した点13

どうやって有効だと検証した13

６通りのスクリーンについて立体的に見えるか被験者実験を実施その後それぞれに有意差がみられるか調べた13

議論はある13

ステレオイメージを認めることができなかったユーザに対しても強い3D効果が見られた13

次に読むべき論文は13

Tokuda13 et13 al13 201013

Cloud13 Display13 (ACErsquo10)Yutaka Tokuda Yasuhiro Suzuki Kunihiro Nishimura Tomohiro Tanikawa Michitaka Hirose

201413109　久保勇貴 2（鬼コース）13

どんなもの13

煙の渦輪を用いた空間を埋めるディスプレイ13

先行研究と比べてどこがすごい13

制御可能な手法により高所へのパーティクルを運搬することに着目した点13

技術や手法のキモはどこ13

コンピュータによって制御が行われる空気砲アレイ13

どうやって有効だと検証した13

箱の中で実験を行い安定して渦輪をできるようにした実際にデモを行ったことを示した13

議論はある13

今の試作機をより早くリフレッシュ速度を高めることによりより濃く空間を埋められることを目指す13

次に読むべき論文は13

Sato13 et13 al13 200913

Par]cle13 Display13 System　(JVRC09)13 -shy‐13 A13 Large13 Scale13 Display13 for13 Public13 Space13 -shy‐

Munehiko13 Sato13 Yasuhiro13 Suzuki13 13 Atsushi13 Hiyama13 Tomohiro13 Tanikawa13 Michitaka13 Hirose

201413109　久保勇貴 2（鬼コース）13

どんなもの13

パーティクルディスプレイによる公共スペースのための大画面ディスプレイの提案13

先行研究と比べてどこがすごい13

公共スペースにおける要求と制限に基づいたシステムを提案した点13

技術や手法のキモはどこ13

実験に基づく表示画像のスクロール時間の制御13

どうやって有効だと検証した13

Aという文字の知覚実験によって 適な点滅周期の調査を行った13

議論はある13

現在の試作機を組合せより高解像度にする必要がある13

次に読むべき論文は13

Kwon13 et13 al13 201513

FugaciousFilm13 Exploring13 Aen4ve13 Interac4on13 with13 Ephemeral13 Material13 (CHIrsquo15)Hyosun13 Kwon13 Shashank13 Jaiswal13 Steve13 Benford13 Sue13 Ann13 Seah13

13 Peter13 BenneC13 Boriana13 Koleva13 Holger13 Schnaumldelbach

201413109　久保勇貴 2（鬼コース）13

どんなもの13

膜を押す引く飛び出ることができる新しい石鹸膜インタフェースの提案13

先行研究と比べてどこがすごい13

徐々に消えるインタフェースは高い注意を有するインタラクションを提供するという点を示したこと13

技術や手法のキモはどこ13

水グリセリンを201の対比で混ぜることでldquopoprdquoがきれいになるようにしかつ膜の耐久性を向上させた13

どうやって有効だと検証した13

３目並べを用いた被験者実験を実施13 ユーザは膜を割ると負け膜を自分のマスにするにはタッチ押す引くの書かれた通りの操作を行う13

議論はある13

ユーザに精密な動作を要求することはとりわけ注意を払うことを誘発する13

次に読むべき論文は13

Wetzstein13 et13 al13 201213

Tensor13 Displays13 Compressive13 Light13 Field13 Synthesis13 using13 Mul4layer13 Displays13 with13 Direc4onal13 Backligh4ng(SIGGRAPHrsquo12)

Gordon13 Wetzstein13 Douglas13 Lanman13 MaChew13 Hirsch13 Ramesh13 Raskar

201413109　久保勇貴 2（鬼コース）13

どんなもの13

視点によって異なる立体映像を見ることができる複数の層からなるディスプレイ13

先行研究と比べてどこがすごい13

既存の手法を合成したcomputa(onal13 displaysというディスプレイの新しいフレームワークを提案した13

技術や手法のキモはどこ13

時分割で視差マスクを表示することでユーザの視線ごとに立体像を表現する13

どうやって有効だと検証した13

通常のディスプレイ３層LCDLCD及び指向性バックライトの例による比較13 13

議論はある13

波紋を含むこと色チャンネルが悪影響を与える相互反射不均一などの問題が見られた13

次に読むべき論文は13

Matoba13 et13 al13 1213

SplashDisplay(VRICrsquo12)Yasuo Matoba Taro Tokui Ryo Sato Tochiki Sato Hideki Koike

201413109　久保勇貴 2（鬼コース）13

どんなもの13

パーティクルにCGを投射しパーティクルがテーブル上に投げられると爆発しパーティクルが噴きあがる13

先行研究と比べてどこがすごい13

ビーズがミリメートルからメートル単位までZ軸方向について空中で奥行きを表現する13

技術や手法のキモはどこ13

スピーカによって風力が発生させビーズを舞い上げる点13

どうやって有効だと検証した13

ビーズを投げると花火が打ちあがっているかのようなアプリケーション例を示した13

議論はある13

高いレベルの表現及び幅広い入力範囲を提供できた13

次に読むべき論文は13

Kim13 et13 al13 1413

MARIO13 Mid-shy‐air13 Augmented13 Reality13 Interac4on13 with13 Objects13 (ECrsquo14)Hanyuool13 Kim13 13 Issei13 Takahashi13 Hiroki13 Yamamoto13 Satoshi13 Maekawa13 Takeshi13 Naemura

201413109　久保勇貴 2（鬼コース）13

どんなもの13

350times300times250のテーブル上のスペースにおいて自由に動かせる空中像を造りだすことができる13

先行研究と比べてどこがすごい13

凹面鏡や凹レンズのように曲面でないため画像の歪曲が発生しない13

技術や手法のキモはどこ13

Aerial13 Imaging13 Plate(AIP)を用いた空中像の生成及びそのためのディスプレイ移動装置13

どうやって有効だと検証した13

左右からの視差の考慮及び奥行き表現時の画像提示視野角の検証などを行った13 13

議論はある13

投影しているひよこを叩いたり払いのけたりするような動作がデモ中見られた13

次に読むべき論文は13

Tactile Feedback on Flat Surfaces for the Visually Impaired13Ali Israr Olivier Bau Seung-Chan Kim Ivan Poupyrev13

どのようなものか 視覚障害者のための触覚を用いた視覚代用デバイス 先行研究と比べてどこがすごいか 道案内をしてくれる機械などはあるが日用品の場所を教えたり探すのを手伝ってくれるデバイスはない 技術や手法のキモ タッチパネルとカメラを搭載したデバイス 触覚を与える技術はTeslaTouchを利用 色を基準にオブジェクトの位置を認識 有用性の確認 視覚障害者二人に対して実験このデバイスを使

わなくても各自の方法で物を見つけられるが間違えることが多いこのデバイスを使用することで間違えることなく正確に物の位置を特定できた 課題 一つの色でしか判断できない 触感のあるなしでしか情報を伝えられない 関連論文 TeslaTouch [Bau et al 2010]

20150522 橋爪智 2鬼

Fingernail-Mounted Display of Attraction Force and Texture13Masataka Niwa Tomoko Nozaki Taro Maeda and Hideyuki And13

どのようなものか 指先に取り付けて触感と力を両方表現できるデバイス 先行研究と比べてどこがすごいか 触感と引力をそれぞれ表現するデバイスはあるが両方を一つのデバイスで表現した例は少ない 引力は自由な方向に付加することができる 技術や手法のキモ 偏心に重さを付けた円盤を4枚使用する 5-9Hz 引力　100-200Hz 触感 それぞれの円盤の位相や回転数を調整することで

触感と力 を表現する 4つのモータを使いそれぞれの円盤を独立して制御する 有用性の確認 4人の男性に対して実験80以上の精度で認識できた 関連論文 The nail-mounted attraction forcebump display [Nozaki et al 2008]

20150522 橋爪智 2 鬼

Gilded gait reshaping the urban experience with augmented footsteps13Yuichiro Takeuchi13

どのようなものか 靴に装着し地面の触感をコントロールするデバイス 先行研究と比べてどこがすごいか 単独で動作しなかったり特定の環境のみでしか動作しなかったりするrarr靴単体で動作環境に依存しない 技術や手法のキモ 6個の振動パネルを取り付けゲルでカバー app modulesを取り替えることができ様々な機能を付加できる（GPSsound) 4種類の地面を再現

bull  Hard Ground 振動させない bull  Soft Ground すべてのパネルを振動 bull  Bumpy Ground ジグザグに振動 bull  Godzilla 全てのパネルを振動何回か繰り返す 課題 モーターを使っているため波形をプログラミングできないrarr圧電素子を使用する 関連論文 Haptic Shoes [Fu et al 2010]

20150522 橋爪智 2鬼

ExoInterfaces novel exosceleton haptic interfaces for virtual reality augmented sport and rehabilitation

Dzmitry Tsetserukou Katsunari Sato Susumu Tachi13

どのようなものか 腕に装着し物理的なinteractionを可能にするデバイス 先行研究と比べてどこがすごいか Exoskeleton 力を増幅するためだが重たく危険なこともある String-based wireが視界をまたぐ動きに制限がある rarr腕の動きに制限を与えない安全 技術や手法のキモ 「FlexTorque」人間の筋肉の構造を再現するベルトとモーターを使用する肩の近くに装着することで

腕に負担がかかりにくい 触覚feedback弱いトルク 運動を支援強いトルク 課題 物理的な接触を表現するゲームやスポーツにより没頭させるリハビリのサポートをする視覚障害者の支援（ものの場所を教える） 関連論文 FlexTorque [Dzmitry et al 2010]

20150522 橋爪智 2 鬼

Perception of Ultrasonic Haptic Feedback on the Hand Localisation and Apparent Motion13

Graham Wilson Tom Carter Sriram Subramanian Stephen Brewster13

どのようなものか 超音波を用いた触覚フィードバック有効性の検討を行う 先行研究と比べてどこがすごいか 超音波触覚フィードバックは比較的新しく研究や操作方法に関する知識が少ない 腕を自由に動かすことができ小さいものは着用可能 技術や手法のキモ 88のアレイ状に超音波発生器を設置

有効性の確認 bull  局所的な触感 　　　25箇所に分割しそれぞれに超音波を当てる 　　　触感を感じた989 　　　場所の誤差85mm bull  手のひらを動く触感 上下左右に動く 　　　動いてると感じた629

20150522 橋爪智 2 鬼

Friction Measurements on a Large Area TPaD13Nicholas D Marchuk J Edward Colgate Michael A Peshkin13

どのようなものか 超音波の振動により触感を与える 先行研究と比べてどこがすごいか ガラス板を使うので透明後ろにディスプレイを配置可能 技術や手法のキモ 「Squeeze Film Effect（スクイズ膜効果）」 ガラス板に取り付けた圧電素子の円盤に高周波信号

をかける 実験 振動しない部分＝摩擦が発生しない部分が発生周波数により場所が変わる rarr摩擦を大きさをかける力の大きさから計測 rarr指の場所に合わせて複数の周波数を使い分ける 関連論文 T-PaD[Winfield et al 2007]

20150522 橋爪智 2 鬼

STIMTAC a Tactile Input Device with Programmable Friction13Michel Amberg Freacutedeacuteric Giraud Betty Semail Paolo Olivo Geacutery Casiez Nicolas Roussel13

どのようなものか 触感を与えられるタッチデバイス 先行研究と比べてどこがすごいか LATPaD サイズ大きいノイズが大きい TeslaTouch 高い電圧付加が必要GNDに接続しなければいけない

技術や手法のキモ 「Squeeze Film Effect」超音波を用いて振動を与える 圧電性セラミックを電極にコーディング 指トラッキングは力センサを用いる 活用法 マウスキーボード絵を描く 関連論文 LATPaD[Vincent et al 2011] TeslaTouch[Bau et al 2010]

20150522 橋爪智 2 鬼

Surround Haptics Tactile Feedback for Immersive Gaming Experiences Ali Israr Seung-Chan Kim Ivan Poupyrev Jan Stec13

どのようなものか ゲームに合わせて高解像度の触覚フィードバックをユーザーに与える椅子 先行研究と比べてどこがすごいか 荒く配置した安価な振動アクチュエータで高解像度の触覚フィードバックを行える 一点の振動連続した動き範囲の振動などを再現

技術や手法のキモ 仮想的な振動アクチュエータをいくつかの振動アクチュエータを使って作り出す physical-physicalphysical-virtualvirtual-virtual ゲームにHaptics Engineを導入しHaptics APIを用いてHaptic Displayを操作する 関連論文 Exploring Surround Haptics Displays[Israr et al 2010]

20150522 橋爪智 2 鬼

Audio-Haptic Feedback in Mobile Phones Angela Chang Conor OrsquoSullivan13

どのようなものか haptics機能のついてない携帯電話にオーディオ機能を利用した触覚フィードバックを追加する 先行研究と比べてどこがすごいか 簡単に作れてnon-haptic mobile devicesでも大丈夫 技術や手法のキモ 「MultiFunction Transducer(MFT)」 スピーカーから音と信号の両方を出力できる

bull  Haptic Inheritance 　　音を2つの周波数帯に分ける bull  Synthesis and Matching 　　低周波数帯(20-300Hz)を使い触感を伝える 有効性の検討 42人の人を対象に実験を行う83の人が触感を感じた

20150522 橋爪智 2 鬼

Resolution of Sleep Deprivation Problems using ZZZoo Pillows13Shunsuke Yanaka Motoki Ishida13

どのようなものか 近年不眠症の人が多い rarr誰かと接していると安心し睡眠に導入しやすくなる rarrまるで添い寝をしているようなリアルな抱きまくらを使う 技術や手法のキモ breathing sensation 風船を使って人の呼吸を再現肺の形の風船弱く長い呼吸をする

heating お湯を使って人の体温を再現45 有効性の確認 84人の人が実験 呼吸が睡眠を誘ったかrarr61 体温が睡眠を誘ったかrarr85 関連論文 The Impact of Sleep Disorders on Social Life[Komada et al 2007]

20150522 橋爪智 2 鬼

まとめ13超音波 モーター 風

20150522 橋爪智 2 鬼

コイル 電気刺激 Electrovibration

振動 音 お湯

なかの

Temporally Consistent Disparity and Optical Flow via Efficient Spatio-temporal Filtering1

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示した

議論論はあるか

時間的に一定の視差を算出する手法静止画ステレオよりも精度度が良良いことを示す従来よりも推定精度度が良良いオプティカルフローも算出する

一枚の静止画に対するフィルタリング[1]をステレオ動画に拡張している

ケンブリッジのステレオ動画のデータセットを利利用 実写動画に対する比較も行行うノイズ耐性も検証する

フィルタベースとエネルギーベースの関係性を良良り理理解することで推定精度度を上げる

実装が簡単でリアルタイム視差推定が可能

Fast Cost-Volume Filtering for Visual Correspondence and Beyond [Rhemann C Hosni A Bleyer M Rother C Gelautz M CVPR2011] Real-time Spatiotemporal Stereo Matching Using the Dual-Cross-Bilateral Grid [Richardt C Orr D Davies I Criminisi A Dodgson NA ECCV2010] Secrets of optical flow estimation and their principles [Sun D Roth S Black MJ 2010] Motion estimation with non-local total variation regularization [Werlberger M Pock T Bischof H CVPR2010] Temporally Consistent Disparity Maps from Uncalibrated Stereo Videos [Bleyer M Gelatuz M ISPA2011]

なかの

SymStereo Matching using Induced Symmetry (2014)2

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示した

議論論はあるか

画像の対称性を用いてステレオマッチングを行行う 左右の画像を反転させて重ね合わせることで対称性を測る

絵的な類似の代わりに対称性を使う今まで対称性を用いる手法はなく新規性が大きい

三つのSymmetry-baseの手法で精度度を検証従来手法よりも精度度が向上しているMiddlebury Oxford Corridorfountain-P11のデータセット使用

ステレオの問題である不不連続な箇所オクルージョン部分は未解決である演算時間はやや増加

1-Dラインのコストを考える今までは撮像面に対して平行行な平面でデプスを考えていたが垂直な平面を考える

BT[Birchfield and Tomasi 1998] Census transform[Zabih and Woodfill 1994] Log N[Kovesi 1997] radio-metoric differences[Hirschmuller Scharstein 2009]

なかの

Camouflaging an Object from Many Viewpoints3

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

多くの視点から三次元の物体をカモフラージュするカモフラージュによってオクルージョン部分の不不連続がどの程度度生じるか他の視点ではどれほどになるかの検証

MRF（Markov Random Fields）ベース

新しい三次元物体のカモフラージュモデルを構築 37種類のデータセットを作る

箱形の物体に対してカモフラージュ処理理を施し 結果を評価する

オクルージョン不不連続テクスチャの歪みが問題 照明や画像の貼りつけに制限あり

なかの

Aliasing Detection and Reduction in Plenoptic Imaging4

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

カメラアレイ撮影の角度度のエイリアシングを除去するエイリアシングの探索索と打ち消しを行行う

周波数領領域ではなく空間領領域で探索索を行行う

先行行研究がフィルタデモザイキング再パラメータ調整などの前処理理でエイリアシング除去を行行うのに対しエイリアシング探索索後にリフォーカスの段階でエイリアシングを取り除く

8times8の平行行カメラアレイで検証するカメラ間の 基線長は70mm

今回は基線長が長いデータセットを使った 次はLytroなどのマイクロレンズアレイで検証する

Globally consistent multi-label assignment on the ray space of 4d light fields [S Wanner C Straehle B Goldluecke CVPR2013] Lineassisted light field triangulation and stereo matching [Z Yu X Guo H Lin A Lumsdaine J Yu ICCV 2013]

なかの

Globally Consistent Multi-Label Assignment on the Ray Space of 4D Light Fields5

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

四次元ライトフィールドの光線情報において マルチラベルの領領域分割を行行う

深度度情報光線情報を用いて領領域分割することで 二次元（空間）情報だけでは分割が難しかった 領領域を分割可能とする

The light field camera Extended depth of field aliasing and superresolution [T Bishop P Favaro IEEE Transactions on Pattern Analysis and Machine Intelligence 2012]

なかの

Line Assisted Light Field Triangulation and Stereo Matching6

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

光線情報を利利用してステレオマッチングの精度度を 向上させる手法三角測量量の誤差を減らす

Light Field Stereo Matchingとかいう手法 グラフ構造を作成

Variational light field analysis for disparity estimation and super-resolution [S Wanner and B Goldlumluecke 2013]

なかの

Adaptive stereo similarity fusion using confidence measures 20157

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

ステレオマッチングの新しい方式fusion weightsを提案複数の手法を組み合わせてコスト計算を行行う手法付録に既存手法のコスト関数一覧あり

パラメータに依存する手法を用いないことで高速化を図っている

一つのアルゴリズムでは異異なる特性を持つ領領域全てに対して適切切なマッチングはできない複数を組み合わせることでそれを補う13種と多い

middleburyとKITTIのデータセットで評価

一枚あたり03sと高速だが001sとより高速なアルゴリズムが存在する

Segment-based stereo matching using belief propagation and a self-adapting dissimilarity measure [A Klaus M Sormann K Karner ICPR2006] On building an accurate stereo matching system on graphics hardware [X Mei X Sun M Zhou S Jiao H Wang X Zhang ICCV2011] Similarity measures for depth estimation [K Wegner O Stankiewicz 3DTV-CON2009] On accurate dense stereo-matching using a local adaptive multi-cost approach [C Stentoumis L Grammatikopoulos I Kalisperakis G Karras ISPRS2014] A quantitative evaluation of confidence measures for stereo vision [X Hu P Mordohai PAMI2012]

なかの

SIMILARITY MEASURE FOR DEPTH ESTIMATIOM 20098

どんなもの

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

4種類の視差推定アルゴリズムを組み合わせている 類似度度の選択性の解析

Belief Propagationの枠組みを用いる

名古屋大学の多視点データベースを利利用

HHI Test Material for 3D Video [I Feldmann M Muller F Zilly R Tanger A SmolicP Kauff T Wiegand 2008] Multiview Video Test Sequence and Camera Parameters [Yo-Sung Ho Eun-Kyung Lee and Cheon Lee 2008] 1D Parallel Test Sequences for MPEG-FTV [M Tanimoto T Fujii N Fukushima 2008] Non-parametric Local Transforms for Computing Visual Correspondence [R Zabih J Woodfill 1994]

なかの

Spatiotemporal Stereo via Spatiotemporal Quadric Element (Stequel) Matching9

どんなもの

技術や手法のキモはどこ

新しいマッチング手法を提案動き考慮することなく時間情報を取り込むことができる 時間方向のエピ線を考える

オプティカルフロー推定は3D境界や低テクスチャで弱いが提案手法はロバストである

なかの

Depth Video Enhancement Based on Weighted Mode Filtering10

どんなもの

議論論はある

ノイズを含んだ低解像度度のデプスマップの質を高める手法（超解像度度とデノイズ）時間方向も使用簡単なオプティカルフローを計算し利利用する

非反復復アルゴリズムのためGPUに載せやすく高速化が考えられる

なかの

Fast Bilateral-Space Stereo for Synthetic Defocus11

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

議論論はある

次に読むべき論論文は

高速な自由焦点ぼけ画像の作成

Bilateral-spaceを提案

従来研究よりも10から100倍速くぼけ具合の精度度も良良い

ぼけを作成するというアプリケーションに利利用する距離離という面では提案手法が有益であるが実測的な距離離という面での精度度は悪い背景と前景が同じ色で近くにある場合同一ととらえてしまう

Efficient high-resolution stereo matching using local plane sweeps [S N Sinha D Scharstein and R SzeliskiCVPR2014] Bilateral filtering-based optical flow estimation with occlusion detection [J Xiao H Cheng H Sawhney C Rao and M IsnardiECCV2006] Efficient nonlocal regularization for optical flow [P Krumlahenbumluhl and V KoltunECCV2012] Real-time spatiotemporal stereo matching using the dual-cross-bilateral grid [C Richardt D Orr I Davies A Criminisi and N A DodgsonECCV2010]

どうやって有効性を示した視差推定の精度度はmiddleburyKITTI

なかの

Robust Spatiotemporal Stereo for Dynamic Scenes12

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

ステレオ動画のフレーム間情報を取り入れることでノイズ耐性を向上させるまた動きの大きなものも考える

時間を含めたウインドウの提案自動的にそのような変化に対応する画像領領域を検出する

従来の時空間ステレオと比べ大きな動きによる急激な視差の時間変化に対して頑健である

なかの

Spacetime Stereo A Unifying Framework for Depth from Triangulation13

どんなもの

先行行研究と比べてどこがすごい

space time stereoを提案ステレオカメラの視差推定でも構造光を用いた視差推定でも利利用可能 動的なシーンでの利利用も可能

フレームごとマッチングを取っていたが複数フレームでのマッチングを可能とした

なかの

Learning to Select and Order Vacation Photographs (Disney research)14

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示したあまりにもたくさん撮影した写真たちから自動的にフォトアルバムを作成する研究

複雑な視覚での区別を試みたのはこの論論文が初

５つの異異なるトピックから63の個人的な写真コレクションのデータセットを利利用し定量量的に評価する

写真間の差別かを定義する顔全体の絵何が写っているか写っていないかを評価する

Jointly aligning and segmenting multiple web photo streams for the inference of collective photo storylines [G Kim and E P Xing CVPR2013] Photo sequencing [T Basha Y Moses and S Avidan CVPR2012]

なかの

A Taxonomy and Evaluation of Dense Two-Frame Stereo Correspondence Algorithms15

どんなもの

どうやって有効性を示した

次に読むべき論論文は

ステレオマッチングに関する分類を行行う 新たなデータセットを作成する

というよりも他の手法が有効性を示すことができるようにデータセットを作成した 今ではmiddleburyのデータセットと言えばステレオ業界では超有名

High-resolution stereo datasets with subpixel-accurate ground truth

なかの

Discriminability Limits in Spatio-Temporal Stereo Block Matching1

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

spatio-temporal disparity estimationの根本的な前提の正当性を解析しマッチング処理理の際に動きが助けとなる程度度を決定する

時空間マッチングのエラーを分析し誤りの原因を確率率率で導出する（フレーム数動きの分散画像特徴ノイズの関数）

[34243334]は時空間マッチングの利利点を指摘していたが本論論文はマッチング精度度の向上のために動きを用いる手法の程度度や性質を研究する

6つのステレオビデオを用いて検証を行行った

Spacetime stereo Shape recovery for dynamic scenes [L Zhang B Curless and S Seitz CVPR2003] Spatiotemporal stereo and scene flow via stequel matching [M Sizintsev and R Wildes PAMI2012] Temporally consistent disparity and optical flow via efficient spatio-temporal filtering [A Hosni C Rhemann M Bleyer and M Gelautz PRCAIVT2012] Spacetime stereo A unifying framework for depth from triangulation [PAMI2005] Dynamic depth recovery from multiple synchronized video streams [H Tao H Sawhney and R Kumar CVPR2001] Spatiotemporal descriptor for wide-baseline stereo reconstruction of non-rigid and ambiguous scenes [ECCV2003]

なかの

Depth-Based Patch Scaling for Content-Aware Stereo Image Completion2

どんなもの

どうやって有効性を示した

ステレオでデプスを取り物体の三次元情報を使ってインペインティングを行行う

bookのデータセット背景が繰り返しパターンが多いものを使っている

なかの

Fast Semi-dense Surface Reconstruction from Stereoscopic Video in Laparoscopic Surgery3

どんなもの

手法の流流れ

次に読むべき論論文は

腹腔内手術の際にステレオビデオから高速に物体の三次元再構成を行行う研究

Evaluation of stereo matching costs on images with radiometric differences [Hirschmueller H Scharstein D PAMI2008]

スコープカメラから画像取得GPUで演算する 視差を算出しフィルタにかける距離離に変換 点群を再びフィルタにかけて三次元再構成

なかの

3D Reconstruction from Accidental Motion4

どんなもの

技術や手法のキモはどこ

議論論はある

数秒のビデオ（単眼）から三次元再構成を行行う 手ぶれなどの動きから再構成が可能で特定の動きや機材を必要としない

短い基線長でも再構成が可能（3mmの基線長）

基線長が短いため背景の精度度が低くなる リフォーカス画像作成には十分 練習では上手く動作したが検証がまだ必要

なかの

Panoramic Video from Unstructured Camera Arrays5

どんなもの

技術や手法のキモはどこ

議論論はある

複数のカメラを用いたパノラマ撮影を行行う その際に不不自然さがないような動画を作成する

不不自然さを感じる感覚特性を提示しそれにのっとって対策を講じている

一つのカメラの解像度度と品質を向上させるよりも複数台のカメラを組み合わせることがはるかに簡単で有益である専門家でなくてもGoProのカメラセットを組み合わせることは容易易

カメラの配置は厳密に決められていない完璧な時間同期やローリングシャッターの不不足のような実撮影での問題もクリアしている

先行行研究と比べてどこがすごい

どうやって有効性を示した左のシステムは14台のカメラを使用 右のシステムはGoProを5台使用

Disney 201558

なかの

Floating Scale Surface Reconstruction6

どんなもの

技術や手法のキモはどこ

流流動的にスケールを変えられる三次元再構成手法

サンプル規模に依存するパラメータがない rarrどのスケールのサンプルにも対応できる

siggraph2014

なかの

A Super Resolution Reconstruction Scheme for Mixed Spatio-Temporal Stereo Video7

どんなもの

技術や手法のキモはどこ

ビデオ超解像アルゴリズム

二台のカメラを使用 一台は低解像度度で高速一台は高解像度度で低速

HHI 3DV ftp siteのBookarrivalとbeergadenを使用どうやって有効性を示した

なかの

What Is a Good Day for Outdoor Photometric Stereo8

どんなもの

先行行研究と比べてどこがすごい

議論論はある

次に読むべき論論文は

屋外における照度度差があるステレオの研究 屋外でステレオを行行う際に有利利or不不利利な日照条件を明らかにする

点光源を用いた研究は行行われていたが屋外での研究はされていなかった

晴れより曇りの方が精度度が良良い雲があるから特徴量量を取りやすい雑音を白色ガウスモデルを想定 季節ごとのデータセットを利利用してみても良良い

Time-lapse photometric stereo and applications [F Shen K Sunkavalli N Bonneel S Rusinkiewicz H Pfisterand X Tong2014] Outdoor photometric stereo [L-F Yu S-K Yeung Y-W Tai D Terzopoulos and T FChan ICCP2013]

どうやって有効性を示した屋外の照明に関するHDR環境マップのデータベースを利利用

Disney 2015424

なかの

COLORBRUSH ANIMATED DIFFUSION FOR INTUITIVE COLORIZATION SIMULATING WATER PAINTING 9

どんなものアニメを水彩画で描いたように変換する 水彩画を描くには経験が必要であるがそれを作成するアルゴリズムを考案絵具が水によりどうにじむかシュミレーションしている

Disney 20141027 ICIP2014

次に読むべき論論文はGabor-space geodesic active contoursrdquo In Algebraic Frames for the Perception-Action Cycle [C Sagiv NA Sochen and YY Zeevi 2000] Practical temporal consistency for image-based graphics applications [M Lang O Wang T Aydin A Smolic and M Gross SIGGRAPH2012] Computer-Generated Watercolor [CJ Curtis SE Anderson JE Seims KW Fleischer and DH Salesin SIGGRAPH1997]

なかの

From Sound to Sight Using Audio Processing to enable Visible Light Communication 10

どんなもの光に情報を載せる技術プロジェクトページがあって光関係の研究が8個載っている

httpwwwdisneyresearchcomprojectvisible-light-communication

ビデオのURL httpwwwdisneyresearchcomwpcontentuploadsPub_InvisibleLightCommunication_Siggraph14_videomp4

• 201211106_KeisukeKawahara
• 201311421_KeitaKanai_02
• 201313095_AkiraIshii_02
• 201413109_YuukiKubo_02
• 201513110_SatoshiHashizume_02
• 鬼輪講マラソン③_1
• 鬼輪講マラソン③_2

2 201313095

SVM

9 9TapSense 4

95 99

TapSenseDelete

bull  HarrisonCTanDandMorrisDSkinputappropriat-ingthebodyasaninputsurfaceInProcCHI10453-462

TapSenseampEnhancingampFingerampInteracEonamponampTouchampSurfacesamp(UISTrsquo11)

ChrisHarrisonJuliaSchwarzSco]EHudson

h]pswwwyoutubecomwatchv=-oN96cucBr4

2 201313095

13

13

22 SVM

13 FingersWholeArmForearm 876 Fingers877 WholeArm 955

883 Forearm 815

833

GUI

bull  SaponasTSTanDSMorrisDandBalakrishnanRDemonstraEngthefeasibilityofusingforearmelectromyographyformuscle-computerinterfacesInProcCHIrsquo09515-24

SkinputampAppropriaEngamptheampBodyampasampanampInputampSurfaceamp(CHIrsquo10)

ChrisHarrisonDesneyTanDanMorris

h]pswwwyoutubecomwatchv=g3XPUdW9Ryg

2 201313095

Fiberio

10 330 150

148 2

Fiberio

bull  MatsushitaNandRekimotoJHoloWallDesigningaFingerHandBodyObjectSensiEveWallProcUIST97209ndash210

FiberioampAampTouchscreenampthatampSensesampFingerprintsamp(UISTrsquo13)

ChrisEanHolzPatrickBaudisch

h]pswwwyoutubecomwatchv=p1a5yLzuTqA

2 201313095

3D

3D

bull  GeigerMVollertsenFTheMechanismsofLaserFormingCIRPANNALSlsquo93421301-304

bull  WillisKDDXuCWuJKLevinGGrossMDInteracEvefabricaEonnewinterfacesfordigitalfabricaEonProcTEI11pp69-72

LaserOrigamiampLaserCugngamp3DampObjectsamp(CHIrsquo13)

StefanieMuellerBasEanKruckPatrickBaudisch

h]pswwwyoutubecomwatchv=arjRtCjI9AQ

2 201313095

bend

bull  HyunyoungSongFranccediloisGuimbreEegravereChangHuHodLipsonModelCraycapturingfreehandannotaEonsandeditsonphysical3DmodelsProceedingsofthe19thannualACMsymposiumonUserinterfacesoywareandtechnologyOctober15-182006MontreuxSwitzerland

InteracEveampConstrucEonampInteracEveampFabricaEonampofampFuncEonalampMechanicalampDevicesamp(UISTrsquo12)

StefanieMuellerPedroLopesPatrickBaudisch

h]pdlacmorgcitaEoncfmid=23801162380191

2 201313095

3D

3D

bull  SavageVSchmidtRGrossmanTFitzmauriceGandHartmannBAseriesoftubesAddinginteracEvityto3dprintsusinginternalpipesInProcUIST14(2014)

3DampPrinEngampPneumaEcampDeviceampControlsampwithampVariableampAcEvaEonampForceampCapabiliEesamp(CHIrsquo15)amp

MarynelVazquezEricBrockmeyerRutaDesaiChrisHarrisonSco]EHudson

h]pswwwyoutubecomwatchv=-4gFYvhkz0Y

2 201313095

OpenFab 3D

fablets

3 3

bull  CHENDMATUSIKWSITTHI-AMORNPDIDYKPANDLEVIND2013Spec2FabAreducer-tunermodelfortranslat-ingspecificaEonsto3DprintsACMTransGraph324(July)

OpenFabampAampProgrammableampPipelineampforampMulEMaterialampFabricaEonamp(SIGGRAPHrsquo13)

KirilVidimcˇeSzu-PoWangJonathanRagan-KelleyWojciechMatusik

2 201313095

3D

3D

3D

3D14 30 13 67

244

14

3D

bull  MuellerSKruckBBaudischPLaserOrigamiLaser-Cunng3DObjectsProcCHIrsquo132585-2592

faBrickaEonampFastamp3DampPrinEngampofampFuncEonalampObjectsampbyampIntegraEngampConstrucEonampKitampBuildingampBlocksamp(CHIrsquo14)amp

StefanieMuellerTobiasMohrKersEnGuentherJohannesFrohnhofenPatrickBaudisch

h]pswwwyoutubecomwatchv=BlO6YRcLJjE

Touching13 the13 Void13 Direct-shy‐Touch13 Interac4on13 for13 Intangible13 Displays(CHIrsquo10)Li-Wei Chan Hui-Shan Kao Mike Y Chen Ming-Sui Jane Yi-Ping Hung

201413109　久保勇貴 2（鬼コース）13

どんなもの13

空中像へのタッチのエラーに関する調査及び影や音のフィードバックを付与することによるパーフォーマンス向上を示した研究13

先行研究と比べてどこがすごい13

平面画像をタッチする際の奥行きに関するエラーの正確な取得を初めて検証13

技術や手法のキモはどこ13

２つの赤外線カメラを用いた正確なタッチの検出13

どうやって有効だと検証した13

タッチ時の奥行きの正確さに関する被験者実験を実施またタッチする際に影や音を付けた際の反応時間を被験者実験で検証13

議論はある13

ユーザは慣れるまで影や音のフィードバックが必要だがそのあとは必要なくなる13

次に読むべき論文は13

MirageTable13 （CHI12） 13

MirageTable13 Freehand13 Interac4on13 on13 a13 Projected13 13 Augmented13 Reality13 Tabletop(CHIrsquo12)

Hrvoje Benko Ricardo Jota Andrew D Wilson

201413109　久保勇貴 2（鬼コース）13

どんなもの13

テーブル上においてバーチャルな物体をリアルタイムで現実でものを動かすことと同様な動作に操作可能なシステム13

先行研究と比べてどこがすごい13

現実の物体をリアルタイムで画面に取りこむことができ質の高いフリーハンドインタラクションを実現した点13

技術や手法のキモはどこ13

色深度前景頭追跡プロキシパーティクルを駆使したリアルタイムメッシュの作成13

どうやって有効だと検証した13

凹凸など例外な表面に対しての投影した際の画像の質についての評価実験また仮想物体の奥行き知覚に関する実験も行った13

議論はある13

前面のみしかキャプチャしていないため差が生じる握っている場所の再現は未解決な課題である13

次に読むべき論文は13

Hirsch13 et13 al13 201413 (SIGGRAPHrsquo14)13

A13 Compressive13 Light13 Field13 Projec4on13 System13 (SIGGRAPHrsquo14)MaChew13 Hirsch13 Gordon13 Wetzstein13 Ramesh13 Raskar

201413109　久保勇貴 2（鬼コース）13

どんなもの13

通常の3Dディスプレイに比べて解像度輝度コントラストを改善した圧縮ライトフィードディスプレイ13

先行研究と比べてどこがすごい13

多視点立体視を複数でなく１台のプロジェクタを用いて実現した13

技術や手法のキモはどこ13

受動的スクリーンと高速切り替えプロジェクタによる新しい光学設計13

どうやって有効だと検証した13

4つのシーン例を投影したものを示したアニメーションの3D効果について観察を行った13

議論はある13

光路長を広げると観察できる画質が大幅に制限され他のライトフィードビューと混線が生じる13

次に読むべき論文は13

Butler13 et13 al13 201113

Vermeer13 Direct13 Interac4on13 with13 a13 360deg13 Viewable13 3D13 Display(UISTrsquo11) Alex Butler Otmar Hilliges Shahram Izadi Steve Hodges David Molyneaux David Kim

201413109　久保勇貴 2（鬼コース）13

どんなもの13

映し出された3Dオブジェクトとインタラクションを行えるシステム13

先行研究と比べてどこがすごい13

ディスプレイ内の画像とのインタラクションを提案ボリュームディスプレイを支援する新しいセンシング法の提案13

技術や手法のキモはどこ13

パラボラ鏡に取り付けた赤外線カメラセンサによる指先検出13

どうやって有効だと検証した13

アプリケーション例を示した13

議論はある13

パラボラ鏡の大きさよりもディスプレイサイズが小さくなってしまう13

次に読むべき論文は13

Hirsch13 et13 al13 201213

8D13 Interac4ng13 with13 a13 Relightable13 Glasses-shy‐Free13 3D13 Display(CHIrsquo12)Li-Wei Chan Hui-Shan Kao Mike Y Chen Ming-Sui Jane Yi-Ping Hung

201413109　久保勇貴 2（鬼コース）13

どんなもの13

ライトフィードによる入力とライトフィールドによる表示を行うリアルタイム8Dディスプレイ13

先行研究と比べてどこがすごい13

リアルタイムでの8Dディスプレイの実現（先行研究は7fps）13

技術や手法のキモはどこ13

GPUにおけるレンダリング処理13

どうやって有効だと検証した13

MRIデータを用いたディスプレイのデモを示した13

議論はある13

現在はグレースケールの入力のみだがカラーでの入力できればより強力になるだろう13

次に読むべき論文は13

Sahoo13 et13 al13 201513

Control13 of13 Non-shy‐Solid13 Diffusers13 by13 Electrosta4c13 Charging13 (CHIrsquo15) Deepak Ranjan Sahoo Diego Martinez Plasencia Sriram Subramanian

201413109　久保勇貴 2（鬼コース）13

どんなもの13

シャボン玉や霧などの非固体を電場による制御を試みた研究13

先行研究と比べてどこがすごい13

非固体の形や位置の制御法を提案した点13

技術や手法のキモはどこ13

[Intra13 et13 al13 11]中のldquowire-shy‐to-shy‐Cylinderdquoを用いたエアゾール粒子の帯電13

どうやって有効だと検証した13

霧及びシャボン玉によるディスプレイのアプリケーション例で実際に制御して見せた13

議論はある13

風による影響を本手法は打ち消すことができた13

次に読むべき論文は13

Barnum13 et13 al13 201013

A13 Mul4-shy‐Layered13 Display13 with13 Water13 Drops(SIGGRAPHrsquo10)Peter C Barnum Srinivasa G Narasimhan Takeo Kanade

201413109　久保勇貴 2（鬼コース）13

どんなもの13

複数層の落下水滴にプロジェクションマッピングを行いディスプレイとした研究13

先行研究と比べてどこがすごい13

水滴の制御を行うことで単一のプロジェクタによって複数層の映像投影を可能とした点13

技術や手法のキモはどこ13

[Ambravaneswaran13 et13 al13 2002]及び本研究における実験結果に基づく水滴生成13

どうやって有効だと検証した13

複数のディスプレイ例を示した13 例）顔の投影水槽シミュレータなど13

議論はある13

本当の3Dディスプレイにするにはより多くの水滴制御が必要13

次に読むべき論文は13

Lee13 et13 al13 200713

An13 Immaterial13 Depth-shy‐Fused13 3D13 Display(VRSTrsquo07)Cha Lee Stephen DiVerdi Tobias Humlollerer

201413109　久保勇貴 2（鬼コース）13

どんなもの13

２つのスクリーンを駆使し3Dディスプレイを実現するdepth-shy‐fused13 3D(DFD)に関する評価を行いその結果よりディスプレイを提案した研究13

先行研究と比べてどこがすごい13

DFDが任意のスクリーン設定及び見る位置に対して有効であることを示した13

技術や手法のキモはどこ13

６通りのスクリーン組合せから２つを抽出し見え方の違いを検証した点13

どうやって有効だと検証した13

６通りのスクリーンについて立体的に見えるか被験者実験を実施その後それぞれに有意差がみられるか調べた13

議論はある13

ステレオイメージを認めることができなかったユーザに対しても強い3D効果が見られた13

次に読むべき論文は13

Tokuda13 et13 al13 201013

Cloud13 Display13 (ACErsquo10)Yutaka Tokuda Yasuhiro Suzuki Kunihiro Nishimura Tomohiro Tanikawa Michitaka Hirose

201413109　久保勇貴 2（鬼コース）13

どんなもの13

煙の渦輪を用いた空間を埋めるディスプレイ13

先行研究と比べてどこがすごい13

制御可能な手法により高所へのパーティクルを運搬することに着目した点13

技術や手法のキモはどこ13

コンピュータによって制御が行われる空気砲アレイ13

どうやって有効だと検証した13

箱の中で実験を行い安定して渦輪をできるようにした実際にデモを行ったことを示した13

議論はある13

今の試作機をより早くリフレッシュ速度を高めることによりより濃く空間を埋められることを目指す13

次に読むべき論文は13

Sato13 et13 al13 200913

Par]cle13 Display13 System　(JVRC09)13 -shy‐13 A13 Large13 Scale13 Display13 for13 Public13 Space13 -shy‐

Munehiko13 Sato13 Yasuhiro13 Suzuki13 13 Atsushi13 Hiyama13 Tomohiro13 Tanikawa13 Michitaka13 Hirose

201413109　久保勇貴 2（鬼コース）13

どんなもの13

パーティクルディスプレイによる公共スペースのための大画面ディスプレイの提案13

先行研究と比べてどこがすごい13

公共スペースにおける要求と制限に基づいたシステムを提案した点13

技術や手法のキモはどこ13

実験に基づく表示画像のスクロール時間の制御13

どうやって有効だと検証した13

Aという文字の知覚実験によって 適な点滅周期の調査を行った13

議論はある13

現在の試作機を組合せより高解像度にする必要がある13

次に読むべき論文は13

Kwon13 et13 al13 201513

FugaciousFilm13 Exploring13 Aen4ve13 Interac4on13 with13 Ephemeral13 Material13 (CHIrsquo15)Hyosun13 Kwon13 Shashank13 Jaiswal13 Steve13 Benford13 Sue13 Ann13 Seah13

13 Peter13 BenneC13 Boriana13 Koleva13 Holger13 Schnaumldelbach

201413109　久保勇貴 2（鬼コース）13

どんなもの13

膜を押す引く飛び出ることができる新しい石鹸膜インタフェースの提案13

先行研究と比べてどこがすごい13

徐々に消えるインタフェースは高い注意を有するインタラクションを提供するという点を示したこと13

技術や手法のキモはどこ13

水グリセリンを201の対比で混ぜることでldquopoprdquoがきれいになるようにしかつ膜の耐久性を向上させた13

どうやって有効だと検証した13

３目並べを用いた被験者実験を実施13 ユーザは膜を割ると負け膜を自分のマスにするにはタッチ押す引くの書かれた通りの操作を行う13

議論はある13

ユーザに精密な動作を要求することはとりわけ注意を払うことを誘発する13

次に読むべき論文は13

Wetzstein13 et13 al13 201213

Tensor13 Displays13 Compressive13 Light13 Field13 Synthesis13 using13 Mul4layer13 Displays13 with13 Direc4onal13 Backligh4ng(SIGGRAPHrsquo12)

Gordon13 Wetzstein13 Douglas13 Lanman13 MaChew13 Hirsch13 Ramesh13 Raskar

201413109　久保勇貴 2（鬼コース）13

どんなもの13

視点によって異なる立体映像を見ることができる複数の層からなるディスプレイ13

先行研究と比べてどこがすごい13

既存の手法を合成したcomputa(onal13 displaysというディスプレイの新しいフレームワークを提案した13

技術や手法のキモはどこ13

時分割で視差マスクを表示することでユーザの視線ごとに立体像を表現する13

どうやって有効だと検証した13

通常のディスプレイ３層LCDLCD及び指向性バックライトの例による比較13 13

議論はある13

波紋を含むこと色チャンネルが悪影響を与える相互反射不均一などの問題が見られた13

次に読むべき論文は13

Matoba13 et13 al13 1213

SplashDisplay(VRICrsquo12)Yasuo Matoba Taro Tokui Ryo Sato Tochiki Sato Hideki Koike

201413109　久保勇貴 2（鬼コース）13

どんなもの13

パーティクルにCGを投射しパーティクルがテーブル上に投げられると爆発しパーティクルが噴きあがる13

先行研究と比べてどこがすごい13

ビーズがミリメートルからメートル単位までZ軸方向について空中で奥行きを表現する13

技術や手法のキモはどこ13

スピーカによって風力が発生させビーズを舞い上げる点13

どうやって有効だと検証した13

ビーズを投げると花火が打ちあがっているかのようなアプリケーション例を示した13

議論はある13

高いレベルの表現及び幅広い入力範囲を提供できた13

次に読むべき論文は13

Kim13 et13 al13 1413

MARIO13 Mid-shy‐air13 Augmented13 Reality13 Interac4on13 with13 Objects13 (ECrsquo14)Hanyuool13 Kim13 13 Issei13 Takahashi13 Hiroki13 Yamamoto13 Satoshi13 Maekawa13 Takeshi13 Naemura

201413109　久保勇貴 2（鬼コース）13

どんなもの13

350times300times250のテーブル上のスペースにおいて自由に動かせる空中像を造りだすことができる13

先行研究と比べてどこがすごい13

凹面鏡や凹レンズのように曲面でないため画像の歪曲が発生しない13

技術や手法のキモはどこ13

Aerial13 Imaging13 Plate(AIP)を用いた空中像の生成及びそのためのディスプレイ移動装置13

どうやって有効だと検証した13

左右からの視差の考慮及び奥行き表現時の画像提示視野角の検証などを行った13 13

議論はある13

投影しているひよこを叩いたり払いのけたりするような動作がデモ中見られた13

次に読むべき論文は13

Tactile Feedback on Flat Surfaces for the Visually Impaired13Ali Israr Olivier Bau Seung-Chan Kim Ivan Poupyrev13

どのようなものか 視覚障害者のための触覚を用いた視覚代用デバイス 先行研究と比べてどこがすごいか 道案内をしてくれる機械などはあるが日用品の場所を教えたり探すのを手伝ってくれるデバイスはない 技術や手法のキモ タッチパネルとカメラを搭載したデバイス 触覚を与える技術はTeslaTouchを利用 色を基準にオブジェクトの位置を認識 有用性の確認 視覚障害者二人に対して実験このデバイスを使

わなくても各自の方法で物を見つけられるが間違えることが多いこのデバイスを使用することで間違えることなく正確に物の位置を特定できた 課題 一つの色でしか判断できない 触感のあるなしでしか情報を伝えられない 関連論文 TeslaTouch [Bau et al 2010]

20150522 橋爪智 2鬼

Fingernail-Mounted Display of Attraction Force and Texture13Masataka Niwa Tomoko Nozaki Taro Maeda and Hideyuki And13

どのようなものか 指先に取り付けて触感と力を両方表現できるデバイス 先行研究と比べてどこがすごいか 触感と引力をそれぞれ表現するデバイスはあるが両方を一つのデバイスで表現した例は少ない 引力は自由な方向に付加することができる 技術や手法のキモ 偏心に重さを付けた円盤を4枚使用する 5-9Hz 引力　100-200Hz 触感 それぞれの円盤の位相や回転数を調整することで

触感と力 を表現する 4つのモータを使いそれぞれの円盤を独立して制御する 有用性の確認 4人の男性に対して実験80以上の精度で認識できた 関連論文 The nail-mounted attraction forcebump display [Nozaki et al 2008]

20150522 橋爪智 2 鬼

Gilded gait reshaping the urban experience with augmented footsteps13Yuichiro Takeuchi13

どのようなものか 靴に装着し地面の触感をコントロールするデバイス 先行研究と比べてどこがすごいか 単独で動作しなかったり特定の環境のみでしか動作しなかったりするrarr靴単体で動作環境に依存しない 技術や手法のキモ 6個の振動パネルを取り付けゲルでカバー app modulesを取り替えることができ様々な機能を付加できる（GPSsound) 4種類の地面を再現

bull  Hard Ground 振動させない bull  Soft Ground すべてのパネルを振動 bull  Bumpy Ground ジグザグに振動 bull  Godzilla 全てのパネルを振動何回か繰り返す 課題 モーターを使っているため波形をプログラミングできないrarr圧電素子を使用する 関連論文 Haptic Shoes [Fu et al 2010]

20150522 橋爪智 2鬼

ExoInterfaces novel exosceleton haptic interfaces for virtual reality augmented sport and rehabilitation

Dzmitry Tsetserukou Katsunari Sato Susumu Tachi13

どのようなものか 腕に装着し物理的なinteractionを可能にするデバイス 先行研究と比べてどこがすごいか Exoskeleton 力を増幅するためだが重たく危険なこともある String-based wireが視界をまたぐ動きに制限がある rarr腕の動きに制限を与えない安全 技術や手法のキモ 「FlexTorque」人間の筋肉の構造を再現するベルトとモーターを使用する肩の近くに装着することで

腕に負担がかかりにくい 触覚feedback弱いトルク 運動を支援強いトルク 課題 物理的な接触を表現するゲームやスポーツにより没頭させるリハビリのサポートをする視覚障害者の支援（ものの場所を教える） 関連論文 FlexTorque [Dzmitry et al 2010]

20150522 橋爪智 2 鬼

Perception of Ultrasonic Haptic Feedback on the Hand Localisation and Apparent Motion13

Graham Wilson Tom Carter Sriram Subramanian Stephen Brewster13

どのようなものか 超音波を用いた触覚フィードバック有効性の検討を行う 先行研究と比べてどこがすごいか 超音波触覚フィードバックは比較的新しく研究や操作方法に関する知識が少ない 腕を自由に動かすことができ小さいものは着用可能 技術や手法のキモ 88のアレイ状に超音波発生器を設置

有効性の確認 bull  局所的な触感 　　　25箇所に分割しそれぞれに超音波を当てる 　　　触感を感じた989 　　　場所の誤差85mm bull  手のひらを動く触感 上下左右に動く 　　　動いてると感じた629

20150522 橋爪智 2 鬼

Friction Measurements on a Large Area TPaD13Nicholas D Marchuk J Edward Colgate Michael A Peshkin13

どのようなものか 超音波の振動により触感を与える 先行研究と比べてどこがすごいか ガラス板を使うので透明後ろにディスプレイを配置可能 技術や手法のキモ 「Squeeze Film Effect（スクイズ膜効果）」 ガラス板に取り付けた圧電素子の円盤に高周波信号

をかける 実験 振動しない部分＝摩擦が発生しない部分が発生周波数により場所が変わる rarr摩擦を大きさをかける力の大きさから計測 rarr指の場所に合わせて複数の周波数を使い分ける 関連論文 T-PaD[Winfield et al 2007]

20150522 橋爪智 2 鬼

STIMTAC a Tactile Input Device with Programmable Friction13Michel Amberg Freacutedeacuteric Giraud Betty Semail Paolo Olivo Geacutery Casiez Nicolas Roussel13

どのようなものか 触感を与えられるタッチデバイス 先行研究と比べてどこがすごいか LATPaD サイズ大きいノイズが大きい TeslaTouch 高い電圧付加が必要GNDに接続しなければいけない

技術や手法のキモ 「Squeeze Film Effect」超音波を用いて振動を与える 圧電性セラミックを電極にコーディング 指トラッキングは力センサを用いる 活用法 マウスキーボード絵を描く 関連論文 LATPaD[Vincent et al 2011] TeslaTouch[Bau et al 2010]

20150522 橋爪智 2 鬼

Surround Haptics Tactile Feedback for Immersive Gaming Experiences Ali Israr Seung-Chan Kim Ivan Poupyrev Jan Stec13

どのようなものか ゲームに合わせて高解像度の触覚フィードバックをユーザーに与える椅子 先行研究と比べてどこがすごいか 荒く配置した安価な振動アクチュエータで高解像度の触覚フィードバックを行える 一点の振動連続した動き範囲の振動などを再現

技術や手法のキモ 仮想的な振動アクチュエータをいくつかの振動アクチュエータを使って作り出す physical-physicalphysical-virtualvirtual-virtual ゲームにHaptics Engineを導入しHaptics APIを用いてHaptic Displayを操作する 関連論文 Exploring Surround Haptics Displays[Israr et al 2010]

20150522 橋爪智 2 鬼

Audio-Haptic Feedback in Mobile Phones Angela Chang Conor OrsquoSullivan13

どのようなものか haptics機能のついてない携帯電話にオーディオ機能を利用した触覚フィードバックを追加する 先行研究と比べてどこがすごいか 簡単に作れてnon-haptic mobile devicesでも大丈夫 技術や手法のキモ 「MultiFunction Transducer(MFT)」 スピーカーから音と信号の両方を出力できる

bull  Haptic Inheritance 　　音を2つの周波数帯に分ける bull  Synthesis and Matching 　　低周波数帯(20-300Hz)を使い触感を伝える 有効性の検討 42人の人を対象に実験を行う83の人が触感を感じた

20150522 橋爪智 2 鬼

Resolution of Sleep Deprivation Problems using ZZZoo Pillows13Shunsuke Yanaka Motoki Ishida13

どのようなものか 近年不眠症の人が多い rarr誰かと接していると安心し睡眠に導入しやすくなる rarrまるで添い寝をしているようなリアルな抱きまくらを使う 技術や手法のキモ breathing sensation 風船を使って人の呼吸を再現肺の形の風船弱く長い呼吸をする

heating お湯を使って人の体温を再現45 有効性の確認 84人の人が実験 呼吸が睡眠を誘ったかrarr61 体温が睡眠を誘ったかrarr85 関連論文 The Impact of Sleep Disorders on Social Life[Komada et al 2007]

20150522 橋爪智 2 鬼

まとめ13超音波 モーター 風

20150522 橋爪智 2 鬼

コイル 電気刺激 Electrovibration

振動 音 お湯

なかの

Temporally Consistent Disparity and Optical Flow via Efficient Spatio-temporal Filtering1

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示した

議論論はあるか

時間的に一定の視差を算出する手法静止画ステレオよりも精度度が良良いことを示す従来よりも推定精度度が良良いオプティカルフローも算出する

一枚の静止画に対するフィルタリング[1]をステレオ動画に拡張している

ケンブリッジのステレオ動画のデータセットを利利用 実写動画に対する比較も行行うノイズ耐性も検証する

フィルタベースとエネルギーベースの関係性を良良り理理解することで推定精度度を上げる

実装が簡単でリアルタイム視差推定が可能

Fast Cost-Volume Filtering for Visual Correspondence and Beyond [Rhemann C Hosni A Bleyer M Rother C Gelautz M CVPR2011] Real-time Spatiotemporal Stereo Matching Using the Dual-Cross-Bilateral Grid [Richardt C Orr D Davies I Criminisi A Dodgson NA ECCV2010] Secrets of optical flow estimation and their principles [Sun D Roth S Black MJ 2010] Motion estimation with non-local total variation regularization [Werlberger M Pock T Bischof H CVPR2010] Temporally Consistent Disparity Maps from Uncalibrated Stereo Videos [Bleyer M Gelatuz M ISPA2011]

なかの

SymStereo Matching using Induced Symmetry (2014)2

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示した

議論論はあるか

画像の対称性を用いてステレオマッチングを行行う 左右の画像を反転させて重ね合わせることで対称性を測る

絵的な類似の代わりに対称性を使う今まで対称性を用いる手法はなく新規性が大きい

三つのSymmetry-baseの手法で精度度を検証従来手法よりも精度度が向上しているMiddlebury Oxford Corridorfountain-P11のデータセット使用

ステレオの問題である不不連続な箇所オクルージョン部分は未解決である演算時間はやや増加

1-Dラインのコストを考える今までは撮像面に対して平行行な平面でデプスを考えていたが垂直な平面を考える

BT[Birchfield and Tomasi 1998] Census transform[Zabih and Woodfill 1994] Log N[Kovesi 1997] radio-metoric differences[Hirschmuller Scharstein 2009]

なかの

Camouflaging an Object from Many Viewpoints3

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

多くの視点から三次元の物体をカモフラージュするカモフラージュによってオクルージョン部分の不不連続がどの程度度生じるか他の視点ではどれほどになるかの検証

MRF（Markov Random Fields）ベース

新しい三次元物体のカモフラージュモデルを構築 37種類のデータセットを作る

箱形の物体に対してカモフラージュ処理理を施し 結果を評価する

オクルージョン不不連続テクスチャの歪みが問題 照明や画像の貼りつけに制限あり

なかの

Aliasing Detection and Reduction in Plenoptic Imaging4

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

カメラアレイ撮影の角度度のエイリアシングを除去するエイリアシングの探索索と打ち消しを行行う

周波数領領域ではなく空間領領域で探索索を行行う

先行行研究がフィルタデモザイキング再パラメータ調整などの前処理理でエイリアシング除去を行行うのに対しエイリアシング探索索後にリフォーカスの段階でエイリアシングを取り除く

8times8の平行行カメラアレイで検証するカメラ間の 基線長は70mm

今回は基線長が長いデータセットを使った 次はLytroなどのマイクロレンズアレイで検証する

Globally consistent multi-label assignment on the ray space of 4d light fields [S Wanner C Straehle B Goldluecke CVPR2013] Lineassisted light field triangulation and stereo matching [Z Yu X Guo H Lin A Lumsdaine J Yu ICCV 2013]

なかの

Globally Consistent Multi-Label Assignment on the Ray Space of 4D Light Fields5

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

四次元ライトフィールドの光線情報において マルチラベルの領領域分割を行行う

深度度情報光線情報を用いて領領域分割することで 二次元（空間）情報だけでは分割が難しかった 領領域を分割可能とする

The light field camera Extended depth of field aliasing and superresolution [T Bishop P Favaro IEEE Transactions on Pattern Analysis and Machine Intelligence 2012]

なかの

Line Assisted Light Field Triangulation and Stereo Matching6

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

光線情報を利利用してステレオマッチングの精度度を 向上させる手法三角測量量の誤差を減らす

Light Field Stereo Matchingとかいう手法 グラフ構造を作成

Variational light field analysis for disparity estimation and super-resolution [S Wanner and B Goldlumluecke 2013]

なかの

Adaptive stereo similarity fusion using confidence measures 20157

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

ステレオマッチングの新しい方式fusion weightsを提案複数の手法を組み合わせてコスト計算を行行う手法付録に既存手法のコスト関数一覧あり

パラメータに依存する手法を用いないことで高速化を図っている

一つのアルゴリズムでは異異なる特性を持つ領領域全てに対して適切切なマッチングはできない複数を組み合わせることでそれを補う13種と多い

middleburyとKITTIのデータセットで評価

一枚あたり03sと高速だが001sとより高速なアルゴリズムが存在する

Segment-based stereo matching using belief propagation and a self-adapting dissimilarity measure [A Klaus M Sormann K Karner ICPR2006] On building an accurate stereo matching system on graphics hardware [X Mei X Sun M Zhou S Jiao H Wang X Zhang ICCV2011] Similarity measures for depth estimation [K Wegner O Stankiewicz 3DTV-CON2009] On accurate dense stereo-matching using a local adaptive multi-cost approach [C Stentoumis L Grammatikopoulos I Kalisperakis G Karras ISPRS2014] A quantitative evaluation of confidence measures for stereo vision [X Hu P Mordohai PAMI2012]

なかの

SIMILARITY MEASURE FOR DEPTH ESTIMATIOM 20098

どんなもの

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

4種類の視差推定アルゴリズムを組み合わせている 類似度度の選択性の解析

Belief Propagationの枠組みを用いる

名古屋大学の多視点データベースを利利用

HHI Test Material for 3D Video [I Feldmann M Muller F Zilly R Tanger A SmolicP Kauff T Wiegand 2008] Multiview Video Test Sequence and Camera Parameters [Yo-Sung Ho Eun-Kyung Lee and Cheon Lee 2008] 1D Parallel Test Sequences for MPEG-FTV [M Tanimoto T Fujii N Fukushima 2008] Non-parametric Local Transforms for Computing Visual Correspondence [R Zabih J Woodfill 1994]

なかの

Spatiotemporal Stereo via Spatiotemporal Quadric Element (Stequel) Matching9

どんなもの

技術や手法のキモはどこ

新しいマッチング手法を提案動き考慮することなく時間情報を取り込むことができる 時間方向のエピ線を考える

オプティカルフロー推定は3D境界や低テクスチャで弱いが提案手法はロバストである

なかの

Depth Video Enhancement Based on Weighted Mode Filtering10

どんなもの

議論論はある

ノイズを含んだ低解像度度のデプスマップの質を高める手法（超解像度度とデノイズ）時間方向も使用簡単なオプティカルフローを計算し利利用する

非反復復アルゴリズムのためGPUに載せやすく高速化が考えられる

なかの

Fast Bilateral-Space Stereo for Synthetic Defocus11

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

議論論はある

次に読むべき論論文は

高速な自由焦点ぼけ画像の作成

Bilateral-spaceを提案

従来研究よりも10から100倍速くぼけ具合の精度度も良良い

ぼけを作成するというアプリケーションに利利用する距離離という面では提案手法が有益であるが実測的な距離離という面での精度度は悪い背景と前景が同じ色で近くにある場合同一ととらえてしまう

Efficient high-resolution stereo matching using local plane sweeps [S N Sinha D Scharstein and R SzeliskiCVPR2014] Bilateral filtering-based optical flow estimation with occlusion detection [J Xiao H Cheng H Sawhney C Rao and M IsnardiECCV2006] Efficient nonlocal regularization for optical flow [P Krumlahenbumluhl and V KoltunECCV2012] Real-time spatiotemporal stereo matching using the dual-cross-bilateral grid [C Richardt D Orr I Davies A Criminisi and N A DodgsonECCV2010]

どうやって有効性を示した視差推定の精度度はmiddleburyKITTI

なかの

Robust Spatiotemporal Stereo for Dynamic Scenes12

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

ステレオ動画のフレーム間情報を取り入れることでノイズ耐性を向上させるまた動きの大きなものも考える

時間を含めたウインドウの提案自動的にそのような変化に対応する画像領領域を検出する

従来の時空間ステレオと比べ大きな動きによる急激な視差の時間変化に対して頑健である

なかの

Spacetime Stereo A Unifying Framework for Depth from Triangulation13

どんなもの

先行行研究と比べてどこがすごい

space time stereoを提案ステレオカメラの視差推定でも構造光を用いた視差推定でも利利用可能 動的なシーンでの利利用も可能

フレームごとマッチングを取っていたが複数フレームでのマッチングを可能とした

なかの

Learning to Select and Order Vacation Photographs (Disney research)14

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示したあまりにもたくさん撮影した写真たちから自動的にフォトアルバムを作成する研究

複雑な視覚での区別を試みたのはこの論論文が初

５つの異異なるトピックから63の個人的な写真コレクションのデータセットを利利用し定量量的に評価する

写真間の差別かを定義する顔全体の絵何が写っているか写っていないかを評価する

Jointly aligning and segmenting multiple web photo streams for the inference of collective photo storylines [G Kim and E P Xing CVPR2013] Photo sequencing [T Basha Y Moses and S Avidan CVPR2012]

なかの

A Taxonomy and Evaluation of Dense Two-Frame Stereo Correspondence Algorithms15

どんなもの

どうやって有効性を示した

次に読むべき論論文は

ステレオマッチングに関する分類を行行う 新たなデータセットを作成する

というよりも他の手法が有効性を示すことができるようにデータセットを作成した 今ではmiddleburyのデータセットと言えばステレオ業界では超有名

High-resolution stereo datasets with subpixel-accurate ground truth

なかの

Discriminability Limits in Spatio-Temporal Stereo Block Matching1

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

spatio-temporal disparity estimationの根本的な前提の正当性を解析しマッチング処理理の際に動きが助けとなる程度度を決定する

時空間マッチングのエラーを分析し誤りの原因を確率率率で導出する（フレーム数動きの分散画像特徴ノイズの関数）

[34243334]は時空間マッチングの利利点を指摘していたが本論論文はマッチング精度度の向上のために動きを用いる手法の程度度や性質を研究する

6つのステレオビデオを用いて検証を行行った

Spacetime stereo Shape recovery for dynamic scenes [L Zhang B Curless and S Seitz CVPR2003] Spatiotemporal stereo and scene flow via stequel matching [M Sizintsev and R Wildes PAMI2012] Temporally consistent disparity and optical flow via efficient spatio-temporal filtering [A Hosni C Rhemann M Bleyer and M Gelautz PRCAIVT2012] Spacetime stereo A unifying framework for depth from triangulation [PAMI2005] Dynamic depth recovery from multiple synchronized video streams [H Tao H Sawhney and R Kumar CVPR2001] Spatiotemporal descriptor for wide-baseline stereo reconstruction of non-rigid and ambiguous scenes [ECCV2003]

なかの

Depth-Based Patch Scaling for Content-Aware Stereo Image Completion2

どんなもの

どうやって有効性を示した

ステレオでデプスを取り物体の三次元情報を使ってインペインティングを行行う

bookのデータセット背景が繰り返しパターンが多いものを使っている

なかの

Fast Semi-dense Surface Reconstruction from Stereoscopic Video in Laparoscopic Surgery3

どんなもの

手法の流流れ

次に読むべき論論文は

腹腔内手術の際にステレオビデオから高速に物体の三次元再構成を行行う研究

Evaluation of stereo matching costs on images with radiometric differences [Hirschmueller H Scharstein D PAMI2008]

スコープカメラから画像取得GPUで演算する 視差を算出しフィルタにかける距離離に変換 点群を再びフィルタにかけて三次元再構成

なかの

3D Reconstruction from Accidental Motion4

どんなもの

技術や手法のキモはどこ

議論論はある

数秒のビデオ（単眼）から三次元再構成を行行う 手ぶれなどの動きから再構成が可能で特定の動きや機材を必要としない

短い基線長でも再構成が可能（3mmの基線長）

基線長が短いため背景の精度度が低くなる リフォーカス画像作成には十分 練習では上手く動作したが検証がまだ必要

なかの

Panoramic Video from Unstructured Camera Arrays5

どんなもの

技術や手法のキモはどこ

議論論はある

複数のカメラを用いたパノラマ撮影を行行う その際に不不自然さがないような動画を作成する

不不自然さを感じる感覚特性を提示しそれにのっとって対策を講じている

一つのカメラの解像度度と品質を向上させるよりも複数台のカメラを組み合わせることがはるかに簡単で有益である専門家でなくてもGoProのカメラセットを組み合わせることは容易易

カメラの配置は厳密に決められていない完璧な時間同期やローリングシャッターの不不足のような実撮影での問題もクリアしている

先行行研究と比べてどこがすごい

どうやって有効性を示した左のシステムは14台のカメラを使用 右のシステムはGoProを5台使用

Disney 201558

なかの

Floating Scale Surface Reconstruction6

どんなもの

技術や手法のキモはどこ

流流動的にスケールを変えられる三次元再構成手法

サンプル規模に依存するパラメータがない rarrどのスケールのサンプルにも対応できる

siggraph2014

なかの

A Super Resolution Reconstruction Scheme for Mixed Spatio-Temporal Stereo Video7

どんなもの

技術や手法のキモはどこ

ビデオ超解像アルゴリズム

二台のカメラを使用 一台は低解像度度で高速一台は高解像度度で低速

HHI 3DV ftp siteのBookarrivalとbeergadenを使用どうやって有効性を示した

なかの

What Is a Good Day for Outdoor Photometric Stereo8

どんなもの

先行行研究と比べてどこがすごい

議論論はある

次に読むべき論論文は

屋外における照度度差があるステレオの研究 屋外でステレオを行行う際に有利利or不不利利な日照条件を明らかにする

点光源を用いた研究は行行われていたが屋外での研究はされていなかった

晴れより曇りの方が精度度が良良い雲があるから特徴量量を取りやすい雑音を白色ガウスモデルを想定 季節ごとのデータセットを利利用してみても良良い

Time-lapse photometric stereo and applications [F Shen K Sunkavalli N Bonneel S Rusinkiewicz H Pfisterand X Tong2014] Outdoor photometric stereo [L-F Yu S-K Yeung Y-W Tai D Terzopoulos and T FChan ICCP2013]

どうやって有効性を示した屋外の照明に関するHDR環境マップのデータベースを利利用

Disney 2015424

なかの

COLORBRUSH ANIMATED DIFFUSION FOR INTUITIVE COLORIZATION SIMULATING WATER PAINTING 9

どんなものアニメを水彩画で描いたように変換する 水彩画を描くには経験が必要であるがそれを作成するアルゴリズムを考案絵具が水によりどうにじむかシュミレーションしている

Disney 20141027 ICIP2014

次に読むべき論論文はGabor-space geodesic active contoursrdquo In Algebraic Frames for the Perception-Action Cycle [C Sagiv NA Sochen and YY Zeevi 2000] Practical temporal consistency for image-based graphics applications [M Lang O Wang T Aydin A Smolic and M Gross SIGGRAPH2012] Computer-Generated Watercolor [CJ Curtis SE Anderson JE Seims KW Fleischer and DH Salesin SIGGRAPH1997]

なかの

From Sound to Sight Using Audio Processing to enable Visible Light Communication 10

どんなもの光に情報を載せる技術プロジェクトページがあって光関係の研究が8個載っている

httpwwwdisneyresearchcomprojectvisible-light-communication

ビデオのURL httpwwwdisneyresearchcomwpcontentuploadsPub_InvisibleLightCommunication_Siggraph14_videomp4

• 201211106_KeisukeKawahara
• 201311421_KeitaKanai_02
• 201313095_AkiraIshii_02
• 201413109_YuukiKubo_02
• 201513110_SatoshiHashizume_02
• 鬼輪講マラソン③_1
• 鬼輪講マラソン③_2

2 201313095

13

13

22 SVM

13 FingersWholeArmForearm 876 Fingers877 WholeArm 955

883 Forearm 815

833

GUI

bull  SaponasTSTanDSMorrisDandBalakrishnanRDemonstraEngthefeasibilityofusingforearmelectromyographyformuscle-computerinterfacesInProcCHIrsquo09515-24

SkinputampAppropriaEngamptheampBodyampasampanampInputampSurfaceamp(CHIrsquo10)

ChrisHarrisonDesneyTanDanMorris

h]pswwwyoutubecomwatchv=g3XPUdW9Ryg

2 201313095

Fiberio

10 330 150

148 2

Fiberio

bull  MatsushitaNandRekimotoJHoloWallDesigningaFingerHandBodyObjectSensiEveWallProcUIST97209ndash210

FiberioampAampTouchscreenampthatampSensesampFingerprintsamp(UISTrsquo13)

ChrisEanHolzPatrickBaudisch

h]pswwwyoutubecomwatchv=p1a5yLzuTqA

2 201313095

3D

3D

bull  GeigerMVollertsenFTheMechanismsofLaserFormingCIRPANNALSlsquo93421301-304

bull  WillisKDDXuCWuJKLevinGGrossMDInteracEvefabricaEonnewinterfacesfordigitalfabricaEonProcTEI11pp69-72

LaserOrigamiampLaserCugngamp3DampObjectsamp(CHIrsquo13)

StefanieMuellerBasEanKruckPatrickBaudisch

h]pswwwyoutubecomwatchv=arjRtCjI9AQ

2 201313095

bend

bull  HyunyoungSongFranccediloisGuimbreEegravereChangHuHodLipsonModelCraycapturingfreehandannotaEonsandeditsonphysical3DmodelsProceedingsofthe19thannualACMsymposiumonUserinterfacesoywareandtechnologyOctober15-182006MontreuxSwitzerland

InteracEveampConstrucEonampInteracEveampFabricaEonampofampFuncEonalampMechanicalampDevicesamp(UISTrsquo12)

StefanieMuellerPedroLopesPatrickBaudisch

h]pdlacmorgcitaEoncfmid=23801162380191

2 201313095

3D

3D

bull  SavageVSchmidtRGrossmanTFitzmauriceGandHartmannBAseriesoftubesAddinginteracEvityto3dprintsusinginternalpipesInProcUIST14(2014)

3DampPrinEngampPneumaEcampDeviceampControlsampwithampVariableampAcEvaEonampForceampCapabiliEesamp(CHIrsquo15)amp

MarynelVazquezEricBrockmeyerRutaDesaiChrisHarrisonSco]EHudson

h]pswwwyoutubecomwatchv=-4gFYvhkz0Y

2 201313095

OpenFab 3D

fablets

3 3

bull  CHENDMATUSIKWSITTHI-AMORNPDIDYKPANDLEVIND2013Spec2FabAreducer-tunermodelfortranslat-ingspecificaEonsto3DprintsACMTransGraph324(July)

OpenFabampAampProgrammableampPipelineampforampMulEMaterialampFabricaEonamp(SIGGRAPHrsquo13)

KirilVidimcˇeSzu-PoWangJonathanRagan-KelleyWojciechMatusik

2 201313095

3D

3D

3D

3D14 30 13 67

244

14

3D

bull  MuellerSKruckBBaudischPLaserOrigamiLaser-Cunng3DObjectsProcCHIrsquo132585-2592

faBrickaEonampFastamp3DampPrinEngampofampFuncEonalampObjectsampbyampIntegraEngampConstrucEonampKitampBuildingampBlocksamp(CHIrsquo14)amp

StefanieMuellerTobiasMohrKersEnGuentherJohannesFrohnhofenPatrickBaudisch

h]pswwwyoutubecomwatchv=BlO6YRcLJjE

Touching13 the13 Void13 Direct-shy‐Touch13 Interac4on13 for13 Intangible13 Displays(CHIrsquo10)Li-Wei Chan Hui-Shan Kao Mike Y Chen Ming-Sui Jane Yi-Ping Hung

201413109　久保勇貴 2（鬼コース）13

どんなもの13

空中像へのタッチのエラーに関する調査及び影や音のフィードバックを付与することによるパーフォーマンス向上を示した研究13

先行研究と比べてどこがすごい13

平面画像をタッチする際の奥行きに関するエラーの正確な取得を初めて検証13

技術や手法のキモはどこ13

２つの赤外線カメラを用いた正確なタッチの検出13

どうやって有効だと検証した13

タッチ時の奥行きの正確さに関する被験者実験を実施またタッチする際に影や音を付けた際の反応時間を被験者実験で検証13

議論はある13

ユーザは慣れるまで影や音のフィードバックが必要だがそのあとは必要なくなる13

次に読むべき論文は13

MirageTable13 （CHI12） 13

MirageTable13 Freehand13 Interac4on13 on13 a13 Projected13 13 Augmented13 Reality13 Tabletop(CHIrsquo12)

Hrvoje Benko Ricardo Jota Andrew D Wilson

201413109　久保勇貴 2（鬼コース）13

どんなもの13

テーブル上においてバーチャルな物体をリアルタイムで現実でものを動かすことと同様な動作に操作可能なシステム13

先行研究と比べてどこがすごい13

現実の物体をリアルタイムで画面に取りこむことができ質の高いフリーハンドインタラクションを実現した点13

技術や手法のキモはどこ13

色深度前景頭追跡プロキシパーティクルを駆使したリアルタイムメッシュの作成13

どうやって有効だと検証した13

凹凸など例外な表面に対しての投影した際の画像の質についての評価実験また仮想物体の奥行き知覚に関する実験も行った13

議論はある13

前面のみしかキャプチャしていないため差が生じる握っている場所の再現は未解決な課題である13

次に読むべき論文は13

Hirsch13 et13 al13 201413 (SIGGRAPHrsquo14)13

A13 Compressive13 Light13 Field13 Projec4on13 System13 (SIGGRAPHrsquo14)MaChew13 Hirsch13 Gordon13 Wetzstein13 Ramesh13 Raskar

201413109　久保勇貴 2（鬼コース）13

どんなもの13

通常の3Dディスプレイに比べて解像度輝度コントラストを改善した圧縮ライトフィードディスプレイ13

先行研究と比べてどこがすごい13

多視点立体視を複数でなく１台のプロジェクタを用いて実現した13

技術や手法のキモはどこ13

受動的スクリーンと高速切り替えプロジェクタによる新しい光学設計13

どうやって有効だと検証した13

4つのシーン例を投影したものを示したアニメーションの3D効果について観察を行った13

議論はある13

光路長を広げると観察できる画質が大幅に制限され他のライトフィードビューと混線が生じる13

次に読むべき論文は13

Butler13 et13 al13 201113

Vermeer13 Direct13 Interac4on13 with13 a13 360deg13 Viewable13 3D13 Display(UISTrsquo11) Alex Butler Otmar Hilliges Shahram Izadi Steve Hodges David Molyneaux David Kim

201413109　久保勇貴 2（鬼コース）13

どんなもの13

映し出された3Dオブジェクトとインタラクションを行えるシステム13

先行研究と比べてどこがすごい13

ディスプレイ内の画像とのインタラクションを提案ボリュームディスプレイを支援する新しいセンシング法の提案13

技術や手法のキモはどこ13

パラボラ鏡に取り付けた赤外線カメラセンサによる指先検出13

どうやって有効だと検証した13

アプリケーション例を示した13

議論はある13

パラボラ鏡の大きさよりもディスプレイサイズが小さくなってしまう13

次に読むべき論文は13

Hirsch13 et13 al13 201213

8D13 Interac4ng13 with13 a13 Relightable13 Glasses-shy‐Free13 3D13 Display(CHIrsquo12)Li-Wei Chan Hui-Shan Kao Mike Y Chen Ming-Sui Jane Yi-Ping Hung

201413109　久保勇貴 2（鬼コース）13

どんなもの13

ライトフィードによる入力とライトフィールドによる表示を行うリアルタイム8Dディスプレイ13

先行研究と比べてどこがすごい13

リアルタイムでの8Dディスプレイの実現（先行研究は7fps）13

技術や手法のキモはどこ13

GPUにおけるレンダリング処理13

どうやって有効だと検証した13

MRIデータを用いたディスプレイのデモを示した13

議論はある13

現在はグレースケールの入力のみだがカラーでの入力できればより強力になるだろう13

次に読むべき論文は13

Sahoo13 et13 al13 201513

Control13 of13 Non-shy‐Solid13 Diffusers13 by13 Electrosta4c13 Charging13 (CHIrsquo15) Deepak Ranjan Sahoo Diego Martinez Plasencia Sriram Subramanian

201413109　久保勇貴 2（鬼コース）13

どんなもの13

シャボン玉や霧などの非固体を電場による制御を試みた研究13

先行研究と比べてどこがすごい13

非固体の形や位置の制御法を提案した点13

技術や手法のキモはどこ13

[Intra13 et13 al13 11]中のldquowire-shy‐to-shy‐Cylinderdquoを用いたエアゾール粒子の帯電13

どうやって有効だと検証した13

霧及びシャボン玉によるディスプレイのアプリケーション例で実際に制御して見せた13

議論はある13

風による影響を本手法は打ち消すことができた13

次に読むべき論文は13

Barnum13 et13 al13 201013

A13 Mul4-shy‐Layered13 Display13 with13 Water13 Drops(SIGGRAPHrsquo10)Peter C Barnum Srinivasa G Narasimhan Takeo Kanade

201413109　久保勇貴 2（鬼コース）13

どんなもの13

複数層の落下水滴にプロジェクションマッピングを行いディスプレイとした研究13

先行研究と比べてどこがすごい13

水滴の制御を行うことで単一のプロジェクタによって複数層の映像投影を可能とした点13

技術や手法のキモはどこ13

[Ambravaneswaran13 et13 al13 2002]及び本研究における実験結果に基づく水滴生成13

どうやって有効だと検証した13

複数のディスプレイ例を示した13 例）顔の投影水槽シミュレータなど13

議論はある13

本当の3Dディスプレイにするにはより多くの水滴制御が必要13

次に読むべき論文は13

Lee13 et13 al13 200713

An13 Immaterial13 Depth-shy‐Fused13 3D13 Display(VRSTrsquo07)Cha Lee Stephen DiVerdi Tobias Humlollerer

201413109　久保勇貴 2（鬼コース）13

どんなもの13

２つのスクリーンを駆使し3Dディスプレイを実現するdepth-shy‐fused13 3D(DFD)に関する評価を行いその結果よりディスプレイを提案した研究13

先行研究と比べてどこがすごい13

DFDが任意のスクリーン設定及び見る位置に対して有効であることを示した13

技術や手法のキモはどこ13

６通りのスクリーン組合せから２つを抽出し見え方の違いを検証した点13

どうやって有効だと検証した13

６通りのスクリーンについて立体的に見えるか被験者実験を実施その後それぞれに有意差がみられるか調べた13

議論はある13

ステレオイメージを認めることができなかったユーザに対しても強い3D効果が見られた13

次に読むべき論文は13

Tokuda13 et13 al13 201013

Cloud13 Display13 (ACErsquo10)Yutaka Tokuda Yasuhiro Suzuki Kunihiro Nishimura Tomohiro Tanikawa Michitaka Hirose

201413109　久保勇貴 2（鬼コース）13

どんなもの13

煙の渦輪を用いた空間を埋めるディスプレイ13

先行研究と比べてどこがすごい13

制御可能な手法により高所へのパーティクルを運搬することに着目した点13

技術や手法のキモはどこ13

コンピュータによって制御が行われる空気砲アレイ13

どうやって有効だと検証した13

箱の中で実験を行い安定して渦輪をできるようにした実際にデモを行ったことを示した13

議論はある13

今の試作機をより早くリフレッシュ速度を高めることによりより濃く空間を埋められることを目指す13

次に読むべき論文は13

Sato13 et13 al13 200913

Par]cle13 Display13 System　(JVRC09)13 -shy‐13 A13 Large13 Scale13 Display13 for13 Public13 Space13 -shy‐

Munehiko13 Sato13 Yasuhiro13 Suzuki13 13 Atsushi13 Hiyama13 Tomohiro13 Tanikawa13 Michitaka13 Hirose

201413109　久保勇貴 2（鬼コース）13

どんなもの13

パーティクルディスプレイによる公共スペースのための大画面ディスプレイの提案13

先行研究と比べてどこがすごい13

公共スペースにおける要求と制限に基づいたシステムを提案した点13

技術や手法のキモはどこ13

実験に基づく表示画像のスクロール時間の制御13

どうやって有効だと検証した13

Aという文字の知覚実験によって 適な点滅周期の調査を行った13

議論はある13

現在の試作機を組合せより高解像度にする必要がある13

次に読むべき論文は13

Kwon13 et13 al13 201513

FugaciousFilm13 Exploring13 Aen4ve13 Interac4on13 with13 Ephemeral13 Material13 (CHIrsquo15)Hyosun13 Kwon13 Shashank13 Jaiswal13 Steve13 Benford13 Sue13 Ann13 Seah13

13 Peter13 BenneC13 Boriana13 Koleva13 Holger13 Schnaumldelbach

201413109　久保勇貴 2（鬼コース）13

どんなもの13

膜を押す引く飛び出ることができる新しい石鹸膜インタフェースの提案13

先行研究と比べてどこがすごい13

徐々に消えるインタフェースは高い注意を有するインタラクションを提供するという点を示したこと13

技術や手法のキモはどこ13

水グリセリンを201の対比で混ぜることでldquopoprdquoがきれいになるようにしかつ膜の耐久性を向上させた13

どうやって有効だと検証した13

３目並べを用いた被験者実験を実施13 ユーザは膜を割ると負け膜を自分のマスにするにはタッチ押す引くの書かれた通りの操作を行う13

議論はある13

ユーザに精密な動作を要求することはとりわけ注意を払うことを誘発する13

次に読むべき論文は13

Wetzstein13 et13 al13 201213

Tensor13 Displays13 Compressive13 Light13 Field13 Synthesis13 using13 Mul4layer13 Displays13 with13 Direc4onal13 Backligh4ng(SIGGRAPHrsquo12)

Gordon13 Wetzstein13 Douglas13 Lanman13 MaChew13 Hirsch13 Ramesh13 Raskar

201413109　久保勇貴 2（鬼コース）13

どんなもの13

視点によって異なる立体映像を見ることができる複数の層からなるディスプレイ13

先行研究と比べてどこがすごい13

既存の手法を合成したcomputa(onal13 displaysというディスプレイの新しいフレームワークを提案した13

技術や手法のキモはどこ13

時分割で視差マスクを表示することでユーザの視線ごとに立体像を表現する13

どうやって有効だと検証した13

通常のディスプレイ３層LCDLCD及び指向性バックライトの例による比較13 13

議論はある13

波紋を含むこと色チャンネルが悪影響を与える相互反射不均一などの問題が見られた13

次に読むべき論文は13

Matoba13 et13 al13 1213

SplashDisplay(VRICrsquo12)Yasuo Matoba Taro Tokui Ryo Sato Tochiki Sato Hideki Koike

201413109　久保勇貴 2（鬼コース）13

どんなもの13

パーティクルにCGを投射しパーティクルがテーブル上に投げられると爆発しパーティクルが噴きあがる13

先行研究と比べてどこがすごい13

ビーズがミリメートルからメートル単位までZ軸方向について空中で奥行きを表現する13

技術や手法のキモはどこ13

スピーカによって風力が発生させビーズを舞い上げる点13

どうやって有効だと検証した13

ビーズを投げると花火が打ちあがっているかのようなアプリケーション例を示した13

議論はある13

高いレベルの表現及び幅広い入力範囲を提供できた13

次に読むべき論文は13

Kim13 et13 al13 1413

MARIO13 Mid-shy‐air13 Augmented13 Reality13 Interac4on13 with13 Objects13 (ECrsquo14)Hanyuool13 Kim13 13 Issei13 Takahashi13 Hiroki13 Yamamoto13 Satoshi13 Maekawa13 Takeshi13 Naemura

201413109　久保勇貴 2（鬼コース）13

どんなもの13

350times300times250のテーブル上のスペースにおいて自由に動かせる空中像を造りだすことができる13

先行研究と比べてどこがすごい13

凹面鏡や凹レンズのように曲面でないため画像の歪曲が発生しない13

技術や手法のキモはどこ13

Aerial13 Imaging13 Plate(AIP)を用いた空中像の生成及びそのためのディスプレイ移動装置13

どうやって有効だと検証した13

左右からの視差の考慮及び奥行き表現時の画像提示視野角の検証などを行った13 13

議論はある13

投影しているひよこを叩いたり払いのけたりするような動作がデモ中見られた13

次に読むべき論文は13

Tactile Feedback on Flat Surfaces for the Visually Impaired13Ali Israr Olivier Bau Seung-Chan Kim Ivan Poupyrev13

どのようなものか 視覚障害者のための触覚を用いた視覚代用デバイス 先行研究と比べてどこがすごいか 道案内をしてくれる機械などはあるが日用品の場所を教えたり探すのを手伝ってくれるデバイスはない 技術や手法のキモ タッチパネルとカメラを搭載したデバイス 触覚を与える技術はTeslaTouchを利用 色を基準にオブジェクトの位置を認識 有用性の確認 視覚障害者二人に対して実験このデバイスを使

わなくても各自の方法で物を見つけられるが間違えることが多いこのデバイスを使用することで間違えることなく正確に物の位置を特定できた 課題 一つの色でしか判断できない 触感のあるなしでしか情報を伝えられない 関連論文 TeslaTouch [Bau et al 2010]

20150522 橋爪智 2鬼

Fingernail-Mounted Display of Attraction Force and Texture13Masataka Niwa Tomoko Nozaki Taro Maeda and Hideyuki And13

どのようなものか 指先に取り付けて触感と力を両方表現できるデバイス 先行研究と比べてどこがすごいか 触感と引力をそれぞれ表現するデバイスはあるが両方を一つのデバイスで表現した例は少ない 引力は自由な方向に付加することができる 技術や手法のキモ 偏心に重さを付けた円盤を4枚使用する 5-9Hz 引力　100-200Hz 触感 それぞれの円盤の位相や回転数を調整することで

触感と力 を表現する 4つのモータを使いそれぞれの円盤を独立して制御する 有用性の確認 4人の男性に対して実験80以上の精度で認識できた 関連論文 The nail-mounted attraction forcebump display [Nozaki et al 2008]

20150522 橋爪智 2 鬼

Gilded gait reshaping the urban experience with augmented footsteps13Yuichiro Takeuchi13

どのようなものか 靴に装着し地面の触感をコントロールするデバイス 先行研究と比べてどこがすごいか 単独で動作しなかったり特定の環境のみでしか動作しなかったりするrarr靴単体で動作環境に依存しない 技術や手法のキモ 6個の振動パネルを取り付けゲルでカバー app modulesを取り替えることができ様々な機能を付加できる（GPSsound) 4種類の地面を再現

bull  Hard Ground 振動させない bull  Soft Ground すべてのパネルを振動 bull  Bumpy Ground ジグザグに振動 bull  Godzilla 全てのパネルを振動何回か繰り返す 課題 モーターを使っているため波形をプログラミングできないrarr圧電素子を使用する 関連論文 Haptic Shoes [Fu et al 2010]

20150522 橋爪智 2鬼

ExoInterfaces novel exosceleton haptic interfaces for virtual reality augmented sport and rehabilitation

Dzmitry Tsetserukou Katsunari Sato Susumu Tachi13

どのようなものか 腕に装着し物理的なinteractionを可能にするデバイス 先行研究と比べてどこがすごいか Exoskeleton 力を増幅するためだが重たく危険なこともある String-based wireが視界をまたぐ動きに制限がある rarr腕の動きに制限を与えない安全 技術や手法のキモ 「FlexTorque」人間の筋肉の構造を再現するベルトとモーターを使用する肩の近くに装着することで

腕に負担がかかりにくい 触覚feedback弱いトルク 運動を支援強いトルク 課題 物理的な接触を表現するゲームやスポーツにより没頭させるリハビリのサポートをする視覚障害者の支援（ものの場所を教える） 関連論文 FlexTorque [Dzmitry et al 2010]

20150522 橋爪智 2 鬼

Perception of Ultrasonic Haptic Feedback on the Hand Localisation and Apparent Motion13

Graham Wilson Tom Carter Sriram Subramanian Stephen Brewster13

どのようなものか 超音波を用いた触覚フィードバック有効性の検討を行う 先行研究と比べてどこがすごいか 超音波触覚フィードバックは比較的新しく研究や操作方法に関する知識が少ない 腕を自由に動かすことができ小さいものは着用可能 技術や手法のキモ 88のアレイ状に超音波発生器を設置

有効性の確認 bull  局所的な触感 　　　25箇所に分割しそれぞれに超音波を当てる 　　　触感を感じた989 　　　場所の誤差85mm bull  手のひらを動く触感 上下左右に動く 　　　動いてると感じた629

20150522 橋爪智 2 鬼

Friction Measurements on a Large Area TPaD13Nicholas D Marchuk J Edward Colgate Michael A Peshkin13

どのようなものか 超音波の振動により触感を与える 先行研究と比べてどこがすごいか ガラス板を使うので透明後ろにディスプレイを配置可能 技術や手法のキモ 「Squeeze Film Effect（スクイズ膜効果）」 ガラス板に取り付けた圧電素子の円盤に高周波信号

をかける 実験 振動しない部分＝摩擦が発生しない部分が発生周波数により場所が変わる rarr摩擦を大きさをかける力の大きさから計測 rarr指の場所に合わせて複数の周波数を使い分ける 関連論文 T-PaD[Winfield et al 2007]

20150522 橋爪智 2 鬼

STIMTAC a Tactile Input Device with Programmable Friction13Michel Amberg Freacutedeacuteric Giraud Betty Semail Paolo Olivo Geacutery Casiez Nicolas Roussel13

どのようなものか 触感を与えられるタッチデバイス 先行研究と比べてどこがすごいか LATPaD サイズ大きいノイズが大きい TeslaTouch 高い電圧付加が必要GNDに接続しなければいけない

技術や手法のキモ 「Squeeze Film Effect」超音波を用いて振動を与える 圧電性セラミックを電極にコーディング 指トラッキングは力センサを用いる 活用法 マウスキーボード絵を描く 関連論文 LATPaD[Vincent et al 2011] TeslaTouch[Bau et al 2010]

20150522 橋爪智 2 鬼

Surround Haptics Tactile Feedback for Immersive Gaming Experiences Ali Israr Seung-Chan Kim Ivan Poupyrev Jan Stec13

どのようなものか ゲームに合わせて高解像度の触覚フィードバックをユーザーに与える椅子 先行研究と比べてどこがすごいか 荒く配置した安価な振動アクチュエータで高解像度の触覚フィードバックを行える 一点の振動連続した動き範囲の振動などを再現

技術や手法のキモ 仮想的な振動アクチュエータをいくつかの振動アクチュエータを使って作り出す physical-physicalphysical-virtualvirtual-virtual ゲームにHaptics Engineを導入しHaptics APIを用いてHaptic Displayを操作する 関連論文 Exploring Surround Haptics Displays[Israr et al 2010]

20150522 橋爪智 2 鬼

Audio-Haptic Feedback in Mobile Phones Angela Chang Conor OrsquoSullivan13

どのようなものか haptics機能のついてない携帯電話にオーディオ機能を利用した触覚フィードバックを追加する 先行研究と比べてどこがすごいか 簡単に作れてnon-haptic mobile devicesでも大丈夫 技術や手法のキモ 「MultiFunction Transducer(MFT)」 スピーカーから音と信号の両方を出力できる

bull  Haptic Inheritance 　　音を2つの周波数帯に分ける bull  Synthesis and Matching 　　低周波数帯(20-300Hz)を使い触感を伝える 有効性の検討 42人の人を対象に実験を行う83の人が触感を感じた

20150522 橋爪智 2 鬼

Resolution of Sleep Deprivation Problems using ZZZoo Pillows13Shunsuke Yanaka Motoki Ishida13

どのようなものか 近年不眠症の人が多い rarr誰かと接していると安心し睡眠に導入しやすくなる rarrまるで添い寝をしているようなリアルな抱きまくらを使う 技術や手法のキモ breathing sensation 風船を使って人の呼吸を再現肺の形の風船弱く長い呼吸をする

heating お湯を使って人の体温を再現45 有効性の確認 84人の人が実験 呼吸が睡眠を誘ったかrarr61 体温が睡眠を誘ったかrarr85 関連論文 The Impact of Sleep Disorders on Social Life[Komada et al 2007]

20150522 橋爪智 2 鬼

まとめ13超音波 モーター 風

20150522 橋爪智 2 鬼

コイル 電気刺激 Electrovibration

振動 音 お湯

なかの

Temporally Consistent Disparity and Optical Flow via Efficient Spatio-temporal Filtering1

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示した

議論論はあるか

時間的に一定の視差を算出する手法静止画ステレオよりも精度度が良良いことを示す従来よりも推定精度度が良良いオプティカルフローも算出する

一枚の静止画に対するフィルタリング[1]をステレオ動画に拡張している

ケンブリッジのステレオ動画のデータセットを利利用 実写動画に対する比較も行行うノイズ耐性も検証する

フィルタベースとエネルギーベースの関係性を良良り理理解することで推定精度度を上げる

実装が簡単でリアルタイム視差推定が可能

Fast Cost-Volume Filtering for Visual Correspondence and Beyond [Rhemann C Hosni A Bleyer M Rother C Gelautz M CVPR2011] Real-time Spatiotemporal Stereo Matching Using the Dual-Cross-Bilateral Grid [Richardt C Orr D Davies I Criminisi A Dodgson NA ECCV2010] Secrets of optical flow estimation and their principles [Sun D Roth S Black MJ 2010] Motion estimation with non-local total variation regularization [Werlberger M Pock T Bischof H CVPR2010] Temporally Consistent Disparity Maps from Uncalibrated Stereo Videos [Bleyer M Gelatuz M ISPA2011]

なかの

SymStereo Matching using Induced Symmetry (2014)2

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示した

議論論はあるか

画像の対称性を用いてステレオマッチングを行行う 左右の画像を反転させて重ね合わせることで対称性を測る

絵的な類似の代わりに対称性を使う今まで対称性を用いる手法はなく新規性が大きい

三つのSymmetry-baseの手法で精度度を検証従来手法よりも精度度が向上しているMiddlebury Oxford Corridorfountain-P11のデータセット使用

ステレオの問題である不不連続な箇所オクルージョン部分は未解決である演算時間はやや増加

1-Dラインのコストを考える今までは撮像面に対して平行行な平面でデプスを考えていたが垂直な平面を考える

BT[Birchfield and Tomasi 1998] Census transform[Zabih and Woodfill 1994] Log N[Kovesi 1997] radio-metoric differences[Hirschmuller Scharstein 2009]

なかの

Camouflaging an Object from Many Viewpoints3

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

多くの視点から三次元の物体をカモフラージュするカモフラージュによってオクルージョン部分の不不連続がどの程度度生じるか他の視点ではどれほどになるかの検証

MRF（Markov Random Fields）ベース

新しい三次元物体のカモフラージュモデルを構築 37種類のデータセットを作る

箱形の物体に対してカモフラージュ処理理を施し 結果を評価する

オクルージョン不不連続テクスチャの歪みが問題 照明や画像の貼りつけに制限あり

なかの

Aliasing Detection and Reduction in Plenoptic Imaging4

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

カメラアレイ撮影の角度度のエイリアシングを除去するエイリアシングの探索索と打ち消しを行行う

周波数領領域ではなく空間領領域で探索索を行行う

先行行研究がフィルタデモザイキング再パラメータ調整などの前処理理でエイリアシング除去を行行うのに対しエイリアシング探索索後にリフォーカスの段階でエイリアシングを取り除く

8times8の平行行カメラアレイで検証するカメラ間の 基線長は70mm

今回は基線長が長いデータセットを使った 次はLytroなどのマイクロレンズアレイで検証する

Globally consistent multi-label assignment on the ray space of 4d light fields [S Wanner C Straehle B Goldluecke CVPR2013] Lineassisted light field triangulation and stereo matching [Z Yu X Guo H Lin A Lumsdaine J Yu ICCV 2013]

なかの

Globally Consistent Multi-Label Assignment on the Ray Space of 4D Light Fields5

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

四次元ライトフィールドの光線情報において マルチラベルの領領域分割を行行う

深度度情報光線情報を用いて領領域分割することで 二次元（空間）情報だけでは分割が難しかった 領領域を分割可能とする

The light field camera Extended depth of field aliasing and superresolution [T Bishop P Favaro IEEE Transactions on Pattern Analysis and Machine Intelligence 2012]

なかの

Line Assisted Light Field Triangulation and Stereo Matching6

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

光線情報を利利用してステレオマッチングの精度度を 向上させる手法三角測量量の誤差を減らす

Light Field Stereo Matchingとかいう手法 グラフ構造を作成

Variational light field analysis for disparity estimation and super-resolution [S Wanner and B Goldlumluecke 2013]

なかの

Adaptive stereo similarity fusion using confidence measures 20157

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

ステレオマッチングの新しい方式fusion weightsを提案複数の手法を組み合わせてコスト計算を行行う手法付録に既存手法のコスト関数一覧あり

パラメータに依存する手法を用いないことで高速化を図っている

一つのアルゴリズムでは異異なる特性を持つ領領域全てに対して適切切なマッチングはできない複数を組み合わせることでそれを補う13種と多い

middleburyとKITTIのデータセットで評価

一枚あたり03sと高速だが001sとより高速なアルゴリズムが存在する

Segment-based stereo matching using belief propagation and a self-adapting dissimilarity measure [A Klaus M Sormann K Karner ICPR2006] On building an accurate stereo matching system on graphics hardware [X Mei X Sun M Zhou S Jiao H Wang X Zhang ICCV2011] Similarity measures for depth estimation [K Wegner O Stankiewicz 3DTV-CON2009] On accurate dense stereo-matching using a local adaptive multi-cost approach [C Stentoumis L Grammatikopoulos I Kalisperakis G Karras ISPRS2014] A quantitative evaluation of confidence measures for stereo vision [X Hu P Mordohai PAMI2012]

なかの

SIMILARITY MEASURE FOR DEPTH ESTIMATIOM 20098

どんなもの

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

4種類の視差推定アルゴリズムを組み合わせている 類似度度の選択性の解析

Belief Propagationの枠組みを用いる

名古屋大学の多視点データベースを利利用

HHI Test Material for 3D Video [I Feldmann M Muller F Zilly R Tanger A SmolicP Kauff T Wiegand 2008] Multiview Video Test Sequence and Camera Parameters [Yo-Sung Ho Eun-Kyung Lee and Cheon Lee 2008] 1D Parallel Test Sequences for MPEG-FTV [M Tanimoto T Fujii N Fukushima 2008] Non-parametric Local Transforms for Computing Visual Correspondence [R Zabih J Woodfill 1994]

なかの

Spatiotemporal Stereo via Spatiotemporal Quadric Element (Stequel) Matching9

どんなもの

技術や手法のキモはどこ

新しいマッチング手法を提案動き考慮することなく時間情報を取り込むことができる 時間方向のエピ線を考える

オプティカルフロー推定は3D境界や低テクスチャで弱いが提案手法はロバストである

なかの

Depth Video Enhancement Based on Weighted Mode Filtering10

どんなもの

議論論はある

ノイズを含んだ低解像度度のデプスマップの質を高める手法（超解像度度とデノイズ）時間方向も使用簡単なオプティカルフローを計算し利利用する

非反復復アルゴリズムのためGPUに載せやすく高速化が考えられる

なかの

Fast Bilateral-Space Stereo for Synthetic Defocus11

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

議論論はある

次に読むべき論論文は

高速な自由焦点ぼけ画像の作成

Bilateral-spaceを提案

従来研究よりも10から100倍速くぼけ具合の精度度も良良い

ぼけを作成するというアプリケーションに利利用する距離離という面では提案手法が有益であるが実測的な距離離という面での精度度は悪い背景と前景が同じ色で近くにある場合同一ととらえてしまう

Efficient high-resolution stereo matching using local plane sweeps [S N Sinha D Scharstein and R SzeliskiCVPR2014] Bilateral filtering-based optical flow estimation with occlusion detection [J Xiao H Cheng H Sawhney C Rao and M IsnardiECCV2006] Efficient nonlocal regularization for optical flow [P Krumlahenbumluhl and V KoltunECCV2012] Real-time spatiotemporal stereo matching using the dual-cross-bilateral grid [C Richardt D Orr I Davies A Criminisi and N A DodgsonECCV2010]

どうやって有効性を示した視差推定の精度度はmiddleburyKITTI

なかの

Robust Spatiotemporal Stereo for Dynamic Scenes12

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

ステレオ動画のフレーム間情報を取り入れることでノイズ耐性を向上させるまた動きの大きなものも考える

時間を含めたウインドウの提案自動的にそのような変化に対応する画像領領域を検出する

従来の時空間ステレオと比べ大きな動きによる急激な視差の時間変化に対して頑健である

なかの

Spacetime Stereo A Unifying Framework for Depth from Triangulation13

どんなもの

先行行研究と比べてどこがすごい

space time stereoを提案ステレオカメラの視差推定でも構造光を用いた視差推定でも利利用可能 動的なシーンでの利利用も可能

フレームごとマッチングを取っていたが複数フレームでのマッチングを可能とした

なかの

Learning to Select and Order Vacation Photographs (Disney research)14

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示したあまりにもたくさん撮影した写真たちから自動的にフォトアルバムを作成する研究

複雑な視覚での区別を試みたのはこの論論文が初

５つの異異なるトピックから63の個人的な写真コレクションのデータセットを利利用し定量量的に評価する

写真間の差別かを定義する顔全体の絵何が写っているか写っていないかを評価する

Jointly aligning and segmenting multiple web photo streams for the inference of collective photo storylines [G Kim and E P Xing CVPR2013] Photo sequencing [T Basha Y Moses and S Avidan CVPR2012]

なかの

A Taxonomy and Evaluation of Dense Two-Frame Stereo Correspondence Algorithms15

どんなもの

どうやって有効性を示した

次に読むべき論論文は

ステレオマッチングに関する分類を行行う 新たなデータセットを作成する

というよりも他の手法が有効性を示すことができるようにデータセットを作成した 今ではmiddleburyのデータセットと言えばステレオ業界では超有名

High-resolution stereo datasets with subpixel-accurate ground truth

なかの

Discriminability Limits in Spatio-Temporal Stereo Block Matching1

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

spatio-temporal disparity estimationの根本的な前提の正当性を解析しマッチング処理理の際に動きが助けとなる程度度を決定する

時空間マッチングのエラーを分析し誤りの原因を確率率率で導出する（フレーム数動きの分散画像特徴ノイズの関数）

[34243334]は時空間マッチングの利利点を指摘していたが本論論文はマッチング精度度の向上のために動きを用いる手法の程度度や性質を研究する

6つのステレオビデオを用いて検証を行行った

Spacetime stereo Shape recovery for dynamic scenes [L Zhang B Curless and S Seitz CVPR2003] Spatiotemporal stereo and scene flow via stequel matching [M Sizintsev and R Wildes PAMI2012] Temporally consistent disparity and optical flow via efficient spatio-temporal filtering [A Hosni C Rhemann M Bleyer and M Gelautz PRCAIVT2012] Spacetime stereo A unifying framework for depth from triangulation [PAMI2005] Dynamic depth recovery from multiple synchronized video streams [H Tao H Sawhney and R Kumar CVPR2001] Spatiotemporal descriptor for wide-baseline stereo reconstruction of non-rigid and ambiguous scenes [ECCV2003]

なかの

Depth-Based Patch Scaling for Content-Aware Stereo Image Completion2

どんなもの

どうやって有効性を示した

ステレオでデプスを取り物体の三次元情報を使ってインペインティングを行行う

bookのデータセット背景が繰り返しパターンが多いものを使っている

なかの

Fast Semi-dense Surface Reconstruction from Stereoscopic Video in Laparoscopic Surgery3

どんなもの

手法の流流れ

次に読むべき論論文は

腹腔内手術の際にステレオビデオから高速に物体の三次元再構成を行行う研究

Evaluation of stereo matching costs on images with radiometric differences [Hirschmueller H Scharstein D PAMI2008]

スコープカメラから画像取得GPUで演算する 視差を算出しフィルタにかける距離離に変換 点群を再びフィルタにかけて三次元再構成

なかの

3D Reconstruction from Accidental Motion4

どんなもの

技術や手法のキモはどこ

議論論はある

数秒のビデオ（単眼）から三次元再構成を行行う 手ぶれなどの動きから再構成が可能で特定の動きや機材を必要としない

短い基線長でも再構成が可能（3mmの基線長）

基線長が短いため背景の精度度が低くなる リフォーカス画像作成には十分 練習では上手く動作したが検証がまだ必要

なかの

Panoramic Video from Unstructured Camera Arrays5

どんなもの

技術や手法のキモはどこ

議論論はある

複数のカメラを用いたパノラマ撮影を行行う その際に不不自然さがないような動画を作成する

不不自然さを感じる感覚特性を提示しそれにのっとって対策を講じている

一つのカメラの解像度度と品質を向上させるよりも複数台のカメラを組み合わせることがはるかに簡単で有益である専門家でなくてもGoProのカメラセットを組み合わせることは容易易

カメラの配置は厳密に決められていない完璧な時間同期やローリングシャッターの不不足のような実撮影での問題もクリアしている

先行行研究と比べてどこがすごい

どうやって有効性を示した左のシステムは14台のカメラを使用 右のシステムはGoProを5台使用

Disney 201558

なかの

Floating Scale Surface Reconstruction6

どんなもの

技術や手法のキモはどこ

流流動的にスケールを変えられる三次元再構成手法

サンプル規模に依存するパラメータがない rarrどのスケールのサンプルにも対応できる

siggraph2014

なかの

A Super Resolution Reconstruction Scheme for Mixed Spatio-Temporal Stereo Video7

どんなもの

技術や手法のキモはどこ

ビデオ超解像アルゴリズム

二台のカメラを使用 一台は低解像度度で高速一台は高解像度度で低速

HHI 3DV ftp siteのBookarrivalとbeergadenを使用どうやって有効性を示した

なかの

What Is a Good Day for Outdoor Photometric Stereo8

どんなもの

先行行研究と比べてどこがすごい

議論論はある

次に読むべき論論文は

屋外における照度度差があるステレオの研究 屋外でステレオを行行う際に有利利or不不利利な日照条件を明らかにする

点光源を用いた研究は行行われていたが屋外での研究はされていなかった

晴れより曇りの方が精度度が良良い雲があるから特徴量量を取りやすい雑音を白色ガウスモデルを想定 季節ごとのデータセットを利利用してみても良良い

Time-lapse photometric stereo and applications [F Shen K Sunkavalli N Bonneel S Rusinkiewicz H Pfisterand X Tong2014] Outdoor photometric stereo [L-F Yu S-K Yeung Y-W Tai D Terzopoulos and T FChan ICCP2013]

どうやって有効性を示した屋外の照明に関するHDR環境マップのデータベースを利利用

Disney 2015424

なかの

COLORBRUSH ANIMATED DIFFUSION FOR INTUITIVE COLORIZATION SIMULATING WATER PAINTING 9

どんなものアニメを水彩画で描いたように変換する 水彩画を描くには経験が必要であるがそれを作成するアルゴリズムを考案絵具が水によりどうにじむかシュミレーションしている

Disney 20141027 ICIP2014

次に読むべき論論文はGabor-space geodesic active contoursrdquo In Algebraic Frames for the Perception-Action Cycle [C Sagiv NA Sochen and YY Zeevi 2000] Practical temporal consistency for image-based graphics applications [M Lang O Wang T Aydin A Smolic and M Gross SIGGRAPH2012] Computer-Generated Watercolor [CJ Curtis SE Anderson JE Seims KW Fleischer and DH Salesin SIGGRAPH1997]

なかの

From Sound to Sight Using Audio Processing to enable Visible Light Communication 10

どんなもの光に情報を載せる技術プロジェクトページがあって光関係の研究が8個載っている

httpwwwdisneyresearchcomprojectvisible-light-communication

ビデオのURL httpwwwdisneyresearchcomwpcontentuploadsPub_InvisibleLightCommunication_Siggraph14_videomp4

• 201211106_KeisukeKawahara
• 201311421_KeitaKanai_02
• 201313095_AkiraIshii_02
• 201413109_YuukiKubo_02
• 201513110_SatoshiHashizume_02
• 鬼輪講マラソン③_1
• 鬼輪講マラソン③_2

2 201313095

Fiberio

10 330 150

148 2

Fiberio

bull  MatsushitaNandRekimotoJHoloWallDesigningaFingerHandBodyObjectSensiEveWallProcUIST97209ndash210

FiberioampAampTouchscreenampthatampSensesampFingerprintsamp(UISTrsquo13)

ChrisEanHolzPatrickBaudisch

h]pswwwyoutubecomwatchv=p1a5yLzuTqA

2 201313095

3D

3D

bull  GeigerMVollertsenFTheMechanismsofLaserFormingCIRPANNALSlsquo93421301-304

bull  WillisKDDXuCWuJKLevinGGrossMDInteracEvefabricaEonnewinterfacesfordigitalfabricaEonProcTEI11pp69-72

LaserOrigamiampLaserCugngamp3DampObjectsamp(CHIrsquo13)

StefanieMuellerBasEanKruckPatrickBaudisch

h]pswwwyoutubecomwatchv=arjRtCjI9AQ

2 201313095

bend

bull  HyunyoungSongFranccediloisGuimbreEegravereChangHuHodLipsonModelCraycapturingfreehandannotaEonsandeditsonphysical3DmodelsProceedingsofthe19thannualACMsymposiumonUserinterfacesoywareandtechnologyOctober15-182006MontreuxSwitzerland

InteracEveampConstrucEonampInteracEveampFabricaEonampofampFuncEonalampMechanicalampDevicesamp(UISTrsquo12)

StefanieMuellerPedroLopesPatrickBaudisch

h]pdlacmorgcitaEoncfmid=23801162380191

2 201313095

3D

3D

bull  SavageVSchmidtRGrossmanTFitzmauriceGandHartmannBAseriesoftubesAddinginteracEvityto3dprintsusinginternalpipesInProcUIST14(2014)

3DampPrinEngampPneumaEcampDeviceampControlsampwithampVariableampAcEvaEonampForceampCapabiliEesamp(CHIrsquo15)amp

MarynelVazquezEricBrockmeyerRutaDesaiChrisHarrisonSco]EHudson

h]pswwwyoutubecomwatchv=-4gFYvhkz0Y

2 201313095

OpenFab 3D

fablets

3 3

bull  CHENDMATUSIKWSITTHI-AMORNPDIDYKPANDLEVIND2013Spec2FabAreducer-tunermodelfortranslat-ingspecificaEonsto3DprintsACMTransGraph324(July)

OpenFabampAampProgrammableampPipelineampforampMulEMaterialampFabricaEonamp(SIGGRAPHrsquo13)

KirilVidimcˇeSzu-PoWangJonathanRagan-KelleyWojciechMatusik

2 201313095

3D

3D

3D

3D14 30 13 67

244

14

3D

bull  MuellerSKruckBBaudischPLaserOrigamiLaser-Cunng3DObjectsProcCHIrsquo132585-2592

faBrickaEonampFastamp3DampPrinEngampofampFuncEonalampObjectsampbyampIntegraEngampConstrucEonampKitampBuildingampBlocksamp(CHIrsquo14)amp

StefanieMuellerTobiasMohrKersEnGuentherJohannesFrohnhofenPatrickBaudisch

h]pswwwyoutubecomwatchv=BlO6YRcLJjE

Touching13 the13 Void13 Direct-shy‐Touch13 Interac4on13 for13 Intangible13 Displays(CHIrsquo10)Li-Wei Chan Hui-Shan Kao Mike Y Chen Ming-Sui Jane Yi-Ping Hung

201413109　久保勇貴 2（鬼コース）13

どんなもの13

空中像へのタッチのエラーに関する調査及び影や音のフィードバックを付与することによるパーフォーマンス向上を示した研究13

先行研究と比べてどこがすごい13

平面画像をタッチする際の奥行きに関するエラーの正確な取得を初めて検証13

技術や手法のキモはどこ13

２つの赤外線カメラを用いた正確なタッチの検出13

どうやって有効だと検証した13

タッチ時の奥行きの正確さに関する被験者実験を実施またタッチする際に影や音を付けた際の反応時間を被験者実験で検証13

議論はある13

ユーザは慣れるまで影や音のフィードバックが必要だがそのあとは必要なくなる13

次に読むべき論文は13

MirageTable13 （CHI12） 13

MirageTable13 Freehand13 Interac4on13 on13 a13 Projected13 13 Augmented13 Reality13 Tabletop(CHIrsquo12)

Hrvoje Benko Ricardo Jota Andrew D Wilson

201413109　久保勇貴 2（鬼コース）13

どんなもの13

テーブル上においてバーチャルな物体をリアルタイムで現実でものを動かすことと同様な動作に操作可能なシステム13

先行研究と比べてどこがすごい13

現実の物体をリアルタイムで画面に取りこむことができ質の高いフリーハンドインタラクションを実現した点13

技術や手法のキモはどこ13

色深度前景頭追跡プロキシパーティクルを駆使したリアルタイムメッシュの作成13

どうやって有効だと検証した13

凹凸など例外な表面に対しての投影した際の画像の質についての評価実験また仮想物体の奥行き知覚に関する実験も行った13

議論はある13

前面のみしかキャプチャしていないため差が生じる握っている場所の再現は未解決な課題である13

次に読むべき論文は13

Hirsch13 et13 al13 201413 (SIGGRAPHrsquo14)13

A13 Compressive13 Light13 Field13 Projec4on13 System13 (SIGGRAPHrsquo14)MaChew13 Hirsch13 Gordon13 Wetzstein13 Ramesh13 Raskar

201413109　久保勇貴 2（鬼コース）13

どんなもの13

通常の3Dディスプレイに比べて解像度輝度コントラストを改善した圧縮ライトフィードディスプレイ13

先行研究と比べてどこがすごい13

多視点立体視を複数でなく１台のプロジェクタを用いて実現した13

技術や手法のキモはどこ13

受動的スクリーンと高速切り替えプロジェクタによる新しい光学設計13

どうやって有効だと検証した13

4つのシーン例を投影したものを示したアニメーションの3D効果について観察を行った13

議論はある13

光路長を広げると観察できる画質が大幅に制限され他のライトフィードビューと混線が生じる13

次に読むべき論文は13

Butler13 et13 al13 201113

Vermeer13 Direct13 Interac4on13 with13 a13 360deg13 Viewable13 3D13 Display(UISTrsquo11) Alex Butler Otmar Hilliges Shahram Izadi Steve Hodges David Molyneaux David Kim

201413109　久保勇貴 2（鬼コース）13

どんなもの13

映し出された3Dオブジェクトとインタラクションを行えるシステム13

先行研究と比べてどこがすごい13

ディスプレイ内の画像とのインタラクションを提案ボリュームディスプレイを支援する新しいセンシング法の提案13

技術や手法のキモはどこ13

パラボラ鏡に取り付けた赤外線カメラセンサによる指先検出13

どうやって有効だと検証した13

アプリケーション例を示した13

議論はある13

パラボラ鏡の大きさよりもディスプレイサイズが小さくなってしまう13

次に読むべき論文は13

Hirsch13 et13 al13 201213

8D13 Interac4ng13 with13 a13 Relightable13 Glasses-shy‐Free13 3D13 Display(CHIrsquo12)Li-Wei Chan Hui-Shan Kao Mike Y Chen Ming-Sui Jane Yi-Ping Hung

201413109　久保勇貴 2（鬼コース）13

どんなもの13

ライトフィードによる入力とライトフィールドによる表示を行うリアルタイム8Dディスプレイ13

先行研究と比べてどこがすごい13

リアルタイムでの8Dディスプレイの実現（先行研究は7fps）13

技術や手法のキモはどこ13

GPUにおけるレンダリング処理13

どうやって有効だと検証した13

MRIデータを用いたディスプレイのデモを示した13

議論はある13

現在はグレースケールの入力のみだがカラーでの入力できればより強力になるだろう13

次に読むべき論文は13

Sahoo13 et13 al13 201513

Control13 of13 Non-shy‐Solid13 Diffusers13 by13 Electrosta4c13 Charging13 (CHIrsquo15) Deepak Ranjan Sahoo Diego Martinez Plasencia Sriram Subramanian

201413109　久保勇貴 2（鬼コース）13

どんなもの13

シャボン玉や霧などの非固体を電場による制御を試みた研究13

先行研究と比べてどこがすごい13

非固体の形や位置の制御法を提案した点13

技術や手法のキモはどこ13

[Intra13 et13 al13 11]中のldquowire-shy‐to-shy‐Cylinderdquoを用いたエアゾール粒子の帯電13

どうやって有効だと検証した13

霧及びシャボン玉によるディスプレイのアプリケーション例で実際に制御して見せた13

議論はある13

風による影響を本手法は打ち消すことができた13

次に読むべき論文は13

Barnum13 et13 al13 201013

A13 Mul4-shy‐Layered13 Display13 with13 Water13 Drops(SIGGRAPHrsquo10)Peter C Barnum Srinivasa G Narasimhan Takeo Kanade

201413109　久保勇貴 2（鬼コース）13

どんなもの13

複数層の落下水滴にプロジェクションマッピングを行いディスプレイとした研究13

先行研究と比べてどこがすごい13

水滴の制御を行うことで単一のプロジェクタによって複数層の映像投影を可能とした点13

技術や手法のキモはどこ13

[Ambravaneswaran13 et13 al13 2002]及び本研究における実験結果に基づく水滴生成13

どうやって有効だと検証した13

複数のディスプレイ例を示した13 例）顔の投影水槽シミュレータなど13

議論はある13

本当の3Dディスプレイにするにはより多くの水滴制御が必要13

次に読むべき論文は13

Lee13 et13 al13 200713

An13 Immaterial13 Depth-shy‐Fused13 3D13 Display(VRSTrsquo07)Cha Lee Stephen DiVerdi Tobias Humlollerer

201413109　久保勇貴 2（鬼コース）13

どんなもの13

２つのスクリーンを駆使し3Dディスプレイを実現するdepth-shy‐fused13 3D(DFD)に関する評価を行いその結果よりディスプレイを提案した研究13

先行研究と比べてどこがすごい13

DFDが任意のスクリーン設定及び見る位置に対して有効であることを示した13

技術や手法のキモはどこ13

６通りのスクリーン組合せから２つを抽出し見え方の違いを検証した点13

どうやって有効だと検証した13

６通りのスクリーンについて立体的に見えるか被験者実験を実施その後それぞれに有意差がみられるか調べた13

議論はある13

ステレオイメージを認めることができなかったユーザに対しても強い3D効果が見られた13

次に読むべき論文は13

Tokuda13 et13 al13 201013

Cloud13 Display13 (ACErsquo10)Yutaka Tokuda Yasuhiro Suzuki Kunihiro Nishimura Tomohiro Tanikawa Michitaka Hirose

201413109　久保勇貴 2（鬼コース）13

どんなもの13

煙の渦輪を用いた空間を埋めるディスプレイ13

先行研究と比べてどこがすごい13

制御可能な手法により高所へのパーティクルを運搬することに着目した点13

技術や手法のキモはどこ13

コンピュータによって制御が行われる空気砲アレイ13

どうやって有効だと検証した13

箱の中で実験を行い安定して渦輪をできるようにした実際にデモを行ったことを示した13

議論はある13

今の試作機をより早くリフレッシュ速度を高めることによりより濃く空間を埋められることを目指す13

次に読むべき論文は13

Sato13 et13 al13 200913

Par]cle13 Display13 System　(JVRC09)13 -shy‐13 A13 Large13 Scale13 Display13 for13 Public13 Space13 -shy‐

Munehiko13 Sato13 Yasuhiro13 Suzuki13 13 Atsushi13 Hiyama13 Tomohiro13 Tanikawa13 Michitaka13 Hirose

201413109　久保勇貴 2（鬼コース）13

どんなもの13

パーティクルディスプレイによる公共スペースのための大画面ディスプレイの提案13

先行研究と比べてどこがすごい13

公共スペースにおける要求と制限に基づいたシステムを提案した点13

技術や手法のキモはどこ13

実験に基づく表示画像のスクロール時間の制御13

どうやって有効だと検証した13

Aという文字の知覚実験によって 適な点滅周期の調査を行った13

議論はある13

現在の試作機を組合せより高解像度にする必要がある13

次に読むべき論文は13

Kwon13 et13 al13 201513

FugaciousFilm13 Exploring13 Aen4ve13 Interac4on13 with13 Ephemeral13 Material13 (CHIrsquo15)Hyosun13 Kwon13 Shashank13 Jaiswal13 Steve13 Benford13 Sue13 Ann13 Seah13

13 Peter13 BenneC13 Boriana13 Koleva13 Holger13 Schnaumldelbach

201413109　久保勇貴 2（鬼コース）13

どんなもの13

膜を押す引く飛び出ることができる新しい石鹸膜インタフェースの提案13

先行研究と比べてどこがすごい13

徐々に消えるインタフェースは高い注意を有するインタラクションを提供するという点を示したこと13

技術や手法のキモはどこ13

水グリセリンを201の対比で混ぜることでldquopoprdquoがきれいになるようにしかつ膜の耐久性を向上させた13

どうやって有効だと検証した13

３目並べを用いた被験者実験を実施13 ユーザは膜を割ると負け膜を自分のマスにするにはタッチ押す引くの書かれた通りの操作を行う13

議論はある13

ユーザに精密な動作を要求することはとりわけ注意を払うことを誘発する13

次に読むべき論文は13

Wetzstein13 et13 al13 201213

Tensor13 Displays13 Compressive13 Light13 Field13 Synthesis13 using13 Mul4layer13 Displays13 with13 Direc4onal13 Backligh4ng(SIGGRAPHrsquo12)

Gordon13 Wetzstein13 Douglas13 Lanman13 MaChew13 Hirsch13 Ramesh13 Raskar

201413109　久保勇貴 2（鬼コース）13

どんなもの13

視点によって異なる立体映像を見ることができる複数の層からなるディスプレイ13

先行研究と比べてどこがすごい13

既存の手法を合成したcomputa(onal13 displaysというディスプレイの新しいフレームワークを提案した13

技術や手法のキモはどこ13

時分割で視差マスクを表示することでユーザの視線ごとに立体像を表現する13

どうやって有効だと検証した13

通常のディスプレイ３層LCDLCD及び指向性バックライトの例による比較13 13

議論はある13

波紋を含むこと色チャンネルが悪影響を与える相互反射不均一などの問題が見られた13

次に読むべき論文は13

Matoba13 et13 al13 1213

SplashDisplay(VRICrsquo12)Yasuo Matoba Taro Tokui Ryo Sato Tochiki Sato Hideki Koike

201413109　久保勇貴 2（鬼コース）13

どんなもの13

パーティクルにCGを投射しパーティクルがテーブル上に投げられると爆発しパーティクルが噴きあがる13

先行研究と比べてどこがすごい13

ビーズがミリメートルからメートル単位までZ軸方向について空中で奥行きを表現する13

技術や手法のキモはどこ13

スピーカによって風力が発生させビーズを舞い上げる点13

どうやって有効だと検証した13

ビーズを投げると花火が打ちあがっているかのようなアプリケーション例を示した13

議論はある13

高いレベルの表現及び幅広い入力範囲を提供できた13

次に読むべき論文は13

Kim13 et13 al13 1413

MARIO13 Mid-shy‐air13 Augmented13 Reality13 Interac4on13 with13 Objects13 (ECrsquo14)Hanyuool13 Kim13 13 Issei13 Takahashi13 Hiroki13 Yamamoto13 Satoshi13 Maekawa13 Takeshi13 Naemura

201413109　久保勇貴 2（鬼コース）13

どんなもの13

350times300times250のテーブル上のスペースにおいて自由に動かせる空中像を造りだすことができる13

先行研究と比べてどこがすごい13

凹面鏡や凹レンズのように曲面でないため画像の歪曲が発生しない13

技術や手法のキモはどこ13

Aerial13 Imaging13 Plate(AIP)を用いた空中像の生成及びそのためのディスプレイ移動装置13

どうやって有効だと検証した13

左右からの視差の考慮及び奥行き表現時の画像提示視野角の検証などを行った13 13

議論はある13

投影しているひよこを叩いたり払いのけたりするような動作がデモ中見られた13

次に読むべき論文は13

Tactile Feedback on Flat Surfaces for the Visually Impaired13Ali Israr Olivier Bau Seung-Chan Kim Ivan Poupyrev13

どのようなものか 視覚障害者のための触覚を用いた視覚代用デバイス 先行研究と比べてどこがすごいか 道案内をしてくれる機械などはあるが日用品の場所を教えたり探すのを手伝ってくれるデバイスはない 技術や手法のキモ タッチパネルとカメラを搭載したデバイス 触覚を与える技術はTeslaTouchを利用 色を基準にオブジェクトの位置を認識 有用性の確認 視覚障害者二人に対して実験このデバイスを使

わなくても各自の方法で物を見つけられるが間違えることが多いこのデバイスを使用することで間違えることなく正確に物の位置を特定できた 課題 一つの色でしか判断できない 触感のあるなしでしか情報を伝えられない 関連論文 TeslaTouch [Bau et al 2010]

20150522 橋爪智 2鬼

Fingernail-Mounted Display of Attraction Force and Texture13Masataka Niwa Tomoko Nozaki Taro Maeda and Hideyuki And13

どのようなものか 指先に取り付けて触感と力を両方表現できるデバイス 先行研究と比べてどこがすごいか 触感と引力をそれぞれ表現するデバイスはあるが両方を一つのデバイスで表現した例は少ない 引力は自由な方向に付加することができる 技術や手法のキモ 偏心に重さを付けた円盤を4枚使用する 5-9Hz 引力　100-200Hz 触感 それぞれの円盤の位相や回転数を調整することで

触感と力 を表現する 4つのモータを使いそれぞれの円盤を独立して制御する 有用性の確認 4人の男性に対して実験80以上の精度で認識できた 関連論文 The nail-mounted attraction forcebump display [Nozaki et al 2008]

20150522 橋爪智 2 鬼

Gilded gait reshaping the urban experience with augmented footsteps13Yuichiro Takeuchi13

どのようなものか 靴に装着し地面の触感をコントロールするデバイス 先行研究と比べてどこがすごいか 単独で動作しなかったり特定の環境のみでしか動作しなかったりするrarr靴単体で動作環境に依存しない 技術や手法のキモ 6個の振動パネルを取り付けゲルでカバー app modulesを取り替えることができ様々な機能を付加できる（GPSsound) 4種類の地面を再現

bull  Hard Ground 振動させない bull  Soft Ground すべてのパネルを振動 bull  Bumpy Ground ジグザグに振動 bull  Godzilla 全てのパネルを振動何回か繰り返す 課題 モーターを使っているため波形をプログラミングできないrarr圧電素子を使用する 関連論文 Haptic Shoes [Fu et al 2010]

20150522 橋爪智 2鬼

ExoInterfaces novel exosceleton haptic interfaces for virtual reality augmented sport and rehabilitation

Dzmitry Tsetserukou Katsunari Sato Susumu Tachi13

どのようなものか 腕に装着し物理的なinteractionを可能にするデバイス 先行研究と比べてどこがすごいか Exoskeleton 力を増幅するためだが重たく危険なこともある String-based wireが視界をまたぐ動きに制限がある rarr腕の動きに制限を与えない安全 技術や手法のキモ 「FlexTorque」人間の筋肉の構造を再現するベルトとモーターを使用する肩の近くに装着することで

腕に負担がかかりにくい 触覚feedback弱いトルク 運動を支援強いトルク 課題 物理的な接触を表現するゲームやスポーツにより没頭させるリハビリのサポートをする視覚障害者の支援（ものの場所を教える） 関連論文 FlexTorque [Dzmitry et al 2010]

20150522 橋爪智 2 鬼

Perception of Ultrasonic Haptic Feedback on the Hand Localisation and Apparent Motion13

Graham Wilson Tom Carter Sriram Subramanian Stephen Brewster13

どのようなものか 超音波を用いた触覚フィードバック有効性の検討を行う 先行研究と比べてどこがすごいか 超音波触覚フィードバックは比較的新しく研究や操作方法に関する知識が少ない 腕を自由に動かすことができ小さいものは着用可能 技術や手法のキモ 88のアレイ状に超音波発生器を設置

有効性の確認 bull  局所的な触感 　　　25箇所に分割しそれぞれに超音波を当てる 　　　触感を感じた989 　　　場所の誤差85mm bull  手のひらを動く触感 上下左右に動く 　　　動いてると感じた629

20150522 橋爪智 2 鬼

Friction Measurements on a Large Area TPaD13Nicholas D Marchuk J Edward Colgate Michael A Peshkin13

どのようなものか 超音波の振動により触感を与える 先行研究と比べてどこがすごいか ガラス板を使うので透明後ろにディスプレイを配置可能 技術や手法のキモ 「Squeeze Film Effect（スクイズ膜効果）」 ガラス板に取り付けた圧電素子の円盤に高周波信号

をかける 実験 振動しない部分＝摩擦が発生しない部分が発生周波数により場所が変わる rarr摩擦を大きさをかける力の大きさから計測 rarr指の場所に合わせて複数の周波数を使い分ける 関連論文 T-PaD[Winfield et al 2007]

20150522 橋爪智 2 鬼

STIMTAC a Tactile Input Device with Programmable Friction13Michel Amberg Freacutedeacuteric Giraud Betty Semail Paolo Olivo Geacutery Casiez Nicolas Roussel13

どのようなものか 触感を与えられるタッチデバイス 先行研究と比べてどこがすごいか LATPaD サイズ大きいノイズが大きい TeslaTouch 高い電圧付加が必要GNDに接続しなければいけない

技術や手法のキモ 「Squeeze Film Effect」超音波を用いて振動を与える 圧電性セラミックを電極にコーディング 指トラッキングは力センサを用いる 活用法 マウスキーボード絵を描く 関連論文 LATPaD[Vincent et al 2011] TeslaTouch[Bau et al 2010]

20150522 橋爪智 2 鬼

Surround Haptics Tactile Feedback for Immersive Gaming Experiences Ali Israr Seung-Chan Kim Ivan Poupyrev Jan Stec13

どのようなものか ゲームに合わせて高解像度の触覚フィードバックをユーザーに与える椅子 先行研究と比べてどこがすごいか 荒く配置した安価な振動アクチュエータで高解像度の触覚フィードバックを行える 一点の振動連続した動き範囲の振動などを再現

技術や手法のキモ 仮想的な振動アクチュエータをいくつかの振動アクチュエータを使って作り出す physical-physicalphysical-virtualvirtual-virtual ゲームにHaptics Engineを導入しHaptics APIを用いてHaptic Displayを操作する 関連論文 Exploring Surround Haptics Displays[Israr et al 2010]

20150522 橋爪智 2 鬼

Audio-Haptic Feedback in Mobile Phones Angela Chang Conor OrsquoSullivan13

どのようなものか haptics機能のついてない携帯電話にオーディオ機能を利用した触覚フィードバックを追加する 先行研究と比べてどこがすごいか 簡単に作れてnon-haptic mobile devicesでも大丈夫 技術や手法のキモ 「MultiFunction Transducer(MFT)」 スピーカーから音と信号の両方を出力できる

bull  Haptic Inheritance 　　音を2つの周波数帯に分ける bull  Synthesis and Matching 　　低周波数帯(20-300Hz)を使い触感を伝える 有効性の検討 42人の人を対象に実験を行う83の人が触感を感じた

20150522 橋爪智 2 鬼

Resolution of Sleep Deprivation Problems using ZZZoo Pillows13Shunsuke Yanaka Motoki Ishida13

どのようなものか 近年不眠症の人が多い rarr誰かと接していると安心し睡眠に導入しやすくなる rarrまるで添い寝をしているようなリアルな抱きまくらを使う 技術や手法のキモ breathing sensation 風船を使って人の呼吸を再現肺の形の風船弱く長い呼吸をする

heating お湯を使って人の体温を再現45 有効性の確認 84人の人が実験 呼吸が睡眠を誘ったかrarr61 体温が睡眠を誘ったかrarr85 関連論文 The Impact of Sleep Disorders on Social Life[Komada et al 2007]

20150522 橋爪智 2 鬼

まとめ13超音波 モーター 風

20150522 橋爪智 2 鬼

コイル 電気刺激 Electrovibration

振動 音 お湯

なかの

Temporally Consistent Disparity and Optical Flow via Efficient Spatio-temporal Filtering1

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示した

議論論はあるか

時間的に一定の視差を算出する手法静止画ステレオよりも精度度が良良いことを示す従来よりも推定精度度が良良いオプティカルフローも算出する

一枚の静止画に対するフィルタリング[1]をステレオ動画に拡張している

ケンブリッジのステレオ動画のデータセットを利利用 実写動画に対する比較も行行うノイズ耐性も検証する

フィルタベースとエネルギーベースの関係性を良良り理理解することで推定精度度を上げる

実装が簡単でリアルタイム視差推定が可能

Fast Cost-Volume Filtering for Visual Correspondence and Beyond [Rhemann C Hosni A Bleyer M Rother C Gelautz M CVPR2011] Real-time Spatiotemporal Stereo Matching Using the Dual-Cross-Bilateral Grid [Richardt C Orr D Davies I Criminisi A Dodgson NA ECCV2010] Secrets of optical flow estimation and their principles [Sun D Roth S Black MJ 2010] Motion estimation with non-local total variation regularization [Werlberger M Pock T Bischof H CVPR2010] Temporally Consistent Disparity Maps from Uncalibrated Stereo Videos [Bleyer M Gelatuz M ISPA2011]

なかの

SymStereo Matching using Induced Symmetry (2014)2

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示した

議論論はあるか

画像の対称性を用いてステレオマッチングを行行う 左右の画像を反転させて重ね合わせることで対称性を測る

絵的な類似の代わりに対称性を使う今まで対称性を用いる手法はなく新規性が大きい

三つのSymmetry-baseの手法で精度度を検証従来手法よりも精度度が向上しているMiddlebury Oxford Corridorfountain-P11のデータセット使用

ステレオの問題である不不連続な箇所オクルージョン部分は未解決である演算時間はやや増加

1-Dラインのコストを考える今までは撮像面に対して平行行な平面でデプスを考えていたが垂直な平面を考える

BT[Birchfield and Tomasi 1998] Census transform[Zabih and Woodfill 1994] Log N[Kovesi 1997] radio-metoric differences[Hirschmuller Scharstein 2009]

なかの

Camouflaging an Object from Many Viewpoints3

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

多くの視点から三次元の物体をカモフラージュするカモフラージュによってオクルージョン部分の不不連続がどの程度度生じるか他の視点ではどれほどになるかの検証

MRF（Markov Random Fields）ベース

新しい三次元物体のカモフラージュモデルを構築 37種類のデータセットを作る

箱形の物体に対してカモフラージュ処理理を施し 結果を評価する

オクルージョン不不連続テクスチャの歪みが問題 照明や画像の貼りつけに制限あり

なかの

Aliasing Detection and Reduction in Plenoptic Imaging4

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

カメラアレイ撮影の角度度のエイリアシングを除去するエイリアシングの探索索と打ち消しを行行う

周波数領領域ではなく空間領領域で探索索を行行う

先行行研究がフィルタデモザイキング再パラメータ調整などの前処理理でエイリアシング除去を行行うのに対しエイリアシング探索索後にリフォーカスの段階でエイリアシングを取り除く

8times8の平行行カメラアレイで検証するカメラ間の 基線長は70mm

今回は基線長が長いデータセットを使った 次はLytroなどのマイクロレンズアレイで検証する

Globally consistent multi-label assignment on the ray space of 4d light fields [S Wanner C Straehle B Goldluecke CVPR2013] Lineassisted light field triangulation and stereo matching [Z Yu X Guo H Lin A Lumsdaine J Yu ICCV 2013]

なかの

Globally Consistent Multi-Label Assignment on the Ray Space of 4D Light Fields5

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

四次元ライトフィールドの光線情報において マルチラベルの領領域分割を行行う

深度度情報光線情報を用いて領領域分割することで 二次元（空間）情報だけでは分割が難しかった 領領域を分割可能とする

The light field camera Extended depth of field aliasing and superresolution [T Bishop P Favaro IEEE Transactions on Pattern Analysis and Machine Intelligence 2012]

なかの

Line Assisted Light Field Triangulation and Stereo Matching6

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

光線情報を利利用してステレオマッチングの精度度を 向上させる手法三角測量量の誤差を減らす

Light Field Stereo Matchingとかいう手法 グラフ構造を作成

Variational light field analysis for disparity estimation and super-resolution [S Wanner and B Goldlumluecke 2013]

なかの

Adaptive stereo similarity fusion using confidence measures 20157

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

ステレオマッチングの新しい方式fusion weightsを提案複数の手法を組み合わせてコスト計算を行行う手法付録に既存手法のコスト関数一覧あり

パラメータに依存する手法を用いないことで高速化を図っている

一つのアルゴリズムでは異異なる特性を持つ領領域全てに対して適切切なマッチングはできない複数を組み合わせることでそれを補う13種と多い

middleburyとKITTIのデータセットで評価

一枚あたり03sと高速だが001sとより高速なアルゴリズムが存在する

Segment-based stereo matching using belief propagation and a self-adapting dissimilarity measure [A Klaus M Sormann K Karner ICPR2006] On building an accurate stereo matching system on graphics hardware [X Mei X Sun M Zhou S Jiao H Wang X Zhang ICCV2011] Similarity measures for depth estimation [K Wegner O Stankiewicz 3DTV-CON2009] On accurate dense stereo-matching using a local adaptive multi-cost approach [C Stentoumis L Grammatikopoulos I Kalisperakis G Karras ISPRS2014] A quantitative evaluation of confidence measures for stereo vision [X Hu P Mordohai PAMI2012]

なかの

SIMILARITY MEASURE FOR DEPTH ESTIMATIOM 20098

どんなもの

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

4種類の視差推定アルゴリズムを組み合わせている 類似度度の選択性の解析

Belief Propagationの枠組みを用いる

名古屋大学の多視点データベースを利利用

HHI Test Material for 3D Video [I Feldmann M Muller F Zilly R Tanger A SmolicP Kauff T Wiegand 2008] Multiview Video Test Sequence and Camera Parameters [Yo-Sung Ho Eun-Kyung Lee and Cheon Lee 2008] 1D Parallel Test Sequences for MPEG-FTV [M Tanimoto T Fujii N Fukushima 2008] Non-parametric Local Transforms for Computing Visual Correspondence [R Zabih J Woodfill 1994]

なかの

Spatiotemporal Stereo via Spatiotemporal Quadric Element (Stequel) Matching9

どんなもの

技術や手法のキモはどこ

新しいマッチング手法を提案動き考慮することなく時間情報を取り込むことができる 時間方向のエピ線を考える

オプティカルフロー推定は3D境界や低テクスチャで弱いが提案手法はロバストである

なかの

Depth Video Enhancement Based on Weighted Mode Filtering10

どんなもの

議論論はある

ノイズを含んだ低解像度度のデプスマップの質を高める手法（超解像度度とデノイズ）時間方向も使用簡単なオプティカルフローを計算し利利用する

非反復復アルゴリズムのためGPUに載せやすく高速化が考えられる

なかの

Fast Bilateral-Space Stereo for Synthetic Defocus11

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

議論論はある

次に読むべき論論文は

高速な自由焦点ぼけ画像の作成

Bilateral-spaceを提案

従来研究よりも10から100倍速くぼけ具合の精度度も良良い

ぼけを作成するというアプリケーションに利利用する距離離という面では提案手法が有益であるが実測的な距離離という面での精度度は悪い背景と前景が同じ色で近くにある場合同一ととらえてしまう

Efficient high-resolution stereo matching using local plane sweeps [S N Sinha D Scharstein and R SzeliskiCVPR2014] Bilateral filtering-based optical flow estimation with occlusion detection [J Xiao H Cheng H Sawhney C Rao and M IsnardiECCV2006] Efficient nonlocal regularization for optical flow [P Krumlahenbumluhl and V KoltunECCV2012] Real-time spatiotemporal stereo matching using the dual-cross-bilateral grid [C Richardt D Orr I Davies A Criminisi and N A DodgsonECCV2010]

どうやって有効性を示した視差推定の精度度はmiddleburyKITTI

なかの

Robust Spatiotemporal Stereo for Dynamic Scenes12

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

ステレオ動画のフレーム間情報を取り入れることでノイズ耐性を向上させるまた動きの大きなものも考える

時間を含めたウインドウの提案自動的にそのような変化に対応する画像領領域を検出する

従来の時空間ステレオと比べ大きな動きによる急激な視差の時間変化に対して頑健である

なかの

Spacetime Stereo A Unifying Framework for Depth from Triangulation13

どんなもの

先行行研究と比べてどこがすごい

space time stereoを提案ステレオカメラの視差推定でも構造光を用いた視差推定でも利利用可能 動的なシーンでの利利用も可能

フレームごとマッチングを取っていたが複数フレームでのマッチングを可能とした

なかの

Learning to Select and Order Vacation Photographs (Disney research)14

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示したあまりにもたくさん撮影した写真たちから自動的にフォトアルバムを作成する研究

複雑な視覚での区別を試みたのはこの論論文が初

５つの異異なるトピックから63の個人的な写真コレクションのデータセットを利利用し定量量的に評価する

写真間の差別かを定義する顔全体の絵何が写っているか写っていないかを評価する

Jointly aligning and segmenting multiple web photo streams for the inference of collective photo storylines [G Kim and E P Xing CVPR2013] Photo sequencing [T Basha Y Moses and S Avidan CVPR2012]

なかの

A Taxonomy and Evaluation of Dense Two-Frame Stereo Correspondence Algorithms15

どんなもの

どうやって有効性を示した

次に読むべき論論文は

ステレオマッチングに関する分類を行行う 新たなデータセットを作成する

というよりも他の手法が有効性を示すことができるようにデータセットを作成した 今ではmiddleburyのデータセットと言えばステレオ業界では超有名

High-resolution stereo datasets with subpixel-accurate ground truth

なかの

Discriminability Limits in Spatio-Temporal Stereo Block Matching1

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

spatio-temporal disparity estimationの根本的な前提の正当性を解析しマッチング処理理の際に動きが助けとなる程度度を決定する

時空間マッチングのエラーを分析し誤りの原因を確率率率で導出する（フレーム数動きの分散画像特徴ノイズの関数）

[34243334]は時空間マッチングの利利点を指摘していたが本論論文はマッチング精度度の向上のために動きを用いる手法の程度度や性質を研究する

6つのステレオビデオを用いて検証を行行った

Spacetime stereo Shape recovery for dynamic scenes [L Zhang B Curless and S Seitz CVPR2003] Spatiotemporal stereo and scene flow via stequel matching [M Sizintsev and R Wildes PAMI2012] Temporally consistent disparity and optical flow via efficient spatio-temporal filtering [A Hosni C Rhemann M Bleyer and M Gelautz PRCAIVT2012] Spacetime stereo A unifying framework for depth from triangulation [PAMI2005] Dynamic depth recovery from multiple synchronized video streams [H Tao H Sawhney and R Kumar CVPR2001] Spatiotemporal descriptor for wide-baseline stereo reconstruction of non-rigid and ambiguous scenes [ECCV2003]

なかの

Depth-Based Patch Scaling for Content-Aware Stereo Image Completion2

どんなもの

どうやって有効性を示した

ステレオでデプスを取り物体の三次元情報を使ってインペインティングを行行う

bookのデータセット背景が繰り返しパターンが多いものを使っている

なかの

Fast Semi-dense Surface Reconstruction from Stereoscopic Video in Laparoscopic Surgery3

どんなもの

手法の流流れ

次に読むべき論論文は

腹腔内手術の際にステレオビデオから高速に物体の三次元再構成を行行う研究

Evaluation of stereo matching costs on images with radiometric differences [Hirschmueller H Scharstein D PAMI2008]

スコープカメラから画像取得GPUで演算する 視差を算出しフィルタにかける距離離に変換 点群を再びフィルタにかけて三次元再構成

なかの

3D Reconstruction from Accidental Motion4

どんなもの

技術や手法のキモはどこ

議論論はある

数秒のビデオ（単眼）から三次元再構成を行行う 手ぶれなどの動きから再構成が可能で特定の動きや機材を必要としない

短い基線長でも再構成が可能（3mmの基線長）

基線長が短いため背景の精度度が低くなる リフォーカス画像作成には十分 練習では上手く動作したが検証がまだ必要

なかの

Panoramic Video from Unstructured Camera Arrays5

どんなもの

技術や手法のキモはどこ

議論論はある

複数のカメラを用いたパノラマ撮影を行行う その際に不不自然さがないような動画を作成する

不不自然さを感じる感覚特性を提示しそれにのっとって対策を講じている

一つのカメラの解像度度と品質を向上させるよりも複数台のカメラを組み合わせることがはるかに簡単で有益である専門家でなくてもGoProのカメラセットを組み合わせることは容易易

カメラの配置は厳密に決められていない完璧な時間同期やローリングシャッターの不不足のような実撮影での問題もクリアしている

先行行研究と比べてどこがすごい

どうやって有効性を示した左のシステムは14台のカメラを使用 右のシステムはGoProを5台使用

Disney 201558

なかの

Floating Scale Surface Reconstruction6

どんなもの

技術や手法のキモはどこ

流流動的にスケールを変えられる三次元再構成手法

サンプル規模に依存するパラメータがない rarrどのスケールのサンプルにも対応できる

siggraph2014

なかの

A Super Resolution Reconstruction Scheme for Mixed Spatio-Temporal Stereo Video7

どんなもの

技術や手法のキモはどこ

ビデオ超解像アルゴリズム

二台のカメラを使用 一台は低解像度度で高速一台は高解像度度で低速

HHI 3DV ftp siteのBookarrivalとbeergadenを使用どうやって有効性を示した

なかの

What Is a Good Day for Outdoor Photometric Stereo8

どんなもの

先行行研究と比べてどこがすごい

議論論はある

次に読むべき論論文は

屋外における照度度差があるステレオの研究 屋外でステレオを行行う際に有利利or不不利利な日照条件を明らかにする

点光源を用いた研究は行行われていたが屋外での研究はされていなかった

晴れより曇りの方が精度度が良良い雲があるから特徴量量を取りやすい雑音を白色ガウスモデルを想定 季節ごとのデータセットを利利用してみても良良い

Time-lapse photometric stereo and applications [F Shen K Sunkavalli N Bonneel S Rusinkiewicz H Pfisterand X Tong2014] Outdoor photometric stereo [L-F Yu S-K Yeung Y-W Tai D Terzopoulos and T FChan ICCP2013]

どうやって有効性を示した屋外の照明に関するHDR環境マップのデータベースを利利用

Disney 2015424

なかの

COLORBRUSH ANIMATED DIFFUSION FOR INTUITIVE COLORIZATION SIMULATING WATER PAINTING 9

どんなものアニメを水彩画で描いたように変換する 水彩画を描くには経験が必要であるがそれを作成するアルゴリズムを考案絵具が水によりどうにじむかシュミレーションしている

Disney 20141027 ICIP2014

次に読むべき論論文はGabor-space geodesic active contoursrdquo In Algebraic Frames for the Perception-Action Cycle [C Sagiv NA Sochen and YY Zeevi 2000] Practical temporal consistency for image-based graphics applications [M Lang O Wang T Aydin A Smolic and M Gross SIGGRAPH2012] Computer-Generated Watercolor [CJ Curtis SE Anderson JE Seims KW Fleischer and DH Salesin SIGGRAPH1997]

なかの

From Sound to Sight Using Audio Processing to enable Visible Light Communication 10

どんなもの光に情報を載せる技術プロジェクトページがあって光関係の研究が8個載っている

httpwwwdisneyresearchcomprojectvisible-light-communication

ビデオのURL httpwwwdisneyresearchcomwpcontentuploadsPub_InvisibleLightCommunication_Siggraph14_videomp4

• 201211106_KeisukeKawahara
• 201311421_KeitaKanai_02
• 201313095_AkiraIshii_02
• 201413109_YuukiKubo_02
• 201513110_SatoshiHashizume_02
• 鬼輪講マラソン③_1
• 鬼輪講マラソン③_2

2 201313095

3D

3D

bull  GeigerMVollertsenFTheMechanismsofLaserFormingCIRPANNALSlsquo93421301-304

bull  WillisKDDXuCWuJKLevinGGrossMDInteracEvefabricaEonnewinterfacesfordigitalfabricaEonProcTEI11pp69-72

LaserOrigamiampLaserCugngamp3DampObjectsamp(CHIrsquo13)

StefanieMuellerBasEanKruckPatrickBaudisch

h]pswwwyoutubecomwatchv=arjRtCjI9AQ

2 201313095

bend

bull  HyunyoungSongFranccediloisGuimbreEegravereChangHuHodLipsonModelCraycapturingfreehandannotaEonsandeditsonphysical3DmodelsProceedingsofthe19thannualACMsymposiumonUserinterfacesoywareandtechnologyOctober15-182006MontreuxSwitzerland

InteracEveampConstrucEonampInteracEveampFabricaEonampofampFuncEonalampMechanicalampDevicesamp(UISTrsquo12)

StefanieMuellerPedroLopesPatrickBaudisch

h]pdlacmorgcitaEoncfmid=23801162380191

2 201313095

3D

3D

bull  SavageVSchmidtRGrossmanTFitzmauriceGandHartmannBAseriesoftubesAddinginteracEvityto3dprintsusinginternalpipesInProcUIST14(2014)

3DampPrinEngampPneumaEcampDeviceampControlsampwithampVariableampAcEvaEonampForceampCapabiliEesamp(CHIrsquo15)amp

MarynelVazquezEricBrockmeyerRutaDesaiChrisHarrisonSco]EHudson

h]pswwwyoutubecomwatchv=-4gFYvhkz0Y

2 201313095

OpenFab 3D

fablets

3 3

bull  CHENDMATUSIKWSITTHI-AMORNPDIDYKPANDLEVIND2013Spec2FabAreducer-tunermodelfortranslat-ingspecificaEonsto3DprintsACMTransGraph324(July)

OpenFabampAampProgrammableampPipelineampforampMulEMaterialampFabricaEonamp(SIGGRAPHrsquo13)

KirilVidimcˇeSzu-PoWangJonathanRagan-KelleyWojciechMatusik

2 201313095

3D

3D

3D

3D14 30 13 67

244

14

3D

bull  MuellerSKruckBBaudischPLaserOrigamiLaser-Cunng3DObjectsProcCHIrsquo132585-2592

faBrickaEonampFastamp3DampPrinEngampofampFuncEonalampObjectsampbyampIntegraEngampConstrucEonampKitampBuildingampBlocksamp(CHIrsquo14)amp

StefanieMuellerTobiasMohrKersEnGuentherJohannesFrohnhofenPatrickBaudisch

h]pswwwyoutubecomwatchv=BlO6YRcLJjE

Touching13 the13 Void13 Direct-shy‐Touch13 Interac4on13 for13 Intangible13 Displays(CHIrsquo10)Li-Wei Chan Hui-Shan Kao Mike Y Chen Ming-Sui Jane Yi-Ping Hung

201413109　久保勇貴 2（鬼コース）13

どんなもの13

空中像へのタッチのエラーに関する調査及び影や音のフィードバックを付与することによるパーフォーマンス向上を示した研究13

先行研究と比べてどこがすごい13

平面画像をタッチする際の奥行きに関するエラーの正確な取得を初めて検証13

技術や手法のキモはどこ13

２つの赤外線カメラを用いた正確なタッチの検出13

どうやって有効だと検証した13

タッチ時の奥行きの正確さに関する被験者実験を実施またタッチする際に影や音を付けた際の反応時間を被験者実験で検証13

議論はある13

ユーザは慣れるまで影や音のフィードバックが必要だがそのあとは必要なくなる13

次に読むべき論文は13

MirageTable13 （CHI12） 13

MirageTable13 Freehand13 Interac4on13 on13 a13 Projected13 13 Augmented13 Reality13 Tabletop(CHIrsquo12)

Hrvoje Benko Ricardo Jota Andrew D Wilson

201413109　久保勇貴 2（鬼コース）13

どんなもの13

テーブル上においてバーチャルな物体をリアルタイムで現実でものを動かすことと同様な動作に操作可能なシステム13

先行研究と比べてどこがすごい13

現実の物体をリアルタイムで画面に取りこむことができ質の高いフリーハンドインタラクションを実現した点13

技術や手法のキモはどこ13

色深度前景頭追跡プロキシパーティクルを駆使したリアルタイムメッシュの作成13

どうやって有効だと検証した13

凹凸など例外な表面に対しての投影した際の画像の質についての評価実験また仮想物体の奥行き知覚に関する実験も行った13

議論はある13

前面のみしかキャプチャしていないため差が生じる握っている場所の再現は未解決な課題である13

次に読むべき論文は13

Hirsch13 et13 al13 201413 (SIGGRAPHrsquo14)13

A13 Compressive13 Light13 Field13 Projec4on13 System13 (SIGGRAPHrsquo14)MaChew13 Hirsch13 Gordon13 Wetzstein13 Ramesh13 Raskar

201413109　久保勇貴 2（鬼コース）13

どんなもの13

通常の3Dディスプレイに比べて解像度輝度コントラストを改善した圧縮ライトフィードディスプレイ13

先行研究と比べてどこがすごい13

多視点立体視を複数でなく１台のプロジェクタを用いて実現した13

技術や手法のキモはどこ13

受動的スクリーンと高速切り替えプロジェクタによる新しい光学設計13

どうやって有効だと検証した13

4つのシーン例を投影したものを示したアニメーションの3D効果について観察を行った13

議論はある13

光路長を広げると観察できる画質が大幅に制限され他のライトフィードビューと混線が生じる13

次に読むべき論文は13

Butler13 et13 al13 201113

Vermeer13 Direct13 Interac4on13 with13 a13 360deg13 Viewable13 3D13 Display(UISTrsquo11) Alex Butler Otmar Hilliges Shahram Izadi Steve Hodges David Molyneaux David Kim

201413109　久保勇貴 2（鬼コース）13

どんなもの13

映し出された3Dオブジェクトとインタラクションを行えるシステム13

先行研究と比べてどこがすごい13

ディスプレイ内の画像とのインタラクションを提案ボリュームディスプレイを支援する新しいセンシング法の提案13

技術や手法のキモはどこ13

パラボラ鏡に取り付けた赤外線カメラセンサによる指先検出13

どうやって有効だと検証した13

アプリケーション例を示した13

議論はある13

パラボラ鏡の大きさよりもディスプレイサイズが小さくなってしまう13

次に読むべき論文は13

Hirsch13 et13 al13 201213

8D13 Interac4ng13 with13 a13 Relightable13 Glasses-shy‐Free13 3D13 Display(CHIrsquo12)Li-Wei Chan Hui-Shan Kao Mike Y Chen Ming-Sui Jane Yi-Ping Hung

201413109　久保勇貴 2（鬼コース）13

どんなもの13

ライトフィードによる入力とライトフィールドによる表示を行うリアルタイム8Dディスプレイ13

先行研究と比べてどこがすごい13

リアルタイムでの8Dディスプレイの実現（先行研究は7fps）13

技術や手法のキモはどこ13

GPUにおけるレンダリング処理13

どうやって有効だと検証した13

MRIデータを用いたディスプレイのデモを示した13

議論はある13

現在はグレースケールの入力のみだがカラーでの入力できればより強力になるだろう13

次に読むべき論文は13

Sahoo13 et13 al13 201513

Control13 of13 Non-shy‐Solid13 Diffusers13 by13 Electrosta4c13 Charging13 (CHIrsquo15) Deepak Ranjan Sahoo Diego Martinez Plasencia Sriram Subramanian

201413109　久保勇貴 2（鬼コース）13

どんなもの13

シャボン玉や霧などの非固体を電場による制御を試みた研究13

先行研究と比べてどこがすごい13

非固体の形や位置の制御法を提案した点13

技術や手法のキモはどこ13

[Intra13 et13 al13 11]中のldquowire-shy‐to-shy‐Cylinderdquoを用いたエアゾール粒子の帯電13

どうやって有効だと検証した13

霧及びシャボン玉によるディスプレイのアプリケーション例で実際に制御して見せた13

議論はある13

風による影響を本手法は打ち消すことができた13

次に読むべき論文は13

Barnum13 et13 al13 201013

A13 Mul4-shy‐Layered13 Display13 with13 Water13 Drops(SIGGRAPHrsquo10)Peter C Barnum Srinivasa G Narasimhan Takeo Kanade

201413109　久保勇貴 2（鬼コース）13

どんなもの13

複数層の落下水滴にプロジェクションマッピングを行いディスプレイとした研究13

先行研究と比べてどこがすごい13

水滴の制御を行うことで単一のプロジェクタによって複数層の映像投影を可能とした点13

技術や手法のキモはどこ13

[Ambravaneswaran13 et13 al13 2002]及び本研究における実験結果に基づく水滴生成13

どうやって有効だと検証した13

複数のディスプレイ例を示した13 例）顔の投影水槽シミュレータなど13

議論はある13

本当の3Dディスプレイにするにはより多くの水滴制御が必要13

次に読むべき論文は13

Lee13 et13 al13 200713

An13 Immaterial13 Depth-shy‐Fused13 3D13 Display(VRSTrsquo07)Cha Lee Stephen DiVerdi Tobias Humlollerer

201413109　久保勇貴 2（鬼コース）13

どんなもの13

２つのスクリーンを駆使し3Dディスプレイを実現するdepth-shy‐fused13 3D(DFD)に関する評価を行いその結果よりディスプレイを提案した研究13

先行研究と比べてどこがすごい13

DFDが任意のスクリーン設定及び見る位置に対して有効であることを示した13

技術や手法のキモはどこ13

６通りのスクリーン組合せから２つを抽出し見え方の違いを検証した点13

どうやって有効だと検証した13

６通りのスクリーンについて立体的に見えるか被験者実験を実施その後それぞれに有意差がみられるか調べた13

議論はある13

ステレオイメージを認めることができなかったユーザに対しても強い3D効果が見られた13

次に読むべき論文は13

Tokuda13 et13 al13 201013

Cloud13 Display13 (ACErsquo10)Yutaka Tokuda Yasuhiro Suzuki Kunihiro Nishimura Tomohiro Tanikawa Michitaka Hirose

201413109　久保勇貴 2（鬼コース）13

どんなもの13

煙の渦輪を用いた空間を埋めるディスプレイ13

先行研究と比べてどこがすごい13

制御可能な手法により高所へのパーティクルを運搬することに着目した点13

技術や手法のキモはどこ13

コンピュータによって制御が行われる空気砲アレイ13

どうやって有効だと検証した13

箱の中で実験を行い安定して渦輪をできるようにした実際にデモを行ったことを示した13

議論はある13

今の試作機をより早くリフレッシュ速度を高めることによりより濃く空間を埋められることを目指す13

次に読むべき論文は13

Sato13 et13 al13 200913

Par]cle13 Display13 System　(JVRC09)13 -shy‐13 A13 Large13 Scale13 Display13 for13 Public13 Space13 -shy‐

Munehiko13 Sato13 Yasuhiro13 Suzuki13 13 Atsushi13 Hiyama13 Tomohiro13 Tanikawa13 Michitaka13 Hirose

201413109　久保勇貴 2（鬼コース）13

どんなもの13

パーティクルディスプレイによる公共スペースのための大画面ディスプレイの提案13

先行研究と比べてどこがすごい13

公共スペースにおける要求と制限に基づいたシステムを提案した点13

技術や手法のキモはどこ13

実験に基づく表示画像のスクロール時間の制御13

どうやって有効だと検証した13

Aという文字の知覚実験によって 適な点滅周期の調査を行った13

議論はある13

現在の試作機を組合せより高解像度にする必要がある13

次に読むべき論文は13

Kwon13 et13 al13 201513

FugaciousFilm13 Exploring13 Aen4ve13 Interac4on13 with13 Ephemeral13 Material13 (CHIrsquo15)Hyosun13 Kwon13 Shashank13 Jaiswal13 Steve13 Benford13 Sue13 Ann13 Seah13

13 Peter13 BenneC13 Boriana13 Koleva13 Holger13 Schnaumldelbach

201413109　久保勇貴 2（鬼コース）13

どんなもの13

膜を押す引く飛び出ることができる新しい石鹸膜インタフェースの提案13

先行研究と比べてどこがすごい13

徐々に消えるインタフェースは高い注意を有するインタラクションを提供するという点を示したこと13

技術や手法のキモはどこ13

水グリセリンを201の対比で混ぜることでldquopoprdquoがきれいになるようにしかつ膜の耐久性を向上させた13

どうやって有効だと検証した13

３目並べを用いた被験者実験を実施13 ユーザは膜を割ると負け膜を自分のマスにするにはタッチ押す引くの書かれた通りの操作を行う13

議論はある13

ユーザに精密な動作を要求することはとりわけ注意を払うことを誘発する13

次に読むべき論文は13

Wetzstein13 et13 al13 201213

Tensor13 Displays13 Compressive13 Light13 Field13 Synthesis13 using13 Mul4layer13 Displays13 with13 Direc4onal13 Backligh4ng(SIGGRAPHrsquo12)

Gordon13 Wetzstein13 Douglas13 Lanman13 MaChew13 Hirsch13 Ramesh13 Raskar

201413109　久保勇貴 2（鬼コース）13

どんなもの13

視点によって異なる立体映像を見ることができる複数の層からなるディスプレイ13

先行研究と比べてどこがすごい13

既存の手法を合成したcomputa(onal13 displaysというディスプレイの新しいフレームワークを提案した13

技術や手法のキモはどこ13

時分割で視差マスクを表示することでユーザの視線ごとに立体像を表現する13

どうやって有効だと検証した13

通常のディスプレイ３層LCDLCD及び指向性バックライトの例による比較13 13

議論はある13

波紋を含むこと色チャンネルが悪影響を与える相互反射不均一などの問題が見られた13

次に読むべき論文は13

Matoba13 et13 al13 1213

SplashDisplay(VRICrsquo12)Yasuo Matoba Taro Tokui Ryo Sato Tochiki Sato Hideki Koike

201413109　久保勇貴 2（鬼コース）13

どんなもの13

パーティクルにCGを投射しパーティクルがテーブル上に投げられると爆発しパーティクルが噴きあがる13

先行研究と比べてどこがすごい13

ビーズがミリメートルからメートル単位までZ軸方向について空中で奥行きを表現する13

技術や手法のキモはどこ13

スピーカによって風力が発生させビーズを舞い上げる点13

どうやって有効だと検証した13

ビーズを投げると花火が打ちあがっているかのようなアプリケーション例を示した13

議論はある13

高いレベルの表現及び幅広い入力範囲を提供できた13

次に読むべき論文は13

Kim13 et13 al13 1413

MARIO13 Mid-shy‐air13 Augmented13 Reality13 Interac4on13 with13 Objects13 (ECrsquo14)Hanyuool13 Kim13 13 Issei13 Takahashi13 Hiroki13 Yamamoto13 Satoshi13 Maekawa13 Takeshi13 Naemura

201413109　久保勇貴 2（鬼コース）13

どんなもの13

350times300times250のテーブル上のスペースにおいて自由に動かせる空中像を造りだすことができる13

先行研究と比べてどこがすごい13

凹面鏡や凹レンズのように曲面でないため画像の歪曲が発生しない13

技術や手法のキモはどこ13

Aerial13 Imaging13 Plate(AIP)を用いた空中像の生成及びそのためのディスプレイ移動装置13

どうやって有効だと検証した13

左右からの視差の考慮及び奥行き表現時の画像提示視野角の検証などを行った13 13

議論はある13

投影しているひよこを叩いたり払いのけたりするような動作がデモ中見られた13

次に読むべき論文は13

Tactile Feedback on Flat Surfaces for the Visually Impaired13Ali Israr Olivier Bau Seung-Chan Kim Ivan Poupyrev13

どのようなものか 視覚障害者のための触覚を用いた視覚代用デバイス 先行研究と比べてどこがすごいか 道案内をしてくれる機械などはあるが日用品の場所を教えたり探すのを手伝ってくれるデバイスはない 技術や手法のキモ タッチパネルとカメラを搭載したデバイス 触覚を与える技術はTeslaTouchを利用 色を基準にオブジェクトの位置を認識 有用性の確認 視覚障害者二人に対して実験このデバイスを使

わなくても各自の方法で物を見つけられるが間違えることが多いこのデバイスを使用することで間違えることなく正確に物の位置を特定できた 課題 一つの色でしか判断できない 触感のあるなしでしか情報を伝えられない 関連論文 TeslaTouch [Bau et al 2010]

20150522 橋爪智 2鬼

Fingernail-Mounted Display of Attraction Force and Texture13Masataka Niwa Tomoko Nozaki Taro Maeda and Hideyuki And13

どのようなものか 指先に取り付けて触感と力を両方表現できるデバイス 先行研究と比べてどこがすごいか 触感と引力をそれぞれ表現するデバイスはあるが両方を一つのデバイスで表現した例は少ない 引力は自由な方向に付加することができる 技術や手法のキモ 偏心に重さを付けた円盤を4枚使用する 5-9Hz 引力　100-200Hz 触感 それぞれの円盤の位相や回転数を調整することで

触感と力 を表現する 4つのモータを使いそれぞれの円盤を独立して制御する 有用性の確認 4人の男性に対して実験80以上の精度で認識できた 関連論文 The nail-mounted attraction forcebump display [Nozaki et al 2008]

20150522 橋爪智 2 鬼

Gilded gait reshaping the urban experience with augmented footsteps13Yuichiro Takeuchi13

どのようなものか 靴に装着し地面の触感をコントロールするデバイス 先行研究と比べてどこがすごいか 単独で動作しなかったり特定の環境のみでしか動作しなかったりするrarr靴単体で動作環境に依存しない 技術や手法のキモ 6個の振動パネルを取り付けゲルでカバー app modulesを取り替えることができ様々な機能を付加できる（GPSsound) 4種類の地面を再現

bull  Hard Ground 振動させない bull  Soft Ground すべてのパネルを振動 bull  Bumpy Ground ジグザグに振動 bull  Godzilla 全てのパネルを振動何回か繰り返す 課題 モーターを使っているため波形をプログラミングできないrarr圧電素子を使用する 関連論文 Haptic Shoes [Fu et al 2010]

20150522 橋爪智 2鬼

ExoInterfaces novel exosceleton haptic interfaces for virtual reality augmented sport and rehabilitation

Dzmitry Tsetserukou Katsunari Sato Susumu Tachi13

どのようなものか 腕に装着し物理的なinteractionを可能にするデバイス 先行研究と比べてどこがすごいか Exoskeleton 力を増幅するためだが重たく危険なこともある String-based wireが視界をまたぐ動きに制限がある rarr腕の動きに制限を与えない安全 技術や手法のキモ 「FlexTorque」人間の筋肉の構造を再現するベルトとモーターを使用する肩の近くに装着することで

腕に負担がかかりにくい 触覚feedback弱いトルク 運動を支援強いトルク 課題 物理的な接触を表現するゲームやスポーツにより没頭させるリハビリのサポートをする視覚障害者の支援（ものの場所を教える） 関連論文 FlexTorque [Dzmitry et al 2010]

20150522 橋爪智 2 鬼

Perception of Ultrasonic Haptic Feedback on the Hand Localisation and Apparent Motion13

Graham Wilson Tom Carter Sriram Subramanian Stephen Brewster13

どのようなものか 超音波を用いた触覚フィードバック有効性の検討を行う 先行研究と比べてどこがすごいか 超音波触覚フィードバックは比較的新しく研究や操作方法に関する知識が少ない 腕を自由に動かすことができ小さいものは着用可能 技術や手法のキモ 88のアレイ状に超音波発生器を設置

有効性の確認 bull  局所的な触感 　　　25箇所に分割しそれぞれに超音波を当てる 　　　触感を感じた989 　　　場所の誤差85mm bull  手のひらを動く触感 上下左右に動く 　　　動いてると感じた629

20150522 橋爪智 2 鬼

Friction Measurements on a Large Area TPaD13Nicholas D Marchuk J Edward Colgate Michael A Peshkin13

どのようなものか 超音波の振動により触感を与える 先行研究と比べてどこがすごいか ガラス板を使うので透明後ろにディスプレイを配置可能 技術や手法のキモ 「Squeeze Film Effect（スクイズ膜効果）」 ガラス板に取り付けた圧電素子の円盤に高周波信号

をかける 実験 振動しない部分＝摩擦が発生しない部分が発生周波数により場所が変わる rarr摩擦を大きさをかける力の大きさから計測 rarr指の場所に合わせて複数の周波数を使い分ける 関連論文 T-PaD[Winfield et al 2007]

20150522 橋爪智 2 鬼

STIMTAC a Tactile Input Device with Programmable Friction13Michel Amberg Freacutedeacuteric Giraud Betty Semail Paolo Olivo Geacutery Casiez Nicolas Roussel13

どのようなものか 触感を与えられるタッチデバイス 先行研究と比べてどこがすごいか LATPaD サイズ大きいノイズが大きい TeslaTouch 高い電圧付加が必要GNDに接続しなければいけない

技術や手法のキモ 「Squeeze Film Effect」超音波を用いて振動を与える 圧電性セラミックを電極にコーディング 指トラッキングは力センサを用いる 活用法 マウスキーボード絵を描く 関連論文 LATPaD[Vincent et al 2011] TeslaTouch[Bau et al 2010]

20150522 橋爪智 2 鬼

Surround Haptics Tactile Feedback for Immersive Gaming Experiences Ali Israr Seung-Chan Kim Ivan Poupyrev Jan Stec13

どのようなものか ゲームに合わせて高解像度の触覚フィードバックをユーザーに与える椅子 先行研究と比べてどこがすごいか 荒く配置した安価な振動アクチュエータで高解像度の触覚フィードバックを行える 一点の振動連続した動き範囲の振動などを再現

技術や手法のキモ 仮想的な振動アクチュエータをいくつかの振動アクチュエータを使って作り出す physical-physicalphysical-virtualvirtual-virtual ゲームにHaptics Engineを導入しHaptics APIを用いてHaptic Displayを操作する 関連論文 Exploring Surround Haptics Displays[Israr et al 2010]

20150522 橋爪智 2 鬼

Audio-Haptic Feedback in Mobile Phones Angela Chang Conor OrsquoSullivan13

どのようなものか haptics機能のついてない携帯電話にオーディオ機能を利用した触覚フィードバックを追加する 先行研究と比べてどこがすごいか 簡単に作れてnon-haptic mobile devicesでも大丈夫 技術や手法のキモ 「MultiFunction Transducer(MFT)」 スピーカーから音と信号の両方を出力できる

bull  Haptic Inheritance 　　音を2つの周波数帯に分ける bull  Synthesis and Matching 　　低周波数帯(20-300Hz)を使い触感を伝える 有効性の検討 42人の人を対象に実験を行う83の人が触感を感じた

20150522 橋爪智 2 鬼

Resolution of Sleep Deprivation Problems using ZZZoo Pillows13Shunsuke Yanaka Motoki Ishida13

どのようなものか 近年不眠症の人が多い rarr誰かと接していると安心し睡眠に導入しやすくなる rarrまるで添い寝をしているようなリアルな抱きまくらを使う 技術や手法のキモ breathing sensation 風船を使って人の呼吸を再現肺の形の風船弱く長い呼吸をする

heating お湯を使って人の体温を再現45 有効性の確認 84人の人が実験 呼吸が睡眠を誘ったかrarr61 体温が睡眠を誘ったかrarr85 関連論文 The Impact of Sleep Disorders on Social Life[Komada et al 2007]

20150522 橋爪智 2 鬼

まとめ13超音波 モーター 風

20150522 橋爪智 2 鬼

コイル 電気刺激 Electrovibration

振動 音 お湯

なかの

Temporally Consistent Disparity and Optical Flow via Efficient Spatio-temporal Filtering1

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示した

議論論はあるか

時間的に一定の視差を算出する手法静止画ステレオよりも精度度が良良いことを示す従来よりも推定精度度が良良いオプティカルフローも算出する

一枚の静止画に対するフィルタリング[1]をステレオ動画に拡張している

ケンブリッジのステレオ動画のデータセットを利利用 実写動画に対する比較も行行うノイズ耐性も検証する

フィルタベースとエネルギーベースの関係性を良良り理理解することで推定精度度を上げる

実装が簡単でリアルタイム視差推定が可能

Fast Cost-Volume Filtering for Visual Correspondence and Beyond [Rhemann C Hosni A Bleyer M Rother C Gelautz M CVPR2011] Real-time Spatiotemporal Stereo Matching Using the Dual-Cross-Bilateral Grid [Richardt C Orr D Davies I Criminisi A Dodgson NA ECCV2010] Secrets of optical flow estimation and their principles [Sun D Roth S Black MJ 2010] Motion estimation with non-local total variation regularization [Werlberger M Pock T Bischof H CVPR2010] Temporally Consistent Disparity Maps from Uncalibrated Stereo Videos [Bleyer M Gelatuz M ISPA2011]

なかの

SymStereo Matching using Induced Symmetry (2014)2

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示した

議論論はあるか

画像の対称性を用いてステレオマッチングを行行う 左右の画像を反転させて重ね合わせることで対称性を測る

絵的な類似の代わりに対称性を使う今まで対称性を用いる手法はなく新規性が大きい

三つのSymmetry-baseの手法で精度度を検証従来手法よりも精度度が向上しているMiddlebury Oxford Corridorfountain-P11のデータセット使用

ステレオの問題である不不連続な箇所オクルージョン部分は未解決である演算時間はやや増加

1-Dラインのコストを考える今までは撮像面に対して平行行な平面でデプスを考えていたが垂直な平面を考える

BT[Birchfield and Tomasi 1998] Census transform[Zabih and Woodfill 1994] Log N[Kovesi 1997] radio-metoric differences[Hirschmuller Scharstein 2009]

なかの

Camouflaging an Object from Many Viewpoints3

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

多くの視点から三次元の物体をカモフラージュするカモフラージュによってオクルージョン部分の不不連続がどの程度度生じるか他の視点ではどれほどになるかの検証

MRF（Markov Random Fields）ベース

新しい三次元物体のカモフラージュモデルを構築 37種類のデータセットを作る

箱形の物体に対してカモフラージュ処理理を施し 結果を評価する

オクルージョン不不連続テクスチャの歪みが問題 照明や画像の貼りつけに制限あり

なかの

Aliasing Detection and Reduction in Plenoptic Imaging4

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

カメラアレイ撮影の角度度のエイリアシングを除去するエイリアシングの探索索と打ち消しを行行う

周波数領領域ではなく空間領領域で探索索を行行う

先行行研究がフィルタデモザイキング再パラメータ調整などの前処理理でエイリアシング除去を行行うのに対しエイリアシング探索索後にリフォーカスの段階でエイリアシングを取り除く

8times8の平行行カメラアレイで検証するカメラ間の 基線長は70mm

今回は基線長が長いデータセットを使った 次はLytroなどのマイクロレンズアレイで検証する

Globally consistent multi-label assignment on the ray space of 4d light fields [S Wanner C Straehle B Goldluecke CVPR2013] Lineassisted light field triangulation and stereo matching [Z Yu X Guo H Lin A Lumsdaine J Yu ICCV 2013]

なかの

Globally Consistent Multi-Label Assignment on the Ray Space of 4D Light Fields5

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

四次元ライトフィールドの光線情報において マルチラベルの領領域分割を行行う

深度度情報光線情報を用いて領領域分割することで 二次元（空間）情報だけでは分割が難しかった 領領域を分割可能とする

The light field camera Extended depth of field aliasing and superresolution [T Bishop P Favaro IEEE Transactions on Pattern Analysis and Machine Intelligence 2012]

なかの

Line Assisted Light Field Triangulation and Stereo Matching6

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

光線情報を利利用してステレオマッチングの精度度を 向上させる手法三角測量量の誤差を減らす

Light Field Stereo Matchingとかいう手法 グラフ構造を作成

Variational light field analysis for disparity estimation and super-resolution [S Wanner and B Goldlumluecke 2013]

なかの

Adaptive stereo similarity fusion using confidence measures 20157

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

ステレオマッチングの新しい方式fusion weightsを提案複数の手法を組み合わせてコスト計算を行行う手法付録に既存手法のコスト関数一覧あり

パラメータに依存する手法を用いないことで高速化を図っている

一つのアルゴリズムでは異異なる特性を持つ領領域全てに対して適切切なマッチングはできない複数を組み合わせることでそれを補う13種と多い

middleburyとKITTIのデータセットで評価

一枚あたり03sと高速だが001sとより高速なアルゴリズムが存在する

Segment-based stereo matching using belief propagation and a self-adapting dissimilarity measure [A Klaus M Sormann K Karner ICPR2006] On building an accurate stereo matching system on graphics hardware [X Mei X Sun M Zhou S Jiao H Wang X Zhang ICCV2011] Similarity measures for depth estimation [K Wegner O Stankiewicz 3DTV-CON2009] On accurate dense stereo-matching using a local adaptive multi-cost approach [C Stentoumis L Grammatikopoulos I Kalisperakis G Karras ISPRS2014] A quantitative evaluation of confidence measures for stereo vision [X Hu P Mordohai PAMI2012]

なかの

SIMILARITY MEASURE FOR DEPTH ESTIMATIOM 20098

どんなもの

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

4種類の視差推定アルゴリズムを組み合わせている 類似度度の選択性の解析

Belief Propagationの枠組みを用いる

名古屋大学の多視点データベースを利利用

HHI Test Material for 3D Video [I Feldmann M Muller F Zilly R Tanger A SmolicP Kauff T Wiegand 2008] Multiview Video Test Sequence and Camera Parameters [Yo-Sung Ho Eun-Kyung Lee and Cheon Lee 2008] 1D Parallel Test Sequences for MPEG-FTV [M Tanimoto T Fujii N Fukushima 2008] Non-parametric Local Transforms for Computing Visual Correspondence [R Zabih J Woodfill 1994]

なかの

Spatiotemporal Stereo via Spatiotemporal Quadric Element (Stequel) Matching9

どんなもの

技術や手法のキモはどこ

新しいマッチング手法を提案動き考慮することなく時間情報を取り込むことができる 時間方向のエピ線を考える

オプティカルフロー推定は3D境界や低テクスチャで弱いが提案手法はロバストである

なかの

Depth Video Enhancement Based on Weighted Mode Filtering10

どんなもの

議論論はある

ノイズを含んだ低解像度度のデプスマップの質を高める手法（超解像度度とデノイズ）時間方向も使用簡単なオプティカルフローを計算し利利用する

非反復復アルゴリズムのためGPUに載せやすく高速化が考えられる

なかの

Fast Bilateral-Space Stereo for Synthetic Defocus11

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

議論論はある

次に読むべき論論文は

高速な自由焦点ぼけ画像の作成

Bilateral-spaceを提案

従来研究よりも10から100倍速くぼけ具合の精度度も良良い

ぼけを作成するというアプリケーションに利利用する距離離という面では提案手法が有益であるが実測的な距離離という面での精度度は悪い背景と前景が同じ色で近くにある場合同一ととらえてしまう

Efficient high-resolution stereo matching using local plane sweeps [S N Sinha D Scharstein and R SzeliskiCVPR2014] Bilateral filtering-based optical flow estimation with occlusion detection [J Xiao H Cheng H Sawhney C Rao and M IsnardiECCV2006] Efficient nonlocal regularization for optical flow [P Krumlahenbumluhl and V KoltunECCV2012] Real-time spatiotemporal stereo matching using the dual-cross-bilateral grid [C Richardt D Orr I Davies A Criminisi and N A DodgsonECCV2010]

どうやって有効性を示した視差推定の精度度はmiddleburyKITTI

なかの

Robust Spatiotemporal Stereo for Dynamic Scenes12

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

ステレオ動画のフレーム間情報を取り入れることでノイズ耐性を向上させるまた動きの大きなものも考える

時間を含めたウインドウの提案自動的にそのような変化に対応する画像領領域を検出する

従来の時空間ステレオと比べ大きな動きによる急激な視差の時間変化に対して頑健である

なかの

Spacetime Stereo A Unifying Framework for Depth from Triangulation13

どんなもの

先行行研究と比べてどこがすごい

space time stereoを提案ステレオカメラの視差推定でも構造光を用いた視差推定でも利利用可能 動的なシーンでの利利用も可能

フレームごとマッチングを取っていたが複数フレームでのマッチングを可能とした

なかの

Learning to Select and Order Vacation Photographs (Disney research)14

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示したあまりにもたくさん撮影した写真たちから自動的にフォトアルバムを作成する研究

複雑な視覚での区別を試みたのはこの論論文が初

５つの異異なるトピックから63の個人的な写真コレクションのデータセットを利利用し定量量的に評価する

写真間の差別かを定義する顔全体の絵何が写っているか写っていないかを評価する

Jointly aligning and segmenting multiple web photo streams for the inference of collective photo storylines [G Kim and E P Xing CVPR2013] Photo sequencing [T Basha Y Moses and S Avidan CVPR2012]

なかの

A Taxonomy and Evaluation of Dense Two-Frame Stereo Correspondence Algorithms15

どんなもの

どうやって有効性を示した

次に読むべき論論文は

ステレオマッチングに関する分類を行行う 新たなデータセットを作成する

というよりも他の手法が有効性を示すことができるようにデータセットを作成した 今ではmiddleburyのデータセットと言えばステレオ業界では超有名

High-resolution stereo datasets with subpixel-accurate ground truth

なかの

Discriminability Limits in Spatio-Temporal Stereo Block Matching1

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

spatio-temporal disparity estimationの根本的な前提の正当性を解析しマッチング処理理の際に動きが助けとなる程度度を決定する

時空間マッチングのエラーを分析し誤りの原因を確率率率で導出する（フレーム数動きの分散画像特徴ノイズの関数）

[34243334]は時空間マッチングの利利点を指摘していたが本論論文はマッチング精度度の向上のために動きを用いる手法の程度度や性質を研究する

6つのステレオビデオを用いて検証を行行った

Spacetime stereo Shape recovery for dynamic scenes [L Zhang B Curless and S Seitz CVPR2003] Spatiotemporal stereo and scene flow via stequel matching [M Sizintsev and R Wildes PAMI2012] Temporally consistent disparity and optical flow via efficient spatio-temporal filtering [A Hosni C Rhemann M Bleyer and M Gelautz PRCAIVT2012] Spacetime stereo A unifying framework for depth from triangulation [PAMI2005] Dynamic depth recovery from multiple synchronized video streams [H Tao H Sawhney and R Kumar CVPR2001] Spatiotemporal descriptor for wide-baseline stereo reconstruction of non-rigid and ambiguous scenes [ECCV2003]

なかの

Depth-Based Patch Scaling for Content-Aware Stereo Image Completion2

どんなもの

どうやって有効性を示した

ステレオでデプスを取り物体の三次元情報を使ってインペインティングを行行う

bookのデータセット背景が繰り返しパターンが多いものを使っている

なかの

Fast Semi-dense Surface Reconstruction from Stereoscopic Video in Laparoscopic Surgery3

どんなもの

手法の流流れ

次に読むべき論論文は

腹腔内手術の際にステレオビデオから高速に物体の三次元再構成を行行う研究

Evaluation of stereo matching costs on images with radiometric differences [Hirschmueller H Scharstein D PAMI2008]

スコープカメラから画像取得GPUで演算する 視差を算出しフィルタにかける距離離に変換 点群を再びフィルタにかけて三次元再構成

なかの

3D Reconstruction from Accidental Motion4

どんなもの

技術や手法のキモはどこ

議論論はある

数秒のビデオ（単眼）から三次元再構成を行行う 手ぶれなどの動きから再構成が可能で特定の動きや機材を必要としない

短い基線長でも再構成が可能（3mmの基線長）

基線長が短いため背景の精度度が低くなる リフォーカス画像作成には十分 練習では上手く動作したが検証がまだ必要

なかの

Panoramic Video from Unstructured Camera Arrays5

どんなもの

技術や手法のキモはどこ

議論論はある

複数のカメラを用いたパノラマ撮影を行行う その際に不不自然さがないような動画を作成する

不不自然さを感じる感覚特性を提示しそれにのっとって対策を講じている

一つのカメラの解像度度と品質を向上させるよりも複数台のカメラを組み合わせることがはるかに簡単で有益である専門家でなくてもGoProのカメラセットを組み合わせることは容易易

カメラの配置は厳密に決められていない完璧な時間同期やローリングシャッターの不不足のような実撮影での問題もクリアしている

先行行研究と比べてどこがすごい

どうやって有効性を示した左のシステムは14台のカメラを使用 右のシステムはGoProを5台使用

Disney 201558

なかの

Floating Scale Surface Reconstruction6

どんなもの

技術や手法のキモはどこ

流流動的にスケールを変えられる三次元再構成手法

サンプル規模に依存するパラメータがない rarrどのスケールのサンプルにも対応できる

siggraph2014

なかの

A Super Resolution Reconstruction Scheme for Mixed Spatio-Temporal Stereo Video7

どんなもの

技術や手法のキモはどこ

ビデオ超解像アルゴリズム

二台のカメラを使用 一台は低解像度度で高速一台は高解像度度で低速

HHI 3DV ftp siteのBookarrivalとbeergadenを使用どうやって有効性を示した

なかの

What Is a Good Day for Outdoor Photometric Stereo8

どんなもの

先行行研究と比べてどこがすごい

議論論はある

次に読むべき論論文は

屋外における照度度差があるステレオの研究 屋外でステレオを行行う際に有利利or不不利利な日照条件を明らかにする

点光源を用いた研究は行行われていたが屋外での研究はされていなかった

晴れより曇りの方が精度度が良良い雲があるから特徴量量を取りやすい雑音を白色ガウスモデルを想定 季節ごとのデータセットを利利用してみても良良い

Time-lapse photometric stereo and applications [F Shen K Sunkavalli N Bonneel S Rusinkiewicz H Pfisterand X Tong2014] Outdoor photometric stereo [L-F Yu S-K Yeung Y-W Tai D Terzopoulos and T FChan ICCP2013]

どうやって有効性を示した屋外の照明に関するHDR環境マップのデータベースを利利用

Disney 2015424

なかの

COLORBRUSH ANIMATED DIFFUSION FOR INTUITIVE COLORIZATION SIMULATING WATER PAINTING 9

どんなものアニメを水彩画で描いたように変換する 水彩画を描くには経験が必要であるがそれを作成するアルゴリズムを考案絵具が水によりどうにじむかシュミレーションしている

Disney 20141027 ICIP2014

次に読むべき論論文はGabor-space geodesic active contoursrdquo In Algebraic Frames for the Perception-Action Cycle [C Sagiv NA Sochen and YY Zeevi 2000] Practical temporal consistency for image-based graphics applications [M Lang O Wang T Aydin A Smolic and M Gross SIGGRAPH2012] Computer-Generated Watercolor [CJ Curtis SE Anderson JE Seims KW Fleischer and DH Salesin SIGGRAPH1997]

なかの

From Sound to Sight Using Audio Processing to enable Visible Light Communication 10

どんなもの光に情報を載せる技術プロジェクトページがあって光関係の研究が8個載っている

httpwwwdisneyresearchcomprojectvisible-light-communication

ビデオのURL httpwwwdisneyresearchcomwpcontentuploadsPub_InvisibleLightCommunication_Siggraph14_videomp4

• 201211106_KeisukeKawahara
• 201311421_KeitaKanai_02
• 201313095_AkiraIshii_02
• 201413109_YuukiKubo_02
• 201513110_SatoshiHashizume_02
• 鬼輪講マラソン③_1
• 鬼輪講マラソン③_2

2 201313095

bend

bull  HyunyoungSongFranccediloisGuimbreEegravereChangHuHodLipsonModelCraycapturingfreehandannotaEonsandeditsonphysical3DmodelsProceedingsofthe19thannualACMsymposiumonUserinterfacesoywareandtechnologyOctober15-182006MontreuxSwitzerland

InteracEveampConstrucEonampInteracEveampFabricaEonampofampFuncEonalampMechanicalampDevicesamp(UISTrsquo12)

StefanieMuellerPedroLopesPatrickBaudisch

h]pdlacmorgcitaEoncfmid=23801162380191

2 201313095

3D

3D

bull  SavageVSchmidtRGrossmanTFitzmauriceGandHartmannBAseriesoftubesAddinginteracEvityto3dprintsusinginternalpipesInProcUIST14(2014)

3DampPrinEngampPneumaEcampDeviceampControlsampwithampVariableampAcEvaEonampForceampCapabiliEesamp(CHIrsquo15)amp

MarynelVazquezEricBrockmeyerRutaDesaiChrisHarrisonSco]EHudson

h]pswwwyoutubecomwatchv=-4gFYvhkz0Y

2 201313095

OpenFab 3D

fablets

3 3

bull  CHENDMATUSIKWSITTHI-AMORNPDIDYKPANDLEVIND2013Spec2FabAreducer-tunermodelfortranslat-ingspecificaEonsto3DprintsACMTransGraph324(July)

OpenFabampAampProgrammableampPipelineampforampMulEMaterialampFabricaEonamp(SIGGRAPHrsquo13)

KirilVidimcˇeSzu-PoWangJonathanRagan-KelleyWojciechMatusik

2 201313095

3D

3D

3D

3D14 30 13 67

244

14

3D

bull  MuellerSKruckBBaudischPLaserOrigamiLaser-Cunng3DObjectsProcCHIrsquo132585-2592

faBrickaEonampFastamp3DampPrinEngampofampFuncEonalampObjectsampbyampIntegraEngampConstrucEonampKitampBuildingampBlocksamp(CHIrsquo14)amp

StefanieMuellerTobiasMohrKersEnGuentherJohannesFrohnhofenPatrickBaudisch

h]pswwwyoutubecomwatchv=BlO6YRcLJjE

Touching13 the13 Void13 Direct-shy‐Touch13 Interac4on13 for13 Intangible13 Displays(CHIrsquo10)Li-Wei Chan Hui-Shan Kao Mike Y Chen Ming-Sui Jane Yi-Ping Hung

201413109　久保勇貴 2（鬼コース）13

どんなもの13

空中像へのタッチのエラーに関する調査及び影や音のフィードバックを付与することによるパーフォーマンス向上を示した研究13

先行研究と比べてどこがすごい13

平面画像をタッチする際の奥行きに関するエラーの正確な取得を初めて検証13

技術や手法のキモはどこ13

２つの赤外線カメラを用いた正確なタッチの検出13

どうやって有効だと検証した13

タッチ時の奥行きの正確さに関する被験者実験を実施またタッチする際に影や音を付けた際の反応時間を被験者実験で検証13

議論はある13

ユーザは慣れるまで影や音のフィードバックが必要だがそのあとは必要なくなる13

次に読むべき論文は13

MirageTable13 （CHI12） 13

MirageTable13 Freehand13 Interac4on13 on13 a13 Projected13 13 Augmented13 Reality13 Tabletop(CHIrsquo12)

Hrvoje Benko Ricardo Jota Andrew D Wilson

201413109　久保勇貴 2（鬼コース）13

どんなもの13

テーブル上においてバーチャルな物体をリアルタイムで現実でものを動かすことと同様な動作に操作可能なシステム13

先行研究と比べてどこがすごい13

現実の物体をリアルタイムで画面に取りこむことができ質の高いフリーハンドインタラクションを実現した点13

技術や手法のキモはどこ13

色深度前景頭追跡プロキシパーティクルを駆使したリアルタイムメッシュの作成13

どうやって有効だと検証した13

凹凸など例外な表面に対しての投影した際の画像の質についての評価実験また仮想物体の奥行き知覚に関する実験も行った13

議論はある13

前面のみしかキャプチャしていないため差が生じる握っている場所の再現は未解決な課題である13

次に読むべき論文は13

Hirsch13 et13 al13 201413 (SIGGRAPHrsquo14)13

A13 Compressive13 Light13 Field13 Projec4on13 System13 (SIGGRAPHrsquo14)MaChew13 Hirsch13 Gordon13 Wetzstein13 Ramesh13 Raskar

201413109　久保勇貴 2（鬼コース）13

どんなもの13

通常の3Dディスプレイに比べて解像度輝度コントラストを改善した圧縮ライトフィードディスプレイ13

先行研究と比べてどこがすごい13

多視点立体視を複数でなく１台のプロジェクタを用いて実現した13

技術や手法のキモはどこ13

受動的スクリーンと高速切り替えプロジェクタによる新しい光学設計13

どうやって有効だと検証した13

4つのシーン例を投影したものを示したアニメーションの3D効果について観察を行った13

議論はある13

光路長を広げると観察できる画質が大幅に制限され他のライトフィードビューと混線が生じる13

次に読むべき論文は13

Butler13 et13 al13 201113

Vermeer13 Direct13 Interac4on13 with13 a13 360deg13 Viewable13 3D13 Display(UISTrsquo11) Alex Butler Otmar Hilliges Shahram Izadi Steve Hodges David Molyneaux David Kim

201413109　久保勇貴 2（鬼コース）13

どんなもの13

映し出された3Dオブジェクトとインタラクションを行えるシステム13

先行研究と比べてどこがすごい13

ディスプレイ内の画像とのインタラクションを提案ボリュームディスプレイを支援する新しいセンシング法の提案13

技術や手法のキモはどこ13

パラボラ鏡に取り付けた赤外線カメラセンサによる指先検出13

どうやって有効だと検証した13

アプリケーション例を示した13

議論はある13

パラボラ鏡の大きさよりもディスプレイサイズが小さくなってしまう13

次に読むべき論文は13

Hirsch13 et13 al13 201213

8D13 Interac4ng13 with13 a13 Relightable13 Glasses-shy‐Free13 3D13 Display(CHIrsquo12)Li-Wei Chan Hui-Shan Kao Mike Y Chen Ming-Sui Jane Yi-Ping Hung

201413109　久保勇貴 2（鬼コース）13

どんなもの13

ライトフィードによる入力とライトフィールドによる表示を行うリアルタイム8Dディスプレイ13

先行研究と比べてどこがすごい13

リアルタイムでの8Dディスプレイの実現（先行研究は7fps）13

技術や手法のキモはどこ13

GPUにおけるレンダリング処理13

どうやって有効だと検証した13

MRIデータを用いたディスプレイのデモを示した13

議論はある13

現在はグレースケールの入力のみだがカラーでの入力できればより強力になるだろう13

次に読むべき論文は13

Sahoo13 et13 al13 201513

Control13 of13 Non-shy‐Solid13 Diffusers13 by13 Electrosta4c13 Charging13 (CHIrsquo15) Deepak Ranjan Sahoo Diego Martinez Plasencia Sriram Subramanian

201413109　久保勇貴 2（鬼コース）13

どんなもの13

シャボン玉や霧などの非固体を電場による制御を試みた研究13

先行研究と比べてどこがすごい13

非固体の形や位置の制御法を提案した点13

技術や手法のキモはどこ13

[Intra13 et13 al13 11]中のldquowire-shy‐to-shy‐Cylinderdquoを用いたエアゾール粒子の帯電13

どうやって有効だと検証した13

霧及びシャボン玉によるディスプレイのアプリケーション例で実際に制御して見せた13

議論はある13

風による影響を本手法は打ち消すことができた13

次に読むべき論文は13

Barnum13 et13 al13 201013

A13 Mul4-shy‐Layered13 Display13 with13 Water13 Drops(SIGGRAPHrsquo10)Peter C Barnum Srinivasa G Narasimhan Takeo Kanade

201413109　久保勇貴 2（鬼コース）13

どんなもの13

複数層の落下水滴にプロジェクションマッピングを行いディスプレイとした研究13

先行研究と比べてどこがすごい13

水滴の制御を行うことで単一のプロジェクタによって複数層の映像投影を可能とした点13

技術や手法のキモはどこ13

[Ambravaneswaran13 et13 al13 2002]及び本研究における実験結果に基づく水滴生成13

どうやって有効だと検証した13

複数のディスプレイ例を示した13 例）顔の投影水槽シミュレータなど13

議論はある13

本当の3Dディスプレイにするにはより多くの水滴制御が必要13

次に読むべき論文は13

Lee13 et13 al13 200713

An13 Immaterial13 Depth-shy‐Fused13 3D13 Display(VRSTrsquo07)Cha Lee Stephen DiVerdi Tobias Humlollerer

201413109　久保勇貴 2（鬼コース）13

どんなもの13

２つのスクリーンを駆使し3Dディスプレイを実現するdepth-shy‐fused13 3D(DFD)に関する評価を行いその結果よりディスプレイを提案した研究13

先行研究と比べてどこがすごい13

DFDが任意のスクリーン設定及び見る位置に対して有効であることを示した13

技術や手法のキモはどこ13

６通りのスクリーン組合せから２つを抽出し見え方の違いを検証した点13

どうやって有効だと検証した13

６通りのスクリーンについて立体的に見えるか被験者実験を実施その後それぞれに有意差がみられるか調べた13

議論はある13

ステレオイメージを認めることができなかったユーザに対しても強い3D効果が見られた13

次に読むべき論文は13

Tokuda13 et13 al13 201013

Cloud13 Display13 (ACErsquo10)Yutaka Tokuda Yasuhiro Suzuki Kunihiro Nishimura Tomohiro Tanikawa Michitaka Hirose

201413109　久保勇貴 2（鬼コース）13

どんなもの13

煙の渦輪を用いた空間を埋めるディスプレイ13

先行研究と比べてどこがすごい13

制御可能な手法により高所へのパーティクルを運搬することに着目した点13

技術や手法のキモはどこ13

コンピュータによって制御が行われる空気砲アレイ13

どうやって有効だと検証した13

箱の中で実験を行い安定して渦輪をできるようにした実際にデモを行ったことを示した13

議論はある13

今の試作機をより早くリフレッシュ速度を高めることによりより濃く空間を埋められることを目指す13

次に読むべき論文は13

Sato13 et13 al13 200913

Par]cle13 Display13 System　(JVRC09)13 -shy‐13 A13 Large13 Scale13 Display13 for13 Public13 Space13 -shy‐

Munehiko13 Sato13 Yasuhiro13 Suzuki13 13 Atsushi13 Hiyama13 Tomohiro13 Tanikawa13 Michitaka13 Hirose

201413109　久保勇貴 2（鬼コース）13

どんなもの13

パーティクルディスプレイによる公共スペースのための大画面ディスプレイの提案13

先行研究と比べてどこがすごい13

公共スペースにおける要求と制限に基づいたシステムを提案した点13

技術や手法のキモはどこ13

実験に基づく表示画像のスクロール時間の制御13

どうやって有効だと検証した13

Aという文字の知覚実験によって 適な点滅周期の調査を行った13

議論はある13

現在の試作機を組合せより高解像度にする必要がある13

次に読むべき論文は13

Kwon13 et13 al13 201513

FugaciousFilm13 Exploring13 Aen4ve13 Interac4on13 with13 Ephemeral13 Material13 (CHIrsquo15)Hyosun13 Kwon13 Shashank13 Jaiswal13 Steve13 Benford13 Sue13 Ann13 Seah13

13 Peter13 BenneC13 Boriana13 Koleva13 Holger13 Schnaumldelbach

201413109　久保勇貴 2（鬼コース）13

どんなもの13

膜を押す引く飛び出ることができる新しい石鹸膜インタフェースの提案13

先行研究と比べてどこがすごい13

徐々に消えるインタフェースは高い注意を有するインタラクションを提供するという点を示したこと13

技術や手法のキモはどこ13

水グリセリンを201の対比で混ぜることでldquopoprdquoがきれいになるようにしかつ膜の耐久性を向上させた13

どうやって有効だと検証した13

３目並べを用いた被験者実験を実施13 ユーザは膜を割ると負け膜を自分のマスにするにはタッチ押す引くの書かれた通りの操作を行う13

議論はある13

ユーザに精密な動作を要求することはとりわけ注意を払うことを誘発する13

次に読むべき論文は13

Wetzstein13 et13 al13 201213

Tensor13 Displays13 Compressive13 Light13 Field13 Synthesis13 using13 Mul4layer13 Displays13 with13 Direc4onal13 Backligh4ng(SIGGRAPHrsquo12)

Gordon13 Wetzstein13 Douglas13 Lanman13 MaChew13 Hirsch13 Ramesh13 Raskar

201413109　久保勇貴 2（鬼コース）13

どんなもの13

視点によって異なる立体映像を見ることができる複数の層からなるディスプレイ13

先行研究と比べてどこがすごい13

既存の手法を合成したcomputa(onal13 displaysというディスプレイの新しいフレームワークを提案した13

技術や手法のキモはどこ13

時分割で視差マスクを表示することでユーザの視線ごとに立体像を表現する13

どうやって有効だと検証した13

通常のディスプレイ３層LCDLCD及び指向性バックライトの例による比較13 13

議論はある13

波紋を含むこと色チャンネルが悪影響を与える相互反射不均一などの問題が見られた13

次に読むべき論文は13

Matoba13 et13 al13 1213

SplashDisplay(VRICrsquo12)Yasuo Matoba Taro Tokui Ryo Sato Tochiki Sato Hideki Koike

201413109　久保勇貴 2（鬼コース）13

どんなもの13

パーティクルにCGを投射しパーティクルがテーブル上に投げられると爆発しパーティクルが噴きあがる13

先行研究と比べてどこがすごい13

ビーズがミリメートルからメートル単位までZ軸方向について空中で奥行きを表現する13

技術や手法のキモはどこ13

スピーカによって風力が発生させビーズを舞い上げる点13

どうやって有効だと検証した13

ビーズを投げると花火が打ちあがっているかのようなアプリケーション例を示した13

議論はある13

高いレベルの表現及び幅広い入力範囲を提供できた13

次に読むべき論文は13

Kim13 et13 al13 1413

MARIO13 Mid-shy‐air13 Augmented13 Reality13 Interac4on13 with13 Objects13 (ECrsquo14)Hanyuool13 Kim13 13 Issei13 Takahashi13 Hiroki13 Yamamoto13 Satoshi13 Maekawa13 Takeshi13 Naemura

201413109　久保勇貴 2（鬼コース）13

どんなもの13

350times300times250のテーブル上のスペースにおいて自由に動かせる空中像を造りだすことができる13

先行研究と比べてどこがすごい13

凹面鏡や凹レンズのように曲面でないため画像の歪曲が発生しない13

技術や手法のキモはどこ13

Aerial13 Imaging13 Plate(AIP)を用いた空中像の生成及びそのためのディスプレイ移動装置13

どうやって有効だと検証した13

左右からの視差の考慮及び奥行き表現時の画像提示視野角の検証などを行った13 13

議論はある13

投影しているひよこを叩いたり払いのけたりするような動作がデモ中見られた13

次に読むべき論文は13

Tactile Feedback on Flat Surfaces for the Visually Impaired13Ali Israr Olivier Bau Seung-Chan Kim Ivan Poupyrev13

どのようなものか 視覚障害者のための触覚を用いた視覚代用デバイス 先行研究と比べてどこがすごいか 道案内をしてくれる機械などはあるが日用品の場所を教えたり探すのを手伝ってくれるデバイスはない 技術や手法のキモ タッチパネルとカメラを搭載したデバイス 触覚を与える技術はTeslaTouchを利用 色を基準にオブジェクトの位置を認識 有用性の確認 視覚障害者二人に対して実験このデバイスを使

わなくても各自の方法で物を見つけられるが間違えることが多いこのデバイスを使用することで間違えることなく正確に物の位置を特定できた 課題 一つの色でしか判断できない 触感のあるなしでしか情報を伝えられない 関連論文 TeslaTouch [Bau et al 2010]

20150522 橋爪智 2鬼

Fingernail-Mounted Display of Attraction Force and Texture13Masataka Niwa Tomoko Nozaki Taro Maeda and Hideyuki And13

どのようなものか 指先に取り付けて触感と力を両方表現できるデバイス 先行研究と比べてどこがすごいか 触感と引力をそれぞれ表現するデバイスはあるが両方を一つのデバイスで表現した例は少ない 引力は自由な方向に付加することができる 技術や手法のキモ 偏心に重さを付けた円盤を4枚使用する 5-9Hz 引力　100-200Hz 触感 それぞれの円盤の位相や回転数を調整することで

触感と力 を表現する 4つのモータを使いそれぞれの円盤を独立して制御する 有用性の確認 4人の男性に対して実験80以上の精度で認識できた 関連論文 The nail-mounted attraction forcebump display [Nozaki et al 2008]

20150522 橋爪智 2 鬼

Gilded gait reshaping the urban experience with augmented footsteps13Yuichiro Takeuchi13

どのようなものか 靴に装着し地面の触感をコントロールするデバイス 先行研究と比べてどこがすごいか 単独で動作しなかったり特定の環境のみでしか動作しなかったりするrarr靴単体で動作環境に依存しない 技術や手法のキモ 6個の振動パネルを取り付けゲルでカバー app modulesを取り替えることができ様々な機能を付加できる（GPSsound) 4種類の地面を再現

bull  Hard Ground 振動させない bull  Soft Ground すべてのパネルを振動 bull  Bumpy Ground ジグザグに振動 bull  Godzilla 全てのパネルを振動何回か繰り返す 課題 モーターを使っているため波形をプログラミングできないrarr圧電素子を使用する 関連論文 Haptic Shoes [Fu et al 2010]

20150522 橋爪智 2鬼

ExoInterfaces novel exosceleton haptic interfaces for virtual reality augmented sport and rehabilitation

Dzmitry Tsetserukou Katsunari Sato Susumu Tachi13

どのようなものか 腕に装着し物理的なinteractionを可能にするデバイス 先行研究と比べてどこがすごいか Exoskeleton 力を増幅するためだが重たく危険なこともある String-based wireが視界をまたぐ動きに制限がある rarr腕の動きに制限を与えない安全 技術や手法のキモ 「FlexTorque」人間の筋肉の構造を再現するベルトとモーターを使用する肩の近くに装着することで

腕に負担がかかりにくい 触覚feedback弱いトルク 運動を支援強いトルク 課題 物理的な接触を表現するゲームやスポーツにより没頭させるリハビリのサポートをする視覚障害者の支援（ものの場所を教える） 関連論文 FlexTorque [Dzmitry et al 2010]

20150522 橋爪智 2 鬼

Perception of Ultrasonic Haptic Feedback on the Hand Localisation and Apparent Motion13

Graham Wilson Tom Carter Sriram Subramanian Stephen Brewster13

どのようなものか 超音波を用いた触覚フィードバック有効性の検討を行う 先行研究と比べてどこがすごいか 超音波触覚フィードバックは比較的新しく研究や操作方法に関する知識が少ない 腕を自由に動かすことができ小さいものは着用可能 技術や手法のキモ 88のアレイ状に超音波発生器を設置

有効性の確認 bull  局所的な触感 　　　25箇所に分割しそれぞれに超音波を当てる 　　　触感を感じた989 　　　場所の誤差85mm bull  手のひらを動く触感 上下左右に動く 　　　動いてると感じた629

20150522 橋爪智 2 鬼

Friction Measurements on a Large Area TPaD13Nicholas D Marchuk J Edward Colgate Michael A Peshkin13

どのようなものか 超音波の振動により触感を与える 先行研究と比べてどこがすごいか ガラス板を使うので透明後ろにディスプレイを配置可能 技術や手法のキモ 「Squeeze Film Effect（スクイズ膜効果）」 ガラス板に取り付けた圧電素子の円盤に高周波信号

をかける 実験 振動しない部分＝摩擦が発生しない部分が発生周波数により場所が変わる rarr摩擦を大きさをかける力の大きさから計測 rarr指の場所に合わせて複数の周波数を使い分ける 関連論文 T-PaD[Winfield et al 2007]

20150522 橋爪智 2 鬼

STIMTAC a Tactile Input Device with Programmable Friction13Michel Amberg Freacutedeacuteric Giraud Betty Semail Paolo Olivo Geacutery Casiez Nicolas Roussel13

どのようなものか 触感を与えられるタッチデバイス 先行研究と比べてどこがすごいか LATPaD サイズ大きいノイズが大きい TeslaTouch 高い電圧付加が必要GNDに接続しなければいけない

技術や手法のキモ 「Squeeze Film Effect」超音波を用いて振動を与える 圧電性セラミックを電極にコーディング 指トラッキングは力センサを用いる 活用法 マウスキーボード絵を描く 関連論文 LATPaD[Vincent et al 2011] TeslaTouch[Bau et al 2010]

20150522 橋爪智 2 鬼

Surround Haptics Tactile Feedback for Immersive Gaming Experiences Ali Israr Seung-Chan Kim Ivan Poupyrev Jan Stec13

どのようなものか ゲームに合わせて高解像度の触覚フィードバックをユーザーに与える椅子 先行研究と比べてどこがすごいか 荒く配置した安価な振動アクチュエータで高解像度の触覚フィードバックを行える 一点の振動連続した動き範囲の振動などを再現

技術や手法のキモ 仮想的な振動アクチュエータをいくつかの振動アクチュエータを使って作り出す physical-physicalphysical-virtualvirtual-virtual ゲームにHaptics Engineを導入しHaptics APIを用いてHaptic Displayを操作する 関連論文 Exploring Surround Haptics Displays[Israr et al 2010]

20150522 橋爪智 2 鬼

Audio-Haptic Feedback in Mobile Phones Angela Chang Conor OrsquoSullivan13

どのようなものか haptics機能のついてない携帯電話にオーディオ機能を利用した触覚フィードバックを追加する 先行研究と比べてどこがすごいか 簡単に作れてnon-haptic mobile devicesでも大丈夫 技術や手法のキモ 「MultiFunction Transducer(MFT)」 スピーカーから音と信号の両方を出力できる

bull  Haptic Inheritance 　　音を2つの周波数帯に分ける bull  Synthesis and Matching 　　低周波数帯(20-300Hz)を使い触感を伝える 有効性の検討 42人の人を対象に実験を行う83の人が触感を感じた

20150522 橋爪智 2 鬼

Resolution of Sleep Deprivation Problems using ZZZoo Pillows13Shunsuke Yanaka Motoki Ishida13

どのようなものか 近年不眠症の人が多い rarr誰かと接していると安心し睡眠に導入しやすくなる rarrまるで添い寝をしているようなリアルな抱きまくらを使う 技術や手法のキモ breathing sensation 風船を使って人の呼吸を再現肺の形の風船弱く長い呼吸をする

heating お湯を使って人の体温を再現45 有効性の確認 84人の人が実験 呼吸が睡眠を誘ったかrarr61 体温が睡眠を誘ったかrarr85 関連論文 The Impact of Sleep Disorders on Social Life[Komada et al 2007]

20150522 橋爪智 2 鬼

まとめ13超音波 モーター 風

20150522 橋爪智 2 鬼

コイル 電気刺激 Electrovibration

振動 音 お湯

なかの

Temporally Consistent Disparity and Optical Flow via Efficient Spatio-temporal Filtering1

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示した

議論論はあるか

時間的に一定の視差を算出する手法静止画ステレオよりも精度度が良良いことを示す従来よりも推定精度度が良良いオプティカルフローも算出する

一枚の静止画に対するフィルタリング[1]をステレオ動画に拡張している

ケンブリッジのステレオ動画のデータセットを利利用 実写動画に対する比較も行行うノイズ耐性も検証する

フィルタベースとエネルギーベースの関係性を良良り理理解することで推定精度度を上げる

実装が簡単でリアルタイム視差推定が可能

Fast Cost-Volume Filtering for Visual Correspondence and Beyond [Rhemann C Hosni A Bleyer M Rother C Gelautz M CVPR2011] Real-time Spatiotemporal Stereo Matching Using the Dual-Cross-Bilateral Grid [Richardt C Orr D Davies I Criminisi A Dodgson NA ECCV2010] Secrets of optical flow estimation and their principles [Sun D Roth S Black MJ 2010] Motion estimation with non-local total variation regularization [Werlberger M Pock T Bischof H CVPR2010] Temporally Consistent Disparity Maps from Uncalibrated Stereo Videos [Bleyer M Gelatuz M ISPA2011]

なかの

SymStereo Matching using Induced Symmetry (2014)2

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示した

議論論はあるか

画像の対称性を用いてステレオマッチングを行行う 左右の画像を反転させて重ね合わせることで対称性を測る

絵的な類似の代わりに対称性を使う今まで対称性を用いる手法はなく新規性が大きい

三つのSymmetry-baseの手法で精度度を検証従来手法よりも精度度が向上しているMiddlebury Oxford Corridorfountain-P11のデータセット使用

ステレオの問題である不不連続な箇所オクルージョン部分は未解決である演算時間はやや増加

1-Dラインのコストを考える今までは撮像面に対して平行行な平面でデプスを考えていたが垂直な平面を考える

BT[Birchfield and Tomasi 1998] Census transform[Zabih and Woodfill 1994] Log N[Kovesi 1997] radio-metoric differences[Hirschmuller Scharstein 2009]

なかの

Camouflaging an Object from Many Viewpoints3

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

多くの視点から三次元の物体をカモフラージュするカモフラージュによってオクルージョン部分の不不連続がどの程度度生じるか他の視点ではどれほどになるかの検証

MRF（Markov Random Fields）ベース

新しい三次元物体のカモフラージュモデルを構築 37種類のデータセットを作る

箱形の物体に対してカモフラージュ処理理を施し 結果を評価する

オクルージョン不不連続テクスチャの歪みが問題 照明や画像の貼りつけに制限あり

なかの

Aliasing Detection and Reduction in Plenoptic Imaging4

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

カメラアレイ撮影の角度度のエイリアシングを除去するエイリアシングの探索索と打ち消しを行行う

周波数領領域ではなく空間領領域で探索索を行行う

先行行研究がフィルタデモザイキング再パラメータ調整などの前処理理でエイリアシング除去を行行うのに対しエイリアシング探索索後にリフォーカスの段階でエイリアシングを取り除く

8times8の平行行カメラアレイで検証するカメラ間の 基線長は70mm

今回は基線長が長いデータセットを使った 次はLytroなどのマイクロレンズアレイで検証する

Globally consistent multi-label assignment on the ray space of 4d light fields [S Wanner C Straehle B Goldluecke CVPR2013] Lineassisted light field triangulation and stereo matching [Z Yu X Guo H Lin A Lumsdaine J Yu ICCV 2013]

なかの

Globally Consistent Multi-Label Assignment on the Ray Space of 4D Light Fields5

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

四次元ライトフィールドの光線情報において マルチラベルの領領域分割を行行う

深度度情報光線情報を用いて領領域分割することで 二次元（空間）情報だけでは分割が難しかった 領領域を分割可能とする

The light field camera Extended depth of field aliasing and superresolution [T Bishop P Favaro IEEE Transactions on Pattern Analysis and Machine Intelligence 2012]

なかの

Line Assisted Light Field Triangulation and Stereo Matching6

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

光線情報を利利用してステレオマッチングの精度度を 向上させる手法三角測量量の誤差を減らす

Light Field Stereo Matchingとかいう手法 グラフ構造を作成

Variational light field analysis for disparity estimation and super-resolution [S Wanner and B Goldlumluecke 2013]

なかの

Adaptive stereo similarity fusion using confidence measures 20157

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

ステレオマッチングの新しい方式fusion weightsを提案複数の手法を組み合わせてコスト計算を行行う手法付録に既存手法のコスト関数一覧あり

パラメータに依存する手法を用いないことで高速化を図っている

一つのアルゴリズムでは異異なる特性を持つ領領域全てに対して適切切なマッチングはできない複数を組み合わせることでそれを補う13種と多い

middleburyとKITTIのデータセットで評価

一枚あたり03sと高速だが001sとより高速なアルゴリズムが存在する

Segment-based stereo matching using belief propagation and a self-adapting dissimilarity measure [A Klaus M Sormann K Karner ICPR2006] On building an accurate stereo matching system on graphics hardware [X Mei X Sun M Zhou S Jiao H Wang X Zhang ICCV2011] Similarity measures for depth estimation [K Wegner O Stankiewicz 3DTV-CON2009] On accurate dense stereo-matching using a local adaptive multi-cost approach [C Stentoumis L Grammatikopoulos I Kalisperakis G Karras ISPRS2014] A quantitative evaluation of confidence measures for stereo vision [X Hu P Mordohai PAMI2012]

なかの

SIMILARITY MEASURE FOR DEPTH ESTIMATIOM 20098

どんなもの

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

4種類の視差推定アルゴリズムを組み合わせている 類似度度の選択性の解析

Belief Propagationの枠組みを用いる

名古屋大学の多視点データベースを利利用

HHI Test Material for 3D Video [I Feldmann M Muller F Zilly R Tanger A SmolicP Kauff T Wiegand 2008] Multiview Video Test Sequence and Camera Parameters [Yo-Sung Ho Eun-Kyung Lee and Cheon Lee 2008] 1D Parallel Test Sequences for MPEG-FTV [M Tanimoto T Fujii N Fukushima 2008] Non-parametric Local Transforms for Computing Visual Correspondence [R Zabih J Woodfill 1994]

なかの

Spatiotemporal Stereo via Spatiotemporal Quadric Element (Stequel) Matching9

どんなもの

技術や手法のキモはどこ

新しいマッチング手法を提案動き考慮することなく時間情報を取り込むことができる 時間方向のエピ線を考える

オプティカルフロー推定は3D境界や低テクスチャで弱いが提案手法はロバストである

なかの

Depth Video Enhancement Based on Weighted Mode Filtering10

どんなもの

議論論はある

ノイズを含んだ低解像度度のデプスマップの質を高める手法（超解像度度とデノイズ）時間方向も使用簡単なオプティカルフローを計算し利利用する

非反復復アルゴリズムのためGPUに載せやすく高速化が考えられる

なかの

Fast Bilateral-Space Stereo for Synthetic Defocus11

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

議論論はある

次に読むべき論論文は

高速な自由焦点ぼけ画像の作成

Bilateral-spaceを提案

従来研究よりも10から100倍速くぼけ具合の精度度も良良い

ぼけを作成するというアプリケーションに利利用する距離離という面では提案手法が有益であるが実測的な距離離という面での精度度は悪い背景と前景が同じ色で近くにある場合同一ととらえてしまう

Efficient high-resolution stereo matching using local plane sweeps [S N Sinha D Scharstein and R SzeliskiCVPR2014] Bilateral filtering-based optical flow estimation with occlusion detection [J Xiao H Cheng H Sawhney C Rao and M IsnardiECCV2006] Efficient nonlocal regularization for optical flow [P Krumlahenbumluhl and V KoltunECCV2012] Real-time spatiotemporal stereo matching using the dual-cross-bilateral grid [C Richardt D Orr I Davies A Criminisi and N A DodgsonECCV2010]

どうやって有効性を示した視差推定の精度度はmiddleburyKITTI

なかの

Robust Spatiotemporal Stereo for Dynamic Scenes12

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

ステレオ動画のフレーム間情報を取り入れることでノイズ耐性を向上させるまた動きの大きなものも考える

時間を含めたウインドウの提案自動的にそのような変化に対応する画像領領域を検出する

従来の時空間ステレオと比べ大きな動きによる急激な視差の時間変化に対して頑健である

なかの

Spacetime Stereo A Unifying Framework for Depth from Triangulation13

どんなもの

先行行研究と比べてどこがすごい

space time stereoを提案ステレオカメラの視差推定でも構造光を用いた視差推定でも利利用可能 動的なシーンでの利利用も可能

フレームごとマッチングを取っていたが複数フレームでのマッチングを可能とした

なかの

Learning to Select and Order Vacation Photographs (Disney research)14

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示したあまりにもたくさん撮影した写真たちから自動的にフォトアルバムを作成する研究

複雑な視覚での区別を試みたのはこの論論文が初

５つの異異なるトピックから63の個人的な写真コレクションのデータセットを利利用し定量量的に評価する

写真間の差別かを定義する顔全体の絵何が写っているか写っていないかを評価する

Jointly aligning and segmenting multiple web photo streams for the inference of collective photo storylines [G Kim and E P Xing CVPR2013] Photo sequencing [T Basha Y Moses and S Avidan CVPR2012]

なかの

A Taxonomy and Evaluation of Dense Two-Frame Stereo Correspondence Algorithms15

どんなもの

どうやって有効性を示した

次に読むべき論論文は

ステレオマッチングに関する分類を行行う 新たなデータセットを作成する

というよりも他の手法が有効性を示すことができるようにデータセットを作成した 今ではmiddleburyのデータセットと言えばステレオ業界では超有名

High-resolution stereo datasets with subpixel-accurate ground truth

なかの

Discriminability Limits in Spatio-Temporal Stereo Block Matching1

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

spatio-temporal disparity estimationの根本的な前提の正当性を解析しマッチング処理理の際に動きが助けとなる程度度を決定する

時空間マッチングのエラーを分析し誤りの原因を確率率率で導出する（フレーム数動きの分散画像特徴ノイズの関数）

[34243334]は時空間マッチングの利利点を指摘していたが本論論文はマッチング精度度の向上のために動きを用いる手法の程度度や性質を研究する

6つのステレオビデオを用いて検証を行行った

Spacetime stereo Shape recovery for dynamic scenes [L Zhang B Curless and S Seitz CVPR2003] Spatiotemporal stereo and scene flow via stequel matching [M Sizintsev and R Wildes PAMI2012] Temporally consistent disparity and optical flow via efficient spatio-temporal filtering [A Hosni C Rhemann M Bleyer and M Gelautz PRCAIVT2012] Spacetime stereo A unifying framework for depth from triangulation [PAMI2005] Dynamic depth recovery from multiple synchronized video streams [H Tao H Sawhney and R Kumar CVPR2001] Spatiotemporal descriptor for wide-baseline stereo reconstruction of non-rigid and ambiguous scenes [ECCV2003]

なかの

Depth-Based Patch Scaling for Content-Aware Stereo Image Completion2

どんなもの

どうやって有効性を示した

ステレオでデプスを取り物体の三次元情報を使ってインペインティングを行行う

bookのデータセット背景が繰り返しパターンが多いものを使っている

なかの

Fast Semi-dense Surface Reconstruction from Stereoscopic Video in Laparoscopic Surgery3

どんなもの

手法の流流れ

次に読むべき論論文は

腹腔内手術の際にステレオビデオから高速に物体の三次元再構成を行行う研究

Evaluation of stereo matching costs on images with radiometric differences [Hirschmueller H Scharstein D PAMI2008]

スコープカメラから画像取得GPUで演算する 視差を算出しフィルタにかける距離離に変換 点群を再びフィルタにかけて三次元再構成

なかの

3D Reconstruction from Accidental Motion4

どんなもの

技術や手法のキモはどこ

議論論はある

数秒のビデオ（単眼）から三次元再構成を行行う 手ぶれなどの動きから再構成が可能で特定の動きや機材を必要としない

短い基線長でも再構成が可能（3mmの基線長）

基線長が短いため背景の精度度が低くなる リフォーカス画像作成には十分 練習では上手く動作したが検証がまだ必要

なかの

Panoramic Video from Unstructured Camera Arrays5

どんなもの

技術や手法のキモはどこ

議論論はある

複数のカメラを用いたパノラマ撮影を行行う その際に不不自然さがないような動画を作成する

不不自然さを感じる感覚特性を提示しそれにのっとって対策を講じている

一つのカメラの解像度度と品質を向上させるよりも複数台のカメラを組み合わせることがはるかに簡単で有益である専門家でなくてもGoProのカメラセットを組み合わせることは容易易

カメラの配置は厳密に決められていない完璧な時間同期やローリングシャッターの不不足のような実撮影での問題もクリアしている

先行行研究と比べてどこがすごい

どうやって有効性を示した左のシステムは14台のカメラを使用 右のシステムはGoProを5台使用

Disney 201558

なかの

Floating Scale Surface Reconstruction6

どんなもの

技術や手法のキモはどこ

流流動的にスケールを変えられる三次元再構成手法

サンプル規模に依存するパラメータがない rarrどのスケールのサンプルにも対応できる

siggraph2014

なかの

A Super Resolution Reconstruction Scheme for Mixed Spatio-Temporal Stereo Video7

どんなもの

技術や手法のキモはどこ

ビデオ超解像アルゴリズム

二台のカメラを使用 一台は低解像度度で高速一台は高解像度度で低速

HHI 3DV ftp siteのBookarrivalとbeergadenを使用どうやって有効性を示した

なかの

What Is a Good Day for Outdoor Photometric Stereo8

どんなもの

先行行研究と比べてどこがすごい

議論論はある

次に読むべき論論文は

屋外における照度度差があるステレオの研究 屋外でステレオを行行う際に有利利or不不利利な日照条件を明らかにする

点光源を用いた研究は行行われていたが屋外での研究はされていなかった

晴れより曇りの方が精度度が良良い雲があるから特徴量量を取りやすい雑音を白色ガウスモデルを想定 季節ごとのデータセットを利利用してみても良良い

Time-lapse photometric stereo and applications [F Shen K Sunkavalli N Bonneel S Rusinkiewicz H Pfisterand X Tong2014] Outdoor photometric stereo [L-F Yu S-K Yeung Y-W Tai D Terzopoulos and T FChan ICCP2013]

どうやって有効性を示した屋外の照明に関するHDR環境マップのデータベースを利利用

Disney 2015424

なかの

COLORBRUSH ANIMATED DIFFUSION FOR INTUITIVE COLORIZATION SIMULATING WATER PAINTING 9

どんなものアニメを水彩画で描いたように変換する 水彩画を描くには経験が必要であるがそれを作成するアルゴリズムを考案絵具が水によりどうにじむかシュミレーションしている

Disney 20141027 ICIP2014

次に読むべき論論文はGabor-space geodesic active contoursrdquo In Algebraic Frames for the Perception-Action Cycle [C Sagiv NA Sochen and YY Zeevi 2000] Practical temporal consistency for image-based graphics applications [M Lang O Wang T Aydin A Smolic and M Gross SIGGRAPH2012] Computer-Generated Watercolor [CJ Curtis SE Anderson JE Seims KW Fleischer and DH Salesin SIGGRAPH1997]

なかの

From Sound to Sight Using Audio Processing to enable Visible Light Communication 10

どんなもの光に情報を載せる技術プロジェクトページがあって光関係の研究が8個載っている

httpwwwdisneyresearchcomprojectvisible-light-communication

ビデオのURL httpwwwdisneyresearchcomwpcontentuploadsPub_InvisibleLightCommunication_Siggraph14_videomp4

• 201211106_KeisukeKawahara
• 201311421_KeitaKanai_02
• 201313095_AkiraIshii_02
• 201413109_YuukiKubo_02
• 201513110_SatoshiHashizume_02
• 鬼輪講マラソン③_1
• 鬼輪講マラソン③_2

2 201313095

3D

3D

bull  SavageVSchmidtRGrossmanTFitzmauriceGandHartmannBAseriesoftubesAddinginteracEvityto3dprintsusinginternalpipesInProcUIST14(2014)

3DampPrinEngampPneumaEcampDeviceampControlsampwithampVariableampAcEvaEonampForceampCapabiliEesamp(CHIrsquo15)amp

MarynelVazquezEricBrockmeyerRutaDesaiChrisHarrisonSco]EHudson

h]pswwwyoutubecomwatchv=-4gFYvhkz0Y

2 201313095

OpenFab 3D

fablets

3 3

bull  CHENDMATUSIKWSITTHI-AMORNPDIDYKPANDLEVIND2013Spec2FabAreducer-tunermodelfortranslat-ingspecificaEonsto3DprintsACMTransGraph324(July)

OpenFabampAampProgrammableampPipelineampforampMulEMaterialampFabricaEonamp(SIGGRAPHrsquo13)

KirilVidimcˇeSzu-PoWangJonathanRagan-KelleyWojciechMatusik

2 201313095

3D

3D

3D

3D14 30 13 67

244

14

3D

bull  MuellerSKruckBBaudischPLaserOrigamiLaser-Cunng3DObjectsProcCHIrsquo132585-2592

faBrickaEonampFastamp3DampPrinEngampofampFuncEonalampObjectsampbyampIntegraEngampConstrucEonampKitampBuildingampBlocksamp(CHIrsquo14)amp

StefanieMuellerTobiasMohrKersEnGuentherJohannesFrohnhofenPatrickBaudisch

h]pswwwyoutubecomwatchv=BlO6YRcLJjE

Touching13 the13 Void13 Direct-shy‐Touch13 Interac4on13 for13 Intangible13 Displays(CHIrsquo10)Li-Wei Chan Hui-Shan Kao Mike Y Chen Ming-Sui Jane Yi-Ping Hung

201413109　久保勇貴 2（鬼コース）13

どんなもの13

空中像へのタッチのエラーに関する調査及び影や音のフィードバックを付与することによるパーフォーマンス向上を示した研究13

先行研究と比べてどこがすごい13

平面画像をタッチする際の奥行きに関するエラーの正確な取得を初めて検証13

技術や手法のキモはどこ13

２つの赤外線カメラを用いた正確なタッチの検出13

どうやって有効だと検証した13

タッチ時の奥行きの正確さに関する被験者実験を実施またタッチする際に影や音を付けた際の反応時間を被験者実験で検証13

議論はある13

ユーザは慣れるまで影や音のフィードバックが必要だがそのあとは必要なくなる13

次に読むべき論文は13

MirageTable13 （CHI12） 13

MirageTable13 Freehand13 Interac4on13 on13 a13 Projected13 13 Augmented13 Reality13 Tabletop(CHIrsquo12)

Hrvoje Benko Ricardo Jota Andrew D Wilson

201413109　久保勇貴 2（鬼コース）13

どんなもの13

テーブル上においてバーチャルな物体をリアルタイムで現実でものを動かすことと同様な動作に操作可能なシステム13

先行研究と比べてどこがすごい13

現実の物体をリアルタイムで画面に取りこむことができ質の高いフリーハンドインタラクションを実現した点13

技術や手法のキモはどこ13

色深度前景頭追跡プロキシパーティクルを駆使したリアルタイムメッシュの作成13

どうやって有効だと検証した13

凹凸など例外な表面に対しての投影した際の画像の質についての評価実験また仮想物体の奥行き知覚に関する実験も行った13

議論はある13

前面のみしかキャプチャしていないため差が生じる握っている場所の再現は未解決な課題である13

次に読むべき論文は13

Hirsch13 et13 al13 201413 (SIGGRAPHrsquo14)13

A13 Compressive13 Light13 Field13 Projec4on13 System13 (SIGGRAPHrsquo14)MaChew13 Hirsch13 Gordon13 Wetzstein13 Ramesh13 Raskar

201413109　久保勇貴 2（鬼コース）13

どんなもの13

通常の3Dディスプレイに比べて解像度輝度コントラストを改善した圧縮ライトフィードディスプレイ13

先行研究と比べてどこがすごい13

多視点立体視を複数でなく１台のプロジェクタを用いて実現した13

技術や手法のキモはどこ13

受動的スクリーンと高速切り替えプロジェクタによる新しい光学設計13

どうやって有効だと検証した13

4つのシーン例を投影したものを示したアニメーションの3D効果について観察を行った13

議論はある13

光路長を広げると観察できる画質が大幅に制限され他のライトフィードビューと混線が生じる13

次に読むべき論文は13

Butler13 et13 al13 201113

Vermeer13 Direct13 Interac4on13 with13 a13 360deg13 Viewable13 3D13 Display(UISTrsquo11) Alex Butler Otmar Hilliges Shahram Izadi Steve Hodges David Molyneaux David Kim

201413109　久保勇貴 2（鬼コース）13

どんなもの13

映し出された3Dオブジェクトとインタラクションを行えるシステム13

先行研究と比べてどこがすごい13

ディスプレイ内の画像とのインタラクションを提案ボリュームディスプレイを支援する新しいセンシング法の提案13

技術や手法のキモはどこ13

パラボラ鏡に取り付けた赤外線カメラセンサによる指先検出13

どうやって有効だと検証した13

アプリケーション例を示した13

議論はある13

パラボラ鏡の大きさよりもディスプレイサイズが小さくなってしまう13

次に読むべき論文は13

Hirsch13 et13 al13 201213

8D13 Interac4ng13 with13 a13 Relightable13 Glasses-shy‐Free13 3D13 Display(CHIrsquo12)Li-Wei Chan Hui-Shan Kao Mike Y Chen Ming-Sui Jane Yi-Ping Hung

201413109　久保勇貴 2（鬼コース）13

どんなもの13

ライトフィードによる入力とライトフィールドによる表示を行うリアルタイム8Dディスプレイ13

先行研究と比べてどこがすごい13

リアルタイムでの8Dディスプレイの実現（先行研究は7fps）13

技術や手法のキモはどこ13

GPUにおけるレンダリング処理13

どうやって有効だと検証した13

MRIデータを用いたディスプレイのデモを示した13

議論はある13

現在はグレースケールの入力のみだがカラーでの入力できればより強力になるだろう13

次に読むべき論文は13

Sahoo13 et13 al13 201513

Control13 of13 Non-shy‐Solid13 Diffusers13 by13 Electrosta4c13 Charging13 (CHIrsquo15) Deepak Ranjan Sahoo Diego Martinez Plasencia Sriram Subramanian

201413109　久保勇貴 2（鬼コース）13

どんなもの13

シャボン玉や霧などの非固体を電場による制御を試みた研究13

先行研究と比べてどこがすごい13

非固体の形や位置の制御法を提案した点13

技術や手法のキモはどこ13

[Intra13 et13 al13 11]中のldquowire-shy‐to-shy‐Cylinderdquoを用いたエアゾール粒子の帯電13

どうやって有効だと検証した13

霧及びシャボン玉によるディスプレイのアプリケーション例で実際に制御して見せた13

議論はある13

風による影響を本手法は打ち消すことができた13

次に読むべき論文は13

Barnum13 et13 al13 201013

A13 Mul4-shy‐Layered13 Display13 with13 Water13 Drops(SIGGRAPHrsquo10)Peter C Barnum Srinivasa G Narasimhan Takeo Kanade

201413109　久保勇貴 2（鬼コース）13

どんなもの13

複数層の落下水滴にプロジェクションマッピングを行いディスプレイとした研究13

先行研究と比べてどこがすごい13

水滴の制御を行うことで単一のプロジェクタによって複数層の映像投影を可能とした点13

技術や手法のキモはどこ13

[Ambravaneswaran13 et13 al13 2002]及び本研究における実験結果に基づく水滴生成13

どうやって有効だと検証した13

複数のディスプレイ例を示した13 例）顔の投影水槽シミュレータなど13

議論はある13

本当の3Dディスプレイにするにはより多くの水滴制御が必要13

次に読むべき論文は13

Lee13 et13 al13 200713

An13 Immaterial13 Depth-shy‐Fused13 3D13 Display(VRSTrsquo07)Cha Lee Stephen DiVerdi Tobias Humlollerer

201413109　久保勇貴 2（鬼コース）13

どんなもの13

２つのスクリーンを駆使し3Dディスプレイを実現するdepth-shy‐fused13 3D(DFD)に関する評価を行いその結果よりディスプレイを提案した研究13

先行研究と比べてどこがすごい13

DFDが任意のスクリーン設定及び見る位置に対して有効であることを示した13

技術や手法のキモはどこ13

６通りのスクリーン組合せから２つを抽出し見え方の違いを検証した点13

どうやって有効だと検証した13

６通りのスクリーンについて立体的に見えるか被験者実験を実施その後それぞれに有意差がみられるか調べた13

議論はある13

ステレオイメージを認めることができなかったユーザに対しても強い3D効果が見られた13

次に読むべき論文は13

Tokuda13 et13 al13 201013

Cloud13 Display13 (ACErsquo10)Yutaka Tokuda Yasuhiro Suzuki Kunihiro Nishimura Tomohiro Tanikawa Michitaka Hirose

201413109　久保勇貴 2（鬼コース）13

どんなもの13

煙の渦輪を用いた空間を埋めるディスプレイ13

先行研究と比べてどこがすごい13

制御可能な手法により高所へのパーティクルを運搬することに着目した点13

技術や手法のキモはどこ13

コンピュータによって制御が行われる空気砲アレイ13

どうやって有効だと検証した13

箱の中で実験を行い安定して渦輪をできるようにした実際にデモを行ったことを示した13

議論はある13

今の試作機をより早くリフレッシュ速度を高めることによりより濃く空間を埋められることを目指す13

次に読むべき論文は13

Sato13 et13 al13 200913

Par]cle13 Display13 System　(JVRC09)13 -shy‐13 A13 Large13 Scale13 Display13 for13 Public13 Space13 -shy‐

Munehiko13 Sato13 Yasuhiro13 Suzuki13 13 Atsushi13 Hiyama13 Tomohiro13 Tanikawa13 Michitaka13 Hirose

201413109　久保勇貴 2（鬼コース）13

どんなもの13

パーティクルディスプレイによる公共スペースのための大画面ディスプレイの提案13

先行研究と比べてどこがすごい13

公共スペースにおける要求と制限に基づいたシステムを提案した点13

技術や手法のキモはどこ13

実験に基づく表示画像のスクロール時間の制御13

どうやって有効だと検証した13

Aという文字の知覚実験によって 適な点滅周期の調査を行った13

議論はある13

現在の試作機を組合せより高解像度にする必要がある13

次に読むべき論文は13

Kwon13 et13 al13 201513

FugaciousFilm13 Exploring13 Aen4ve13 Interac4on13 with13 Ephemeral13 Material13 (CHIrsquo15)Hyosun13 Kwon13 Shashank13 Jaiswal13 Steve13 Benford13 Sue13 Ann13 Seah13

13 Peter13 BenneC13 Boriana13 Koleva13 Holger13 Schnaumldelbach

201413109　久保勇貴 2（鬼コース）13

どんなもの13

膜を押す引く飛び出ることができる新しい石鹸膜インタフェースの提案13

先行研究と比べてどこがすごい13

徐々に消えるインタフェースは高い注意を有するインタラクションを提供するという点を示したこと13

技術や手法のキモはどこ13

水グリセリンを201の対比で混ぜることでldquopoprdquoがきれいになるようにしかつ膜の耐久性を向上させた13

どうやって有効だと検証した13

３目並べを用いた被験者実験を実施13 ユーザは膜を割ると負け膜を自分のマスにするにはタッチ押す引くの書かれた通りの操作を行う13

議論はある13

ユーザに精密な動作を要求することはとりわけ注意を払うことを誘発する13

次に読むべき論文は13

Wetzstein13 et13 al13 201213

Tensor13 Displays13 Compressive13 Light13 Field13 Synthesis13 using13 Mul4layer13 Displays13 with13 Direc4onal13 Backligh4ng(SIGGRAPHrsquo12)

Gordon13 Wetzstein13 Douglas13 Lanman13 MaChew13 Hirsch13 Ramesh13 Raskar

201413109　久保勇貴 2（鬼コース）13

どんなもの13

視点によって異なる立体映像を見ることができる複数の層からなるディスプレイ13

先行研究と比べてどこがすごい13

既存の手法を合成したcomputa(onal13 displaysというディスプレイの新しいフレームワークを提案した13

技術や手法のキモはどこ13

時分割で視差マスクを表示することでユーザの視線ごとに立体像を表現する13

どうやって有効だと検証した13

通常のディスプレイ３層LCDLCD及び指向性バックライトの例による比較13 13

議論はある13

波紋を含むこと色チャンネルが悪影響を与える相互反射不均一などの問題が見られた13

次に読むべき論文は13

Matoba13 et13 al13 1213

SplashDisplay(VRICrsquo12)Yasuo Matoba Taro Tokui Ryo Sato Tochiki Sato Hideki Koike

201413109　久保勇貴 2（鬼コース）13

どんなもの13

パーティクルにCGを投射しパーティクルがテーブル上に投げられると爆発しパーティクルが噴きあがる13

先行研究と比べてどこがすごい13

ビーズがミリメートルからメートル単位までZ軸方向について空中で奥行きを表現する13

技術や手法のキモはどこ13

スピーカによって風力が発生させビーズを舞い上げる点13

どうやって有効だと検証した13

ビーズを投げると花火が打ちあがっているかのようなアプリケーション例を示した13

議論はある13

高いレベルの表現及び幅広い入力範囲を提供できた13

次に読むべき論文は13

Kim13 et13 al13 1413

MARIO13 Mid-shy‐air13 Augmented13 Reality13 Interac4on13 with13 Objects13 (ECrsquo14)Hanyuool13 Kim13 13 Issei13 Takahashi13 Hiroki13 Yamamoto13 Satoshi13 Maekawa13 Takeshi13 Naemura

201413109　久保勇貴 2（鬼コース）13

どんなもの13

350times300times250のテーブル上のスペースにおいて自由に動かせる空中像を造りだすことができる13

先行研究と比べてどこがすごい13

凹面鏡や凹レンズのように曲面でないため画像の歪曲が発生しない13

技術や手法のキモはどこ13

Aerial13 Imaging13 Plate(AIP)を用いた空中像の生成及びそのためのディスプレイ移動装置13

どうやって有効だと検証した13

左右からの視差の考慮及び奥行き表現時の画像提示視野角の検証などを行った13 13

議論はある13

投影しているひよこを叩いたり払いのけたりするような動作がデモ中見られた13

次に読むべき論文は13

Tactile Feedback on Flat Surfaces for the Visually Impaired13Ali Israr Olivier Bau Seung-Chan Kim Ivan Poupyrev13

どのようなものか 視覚障害者のための触覚を用いた視覚代用デバイス 先行研究と比べてどこがすごいか 道案内をしてくれる機械などはあるが日用品の場所を教えたり探すのを手伝ってくれるデバイスはない 技術や手法のキモ タッチパネルとカメラを搭載したデバイス 触覚を与える技術はTeslaTouchを利用 色を基準にオブジェクトの位置を認識 有用性の確認 視覚障害者二人に対して実験このデバイスを使

わなくても各自の方法で物を見つけられるが間違えることが多いこのデバイスを使用することで間違えることなく正確に物の位置を特定できた 課題 一つの色でしか判断できない 触感のあるなしでしか情報を伝えられない 関連論文 TeslaTouch [Bau et al 2010]

20150522 橋爪智 2鬼

Fingernail-Mounted Display of Attraction Force and Texture13Masataka Niwa Tomoko Nozaki Taro Maeda and Hideyuki And13

どのようなものか 指先に取り付けて触感と力を両方表現できるデバイス 先行研究と比べてどこがすごいか 触感と引力をそれぞれ表現するデバイスはあるが両方を一つのデバイスで表現した例は少ない 引力は自由な方向に付加することができる 技術や手法のキモ 偏心に重さを付けた円盤を4枚使用する 5-9Hz 引力　100-200Hz 触感 それぞれの円盤の位相や回転数を調整することで

触感と力 を表現する 4つのモータを使いそれぞれの円盤を独立して制御する 有用性の確認 4人の男性に対して実験80以上の精度で認識できた 関連論文 The nail-mounted attraction forcebump display [Nozaki et al 2008]

20150522 橋爪智 2 鬼

Gilded gait reshaping the urban experience with augmented footsteps13Yuichiro Takeuchi13

どのようなものか 靴に装着し地面の触感をコントロールするデバイス 先行研究と比べてどこがすごいか 単独で動作しなかったり特定の環境のみでしか動作しなかったりするrarr靴単体で動作環境に依存しない 技術や手法のキモ 6個の振動パネルを取り付けゲルでカバー app modulesを取り替えることができ様々な機能を付加できる（GPSsound) 4種類の地面を再現

bull  Hard Ground 振動させない bull  Soft Ground すべてのパネルを振動 bull  Bumpy Ground ジグザグに振動 bull  Godzilla 全てのパネルを振動何回か繰り返す 課題 モーターを使っているため波形をプログラミングできないrarr圧電素子を使用する 関連論文 Haptic Shoes [Fu et al 2010]

20150522 橋爪智 2鬼

ExoInterfaces novel exosceleton haptic interfaces for virtual reality augmented sport and rehabilitation

Dzmitry Tsetserukou Katsunari Sato Susumu Tachi13

どのようなものか 腕に装着し物理的なinteractionを可能にするデバイス 先行研究と比べてどこがすごいか Exoskeleton 力を増幅するためだが重たく危険なこともある String-based wireが視界をまたぐ動きに制限がある rarr腕の動きに制限を与えない安全 技術や手法のキモ 「FlexTorque」人間の筋肉の構造を再現するベルトとモーターを使用する肩の近くに装着することで

腕に負担がかかりにくい 触覚feedback弱いトルク 運動を支援強いトルク 課題 物理的な接触を表現するゲームやスポーツにより没頭させるリハビリのサポートをする視覚障害者の支援（ものの場所を教える） 関連論文 FlexTorque [Dzmitry et al 2010]

20150522 橋爪智 2 鬼

Perception of Ultrasonic Haptic Feedback on the Hand Localisation and Apparent Motion13

Graham Wilson Tom Carter Sriram Subramanian Stephen Brewster13

どのようなものか 超音波を用いた触覚フィードバック有効性の検討を行う 先行研究と比べてどこがすごいか 超音波触覚フィードバックは比較的新しく研究や操作方法に関する知識が少ない 腕を自由に動かすことができ小さいものは着用可能 技術や手法のキモ 88のアレイ状に超音波発生器を設置

有効性の確認 bull  局所的な触感 　　　25箇所に分割しそれぞれに超音波を当てる 　　　触感を感じた989 　　　場所の誤差85mm bull  手のひらを動く触感 上下左右に動く 　　　動いてると感じた629

20150522 橋爪智 2 鬼

Friction Measurements on a Large Area TPaD13Nicholas D Marchuk J Edward Colgate Michael A Peshkin13

どのようなものか 超音波の振動により触感を与える 先行研究と比べてどこがすごいか ガラス板を使うので透明後ろにディスプレイを配置可能 技術や手法のキモ 「Squeeze Film Effect（スクイズ膜効果）」 ガラス板に取り付けた圧電素子の円盤に高周波信号

をかける 実験 振動しない部分＝摩擦が発生しない部分が発生周波数により場所が変わる rarr摩擦を大きさをかける力の大きさから計測 rarr指の場所に合わせて複数の周波数を使い分ける 関連論文 T-PaD[Winfield et al 2007]

20150522 橋爪智 2 鬼

STIMTAC a Tactile Input Device with Programmable Friction13Michel Amberg Freacutedeacuteric Giraud Betty Semail Paolo Olivo Geacutery Casiez Nicolas Roussel13

どのようなものか 触感を与えられるタッチデバイス 先行研究と比べてどこがすごいか LATPaD サイズ大きいノイズが大きい TeslaTouch 高い電圧付加が必要GNDに接続しなければいけない

技術や手法のキモ 「Squeeze Film Effect」超音波を用いて振動を与える 圧電性セラミックを電極にコーディング 指トラッキングは力センサを用いる 活用法 マウスキーボード絵を描く 関連論文 LATPaD[Vincent et al 2011] TeslaTouch[Bau et al 2010]

20150522 橋爪智 2 鬼

Surround Haptics Tactile Feedback for Immersive Gaming Experiences Ali Israr Seung-Chan Kim Ivan Poupyrev Jan Stec13

どのようなものか ゲームに合わせて高解像度の触覚フィードバックをユーザーに与える椅子 先行研究と比べてどこがすごいか 荒く配置した安価な振動アクチュエータで高解像度の触覚フィードバックを行える 一点の振動連続した動き範囲の振動などを再現

技術や手法のキモ 仮想的な振動アクチュエータをいくつかの振動アクチュエータを使って作り出す physical-physicalphysical-virtualvirtual-virtual ゲームにHaptics Engineを導入しHaptics APIを用いてHaptic Displayを操作する 関連論文 Exploring Surround Haptics Displays[Israr et al 2010]

20150522 橋爪智 2 鬼

Audio-Haptic Feedback in Mobile Phones Angela Chang Conor OrsquoSullivan13

どのようなものか haptics機能のついてない携帯電話にオーディオ機能を利用した触覚フィードバックを追加する 先行研究と比べてどこがすごいか 簡単に作れてnon-haptic mobile devicesでも大丈夫 技術や手法のキモ 「MultiFunction Transducer(MFT)」 スピーカーから音と信号の両方を出力できる

bull  Haptic Inheritance 　　音を2つの周波数帯に分ける bull  Synthesis and Matching 　　低周波数帯(20-300Hz)を使い触感を伝える 有効性の検討 42人の人を対象に実験を行う83の人が触感を感じた

20150522 橋爪智 2 鬼

Resolution of Sleep Deprivation Problems using ZZZoo Pillows13Shunsuke Yanaka Motoki Ishida13

どのようなものか 近年不眠症の人が多い rarr誰かと接していると安心し睡眠に導入しやすくなる rarrまるで添い寝をしているようなリアルな抱きまくらを使う 技術や手法のキモ breathing sensation 風船を使って人の呼吸を再現肺の形の風船弱く長い呼吸をする

heating お湯を使って人の体温を再現45 有効性の確認 84人の人が実験 呼吸が睡眠を誘ったかrarr61 体温が睡眠を誘ったかrarr85 関連論文 The Impact of Sleep Disorders on Social Life[Komada et al 2007]

20150522 橋爪智 2 鬼

まとめ13超音波 モーター 風

20150522 橋爪智 2 鬼

コイル 電気刺激 Electrovibration

振動 音 お湯

なかの

Temporally Consistent Disparity and Optical Flow via Efficient Spatio-temporal Filtering1

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示した

議論論はあるか

時間的に一定の視差を算出する手法静止画ステレオよりも精度度が良良いことを示す従来よりも推定精度度が良良いオプティカルフローも算出する

一枚の静止画に対するフィルタリング[1]をステレオ動画に拡張している

ケンブリッジのステレオ動画のデータセットを利利用 実写動画に対する比較も行行うノイズ耐性も検証する

フィルタベースとエネルギーベースの関係性を良良り理理解することで推定精度度を上げる

実装が簡単でリアルタイム視差推定が可能

Fast Cost-Volume Filtering for Visual Correspondence and Beyond [Rhemann C Hosni A Bleyer M Rother C Gelautz M CVPR2011] Real-time Spatiotemporal Stereo Matching Using the Dual-Cross-Bilateral Grid [Richardt C Orr D Davies I Criminisi A Dodgson NA ECCV2010] Secrets of optical flow estimation and their principles [Sun D Roth S Black MJ 2010] Motion estimation with non-local total variation regularization [Werlberger M Pock T Bischof H CVPR2010] Temporally Consistent Disparity Maps from Uncalibrated Stereo Videos [Bleyer M Gelatuz M ISPA2011]

なかの

SymStereo Matching using Induced Symmetry (2014)2

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示した

議論論はあるか

画像の対称性を用いてステレオマッチングを行行う 左右の画像を反転させて重ね合わせることで対称性を測る

絵的な類似の代わりに対称性を使う今まで対称性を用いる手法はなく新規性が大きい

三つのSymmetry-baseの手法で精度度を検証従来手法よりも精度度が向上しているMiddlebury Oxford Corridorfountain-P11のデータセット使用

ステレオの問題である不不連続な箇所オクルージョン部分は未解決である演算時間はやや増加

1-Dラインのコストを考える今までは撮像面に対して平行行な平面でデプスを考えていたが垂直な平面を考える

BT[Birchfield and Tomasi 1998] Census transform[Zabih and Woodfill 1994] Log N[Kovesi 1997] radio-metoric differences[Hirschmuller Scharstein 2009]

なかの

Camouflaging an Object from Many Viewpoints3

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

多くの視点から三次元の物体をカモフラージュするカモフラージュによってオクルージョン部分の不不連続がどの程度度生じるか他の視点ではどれほどになるかの検証

MRF（Markov Random Fields）ベース

新しい三次元物体のカモフラージュモデルを構築 37種類のデータセットを作る

箱形の物体に対してカモフラージュ処理理を施し 結果を評価する

オクルージョン不不連続テクスチャの歪みが問題 照明や画像の貼りつけに制限あり

なかの

Aliasing Detection and Reduction in Plenoptic Imaging4

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

カメラアレイ撮影の角度度のエイリアシングを除去するエイリアシングの探索索と打ち消しを行行う

周波数領領域ではなく空間領領域で探索索を行行う

先行行研究がフィルタデモザイキング再パラメータ調整などの前処理理でエイリアシング除去を行行うのに対しエイリアシング探索索後にリフォーカスの段階でエイリアシングを取り除く

8times8の平行行カメラアレイで検証するカメラ間の 基線長は70mm

今回は基線長が長いデータセットを使った 次はLytroなどのマイクロレンズアレイで検証する

Globally consistent multi-label assignment on the ray space of 4d light fields [S Wanner C Straehle B Goldluecke CVPR2013] Lineassisted light field triangulation and stereo matching [Z Yu X Guo H Lin A Lumsdaine J Yu ICCV 2013]

なかの

Globally Consistent Multi-Label Assignment on the Ray Space of 4D Light Fields5

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

四次元ライトフィールドの光線情報において マルチラベルの領領域分割を行行う

深度度情報光線情報を用いて領領域分割することで 二次元（空間）情報だけでは分割が難しかった 領領域を分割可能とする

The light field camera Extended depth of field aliasing and superresolution [T Bishop P Favaro IEEE Transactions on Pattern Analysis and Machine Intelligence 2012]

なかの

Line Assisted Light Field Triangulation and Stereo Matching6

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

光線情報を利利用してステレオマッチングの精度度を 向上させる手法三角測量量の誤差を減らす

Light Field Stereo Matchingとかいう手法 グラフ構造を作成

Variational light field analysis for disparity estimation and super-resolution [S Wanner and B Goldlumluecke 2013]

なかの

Adaptive stereo similarity fusion using confidence measures 20157

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

ステレオマッチングの新しい方式fusion weightsを提案複数の手法を組み合わせてコスト計算を行行う手法付録に既存手法のコスト関数一覧あり

パラメータに依存する手法を用いないことで高速化を図っている

一つのアルゴリズムでは異異なる特性を持つ領領域全てに対して適切切なマッチングはできない複数を組み合わせることでそれを補う13種と多い

middleburyとKITTIのデータセットで評価

一枚あたり03sと高速だが001sとより高速なアルゴリズムが存在する

Segment-based stereo matching using belief propagation and a self-adapting dissimilarity measure [A Klaus M Sormann K Karner ICPR2006] On building an accurate stereo matching system on graphics hardware [X Mei X Sun M Zhou S Jiao H Wang X Zhang ICCV2011] Similarity measures for depth estimation [K Wegner O Stankiewicz 3DTV-CON2009] On accurate dense stereo-matching using a local adaptive multi-cost approach [C Stentoumis L Grammatikopoulos I Kalisperakis G Karras ISPRS2014] A quantitative evaluation of confidence measures for stereo vision [X Hu P Mordohai PAMI2012]

なかの

SIMILARITY MEASURE FOR DEPTH ESTIMATIOM 20098

どんなもの

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

4種類の視差推定アルゴリズムを組み合わせている 類似度度の選択性の解析

Belief Propagationの枠組みを用いる

名古屋大学の多視点データベースを利利用

HHI Test Material for 3D Video [I Feldmann M Muller F Zilly R Tanger A SmolicP Kauff T Wiegand 2008] Multiview Video Test Sequence and Camera Parameters [Yo-Sung Ho Eun-Kyung Lee and Cheon Lee 2008] 1D Parallel Test Sequences for MPEG-FTV [M Tanimoto T Fujii N Fukushima 2008] Non-parametric Local Transforms for Computing Visual Correspondence [R Zabih J Woodfill 1994]

なかの

Spatiotemporal Stereo via Spatiotemporal Quadric Element (Stequel) Matching9

どんなもの

技術や手法のキモはどこ

新しいマッチング手法を提案動き考慮することなく時間情報を取り込むことができる 時間方向のエピ線を考える

オプティカルフロー推定は3D境界や低テクスチャで弱いが提案手法はロバストである

なかの

Depth Video Enhancement Based on Weighted Mode Filtering10

どんなもの

議論論はある

ノイズを含んだ低解像度度のデプスマップの質を高める手法（超解像度度とデノイズ）時間方向も使用簡単なオプティカルフローを計算し利利用する

非反復復アルゴリズムのためGPUに載せやすく高速化が考えられる

なかの

Fast Bilateral-Space Stereo for Synthetic Defocus11

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

議論論はある

次に読むべき論論文は

高速な自由焦点ぼけ画像の作成

Bilateral-spaceを提案

従来研究よりも10から100倍速くぼけ具合の精度度も良良い

ぼけを作成するというアプリケーションに利利用する距離離という面では提案手法が有益であるが実測的な距離離という面での精度度は悪い背景と前景が同じ色で近くにある場合同一ととらえてしまう

Efficient high-resolution stereo matching using local plane sweeps [S N Sinha D Scharstein and R SzeliskiCVPR2014] Bilateral filtering-based optical flow estimation with occlusion detection [J Xiao H Cheng H Sawhney C Rao and M IsnardiECCV2006] Efficient nonlocal regularization for optical flow [P Krumlahenbumluhl and V KoltunECCV2012] Real-time spatiotemporal stereo matching using the dual-cross-bilateral grid [C Richardt D Orr I Davies A Criminisi and N A DodgsonECCV2010]

どうやって有効性を示した視差推定の精度度はmiddleburyKITTI

なかの

Robust Spatiotemporal Stereo for Dynamic Scenes12

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

ステレオ動画のフレーム間情報を取り入れることでノイズ耐性を向上させるまた動きの大きなものも考える

時間を含めたウインドウの提案自動的にそのような変化に対応する画像領領域を検出する

従来の時空間ステレオと比べ大きな動きによる急激な視差の時間変化に対して頑健である

なかの

Spacetime Stereo A Unifying Framework for Depth from Triangulation13

どんなもの

先行行研究と比べてどこがすごい

space time stereoを提案ステレオカメラの視差推定でも構造光を用いた視差推定でも利利用可能 動的なシーンでの利利用も可能

フレームごとマッチングを取っていたが複数フレームでのマッチングを可能とした

なかの

Learning to Select and Order Vacation Photographs (Disney research)14

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示したあまりにもたくさん撮影した写真たちから自動的にフォトアルバムを作成する研究

複雑な視覚での区別を試みたのはこの論論文が初

５つの異異なるトピックから63の個人的な写真コレクションのデータセットを利利用し定量量的に評価する

写真間の差別かを定義する顔全体の絵何が写っているか写っていないかを評価する

Jointly aligning and segmenting multiple web photo streams for the inference of collective photo storylines [G Kim and E P Xing CVPR2013] Photo sequencing [T Basha Y Moses and S Avidan CVPR2012]

なかの

A Taxonomy and Evaluation of Dense Two-Frame Stereo Correspondence Algorithms15

どんなもの

どうやって有効性を示した

次に読むべき論論文は

ステレオマッチングに関する分類を行行う 新たなデータセットを作成する

というよりも他の手法が有効性を示すことができるようにデータセットを作成した 今ではmiddleburyのデータセットと言えばステレオ業界では超有名

High-resolution stereo datasets with subpixel-accurate ground truth

なかの

Discriminability Limits in Spatio-Temporal Stereo Block Matching1

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

spatio-temporal disparity estimationの根本的な前提の正当性を解析しマッチング処理理の際に動きが助けとなる程度度を決定する

時空間マッチングのエラーを分析し誤りの原因を確率率率で導出する（フレーム数動きの分散画像特徴ノイズの関数）

[34243334]は時空間マッチングの利利点を指摘していたが本論論文はマッチング精度度の向上のために動きを用いる手法の程度度や性質を研究する

6つのステレオビデオを用いて検証を行行った

Spacetime stereo Shape recovery for dynamic scenes [L Zhang B Curless and S Seitz CVPR2003] Spatiotemporal stereo and scene flow via stequel matching [M Sizintsev and R Wildes PAMI2012] Temporally consistent disparity and optical flow via efficient spatio-temporal filtering [A Hosni C Rhemann M Bleyer and M Gelautz PRCAIVT2012] Spacetime stereo A unifying framework for depth from triangulation [PAMI2005] Dynamic depth recovery from multiple synchronized video streams [H Tao H Sawhney and R Kumar CVPR2001] Spatiotemporal descriptor for wide-baseline stereo reconstruction of non-rigid and ambiguous scenes [ECCV2003]

なかの

Depth-Based Patch Scaling for Content-Aware Stereo Image Completion2

どんなもの

どうやって有効性を示した

ステレオでデプスを取り物体の三次元情報を使ってインペインティングを行行う

bookのデータセット背景が繰り返しパターンが多いものを使っている

なかの

Fast Semi-dense Surface Reconstruction from Stereoscopic Video in Laparoscopic Surgery3

どんなもの

手法の流流れ

次に読むべき論論文は

腹腔内手術の際にステレオビデオから高速に物体の三次元再構成を行行う研究

Evaluation of stereo matching costs on images with radiometric differences [Hirschmueller H Scharstein D PAMI2008]

スコープカメラから画像取得GPUで演算する 視差を算出しフィルタにかける距離離に変換 点群を再びフィルタにかけて三次元再構成

なかの

3D Reconstruction from Accidental Motion4

どんなもの

技術や手法のキモはどこ

議論論はある

数秒のビデオ（単眼）から三次元再構成を行行う 手ぶれなどの動きから再構成が可能で特定の動きや機材を必要としない

短い基線長でも再構成が可能（3mmの基線長）

基線長が短いため背景の精度度が低くなる リフォーカス画像作成には十分 練習では上手く動作したが検証がまだ必要

なかの

Panoramic Video from Unstructured Camera Arrays5

どんなもの

技術や手法のキモはどこ

議論論はある

複数のカメラを用いたパノラマ撮影を行行う その際に不不自然さがないような動画を作成する

不不自然さを感じる感覚特性を提示しそれにのっとって対策を講じている

一つのカメラの解像度度と品質を向上させるよりも複数台のカメラを組み合わせることがはるかに簡単で有益である専門家でなくてもGoProのカメラセットを組み合わせることは容易易

カメラの配置は厳密に決められていない完璧な時間同期やローリングシャッターの不不足のような実撮影での問題もクリアしている

先行行研究と比べてどこがすごい

どうやって有効性を示した左のシステムは14台のカメラを使用 右のシステムはGoProを5台使用

Disney 201558

なかの

Floating Scale Surface Reconstruction6

どんなもの

技術や手法のキモはどこ

流流動的にスケールを変えられる三次元再構成手法

サンプル規模に依存するパラメータがない rarrどのスケールのサンプルにも対応できる

siggraph2014

なかの

A Super Resolution Reconstruction Scheme for Mixed Spatio-Temporal Stereo Video7

どんなもの

技術や手法のキモはどこ

ビデオ超解像アルゴリズム

二台のカメラを使用 一台は低解像度度で高速一台は高解像度度で低速

HHI 3DV ftp siteのBookarrivalとbeergadenを使用どうやって有効性を示した

なかの

What Is a Good Day for Outdoor Photometric Stereo8

どんなもの

先行行研究と比べてどこがすごい

議論論はある

次に読むべき論論文は

屋外における照度度差があるステレオの研究 屋外でステレオを行行う際に有利利or不不利利な日照条件を明らかにする

点光源を用いた研究は行行われていたが屋外での研究はされていなかった

晴れより曇りの方が精度度が良良い雲があるから特徴量量を取りやすい雑音を白色ガウスモデルを想定 季節ごとのデータセットを利利用してみても良良い

Time-lapse photometric stereo and applications [F Shen K Sunkavalli N Bonneel S Rusinkiewicz H Pfisterand X Tong2014] Outdoor photometric stereo [L-F Yu S-K Yeung Y-W Tai D Terzopoulos and T FChan ICCP2013]

どうやって有効性を示した屋外の照明に関するHDR環境マップのデータベースを利利用

Disney 2015424

なかの

COLORBRUSH ANIMATED DIFFUSION FOR INTUITIVE COLORIZATION SIMULATING WATER PAINTING 9

どんなものアニメを水彩画で描いたように変換する 水彩画を描くには経験が必要であるがそれを作成するアルゴリズムを考案絵具が水によりどうにじむかシュミレーションしている

Disney 20141027 ICIP2014

次に読むべき論論文はGabor-space geodesic active contoursrdquo In Algebraic Frames for the Perception-Action Cycle [C Sagiv NA Sochen and YY Zeevi 2000] Practical temporal consistency for image-based graphics applications [M Lang O Wang T Aydin A Smolic and M Gross SIGGRAPH2012] Computer-Generated Watercolor [CJ Curtis SE Anderson JE Seims KW Fleischer and DH Salesin SIGGRAPH1997]

なかの

From Sound to Sight Using Audio Processing to enable Visible Light Communication 10

どんなもの光に情報を載せる技術プロジェクトページがあって光関係の研究が8個載っている

httpwwwdisneyresearchcomprojectvisible-light-communication

ビデオのURL httpwwwdisneyresearchcomwpcontentuploadsPub_InvisibleLightCommunication_Siggraph14_videomp4

• 201211106_KeisukeKawahara
• 201311421_KeitaKanai_02
• 201313095_AkiraIshii_02
• 201413109_YuukiKubo_02
• 201513110_SatoshiHashizume_02
• 鬼輪講マラソン③_1
• 鬼輪講マラソン③_2

2 201313095

OpenFab 3D

fablets

3 3

bull  CHENDMATUSIKWSITTHI-AMORNPDIDYKPANDLEVIND2013Spec2FabAreducer-tunermodelfortranslat-ingspecificaEonsto3DprintsACMTransGraph324(July)

OpenFabampAampProgrammableampPipelineampforampMulEMaterialampFabricaEonamp(SIGGRAPHrsquo13)

KirilVidimcˇeSzu-PoWangJonathanRagan-KelleyWojciechMatusik

2 201313095

3D

3D

3D

3D14 30 13 67

244

14

3D

bull  MuellerSKruckBBaudischPLaserOrigamiLaser-Cunng3DObjectsProcCHIrsquo132585-2592

faBrickaEonampFastamp3DampPrinEngampofampFuncEonalampObjectsampbyampIntegraEngampConstrucEonampKitampBuildingampBlocksamp(CHIrsquo14)amp

StefanieMuellerTobiasMohrKersEnGuentherJohannesFrohnhofenPatrickBaudisch

h]pswwwyoutubecomwatchv=BlO6YRcLJjE

Touching13 the13 Void13 Direct-shy‐Touch13 Interac4on13 for13 Intangible13 Displays(CHIrsquo10)Li-Wei Chan Hui-Shan Kao Mike Y Chen Ming-Sui Jane Yi-Ping Hung

201413109　久保勇貴 2（鬼コース）13

どんなもの13

空中像へのタッチのエラーに関する調査及び影や音のフィードバックを付与することによるパーフォーマンス向上を示した研究13

先行研究と比べてどこがすごい13

平面画像をタッチする際の奥行きに関するエラーの正確な取得を初めて検証13

技術や手法のキモはどこ13

２つの赤外線カメラを用いた正確なタッチの検出13

どうやって有効だと検証した13

タッチ時の奥行きの正確さに関する被験者実験を実施またタッチする際に影や音を付けた際の反応時間を被験者実験で検証13

議論はある13

ユーザは慣れるまで影や音のフィードバックが必要だがそのあとは必要なくなる13

次に読むべき論文は13

MirageTable13 （CHI12） 13

MirageTable13 Freehand13 Interac4on13 on13 a13 Projected13 13 Augmented13 Reality13 Tabletop(CHIrsquo12)

Hrvoje Benko Ricardo Jota Andrew D Wilson

201413109　久保勇貴 2（鬼コース）13

どんなもの13

テーブル上においてバーチャルな物体をリアルタイムで現実でものを動かすことと同様な動作に操作可能なシステム13

先行研究と比べてどこがすごい13

現実の物体をリアルタイムで画面に取りこむことができ質の高いフリーハンドインタラクションを実現した点13

技術や手法のキモはどこ13

色深度前景頭追跡プロキシパーティクルを駆使したリアルタイムメッシュの作成13

どうやって有効だと検証した13

凹凸など例外な表面に対しての投影した際の画像の質についての評価実験また仮想物体の奥行き知覚に関する実験も行った13

議論はある13

前面のみしかキャプチャしていないため差が生じる握っている場所の再現は未解決な課題である13

次に読むべき論文は13

Hirsch13 et13 al13 201413 (SIGGRAPHrsquo14)13

A13 Compressive13 Light13 Field13 Projec4on13 System13 (SIGGRAPHrsquo14)MaChew13 Hirsch13 Gordon13 Wetzstein13 Ramesh13 Raskar

201413109　久保勇貴 2（鬼コース）13

どんなもの13

通常の3Dディスプレイに比べて解像度輝度コントラストを改善した圧縮ライトフィードディスプレイ13

先行研究と比べてどこがすごい13

多視点立体視を複数でなく１台のプロジェクタを用いて実現した13

技術や手法のキモはどこ13

受動的スクリーンと高速切り替えプロジェクタによる新しい光学設計13

どうやって有効だと検証した13

4つのシーン例を投影したものを示したアニメーションの3D効果について観察を行った13

議論はある13

光路長を広げると観察できる画質が大幅に制限され他のライトフィードビューと混線が生じる13

次に読むべき論文は13

Butler13 et13 al13 201113

Vermeer13 Direct13 Interac4on13 with13 a13 360deg13 Viewable13 3D13 Display(UISTrsquo11) Alex Butler Otmar Hilliges Shahram Izadi Steve Hodges David Molyneaux David Kim

201413109　久保勇貴 2（鬼コース）13

どんなもの13

映し出された3Dオブジェクトとインタラクションを行えるシステム13

先行研究と比べてどこがすごい13

ディスプレイ内の画像とのインタラクションを提案ボリュームディスプレイを支援する新しいセンシング法の提案13

技術や手法のキモはどこ13

パラボラ鏡に取り付けた赤外線カメラセンサによる指先検出13

どうやって有効だと検証した13

アプリケーション例を示した13

議論はある13

パラボラ鏡の大きさよりもディスプレイサイズが小さくなってしまう13

次に読むべき論文は13

Hirsch13 et13 al13 201213

8D13 Interac4ng13 with13 a13 Relightable13 Glasses-shy‐Free13 3D13 Display(CHIrsquo12)Li-Wei Chan Hui-Shan Kao Mike Y Chen Ming-Sui Jane Yi-Ping Hung

201413109　久保勇貴 2（鬼コース）13

どんなもの13

ライトフィードによる入力とライトフィールドによる表示を行うリアルタイム8Dディスプレイ13

先行研究と比べてどこがすごい13

リアルタイムでの8Dディスプレイの実現（先行研究は7fps）13

技術や手法のキモはどこ13

GPUにおけるレンダリング処理13

どうやって有効だと検証した13

MRIデータを用いたディスプレイのデモを示した13

議論はある13

現在はグレースケールの入力のみだがカラーでの入力できればより強力になるだろう13

次に読むべき論文は13

Sahoo13 et13 al13 201513

Control13 of13 Non-shy‐Solid13 Diffusers13 by13 Electrosta4c13 Charging13 (CHIrsquo15) Deepak Ranjan Sahoo Diego Martinez Plasencia Sriram Subramanian

201413109　久保勇貴 2（鬼コース）13

どんなもの13

シャボン玉や霧などの非固体を電場による制御を試みた研究13

先行研究と比べてどこがすごい13

非固体の形や位置の制御法を提案した点13

技術や手法のキモはどこ13

[Intra13 et13 al13 11]中のldquowire-shy‐to-shy‐Cylinderdquoを用いたエアゾール粒子の帯電13

どうやって有効だと検証した13

霧及びシャボン玉によるディスプレイのアプリケーション例で実際に制御して見せた13

議論はある13

風による影響を本手法は打ち消すことができた13

次に読むべき論文は13

Barnum13 et13 al13 201013

A13 Mul4-shy‐Layered13 Display13 with13 Water13 Drops(SIGGRAPHrsquo10)Peter C Barnum Srinivasa G Narasimhan Takeo Kanade

201413109　久保勇貴 2（鬼コース）13

どんなもの13

複数層の落下水滴にプロジェクションマッピングを行いディスプレイとした研究13

先行研究と比べてどこがすごい13

水滴の制御を行うことで単一のプロジェクタによって複数層の映像投影を可能とした点13

技術や手法のキモはどこ13

[Ambravaneswaran13 et13 al13 2002]及び本研究における実験結果に基づく水滴生成13

どうやって有効だと検証した13

複数のディスプレイ例を示した13 例）顔の投影水槽シミュレータなど13

議論はある13

本当の3Dディスプレイにするにはより多くの水滴制御が必要13

次に読むべき論文は13

Lee13 et13 al13 200713

An13 Immaterial13 Depth-shy‐Fused13 3D13 Display(VRSTrsquo07)Cha Lee Stephen DiVerdi Tobias Humlollerer

201413109　久保勇貴 2（鬼コース）13

どんなもの13

２つのスクリーンを駆使し3Dディスプレイを実現するdepth-shy‐fused13 3D(DFD)に関する評価を行いその結果よりディスプレイを提案した研究13

先行研究と比べてどこがすごい13

DFDが任意のスクリーン設定及び見る位置に対して有効であることを示した13

技術や手法のキモはどこ13

６通りのスクリーン組合せから２つを抽出し見え方の違いを検証した点13

どうやって有効だと検証した13

６通りのスクリーンについて立体的に見えるか被験者実験を実施その後それぞれに有意差がみられるか調べた13

議論はある13

ステレオイメージを認めることができなかったユーザに対しても強い3D効果が見られた13

次に読むべき論文は13

Tokuda13 et13 al13 201013

Cloud13 Display13 (ACErsquo10)Yutaka Tokuda Yasuhiro Suzuki Kunihiro Nishimura Tomohiro Tanikawa Michitaka Hirose

201413109　久保勇貴 2（鬼コース）13

どんなもの13

煙の渦輪を用いた空間を埋めるディスプレイ13

先行研究と比べてどこがすごい13

制御可能な手法により高所へのパーティクルを運搬することに着目した点13

技術や手法のキモはどこ13

コンピュータによって制御が行われる空気砲アレイ13

どうやって有効だと検証した13

箱の中で実験を行い安定して渦輪をできるようにした実際にデモを行ったことを示した13

議論はある13

今の試作機をより早くリフレッシュ速度を高めることによりより濃く空間を埋められることを目指す13

次に読むべき論文は13

Sato13 et13 al13 200913

Par]cle13 Display13 System　(JVRC09)13 -shy‐13 A13 Large13 Scale13 Display13 for13 Public13 Space13 -shy‐

Munehiko13 Sato13 Yasuhiro13 Suzuki13 13 Atsushi13 Hiyama13 Tomohiro13 Tanikawa13 Michitaka13 Hirose

201413109　久保勇貴 2（鬼コース）13

どんなもの13

パーティクルディスプレイによる公共スペースのための大画面ディスプレイの提案13

先行研究と比べてどこがすごい13

公共スペースにおける要求と制限に基づいたシステムを提案した点13

技術や手法のキモはどこ13

実験に基づく表示画像のスクロール時間の制御13

どうやって有効だと検証した13

Aという文字の知覚実験によって 適な点滅周期の調査を行った13

議論はある13

現在の試作機を組合せより高解像度にする必要がある13

次に読むべき論文は13

Kwon13 et13 al13 201513

FugaciousFilm13 Exploring13 Aen4ve13 Interac4on13 with13 Ephemeral13 Material13 (CHIrsquo15)Hyosun13 Kwon13 Shashank13 Jaiswal13 Steve13 Benford13 Sue13 Ann13 Seah13

13 Peter13 BenneC13 Boriana13 Koleva13 Holger13 Schnaumldelbach

201413109　久保勇貴 2（鬼コース）13

どんなもの13

膜を押す引く飛び出ることができる新しい石鹸膜インタフェースの提案13

先行研究と比べてどこがすごい13

徐々に消えるインタフェースは高い注意を有するインタラクションを提供するという点を示したこと13

技術や手法のキモはどこ13

水グリセリンを201の対比で混ぜることでldquopoprdquoがきれいになるようにしかつ膜の耐久性を向上させた13

どうやって有効だと検証した13

３目並べを用いた被験者実験を実施13 ユーザは膜を割ると負け膜を自分のマスにするにはタッチ押す引くの書かれた通りの操作を行う13

議論はある13

ユーザに精密な動作を要求することはとりわけ注意を払うことを誘発する13

次に読むべき論文は13

Wetzstein13 et13 al13 201213

Tensor13 Displays13 Compressive13 Light13 Field13 Synthesis13 using13 Mul4layer13 Displays13 with13 Direc4onal13 Backligh4ng(SIGGRAPHrsquo12)

Gordon13 Wetzstein13 Douglas13 Lanman13 MaChew13 Hirsch13 Ramesh13 Raskar

201413109　久保勇貴 2（鬼コース）13

どんなもの13

視点によって異なる立体映像を見ることができる複数の層からなるディスプレイ13

先行研究と比べてどこがすごい13

既存の手法を合成したcomputa(onal13 displaysというディスプレイの新しいフレームワークを提案した13

技術や手法のキモはどこ13

時分割で視差マスクを表示することでユーザの視線ごとに立体像を表現する13

どうやって有効だと検証した13

通常のディスプレイ３層LCDLCD及び指向性バックライトの例による比較13 13

議論はある13

波紋を含むこと色チャンネルが悪影響を与える相互反射不均一などの問題が見られた13

次に読むべき論文は13

Matoba13 et13 al13 1213

SplashDisplay(VRICrsquo12)Yasuo Matoba Taro Tokui Ryo Sato Tochiki Sato Hideki Koike

201413109　久保勇貴 2（鬼コース）13

どんなもの13

パーティクルにCGを投射しパーティクルがテーブル上に投げられると爆発しパーティクルが噴きあがる13

先行研究と比べてどこがすごい13

ビーズがミリメートルからメートル単位までZ軸方向について空中で奥行きを表現する13

技術や手法のキモはどこ13

スピーカによって風力が発生させビーズを舞い上げる点13

どうやって有効だと検証した13

ビーズを投げると花火が打ちあがっているかのようなアプリケーション例を示した13

議論はある13

高いレベルの表現及び幅広い入力範囲を提供できた13

次に読むべき論文は13

Kim13 et13 al13 1413

MARIO13 Mid-shy‐air13 Augmented13 Reality13 Interac4on13 with13 Objects13 (ECrsquo14)Hanyuool13 Kim13 13 Issei13 Takahashi13 Hiroki13 Yamamoto13 Satoshi13 Maekawa13 Takeshi13 Naemura

201413109　久保勇貴 2（鬼コース）13

どんなもの13

350times300times250のテーブル上のスペースにおいて自由に動かせる空中像を造りだすことができる13

先行研究と比べてどこがすごい13

凹面鏡や凹レンズのように曲面でないため画像の歪曲が発生しない13

技術や手法のキモはどこ13

Aerial13 Imaging13 Plate(AIP)を用いた空中像の生成及びそのためのディスプレイ移動装置13

どうやって有効だと検証した13

左右からの視差の考慮及び奥行き表現時の画像提示視野角の検証などを行った13 13

議論はある13

投影しているひよこを叩いたり払いのけたりするような動作がデモ中見られた13

次に読むべき論文は13

Tactile Feedback on Flat Surfaces for the Visually Impaired13Ali Israr Olivier Bau Seung-Chan Kim Ivan Poupyrev13

どのようなものか 視覚障害者のための触覚を用いた視覚代用デバイス 先行研究と比べてどこがすごいか 道案内をしてくれる機械などはあるが日用品の場所を教えたり探すのを手伝ってくれるデバイスはない 技術や手法のキモ タッチパネルとカメラを搭載したデバイス 触覚を与える技術はTeslaTouchを利用 色を基準にオブジェクトの位置を認識 有用性の確認 視覚障害者二人に対して実験このデバイスを使

わなくても各自の方法で物を見つけられるが間違えることが多いこのデバイスを使用することで間違えることなく正確に物の位置を特定できた 課題 一つの色でしか判断できない 触感のあるなしでしか情報を伝えられない 関連論文 TeslaTouch [Bau et al 2010]

20150522 橋爪智 2鬼

Fingernail-Mounted Display of Attraction Force and Texture13Masataka Niwa Tomoko Nozaki Taro Maeda and Hideyuki And13

どのようなものか 指先に取り付けて触感と力を両方表現できるデバイス 先行研究と比べてどこがすごいか 触感と引力をそれぞれ表現するデバイスはあるが両方を一つのデバイスで表現した例は少ない 引力は自由な方向に付加することができる 技術や手法のキモ 偏心に重さを付けた円盤を4枚使用する 5-9Hz 引力　100-200Hz 触感 それぞれの円盤の位相や回転数を調整することで

触感と力 を表現する 4つのモータを使いそれぞれの円盤を独立して制御する 有用性の確認 4人の男性に対して実験80以上の精度で認識できた 関連論文 The nail-mounted attraction forcebump display [Nozaki et al 2008]

20150522 橋爪智 2 鬼

Gilded gait reshaping the urban experience with augmented footsteps13Yuichiro Takeuchi13

どのようなものか 靴に装着し地面の触感をコントロールするデバイス 先行研究と比べてどこがすごいか 単独で動作しなかったり特定の環境のみでしか動作しなかったりするrarr靴単体で動作環境に依存しない 技術や手法のキモ 6個の振動パネルを取り付けゲルでカバー app modulesを取り替えることができ様々な機能を付加できる（GPSsound) 4種類の地面を再現

bull  Hard Ground 振動させない bull  Soft Ground すべてのパネルを振動 bull  Bumpy Ground ジグザグに振動 bull  Godzilla 全てのパネルを振動何回か繰り返す 課題 モーターを使っているため波形をプログラミングできないrarr圧電素子を使用する 関連論文 Haptic Shoes [Fu et al 2010]

20150522 橋爪智 2鬼

ExoInterfaces novel exosceleton haptic interfaces for virtual reality augmented sport and rehabilitation

Dzmitry Tsetserukou Katsunari Sato Susumu Tachi13

どのようなものか 腕に装着し物理的なinteractionを可能にするデバイス 先行研究と比べてどこがすごいか Exoskeleton 力を増幅するためだが重たく危険なこともある String-based wireが視界をまたぐ動きに制限がある rarr腕の動きに制限を与えない安全 技術や手法のキモ 「FlexTorque」人間の筋肉の構造を再現するベルトとモーターを使用する肩の近くに装着することで

腕に負担がかかりにくい 触覚feedback弱いトルク 運動を支援強いトルク 課題 物理的な接触を表現するゲームやスポーツにより没頭させるリハビリのサポートをする視覚障害者の支援（ものの場所を教える） 関連論文 FlexTorque [Dzmitry et al 2010]

20150522 橋爪智 2 鬼

Perception of Ultrasonic Haptic Feedback on the Hand Localisation and Apparent Motion13

Graham Wilson Tom Carter Sriram Subramanian Stephen Brewster13

どのようなものか 超音波を用いた触覚フィードバック有効性の検討を行う 先行研究と比べてどこがすごいか 超音波触覚フィードバックは比較的新しく研究や操作方法に関する知識が少ない 腕を自由に動かすことができ小さいものは着用可能 技術や手法のキモ 88のアレイ状に超音波発生器を設置

有効性の確認 bull  局所的な触感 　　　25箇所に分割しそれぞれに超音波を当てる 　　　触感を感じた989 　　　場所の誤差85mm bull  手のひらを動く触感 上下左右に動く 　　　動いてると感じた629

20150522 橋爪智 2 鬼

Friction Measurements on a Large Area TPaD13Nicholas D Marchuk J Edward Colgate Michael A Peshkin13

どのようなものか 超音波の振動により触感を与える 先行研究と比べてどこがすごいか ガラス板を使うので透明後ろにディスプレイを配置可能 技術や手法のキモ 「Squeeze Film Effect（スクイズ膜効果）」 ガラス板に取り付けた圧電素子の円盤に高周波信号

をかける 実験 振動しない部分＝摩擦が発生しない部分が発生周波数により場所が変わる rarr摩擦を大きさをかける力の大きさから計測 rarr指の場所に合わせて複数の周波数を使い分ける 関連論文 T-PaD[Winfield et al 2007]

20150522 橋爪智 2 鬼

STIMTAC a Tactile Input Device with Programmable Friction13Michel Amberg Freacutedeacuteric Giraud Betty Semail Paolo Olivo Geacutery Casiez Nicolas Roussel13

どのようなものか 触感を与えられるタッチデバイス 先行研究と比べてどこがすごいか LATPaD サイズ大きいノイズが大きい TeslaTouch 高い電圧付加が必要GNDに接続しなければいけない

技術や手法のキモ 「Squeeze Film Effect」超音波を用いて振動を与える 圧電性セラミックを電極にコーディング 指トラッキングは力センサを用いる 活用法 マウスキーボード絵を描く 関連論文 LATPaD[Vincent et al 2011] TeslaTouch[Bau et al 2010]

20150522 橋爪智 2 鬼

Surround Haptics Tactile Feedback for Immersive Gaming Experiences Ali Israr Seung-Chan Kim Ivan Poupyrev Jan Stec13

どのようなものか ゲームに合わせて高解像度の触覚フィードバックをユーザーに与える椅子 先行研究と比べてどこがすごいか 荒く配置した安価な振動アクチュエータで高解像度の触覚フィードバックを行える 一点の振動連続した動き範囲の振動などを再現

技術や手法のキモ 仮想的な振動アクチュエータをいくつかの振動アクチュエータを使って作り出す physical-physicalphysical-virtualvirtual-virtual ゲームにHaptics Engineを導入しHaptics APIを用いてHaptic Displayを操作する 関連論文 Exploring Surround Haptics Displays[Israr et al 2010]

20150522 橋爪智 2 鬼

Audio-Haptic Feedback in Mobile Phones Angela Chang Conor OrsquoSullivan13

どのようなものか haptics機能のついてない携帯電話にオーディオ機能を利用した触覚フィードバックを追加する 先行研究と比べてどこがすごいか 簡単に作れてnon-haptic mobile devicesでも大丈夫 技術や手法のキモ 「MultiFunction Transducer(MFT)」 スピーカーから音と信号の両方を出力できる

bull  Haptic Inheritance 　　音を2つの周波数帯に分ける bull  Synthesis and Matching 　　低周波数帯(20-300Hz)を使い触感を伝える 有効性の検討 42人の人を対象に実験を行う83の人が触感を感じた

20150522 橋爪智 2 鬼

Resolution of Sleep Deprivation Problems using ZZZoo Pillows13Shunsuke Yanaka Motoki Ishida13

どのようなものか 近年不眠症の人が多い rarr誰かと接していると安心し睡眠に導入しやすくなる rarrまるで添い寝をしているようなリアルな抱きまくらを使う 技術や手法のキモ breathing sensation 風船を使って人の呼吸を再現肺の形の風船弱く長い呼吸をする

heating お湯を使って人の体温を再現45 有効性の確認 84人の人が実験 呼吸が睡眠を誘ったかrarr61 体温が睡眠を誘ったかrarr85 関連論文 The Impact of Sleep Disorders on Social Life[Komada et al 2007]

20150522 橋爪智 2 鬼

まとめ13超音波 モーター 風

20150522 橋爪智 2 鬼

コイル 電気刺激 Electrovibration

振動 音 お湯

なかの

Temporally Consistent Disparity and Optical Flow via Efficient Spatio-temporal Filtering1

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示した

議論論はあるか

時間的に一定の視差を算出する手法静止画ステレオよりも精度度が良良いことを示す従来よりも推定精度度が良良いオプティカルフローも算出する

一枚の静止画に対するフィルタリング[1]をステレオ動画に拡張している

ケンブリッジのステレオ動画のデータセットを利利用 実写動画に対する比較も行行うノイズ耐性も検証する

フィルタベースとエネルギーベースの関係性を良良り理理解することで推定精度度を上げる

実装が簡単でリアルタイム視差推定が可能

Fast Cost-Volume Filtering for Visual Correspondence and Beyond [Rhemann C Hosni A Bleyer M Rother C Gelautz M CVPR2011] Real-time Spatiotemporal Stereo Matching Using the Dual-Cross-Bilateral Grid [Richardt C Orr D Davies I Criminisi A Dodgson NA ECCV2010] Secrets of optical flow estimation and their principles [Sun D Roth S Black MJ 2010] Motion estimation with non-local total variation regularization [Werlberger M Pock T Bischof H CVPR2010] Temporally Consistent Disparity Maps from Uncalibrated Stereo Videos [Bleyer M Gelatuz M ISPA2011]

なかの

SymStereo Matching using Induced Symmetry (2014)2

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示した

議論論はあるか

画像の対称性を用いてステレオマッチングを行行う 左右の画像を反転させて重ね合わせることで対称性を測る

絵的な類似の代わりに対称性を使う今まで対称性を用いる手法はなく新規性が大きい

三つのSymmetry-baseの手法で精度度を検証従来手法よりも精度度が向上しているMiddlebury Oxford Corridorfountain-P11のデータセット使用

ステレオの問題である不不連続な箇所オクルージョン部分は未解決である演算時間はやや増加

1-Dラインのコストを考える今までは撮像面に対して平行行な平面でデプスを考えていたが垂直な平面を考える

BT[Birchfield and Tomasi 1998] Census transform[Zabih and Woodfill 1994] Log N[Kovesi 1997] radio-metoric differences[Hirschmuller Scharstein 2009]

なかの

Camouflaging an Object from Many Viewpoints3

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

多くの視点から三次元の物体をカモフラージュするカモフラージュによってオクルージョン部分の不不連続がどの程度度生じるか他の視点ではどれほどになるかの検証

MRF（Markov Random Fields）ベース

新しい三次元物体のカモフラージュモデルを構築 37種類のデータセットを作る

箱形の物体に対してカモフラージュ処理理を施し 結果を評価する

オクルージョン不不連続テクスチャの歪みが問題 照明や画像の貼りつけに制限あり

なかの

Aliasing Detection and Reduction in Plenoptic Imaging4

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

カメラアレイ撮影の角度度のエイリアシングを除去するエイリアシングの探索索と打ち消しを行行う

周波数領領域ではなく空間領領域で探索索を行行う

先行行研究がフィルタデモザイキング再パラメータ調整などの前処理理でエイリアシング除去を行行うのに対しエイリアシング探索索後にリフォーカスの段階でエイリアシングを取り除く

8times8の平行行カメラアレイで検証するカメラ間の 基線長は70mm

今回は基線長が長いデータセットを使った 次はLytroなどのマイクロレンズアレイで検証する

Globally consistent multi-label assignment on the ray space of 4d light fields [S Wanner C Straehle B Goldluecke CVPR2013] Lineassisted light field triangulation and stereo matching [Z Yu X Guo H Lin A Lumsdaine J Yu ICCV 2013]

なかの

Globally Consistent Multi-Label Assignment on the Ray Space of 4D Light Fields5

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

四次元ライトフィールドの光線情報において マルチラベルの領領域分割を行行う

深度度情報光線情報を用いて領領域分割することで 二次元（空間）情報だけでは分割が難しかった 領領域を分割可能とする

The light field camera Extended depth of field aliasing and superresolution [T Bishop P Favaro IEEE Transactions on Pattern Analysis and Machine Intelligence 2012]

なかの

Line Assisted Light Field Triangulation and Stereo Matching6

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

光線情報を利利用してステレオマッチングの精度度を 向上させる手法三角測量量の誤差を減らす

Light Field Stereo Matchingとかいう手法 グラフ構造を作成

Variational light field analysis for disparity estimation and super-resolution [S Wanner and B Goldlumluecke 2013]

なかの

Adaptive stereo similarity fusion using confidence measures 20157

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

ステレオマッチングの新しい方式fusion weightsを提案複数の手法を組み合わせてコスト計算を行行う手法付録に既存手法のコスト関数一覧あり

パラメータに依存する手法を用いないことで高速化を図っている

一つのアルゴリズムでは異異なる特性を持つ領領域全てに対して適切切なマッチングはできない複数を組み合わせることでそれを補う13種と多い

middleburyとKITTIのデータセットで評価

一枚あたり03sと高速だが001sとより高速なアルゴリズムが存在する

Segment-based stereo matching using belief propagation and a self-adapting dissimilarity measure [A Klaus M Sormann K Karner ICPR2006] On building an accurate stereo matching system on graphics hardware [X Mei X Sun M Zhou S Jiao H Wang X Zhang ICCV2011] Similarity measures for depth estimation [K Wegner O Stankiewicz 3DTV-CON2009] On accurate dense stereo-matching using a local adaptive multi-cost approach [C Stentoumis L Grammatikopoulos I Kalisperakis G Karras ISPRS2014] A quantitative evaluation of confidence measures for stereo vision [X Hu P Mordohai PAMI2012]

なかの

SIMILARITY MEASURE FOR DEPTH ESTIMATIOM 20098

どんなもの

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

4種類の視差推定アルゴリズムを組み合わせている 類似度度の選択性の解析

Belief Propagationの枠組みを用いる

名古屋大学の多視点データベースを利利用

HHI Test Material for 3D Video [I Feldmann M Muller F Zilly R Tanger A SmolicP Kauff T Wiegand 2008] Multiview Video Test Sequence and Camera Parameters [Yo-Sung Ho Eun-Kyung Lee and Cheon Lee 2008] 1D Parallel Test Sequences for MPEG-FTV [M Tanimoto T Fujii N Fukushima 2008] Non-parametric Local Transforms for Computing Visual Correspondence [R Zabih J Woodfill 1994]

なかの

Spatiotemporal Stereo via Spatiotemporal Quadric Element (Stequel) Matching9

どんなもの

技術や手法のキモはどこ

新しいマッチング手法を提案動き考慮することなく時間情報を取り込むことができる 時間方向のエピ線を考える

オプティカルフロー推定は3D境界や低テクスチャで弱いが提案手法はロバストである

なかの

Depth Video Enhancement Based on Weighted Mode Filtering10

どんなもの

議論論はある

ノイズを含んだ低解像度度のデプスマップの質を高める手法（超解像度度とデノイズ）時間方向も使用簡単なオプティカルフローを計算し利利用する

非反復復アルゴリズムのためGPUに載せやすく高速化が考えられる

なかの

Fast Bilateral-Space Stereo for Synthetic Defocus11

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

議論論はある

次に読むべき論論文は

高速な自由焦点ぼけ画像の作成

Bilateral-spaceを提案

従来研究よりも10から100倍速くぼけ具合の精度度も良良い

ぼけを作成するというアプリケーションに利利用する距離離という面では提案手法が有益であるが実測的な距離離という面での精度度は悪い背景と前景が同じ色で近くにある場合同一ととらえてしまう

Efficient high-resolution stereo matching using local plane sweeps [S N Sinha D Scharstein and R SzeliskiCVPR2014] Bilateral filtering-based optical flow estimation with occlusion detection [J Xiao H Cheng H Sawhney C Rao and M IsnardiECCV2006] Efficient nonlocal regularization for optical flow [P Krumlahenbumluhl and V KoltunECCV2012] Real-time spatiotemporal stereo matching using the dual-cross-bilateral grid [C Richardt D Orr I Davies A Criminisi and N A DodgsonECCV2010]

どうやって有効性を示した視差推定の精度度はmiddleburyKITTI

なかの

Robust Spatiotemporal Stereo for Dynamic Scenes12

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

ステレオ動画のフレーム間情報を取り入れることでノイズ耐性を向上させるまた動きの大きなものも考える

時間を含めたウインドウの提案自動的にそのような変化に対応する画像領領域を検出する

従来の時空間ステレオと比べ大きな動きによる急激な視差の時間変化に対して頑健である

なかの

Spacetime Stereo A Unifying Framework for Depth from Triangulation13

どんなもの

先行行研究と比べてどこがすごい

space time stereoを提案ステレオカメラの視差推定でも構造光を用いた視差推定でも利利用可能 動的なシーンでの利利用も可能

フレームごとマッチングを取っていたが複数フレームでのマッチングを可能とした

なかの

Learning to Select and Order Vacation Photographs (Disney research)14

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示したあまりにもたくさん撮影した写真たちから自動的にフォトアルバムを作成する研究

複雑な視覚での区別を試みたのはこの論論文が初

５つの異異なるトピックから63の個人的な写真コレクションのデータセットを利利用し定量量的に評価する

写真間の差別かを定義する顔全体の絵何が写っているか写っていないかを評価する

Jointly aligning and segmenting multiple web photo streams for the inference of collective photo storylines [G Kim and E P Xing CVPR2013] Photo sequencing [T Basha Y Moses and S Avidan CVPR2012]

なかの

A Taxonomy and Evaluation of Dense Two-Frame Stereo Correspondence Algorithms15

どんなもの

どうやって有効性を示した

次に読むべき論論文は

ステレオマッチングに関する分類を行行う 新たなデータセットを作成する

というよりも他の手法が有効性を示すことができるようにデータセットを作成した 今ではmiddleburyのデータセットと言えばステレオ業界では超有名

High-resolution stereo datasets with subpixel-accurate ground truth

なかの

Discriminability Limits in Spatio-Temporal Stereo Block Matching1

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

spatio-temporal disparity estimationの根本的な前提の正当性を解析しマッチング処理理の際に動きが助けとなる程度度を決定する

時空間マッチングのエラーを分析し誤りの原因を確率率率で導出する（フレーム数動きの分散画像特徴ノイズの関数）

[34243334]は時空間マッチングの利利点を指摘していたが本論論文はマッチング精度度の向上のために動きを用いる手法の程度度や性質を研究する

6つのステレオビデオを用いて検証を行行った

Spacetime stereo Shape recovery for dynamic scenes [L Zhang B Curless and S Seitz CVPR2003] Spatiotemporal stereo and scene flow via stequel matching [M Sizintsev and R Wildes PAMI2012] Temporally consistent disparity and optical flow via efficient spatio-temporal filtering [A Hosni C Rhemann M Bleyer and M Gelautz PRCAIVT2012] Spacetime stereo A unifying framework for depth from triangulation [PAMI2005] Dynamic depth recovery from multiple synchronized video streams [H Tao H Sawhney and R Kumar CVPR2001] Spatiotemporal descriptor for wide-baseline stereo reconstruction of non-rigid and ambiguous scenes [ECCV2003]

なかの

Depth-Based Patch Scaling for Content-Aware Stereo Image Completion2

どんなもの

どうやって有効性を示した

ステレオでデプスを取り物体の三次元情報を使ってインペインティングを行行う

bookのデータセット背景が繰り返しパターンが多いものを使っている

なかの

Fast Semi-dense Surface Reconstruction from Stereoscopic Video in Laparoscopic Surgery3

どんなもの

手法の流流れ

次に読むべき論論文は

腹腔内手術の際にステレオビデオから高速に物体の三次元再構成を行行う研究

Evaluation of stereo matching costs on images with radiometric differences [Hirschmueller H Scharstein D PAMI2008]

スコープカメラから画像取得GPUで演算する 視差を算出しフィルタにかける距離離に変換 点群を再びフィルタにかけて三次元再構成

なかの

3D Reconstruction from Accidental Motion4

どんなもの

技術や手法のキモはどこ

議論論はある

数秒のビデオ（単眼）から三次元再構成を行行う 手ぶれなどの動きから再構成が可能で特定の動きや機材を必要としない

短い基線長でも再構成が可能（3mmの基線長）

基線長が短いため背景の精度度が低くなる リフォーカス画像作成には十分 練習では上手く動作したが検証がまだ必要

なかの

Panoramic Video from Unstructured Camera Arrays5

どんなもの

技術や手法のキモはどこ

議論論はある

複数のカメラを用いたパノラマ撮影を行行う その際に不不自然さがないような動画を作成する

不不自然さを感じる感覚特性を提示しそれにのっとって対策を講じている

一つのカメラの解像度度と品質を向上させるよりも複数台のカメラを組み合わせることがはるかに簡単で有益である専門家でなくてもGoProのカメラセットを組み合わせることは容易易

カメラの配置は厳密に決められていない完璧な時間同期やローリングシャッターの不不足のような実撮影での問題もクリアしている

先行行研究と比べてどこがすごい

どうやって有効性を示した左のシステムは14台のカメラを使用 右のシステムはGoProを5台使用

Disney 201558

なかの

Floating Scale Surface Reconstruction6

どんなもの

技術や手法のキモはどこ

流流動的にスケールを変えられる三次元再構成手法

サンプル規模に依存するパラメータがない rarrどのスケールのサンプルにも対応できる

siggraph2014

なかの

A Super Resolution Reconstruction Scheme for Mixed Spatio-Temporal Stereo Video7

どんなもの

技術や手法のキモはどこ

ビデオ超解像アルゴリズム

二台のカメラを使用 一台は低解像度度で高速一台は高解像度度で低速

HHI 3DV ftp siteのBookarrivalとbeergadenを使用どうやって有効性を示した

なかの

What Is a Good Day for Outdoor Photometric Stereo8

どんなもの

先行行研究と比べてどこがすごい

議論論はある

次に読むべき論論文は

屋外における照度度差があるステレオの研究 屋外でステレオを行行う際に有利利or不不利利な日照条件を明らかにする

点光源を用いた研究は行行われていたが屋外での研究はされていなかった

晴れより曇りの方が精度度が良良い雲があるから特徴量量を取りやすい雑音を白色ガウスモデルを想定 季節ごとのデータセットを利利用してみても良良い

Time-lapse photometric stereo and applications [F Shen K Sunkavalli N Bonneel S Rusinkiewicz H Pfisterand X Tong2014] Outdoor photometric stereo [L-F Yu S-K Yeung Y-W Tai D Terzopoulos and T FChan ICCP2013]

どうやって有効性を示した屋外の照明に関するHDR環境マップのデータベースを利利用

Disney 2015424

なかの

COLORBRUSH ANIMATED DIFFUSION FOR INTUITIVE COLORIZATION SIMULATING WATER PAINTING 9

どんなものアニメを水彩画で描いたように変換する 水彩画を描くには経験が必要であるがそれを作成するアルゴリズムを考案絵具が水によりどうにじむかシュミレーションしている

Disney 20141027 ICIP2014

次に読むべき論論文はGabor-space geodesic active contoursrdquo In Algebraic Frames for the Perception-Action Cycle [C Sagiv NA Sochen and YY Zeevi 2000] Practical temporal consistency for image-based graphics applications [M Lang O Wang T Aydin A Smolic and M Gross SIGGRAPH2012] Computer-Generated Watercolor [CJ Curtis SE Anderson JE Seims KW Fleischer and DH Salesin SIGGRAPH1997]

なかの

From Sound to Sight Using Audio Processing to enable Visible Light Communication 10

どんなもの光に情報を載せる技術プロジェクトページがあって光関係の研究が8個載っている

httpwwwdisneyresearchcomprojectvisible-light-communication

ビデオのURL httpwwwdisneyresearchcomwpcontentuploadsPub_InvisibleLightCommunication_Siggraph14_videomp4

• 201211106_KeisukeKawahara
• 201311421_KeitaKanai_02
• 201313095_AkiraIshii_02
• 201413109_YuukiKubo_02
• 201513110_SatoshiHashizume_02
• 鬼輪講マラソン③_1
• 鬼輪講マラソン③_2

2 201313095

3D

3D

3D

3D14 30 13 67

244

14

3D

bull  MuellerSKruckBBaudischPLaserOrigamiLaser-Cunng3DObjectsProcCHIrsquo132585-2592

faBrickaEonampFastamp3DampPrinEngampofampFuncEonalampObjectsampbyampIntegraEngampConstrucEonampKitampBuildingampBlocksamp(CHIrsquo14)amp

StefanieMuellerTobiasMohrKersEnGuentherJohannesFrohnhofenPatrickBaudisch

h]pswwwyoutubecomwatchv=BlO6YRcLJjE

Touching13 the13 Void13 Direct-shy‐Touch13 Interac4on13 for13 Intangible13 Displays(CHIrsquo10)Li-Wei Chan Hui-Shan Kao Mike Y Chen Ming-Sui Jane Yi-Ping Hung

201413109　久保勇貴 2（鬼コース）13

どんなもの13

空中像へのタッチのエラーに関する調査及び影や音のフィードバックを付与することによるパーフォーマンス向上を示した研究13

先行研究と比べてどこがすごい13

平面画像をタッチする際の奥行きに関するエラーの正確な取得を初めて検証13

技術や手法のキモはどこ13

２つの赤外線カメラを用いた正確なタッチの検出13

どうやって有効だと検証した13

タッチ時の奥行きの正確さに関する被験者実験を実施またタッチする際に影や音を付けた際の反応時間を被験者実験で検証13

議論はある13

ユーザは慣れるまで影や音のフィードバックが必要だがそのあとは必要なくなる13

次に読むべき論文は13

MirageTable13 （CHI12） 13

MirageTable13 Freehand13 Interac4on13 on13 a13 Projected13 13 Augmented13 Reality13 Tabletop(CHIrsquo12)

Hrvoje Benko Ricardo Jota Andrew D Wilson

201413109　久保勇貴 2（鬼コース）13

どんなもの13

テーブル上においてバーチャルな物体をリアルタイムで現実でものを動かすことと同様な動作に操作可能なシステム13

先行研究と比べてどこがすごい13

現実の物体をリアルタイムで画面に取りこむことができ質の高いフリーハンドインタラクションを実現した点13

技術や手法のキモはどこ13

色深度前景頭追跡プロキシパーティクルを駆使したリアルタイムメッシュの作成13

どうやって有効だと検証した13

凹凸など例外な表面に対しての投影した際の画像の質についての評価実験また仮想物体の奥行き知覚に関する実験も行った13

議論はある13

前面のみしかキャプチャしていないため差が生じる握っている場所の再現は未解決な課題である13

次に読むべき論文は13

Hirsch13 et13 al13 201413 (SIGGRAPHrsquo14)13

A13 Compressive13 Light13 Field13 Projec4on13 System13 (SIGGRAPHrsquo14)MaChew13 Hirsch13 Gordon13 Wetzstein13 Ramesh13 Raskar

201413109　久保勇貴 2（鬼コース）13

どんなもの13

通常の3Dディスプレイに比べて解像度輝度コントラストを改善した圧縮ライトフィードディスプレイ13

先行研究と比べてどこがすごい13

多視点立体視を複数でなく１台のプロジェクタを用いて実現した13

技術や手法のキモはどこ13

受動的スクリーンと高速切り替えプロジェクタによる新しい光学設計13

どうやって有効だと検証した13

4つのシーン例を投影したものを示したアニメーションの3D効果について観察を行った13

議論はある13

光路長を広げると観察できる画質が大幅に制限され他のライトフィードビューと混線が生じる13

次に読むべき論文は13

Butler13 et13 al13 201113

Vermeer13 Direct13 Interac4on13 with13 a13 360deg13 Viewable13 3D13 Display(UISTrsquo11) Alex Butler Otmar Hilliges Shahram Izadi Steve Hodges David Molyneaux David Kim

201413109　久保勇貴 2（鬼コース）13

どんなもの13

映し出された3Dオブジェクトとインタラクションを行えるシステム13

先行研究と比べてどこがすごい13

ディスプレイ内の画像とのインタラクションを提案ボリュームディスプレイを支援する新しいセンシング法の提案13

技術や手法のキモはどこ13

パラボラ鏡に取り付けた赤外線カメラセンサによる指先検出13

どうやって有効だと検証した13

アプリケーション例を示した13

議論はある13

パラボラ鏡の大きさよりもディスプレイサイズが小さくなってしまう13

次に読むべき論文は13

Hirsch13 et13 al13 201213

8D13 Interac4ng13 with13 a13 Relightable13 Glasses-shy‐Free13 3D13 Display(CHIrsquo12)Li-Wei Chan Hui-Shan Kao Mike Y Chen Ming-Sui Jane Yi-Ping Hung

201413109　久保勇貴 2（鬼コース）13

どんなもの13

ライトフィードによる入力とライトフィールドによる表示を行うリアルタイム8Dディスプレイ13

先行研究と比べてどこがすごい13

リアルタイムでの8Dディスプレイの実現（先行研究は7fps）13

技術や手法のキモはどこ13

GPUにおけるレンダリング処理13

どうやって有効だと検証した13

MRIデータを用いたディスプレイのデモを示した13

議論はある13

現在はグレースケールの入力のみだがカラーでの入力できればより強力になるだろう13

次に読むべき論文は13

Sahoo13 et13 al13 201513

Control13 of13 Non-shy‐Solid13 Diffusers13 by13 Electrosta4c13 Charging13 (CHIrsquo15) Deepak Ranjan Sahoo Diego Martinez Plasencia Sriram Subramanian

201413109　久保勇貴 2（鬼コース）13

どんなもの13

シャボン玉や霧などの非固体を電場による制御を試みた研究13

先行研究と比べてどこがすごい13

非固体の形や位置の制御法を提案した点13

技術や手法のキモはどこ13

[Intra13 et13 al13 11]中のldquowire-shy‐to-shy‐Cylinderdquoを用いたエアゾール粒子の帯電13

どうやって有効だと検証した13

霧及びシャボン玉によるディスプレイのアプリケーション例で実際に制御して見せた13

議論はある13

風による影響を本手法は打ち消すことができた13

次に読むべき論文は13

Barnum13 et13 al13 201013

A13 Mul4-shy‐Layered13 Display13 with13 Water13 Drops(SIGGRAPHrsquo10)Peter C Barnum Srinivasa G Narasimhan Takeo Kanade

201413109　久保勇貴 2（鬼コース）13

どんなもの13

複数層の落下水滴にプロジェクションマッピングを行いディスプレイとした研究13

先行研究と比べてどこがすごい13

水滴の制御を行うことで単一のプロジェクタによって複数層の映像投影を可能とした点13

技術や手法のキモはどこ13

[Ambravaneswaran13 et13 al13 2002]及び本研究における実験結果に基づく水滴生成13

どうやって有効だと検証した13

複数のディスプレイ例を示した13 例）顔の投影水槽シミュレータなど13

議論はある13

本当の3Dディスプレイにするにはより多くの水滴制御が必要13

次に読むべき論文は13

Lee13 et13 al13 200713

An13 Immaterial13 Depth-shy‐Fused13 3D13 Display(VRSTrsquo07)Cha Lee Stephen DiVerdi Tobias Humlollerer

201413109　久保勇貴 2（鬼コース）13

どんなもの13

２つのスクリーンを駆使し3Dディスプレイを実現するdepth-shy‐fused13 3D(DFD)に関する評価を行いその結果よりディスプレイを提案した研究13

先行研究と比べてどこがすごい13

DFDが任意のスクリーン設定及び見る位置に対して有効であることを示した13

技術や手法のキモはどこ13

６通りのスクリーン組合せから２つを抽出し見え方の違いを検証した点13

どうやって有効だと検証した13

６通りのスクリーンについて立体的に見えるか被験者実験を実施その後それぞれに有意差がみられるか調べた13

議論はある13

ステレオイメージを認めることができなかったユーザに対しても強い3D効果が見られた13

次に読むべき論文は13

Tokuda13 et13 al13 201013

Cloud13 Display13 (ACErsquo10)Yutaka Tokuda Yasuhiro Suzuki Kunihiro Nishimura Tomohiro Tanikawa Michitaka Hirose

201413109　久保勇貴 2（鬼コース）13

どんなもの13

煙の渦輪を用いた空間を埋めるディスプレイ13

先行研究と比べてどこがすごい13

制御可能な手法により高所へのパーティクルを運搬することに着目した点13

技術や手法のキモはどこ13

コンピュータによって制御が行われる空気砲アレイ13

どうやって有効だと検証した13

箱の中で実験を行い安定して渦輪をできるようにした実際にデモを行ったことを示した13

議論はある13

今の試作機をより早くリフレッシュ速度を高めることによりより濃く空間を埋められることを目指す13

次に読むべき論文は13

Sato13 et13 al13 200913

Par]cle13 Display13 System　(JVRC09)13 -shy‐13 A13 Large13 Scale13 Display13 for13 Public13 Space13 -shy‐

Munehiko13 Sato13 Yasuhiro13 Suzuki13 13 Atsushi13 Hiyama13 Tomohiro13 Tanikawa13 Michitaka13 Hirose

201413109　久保勇貴 2（鬼コース）13

どんなもの13

パーティクルディスプレイによる公共スペースのための大画面ディスプレイの提案13

先行研究と比べてどこがすごい13

公共スペースにおける要求と制限に基づいたシステムを提案した点13

技術や手法のキモはどこ13

実験に基づく表示画像のスクロール時間の制御13

どうやって有効だと検証した13

Aという文字の知覚実験によって 適な点滅周期の調査を行った13

議論はある13

現在の試作機を組合せより高解像度にする必要がある13

次に読むべき論文は13

Kwon13 et13 al13 201513

FugaciousFilm13 Exploring13 Aen4ve13 Interac4on13 with13 Ephemeral13 Material13 (CHIrsquo15)Hyosun13 Kwon13 Shashank13 Jaiswal13 Steve13 Benford13 Sue13 Ann13 Seah13

13 Peter13 BenneC13 Boriana13 Koleva13 Holger13 Schnaumldelbach

201413109　久保勇貴 2（鬼コース）13

どんなもの13

膜を押す引く飛び出ることができる新しい石鹸膜インタフェースの提案13

先行研究と比べてどこがすごい13

徐々に消えるインタフェースは高い注意を有するインタラクションを提供するという点を示したこと13

技術や手法のキモはどこ13

水グリセリンを201の対比で混ぜることでldquopoprdquoがきれいになるようにしかつ膜の耐久性を向上させた13

どうやって有効だと検証した13

３目並べを用いた被験者実験を実施13 ユーザは膜を割ると負け膜を自分のマスにするにはタッチ押す引くの書かれた通りの操作を行う13

議論はある13

ユーザに精密な動作を要求することはとりわけ注意を払うことを誘発する13

次に読むべき論文は13

Wetzstein13 et13 al13 201213

Tensor13 Displays13 Compressive13 Light13 Field13 Synthesis13 using13 Mul4layer13 Displays13 with13 Direc4onal13 Backligh4ng(SIGGRAPHrsquo12)

Gordon13 Wetzstein13 Douglas13 Lanman13 MaChew13 Hirsch13 Ramesh13 Raskar

201413109　久保勇貴 2（鬼コース）13

どんなもの13

視点によって異なる立体映像を見ることができる複数の層からなるディスプレイ13

先行研究と比べてどこがすごい13

既存の手法を合成したcomputa(onal13 displaysというディスプレイの新しいフレームワークを提案した13

技術や手法のキモはどこ13

時分割で視差マスクを表示することでユーザの視線ごとに立体像を表現する13

どうやって有効だと検証した13

通常のディスプレイ３層LCDLCD及び指向性バックライトの例による比較13 13

議論はある13

波紋を含むこと色チャンネルが悪影響を与える相互反射不均一などの問題が見られた13

次に読むべき論文は13

Matoba13 et13 al13 1213

SplashDisplay(VRICrsquo12)Yasuo Matoba Taro Tokui Ryo Sato Tochiki Sato Hideki Koike

201413109　久保勇貴 2（鬼コース）13

どんなもの13

パーティクルにCGを投射しパーティクルがテーブル上に投げられると爆発しパーティクルが噴きあがる13

先行研究と比べてどこがすごい13

ビーズがミリメートルからメートル単位までZ軸方向について空中で奥行きを表現する13

技術や手法のキモはどこ13

スピーカによって風力が発生させビーズを舞い上げる点13

どうやって有効だと検証した13

ビーズを投げると花火が打ちあがっているかのようなアプリケーション例を示した13

議論はある13

高いレベルの表現及び幅広い入力範囲を提供できた13

次に読むべき論文は13

Kim13 et13 al13 1413

MARIO13 Mid-shy‐air13 Augmented13 Reality13 Interac4on13 with13 Objects13 (ECrsquo14)Hanyuool13 Kim13 13 Issei13 Takahashi13 Hiroki13 Yamamoto13 Satoshi13 Maekawa13 Takeshi13 Naemura

201413109　久保勇貴 2（鬼コース）13

どんなもの13

350times300times250のテーブル上のスペースにおいて自由に動かせる空中像を造りだすことができる13

先行研究と比べてどこがすごい13

凹面鏡や凹レンズのように曲面でないため画像の歪曲が発生しない13

技術や手法のキモはどこ13

Aerial13 Imaging13 Plate(AIP)を用いた空中像の生成及びそのためのディスプレイ移動装置13

どうやって有効だと検証した13

左右からの視差の考慮及び奥行き表現時の画像提示視野角の検証などを行った13 13

議論はある13

投影しているひよこを叩いたり払いのけたりするような動作がデモ中見られた13

次に読むべき論文は13

Tactile Feedback on Flat Surfaces for the Visually Impaired13Ali Israr Olivier Bau Seung-Chan Kim Ivan Poupyrev13

どのようなものか 視覚障害者のための触覚を用いた視覚代用デバイス 先行研究と比べてどこがすごいか 道案内をしてくれる機械などはあるが日用品の場所を教えたり探すのを手伝ってくれるデバイスはない 技術や手法のキモ タッチパネルとカメラを搭載したデバイス 触覚を与える技術はTeslaTouchを利用 色を基準にオブジェクトの位置を認識 有用性の確認 視覚障害者二人に対して実験このデバイスを使

わなくても各自の方法で物を見つけられるが間違えることが多いこのデバイスを使用することで間違えることなく正確に物の位置を特定できた 課題 一つの色でしか判断できない 触感のあるなしでしか情報を伝えられない 関連論文 TeslaTouch [Bau et al 2010]

20150522 橋爪智 2鬼

Fingernail-Mounted Display of Attraction Force and Texture13Masataka Niwa Tomoko Nozaki Taro Maeda and Hideyuki And13

どのようなものか 指先に取り付けて触感と力を両方表現できるデバイス 先行研究と比べてどこがすごいか 触感と引力をそれぞれ表現するデバイスはあるが両方を一つのデバイスで表現した例は少ない 引力は自由な方向に付加することができる 技術や手法のキモ 偏心に重さを付けた円盤を4枚使用する 5-9Hz 引力　100-200Hz 触感 それぞれの円盤の位相や回転数を調整することで

触感と力 を表現する 4つのモータを使いそれぞれの円盤を独立して制御する 有用性の確認 4人の男性に対して実験80以上の精度で認識できた 関連論文 The nail-mounted attraction forcebump display [Nozaki et al 2008]

20150522 橋爪智 2 鬼

Gilded gait reshaping the urban experience with augmented footsteps13Yuichiro Takeuchi13

どのようなものか 靴に装着し地面の触感をコントロールするデバイス 先行研究と比べてどこがすごいか 単独で動作しなかったり特定の環境のみでしか動作しなかったりするrarr靴単体で動作環境に依存しない 技術や手法のキモ 6個の振動パネルを取り付けゲルでカバー app modulesを取り替えることができ様々な機能を付加できる（GPSsound) 4種類の地面を再現

bull  Hard Ground 振動させない bull  Soft Ground すべてのパネルを振動 bull  Bumpy Ground ジグザグに振動 bull  Godzilla 全てのパネルを振動何回か繰り返す 課題 モーターを使っているため波形をプログラミングできないrarr圧電素子を使用する 関連論文 Haptic Shoes [Fu et al 2010]

20150522 橋爪智 2鬼

ExoInterfaces novel exosceleton haptic interfaces for virtual reality augmented sport and rehabilitation

Dzmitry Tsetserukou Katsunari Sato Susumu Tachi13

どのようなものか 腕に装着し物理的なinteractionを可能にするデバイス 先行研究と比べてどこがすごいか Exoskeleton 力を増幅するためだが重たく危険なこともある String-based wireが視界をまたぐ動きに制限がある rarr腕の動きに制限を与えない安全 技術や手法のキモ 「FlexTorque」人間の筋肉の構造を再現するベルトとモーターを使用する肩の近くに装着することで

腕に負担がかかりにくい 触覚feedback弱いトルク 運動を支援強いトルク 課題 物理的な接触を表現するゲームやスポーツにより没頭させるリハビリのサポートをする視覚障害者の支援（ものの場所を教える） 関連論文 FlexTorque [Dzmitry et al 2010]

20150522 橋爪智 2 鬼

Perception of Ultrasonic Haptic Feedback on the Hand Localisation and Apparent Motion13

Graham Wilson Tom Carter Sriram Subramanian Stephen Brewster13

どのようなものか 超音波を用いた触覚フィードバック有効性の検討を行う 先行研究と比べてどこがすごいか 超音波触覚フィードバックは比較的新しく研究や操作方法に関する知識が少ない 腕を自由に動かすことができ小さいものは着用可能 技術や手法のキモ 88のアレイ状に超音波発生器を設置

有効性の確認 bull  局所的な触感 　　　25箇所に分割しそれぞれに超音波を当てる 　　　触感を感じた989 　　　場所の誤差85mm bull  手のひらを動く触感 上下左右に動く 　　　動いてると感じた629

20150522 橋爪智 2 鬼

Friction Measurements on a Large Area TPaD13Nicholas D Marchuk J Edward Colgate Michael A Peshkin13

どのようなものか 超音波の振動により触感を与える 先行研究と比べてどこがすごいか ガラス板を使うので透明後ろにディスプレイを配置可能 技術や手法のキモ 「Squeeze Film Effect（スクイズ膜効果）」 ガラス板に取り付けた圧電素子の円盤に高周波信号

をかける 実験 振動しない部分＝摩擦が発生しない部分が発生周波数により場所が変わる rarr摩擦を大きさをかける力の大きさから計測 rarr指の場所に合わせて複数の周波数を使い分ける 関連論文 T-PaD[Winfield et al 2007]

20150522 橋爪智 2 鬼

STIMTAC a Tactile Input Device with Programmable Friction13Michel Amberg Freacutedeacuteric Giraud Betty Semail Paolo Olivo Geacutery Casiez Nicolas Roussel13

どのようなものか 触感を与えられるタッチデバイス 先行研究と比べてどこがすごいか LATPaD サイズ大きいノイズが大きい TeslaTouch 高い電圧付加が必要GNDに接続しなければいけない

技術や手法のキモ 「Squeeze Film Effect」超音波を用いて振動を与える 圧電性セラミックを電極にコーディング 指トラッキングは力センサを用いる 活用法 マウスキーボード絵を描く 関連論文 LATPaD[Vincent et al 2011] TeslaTouch[Bau et al 2010]

20150522 橋爪智 2 鬼

Surround Haptics Tactile Feedback for Immersive Gaming Experiences Ali Israr Seung-Chan Kim Ivan Poupyrev Jan Stec13

どのようなものか ゲームに合わせて高解像度の触覚フィードバックをユーザーに与える椅子 先行研究と比べてどこがすごいか 荒く配置した安価な振動アクチュエータで高解像度の触覚フィードバックを行える 一点の振動連続した動き範囲の振動などを再現

技術や手法のキモ 仮想的な振動アクチュエータをいくつかの振動アクチュエータを使って作り出す physical-physicalphysical-virtualvirtual-virtual ゲームにHaptics Engineを導入しHaptics APIを用いてHaptic Displayを操作する 関連論文 Exploring Surround Haptics Displays[Israr et al 2010]

20150522 橋爪智 2 鬼

Audio-Haptic Feedback in Mobile Phones Angela Chang Conor OrsquoSullivan13

どのようなものか haptics機能のついてない携帯電話にオーディオ機能を利用した触覚フィードバックを追加する 先行研究と比べてどこがすごいか 簡単に作れてnon-haptic mobile devicesでも大丈夫 技術や手法のキモ 「MultiFunction Transducer(MFT)」 スピーカーから音と信号の両方を出力できる

bull  Haptic Inheritance 　　音を2つの周波数帯に分ける bull  Synthesis and Matching 　　低周波数帯(20-300Hz)を使い触感を伝える 有効性の検討 42人の人を対象に実験を行う83の人が触感を感じた

20150522 橋爪智 2 鬼

Resolution of Sleep Deprivation Problems using ZZZoo Pillows13Shunsuke Yanaka Motoki Ishida13

どのようなものか 近年不眠症の人が多い rarr誰かと接していると安心し睡眠に導入しやすくなる rarrまるで添い寝をしているようなリアルな抱きまくらを使う 技術や手法のキモ breathing sensation 風船を使って人の呼吸を再現肺の形の風船弱く長い呼吸をする

heating お湯を使って人の体温を再現45 有効性の確認 84人の人が実験 呼吸が睡眠を誘ったかrarr61 体温が睡眠を誘ったかrarr85 関連論文 The Impact of Sleep Disorders on Social Life[Komada et al 2007]

20150522 橋爪智 2 鬼

まとめ13超音波 モーター 風

20150522 橋爪智 2 鬼

コイル 電気刺激 Electrovibration

振動 音 お湯

なかの

Temporally Consistent Disparity and Optical Flow via Efficient Spatio-temporal Filtering1

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示した

議論論はあるか

時間的に一定の視差を算出する手法静止画ステレオよりも精度度が良良いことを示す従来よりも推定精度度が良良いオプティカルフローも算出する

一枚の静止画に対するフィルタリング[1]をステレオ動画に拡張している

ケンブリッジのステレオ動画のデータセットを利利用 実写動画に対する比較も行行うノイズ耐性も検証する

フィルタベースとエネルギーベースの関係性を良良り理理解することで推定精度度を上げる

実装が簡単でリアルタイム視差推定が可能

Fast Cost-Volume Filtering for Visual Correspondence and Beyond [Rhemann C Hosni A Bleyer M Rother C Gelautz M CVPR2011] Real-time Spatiotemporal Stereo Matching Using the Dual-Cross-Bilateral Grid [Richardt C Orr D Davies I Criminisi A Dodgson NA ECCV2010] Secrets of optical flow estimation and their principles [Sun D Roth S Black MJ 2010] Motion estimation with non-local total variation regularization [Werlberger M Pock T Bischof H CVPR2010] Temporally Consistent Disparity Maps from Uncalibrated Stereo Videos [Bleyer M Gelatuz M ISPA2011]

なかの

SymStereo Matching using Induced Symmetry (2014)2

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示した

議論論はあるか

画像の対称性を用いてステレオマッチングを行行う 左右の画像を反転させて重ね合わせることで対称性を測る

絵的な類似の代わりに対称性を使う今まで対称性を用いる手法はなく新規性が大きい

三つのSymmetry-baseの手法で精度度を検証従来手法よりも精度度が向上しているMiddlebury Oxford Corridorfountain-P11のデータセット使用

ステレオの問題である不不連続な箇所オクルージョン部分は未解決である演算時間はやや増加

1-Dラインのコストを考える今までは撮像面に対して平行行な平面でデプスを考えていたが垂直な平面を考える

BT[Birchfield and Tomasi 1998] Census transform[Zabih and Woodfill 1994] Log N[Kovesi 1997] radio-metoric differences[Hirschmuller Scharstein 2009]

なかの

Camouflaging an Object from Many Viewpoints3

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

多くの視点から三次元の物体をカモフラージュするカモフラージュによってオクルージョン部分の不不連続がどの程度度生じるか他の視点ではどれほどになるかの検証

MRF（Markov Random Fields）ベース

新しい三次元物体のカモフラージュモデルを構築 37種類のデータセットを作る

箱形の物体に対してカモフラージュ処理理を施し 結果を評価する

オクルージョン不不連続テクスチャの歪みが問題 照明や画像の貼りつけに制限あり

なかの

Aliasing Detection and Reduction in Plenoptic Imaging4

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

カメラアレイ撮影の角度度のエイリアシングを除去するエイリアシングの探索索と打ち消しを行行う

周波数領領域ではなく空間領領域で探索索を行行う

先行行研究がフィルタデモザイキング再パラメータ調整などの前処理理でエイリアシング除去を行行うのに対しエイリアシング探索索後にリフォーカスの段階でエイリアシングを取り除く

8times8の平行行カメラアレイで検証するカメラ間の 基線長は70mm

今回は基線長が長いデータセットを使った 次はLytroなどのマイクロレンズアレイで検証する

Globally consistent multi-label assignment on the ray space of 4d light fields [S Wanner C Straehle B Goldluecke CVPR2013] Lineassisted light field triangulation and stereo matching [Z Yu X Guo H Lin A Lumsdaine J Yu ICCV 2013]

なかの

Globally Consistent Multi-Label Assignment on the Ray Space of 4D Light Fields5

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

四次元ライトフィールドの光線情報において マルチラベルの領領域分割を行行う

深度度情報光線情報を用いて領領域分割することで 二次元（空間）情報だけでは分割が難しかった 領領域を分割可能とする

The light field camera Extended depth of field aliasing and superresolution [T Bishop P Favaro IEEE Transactions on Pattern Analysis and Machine Intelligence 2012]

なかの

Line Assisted Light Field Triangulation and Stereo Matching6

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

光線情報を利利用してステレオマッチングの精度度を 向上させる手法三角測量量の誤差を減らす

Light Field Stereo Matchingとかいう手法 グラフ構造を作成

Variational light field analysis for disparity estimation and super-resolution [S Wanner and B Goldlumluecke 2013]

なかの

Adaptive stereo similarity fusion using confidence measures 20157

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

ステレオマッチングの新しい方式fusion weightsを提案複数の手法を組み合わせてコスト計算を行行う手法付録に既存手法のコスト関数一覧あり

パラメータに依存する手法を用いないことで高速化を図っている

一つのアルゴリズムでは異異なる特性を持つ領領域全てに対して適切切なマッチングはできない複数を組み合わせることでそれを補う13種と多い

middleburyとKITTIのデータセットで評価

一枚あたり03sと高速だが001sとより高速なアルゴリズムが存在する

Segment-based stereo matching using belief propagation and a self-adapting dissimilarity measure [A Klaus M Sormann K Karner ICPR2006] On building an accurate stereo matching system on graphics hardware [X Mei X Sun M Zhou S Jiao H Wang X Zhang ICCV2011] Similarity measures for depth estimation [K Wegner O Stankiewicz 3DTV-CON2009] On accurate dense stereo-matching using a local adaptive multi-cost approach [C Stentoumis L Grammatikopoulos I Kalisperakis G Karras ISPRS2014] A quantitative evaluation of confidence measures for stereo vision [X Hu P Mordohai PAMI2012]

なかの

SIMILARITY MEASURE FOR DEPTH ESTIMATIOM 20098

どんなもの

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

4種類の視差推定アルゴリズムを組み合わせている 類似度度の選択性の解析

Belief Propagationの枠組みを用いる

名古屋大学の多視点データベースを利利用

HHI Test Material for 3D Video [I Feldmann M Muller F Zilly R Tanger A SmolicP Kauff T Wiegand 2008] Multiview Video Test Sequence and Camera Parameters [Yo-Sung Ho Eun-Kyung Lee and Cheon Lee 2008] 1D Parallel Test Sequences for MPEG-FTV [M Tanimoto T Fujii N Fukushima 2008] Non-parametric Local Transforms for Computing Visual Correspondence [R Zabih J Woodfill 1994]

なかの

Spatiotemporal Stereo via Spatiotemporal Quadric Element (Stequel) Matching9

どんなもの

技術や手法のキモはどこ

新しいマッチング手法を提案動き考慮することなく時間情報を取り込むことができる 時間方向のエピ線を考える

オプティカルフロー推定は3D境界や低テクスチャで弱いが提案手法はロバストである

なかの

Depth Video Enhancement Based on Weighted Mode Filtering10

どんなもの

議論論はある

ノイズを含んだ低解像度度のデプスマップの質を高める手法（超解像度度とデノイズ）時間方向も使用簡単なオプティカルフローを計算し利利用する

非反復復アルゴリズムのためGPUに載せやすく高速化が考えられる

なかの

Fast Bilateral-Space Stereo for Synthetic Defocus11

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

議論論はある

次に読むべき論論文は

高速な自由焦点ぼけ画像の作成

Bilateral-spaceを提案

従来研究よりも10から100倍速くぼけ具合の精度度も良良い

ぼけを作成するというアプリケーションに利利用する距離離という面では提案手法が有益であるが実測的な距離離という面での精度度は悪い背景と前景が同じ色で近くにある場合同一ととらえてしまう

Efficient high-resolution stereo matching using local plane sweeps [S N Sinha D Scharstein and R SzeliskiCVPR2014] Bilateral filtering-based optical flow estimation with occlusion detection [J Xiao H Cheng H Sawhney C Rao and M IsnardiECCV2006] Efficient nonlocal regularization for optical flow [P Krumlahenbumluhl and V KoltunECCV2012] Real-time spatiotemporal stereo matching using the dual-cross-bilateral grid [C Richardt D Orr I Davies A Criminisi and N A DodgsonECCV2010]

どうやって有効性を示した視差推定の精度度はmiddleburyKITTI

なかの

Robust Spatiotemporal Stereo for Dynamic Scenes12

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

ステレオ動画のフレーム間情報を取り入れることでノイズ耐性を向上させるまた動きの大きなものも考える

時間を含めたウインドウの提案自動的にそのような変化に対応する画像領領域を検出する

従来の時空間ステレオと比べ大きな動きによる急激な視差の時間変化に対して頑健である

なかの

Spacetime Stereo A Unifying Framework for Depth from Triangulation13

どんなもの

先行行研究と比べてどこがすごい

space time stereoを提案ステレオカメラの視差推定でも構造光を用いた視差推定でも利利用可能 動的なシーンでの利利用も可能

フレームごとマッチングを取っていたが複数フレームでのマッチングを可能とした

なかの

Learning to Select and Order Vacation Photographs (Disney research)14

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示したあまりにもたくさん撮影した写真たちから自動的にフォトアルバムを作成する研究

複雑な視覚での区別を試みたのはこの論論文が初

５つの異異なるトピックから63の個人的な写真コレクションのデータセットを利利用し定量量的に評価する

写真間の差別かを定義する顔全体の絵何が写っているか写っていないかを評価する

Jointly aligning and segmenting multiple web photo streams for the inference of collective photo storylines [G Kim and E P Xing CVPR2013] Photo sequencing [T Basha Y Moses and S Avidan CVPR2012]

なかの

A Taxonomy and Evaluation of Dense Two-Frame Stereo Correspondence Algorithms15

どんなもの

どうやって有効性を示した

次に読むべき論論文は

ステレオマッチングに関する分類を行行う 新たなデータセットを作成する

というよりも他の手法が有効性を示すことができるようにデータセットを作成した 今ではmiddleburyのデータセットと言えばステレオ業界では超有名

High-resolution stereo datasets with subpixel-accurate ground truth

なかの

Discriminability Limits in Spatio-Temporal Stereo Block Matching1

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

spatio-temporal disparity estimationの根本的な前提の正当性を解析しマッチング処理理の際に動きが助けとなる程度度を決定する

時空間マッチングのエラーを分析し誤りの原因を確率率率で導出する（フレーム数動きの分散画像特徴ノイズの関数）

[34243334]は時空間マッチングの利利点を指摘していたが本論論文はマッチング精度度の向上のために動きを用いる手法の程度度や性質を研究する

6つのステレオビデオを用いて検証を行行った

Spacetime stereo Shape recovery for dynamic scenes [L Zhang B Curless and S Seitz CVPR2003] Spatiotemporal stereo and scene flow via stequel matching [M Sizintsev and R Wildes PAMI2012] Temporally consistent disparity and optical flow via efficient spatio-temporal filtering [A Hosni C Rhemann M Bleyer and M Gelautz PRCAIVT2012] Spacetime stereo A unifying framework for depth from triangulation [PAMI2005] Dynamic depth recovery from multiple synchronized video streams [H Tao H Sawhney and R Kumar CVPR2001] Spatiotemporal descriptor for wide-baseline stereo reconstruction of non-rigid and ambiguous scenes [ECCV2003]

なかの

Depth-Based Patch Scaling for Content-Aware Stereo Image Completion2

どんなもの

どうやって有効性を示した

ステレオでデプスを取り物体の三次元情報を使ってインペインティングを行行う

bookのデータセット背景が繰り返しパターンが多いものを使っている

なかの

Fast Semi-dense Surface Reconstruction from Stereoscopic Video in Laparoscopic Surgery3

どんなもの

手法の流流れ

次に読むべき論論文は

腹腔内手術の際にステレオビデオから高速に物体の三次元再構成を行行う研究

Evaluation of stereo matching costs on images with radiometric differences [Hirschmueller H Scharstein D PAMI2008]

スコープカメラから画像取得GPUで演算する 視差を算出しフィルタにかける距離離に変換 点群を再びフィルタにかけて三次元再構成

なかの

3D Reconstruction from Accidental Motion4

どんなもの

技術や手法のキモはどこ

議論論はある

数秒のビデオ（単眼）から三次元再構成を行行う 手ぶれなどの動きから再構成が可能で特定の動きや機材を必要としない

短い基線長でも再構成が可能（3mmの基線長）

基線長が短いため背景の精度度が低くなる リフォーカス画像作成には十分 練習では上手く動作したが検証がまだ必要

なかの

Panoramic Video from Unstructured Camera Arrays5

どんなもの

技術や手法のキモはどこ

議論論はある

複数のカメラを用いたパノラマ撮影を行行う その際に不不自然さがないような動画を作成する

不不自然さを感じる感覚特性を提示しそれにのっとって対策を講じている

一つのカメラの解像度度と品質を向上させるよりも複数台のカメラを組み合わせることがはるかに簡単で有益である専門家でなくてもGoProのカメラセットを組み合わせることは容易易

カメラの配置は厳密に決められていない完璧な時間同期やローリングシャッターの不不足のような実撮影での問題もクリアしている

先行行研究と比べてどこがすごい

どうやって有効性を示した左のシステムは14台のカメラを使用 右のシステムはGoProを5台使用

Disney 201558

なかの

Floating Scale Surface Reconstruction6

どんなもの

技術や手法のキモはどこ

流流動的にスケールを変えられる三次元再構成手法

サンプル規模に依存するパラメータがない rarrどのスケールのサンプルにも対応できる

siggraph2014

なかの

A Super Resolution Reconstruction Scheme for Mixed Spatio-Temporal Stereo Video7

どんなもの

技術や手法のキモはどこ

ビデオ超解像アルゴリズム

二台のカメラを使用 一台は低解像度度で高速一台は高解像度度で低速

HHI 3DV ftp siteのBookarrivalとbeergadenを使用どうやって有効性を示した

なかの

What Is a Good Day for Outdoor Photometric Stereo8

どんなもの

先行行研究と比べてどこがすごい

議論論はある

次に読むべき論論文は

屋外における照度度差があるステレオの研究 屋外でステレオを行行う際に有利利or不不利利な日照条件を明らかにする

点光源を用いた研究は行行われていたが屋外での研究はされていなかった

晴れより曇りの方が精度度が良良い雲があるから特徴量量を取りやすい雑音を白色ガウスモデルを想定 季節ごとのデータセットを利利用してみても良良い

Time-lapse photometric stereo and applications [F Shen K Sunkavalli N Bonneel S Rusinkiewicz H Pfisterand X Tong2014] Outdoor photometric stereo [L-F Yu S-K Yeung Y-W Tai D Terzopoulos and T FChan ICCP2013]

どうやって有効性を示した屋外の照明に関するHDR環境マップのデータベースを利利用

Disney 2015424

なかの

COLORBRUSH ANIMATED DIFFUSION FOR INTUITIVE COLORIZATION SIMULATING WATER PAINTING 9

どんなものアニメを水彩画で描いたように変換する 水彩画を描くには経験が必要であるがそれを作成するアルゴリズムを考案絵具が水によりどうにじむかシュミレーションしている

Disney 20141027 ICIP2014

次に読むべき論論文はGabor-space geodesic active contoursrdquo In Algebraic Frames for the Perception-Action Cycle [C Sagiv NA Sochen and YY Zeevi 2000] Practical temporal consistency for image-based graphics applications [M Lang O Wang T Aydin A Smolic and M Gross SIGGRAPH2012] Computer-Generated Watercolor [CJ Curtis SE Anderson JE Seims KW Fleischer and DH Salesin SIGGRAPH1997]

なかの

From Sound to Sight Using Audio Processing to enable Visible Light Communication 10

どんなもの光に情報を載せる技術プロジェクトページがあって光関係の研究が8個載っている

httpwwwdisneyresearchcomprojectvisible-light-communication

ビデオのURL httpwwwdisneyresearchcomwpcontentuploadsPub_InvisibleLightCommunication_Siggraph14_videomp4

• 201211106_KeisukeKawahara
• 201311421_KeitaKanai_02
• 201313095_AkiraIshii_02
• 201413109_YuukiKubo_02
• 201513110_SatoshiHashizume_02
• 鬼輪講マラソン③_1
• 鬼輪講マラソン③_2

Touching13 the13 Void13 Direct-shy‐Touch13 Interac4on13 for13 Intangible13 Displays(CHIrsquo10)Li-Wei Chan Hui-Shan Kao Mike Y Chen Ming-Sui Jane Yi-Ping Hung

201413109　久保勇貴 2（鬼コース）13

どんなもの13

空中像へのタッチのエラーに関する調査及び影や音のフィードバックを付与することによるパーフォーマンス向上を示した研究13

先行研究と比べてどこがすごい13

平面画像をタッチする際の奥行きに関するエラーの正確な取得を初めて検証13

技術や手法のキモはどこ13

２つの赤外線カメラを用いた正確なタッチの検出13

どうやって有効だと検証した13

タッチ時の奥行きの正確さに関する被験者実験を実施またタッチする際に影や音を付けた際の反応時間を被験者実験で検証13

議論はある13

ユーザは慣れるまで影や音のフィードバックが必要だがそのあとは必要なくなる13

次に読むべき論文は13

MirageTable13 （CHI12） 13

MirageTable13 Freehand13 Interac4on13 on13 a13 Projected13 13 Augmented13 Reality13 Tabletop(CHIrsquo12)

Hrvoje Benko Ricardo Jota Andrew D Wilson

201413109　久保勇貴 2（鬼コース）13

どんなもの13

テーブル上においてバーチャルな物体をリアルタイムで現実でものを動かすことと同様な動作に操作可能なシステム13

先行研究と比べてどこがすごい13

現実の物体をリアルタイムで画面に取りこむことができ質の高いフリーハンドインタラクションを実現した点13

技術や手法のキモはどこ13

色深度前景頭追跡プロキシパーティクルを駆使したリアルタイムメッシュの作成13

どうやって有効だと検証した13

凹凸など例外な表面に対しての投影した際の画像の質についての評価実験また仮想物体の奥行き知覚に関する実験も行った13

議論はある13

前面のみしかキャプチャしていないため差が生じる握っている場所の再現は未解決な課題である13

次に読むべき論文は13

Hirsch13 et13 al13 201413 (SIGGRAPHrsquo14)13

A13 Compressive13 Light13 Field13 Projec4on13 System13 (SIGGRAPHrsquo14)MaChew13 Hirsch13 Gordon13 Wetzstein13 Ramesh13 Raskar

201413109　久保勇貴 2（鬼コース）13

どんなもの13

通常の3Dディスプレイに比べて解像度輝度コントラストを改善した圧縮ライトフィードディスプレイ13

先行研究と比べてどこがすごい13

多視点立体視を複数でなく１台のプロジェクタを用いて実現した13

技術や手法のキモはどこ13

受動的スクリーンと高速切り替えプロジェクタによる新しい光学設計13

どうやって有効だと検証した13

4つのシーン例を投影したものを示したアニメーションの3D効果について観察を行った13

議論はある13

光路長を広げると観察できる画質が大幅に制限され他のライトフィードビューと混線が生じる13

次に読むべき論文は13

Butler13 et13 al13 201113

Vermeer13 Direct13 Interac4on13 with13 a13 360deg13 Viewable13 3D13 Display(UISTrsquo11) Alex Butler Otmar Hilliges Shahram Izadi Steve Hodges David Molyneaux David Kim

201413109　久保勇貴 2（鬼コース）13

どんなもの13

映し出された3Dオブジェクトとインタラクションを行えるシステム13

先行研究と比べてどこがすごい13

ディスプレイ内の画像とのインタラクションを提案ボリュームディスプレイを支援する新しいセンシング法の提案13

技術や手法のキモはどこ13

パラボラ鏡に取り付けた赤外線カメラセンサによる指先検出13

どうやって有効だと検証した13

アプリケーション例を示した13

議論はある13

パラボラ鏡の大きさよりもディスプレイサイズが小さくなってしまう13

次に読むべき論文は13

Hirsch13 et13 al13 201213

8D13 Interac4ng13 with13 a13 Relightable13 Glasses-shy‐Free13 3D13 Display(CHIrsquo12)Li-Wei Chan Hui-Shan Kao Mike Y Chen Ming-Sui Jane Yi-Ping Hung

201413109　久保勇貴 2（鬼コース）13

どんなもの13

ライトフィードによる入力とライトフィールドによる表示を行うリアルタイム8Dディスプレイ13

先行研究と比べてどこがすごい13

リアルタイムでの8Dディスプレイの実現（先行研究は7fps）13

技術や手法のキモはどこ13

GPUにおけるレンダリング処理13

どうやって有効だと検証した13

MRIデータを用いたディスプレイのデモを示した13

議論はある13

現在はグレースケールの入力のみだがカラーでの入力できればより強力になるだろう13

次に読むべき論文は13

Sahoo13 et13 al13 201513

Control13 of13 Non-shy‐Solid13 Diffusers13 by13 Electrosta4c13 Charging13 (CHIrsquo15) Deepak Ranjan Sahoo Diego Martinez Plasencia Sriram Subramanian

201413109　久保勇貴 2（鬼コース）13

どんなもの13

シャボン玉や霧などの非固体を電場による制御を試みた研究13

先行研究と比べてどこがすごい13

非固体の形や位置の制御法を提案した点13

技術や手法のキモはどこ13

[Intra13 et13 al13 11]中のldquowire-shy‐to-shy‐Cylinderdquoを用いたエアゾール粒子の帯電13

どうやって有効だと検証した13

霧及びシャボン玉によるディスプレイのアプリケーション例で実際に制御して見せた13

議論はある13

風による影響を本手法は打ち消すことができた13

次に読むべき論文は13

Barnum13 et13 al13 201013

A13 Mul4-shy‐Layered13 Display13 with13 Water13 Drops(SIGGRAPHrsquo10)Peter C Barnum Srinivasa G Narasimhan Takeo Kanade

201413109　久保勇貴 2（鬼コース）13

どんなもの13

複数層の落下水滴にプロジェクションマッピングを行いディスプレイとした研究13

先行研究と比べてどこがすごい13

水滴の制御を行うことで単一のプロジェクタによって複数層の映像投影を可能とした点13

技術や手法のキモはどこ13

[Ambravaneswaran13 et13 al13 2002]及び本研究における実験結果に基づく水滴生成13

どうやって有効だと検証した13

複数のディスプレイ例を示した13 例）顔の投影水槽シミュレータなど13

議論はある13

本当の3Dディスプレイにするにはより多くの水滴制御が必要13

次に読むべき論文は13

Lee13 et13 al13 200713

An13 Immaterial13 Depth-shy‐Fused13 3D13 Display(VRSTrsquo07)Cha Lee Stephen DiVerdi Tobias Humlollerer

201413109　久保勇貴 2（鬼コース）13

どんなもの13

２つのスクリーンを駆使し3Dディスプレイを実現するdepth-shy‐fused13 3D(DFD)に関する評価を行いその結果よりディスプレイを提案した研究13

先行研究と比べてどこがすごい13

DFDが任意のスクリーン設定及び見る位置に対して有効であることを示した13

技術や手法のキモはどこ13

６通りのスクリーン組合せから２つを抽出し見え方の違いを検証した点13

どうやって有効だと検証した13

６通りのスクリーンについて立体的に見えるか被験者実験を実施その後それぞれに有意差がみられるか調べた13

議論はある13

ステレオイメージを認めることができなかったユーザに対しても強い3D効果が見られた13

次に読むべき論文は13

Tokuda13 et13 al13 201013

Cloud13 Display13 (ACErsquo10)Yutaka Tokuda Yasuhiro Suzuki Kunihiro Nishimura Tomohiro Tanikawa Michitaka Hirose

201413109　久保勇貴 2（鬼コース）13

どんなもの13

煙の渦輪を用いた空間を埋めるディスプレイ13

先行研究と比べてどこがすごい13

制御可能な手法により高所へのパーティクルを運搬することに着目した点13

技術や手法のキモはどこ13

コンピュータによって制御が行われる空気砲アレイ13

どうやって有効だと検証した13

箱の中で実験を行い安定して渦輪をできるようにした実際にデモを行ったことを示した13

議論はある13

今の試作機をより早くリフレッシュ速度を高めることによりより濃く空間を埋められることを目指す13

次に読むべき論文は13

Sato13 et13 al13 200913

Par]cle13 Display13 System　(JVRC09)13 -shy‐13 A13 Large13 Scale13 Display13 for13 Public13 Space13 -shy‐

Munehiko13 Sato13 Yasuhiro13 Suzuki13 13 Atsushi13 Hiyama13 Tomohiro13 Tanikawa13 Michitaka13 Hirose

201413109　久保勇貴 2（鬼コース）13

どんなもの13

パーティクルディスプレイによる公共スペースのための大画面ディスプレイの提案13

先行研究と比べてどこがすごい13

公共スペースにおける要求と制限に基づいたシステムを提案した点13

技術や手法のキモはどこ13

実験に基づく表示画像のスクロール時間の制御13

どうやって有効だと検証した13

Aという文字の知覚実験によって 適な点滅周期の調査を行った13

議論はある13

現在の試作機を組合せより高解像度にする必要がある13

次に読むべき論文は13

Kwon13 et13 al13 201513

FugaciousFilm13 Exploring13 Aen4ve13 Interac4on13 with13 Ephemeral13 Material13 (CHIrsquo15)Hyosun13 Kwon13 Shashank13 Jaiswal13 Steve13 Benford13 Sue13 Ann13 Seah13

13 Peter13 BenneC13 Boriana13 Koleva13 Holger13 Schnaumldelbach

201413109　久保勇貴 2（鬼コース）13

どんなもの13

膜を押す引く飛び出ることができる新しい石鹸膜インタフェースの提案13

先行研究と比べてどこがすごい13

徐々に消えるインタフェースは高い注意を有するインタラクションを提供するという点を示したこと13

技術や手法のキモはどこ13

水グリセリンを201の対比で混ぜることでldquopoprdquoがきれいになるようにしかつ膜の耐久性を向上させた13

どうやって有効だと検証した13

３目並べを用いた被験者実験を実施13 ユーザは膜を割ると負け膜を自分のマスにするにはタッチ押す引くの書かれた通りの操作を行う13

議論はある13

ユーザに精密な動作を要求することはとりわけ注意を払うことを誘発する13

次に読むべき論文は13

Wetzstein13 et13 al13 201213

Tensor13 Displays13 Compressive13 Light13 Field13 Synthesis13 using13 Mul4layer13 Displays13 with13 Direc4onal13 Backligh4ng(SIGGRAPHrsquo12)

Gordon13 Wetzstein13 Douglas13 Lanman13 MaChew13 Hirsch13 Ramesh13 Raskar

201413109　久保勇貴 2（鬼コース）13

どんなもの13

視点によって異なる立体映像を見ることができる複数の層からなるディスプレイ13

先行研究と比べてどこがすごい13

既存の手法を合成したcomputa(onal13 displaysというディスプレイの新しいフレームワークを提案した13

技術や手法のキモはどこ13

時分割で視差マスクを表示することでユーザの視線ごとに立体像を表現する13

どうやって有効だと検証した13

通常のディスプレイ３層LCDLCD及び指向性バックライトの例による比較13 13

議論はある13

波紋を含むこと色チャンネルが悪影響を与える相互反射不均一などの問題が見られた13

次に読むべき論文は13

Matoba13 et13 al13 1213

SplashDisplay(VRICrsquo12)Yasuo Matoba Taro Tokui Ryo Sato Tochiki Sato Hideki Koike

201413109　久保勇貴 2（鬼コース）13

どんなもの13

パーティクルにCGを投射しパーティクルがテーブル上に投げられると爆発しパーティクルが噴きあがる13

先行研究と比べてどこがすごい13

ビーズがミリメートルからメートル単位までZ軸方向について空中で奥行きを表現する13

技術や手法のキモはどこ13

スピーカによって風力が発生させビーズを舞い上げる点13

どうやって有効だと検証した13

ビーズを投げると花火が打ちあがっているかのようなアプリケーション例を示した13

議論はある13

高いレベルの表現及び幅広い入力範囲を提供できた13

次に読むべき論文は13

Kim13 et13 al13 1413

MARIO13 Mid-shy‐air13 Augmented13 Reality13 Interac4on13 with13 Objects13 (ECrsquo14)Hanyuool13 Kim13 13 Issei13 Takahashi13 Hiroki13 Yamamoto13 Satoshi13 Maekawa13 Takeshi13 Naemura

201413109　久保勇貴 2（鬼コース）13

どんなもの13

350times300times250のテーブル上のスペースにおいて自由に動かせる空中像を造りだすことができる13

先行研究と比べてどこがすごい13

凹面鏡や凹レンズのように曲面でないため画像の歪曲が発生しない13

技術や手法のキモはどこ13

Aerial13 Imaging13 Plate(AIP)を用いた空中像の生成及びそのためのディスプレイ移動装置13

どうやって有効だと検証した13

左右からの視差の考慮及び奥行き表現時の画像提示視野角の検証などを行った13 13

議論はある13

投影しているひよこを叩いたり払いのけたりするような動作がデモ中見られた13

次に読むべき論文は13

Tactile Feedback on Flat Surfaces for the Visually Impaired13Ali Israr Olivier Bau Seung-Chan Kim Ivan Poupyrev13

どのようなものか 視覚障害者のための触覚を用いた視覚代用デバイス 先行研究と比べてどこがすごいか 道案内をしてくれる機械などはあるが日用品の場所を教えたり探すのを手伝ってくれるデバイスはない 技術や手法のキモ タッチパネルとカメラを搭載したデバイス 触覚を与える技術はTeslaTouchを利用 色を基準にオブジェクトの位置を認識 有用性の確認 視覚障害者二人に対して実験このデバイスを使

わなくても各自の方法で物を見つけられるが間違えることが多いこのデバイスを使用することで間違えることなく正確に物の位置を特定できた 課題 一つの色でしか判断できない 触感のあるなしでしか情報を伝えられない 関連論文 TeslaTouch [Bau et al 2010]

20150522 橋爪智 2鬼

Fingernail-Mounted Display of Attraction Force and Texture13Masataka Niwa Tomoko Nozaki Taro Maeda and Hideyuki And13

どのようなものか 指先に取り付けて触感と力を両方表現できるデバイス 先行研究と比べてどこがすごいか 触感と引力をそれぞれ表現するデバイスはあるが両方を一つのデバイスで表現した例は少ない 引力は自由な方向に付加することができる 技術や手法のキモ 偏心に重さを付けた円盤を4枚使用する 5-9Hz 引力　100-200Hz 触感 それぞれの円盤の位相や回転数を調整することで

触感と力 を表現する 4つのモータを使いそれぞれの円盤を独立して制御する 有用性の確認 4人の男性に対して実験80以上の精度で認識できた 関連論文 The nail-mounted attraction forcebump display [Nozaki et al 2008]

20150522 橋爪智 2 鬼

Gilded gait reshaping the urban experience with augmented footsteps13Yuichiro Takeuchi13

どのようなものか 靴に装着し地面の触感をコントロールするデバイス 先行研究と比べてどこがすごいか 単独で動作しなかったり特定の環境のみでしか動作しなかったりするrarr靴単体で動作環境に依存しない 技術や手法のキモ 6個の振動パネルを取り付けゲルでカバー app modulesを取り替えることができ様々な機能を付加できる（GPSsound) 4種類の地面を再現

bull  Hard Ground 振動させない bull  Soft Ground すべてのパネルを振動 bull  Bumpy Ground ジグザグに振動 bull  Godzilla 全てのパネルを振動何回か繰り返す 課題 モーターを使っているため波形をプログラミングできないrarr圧電素子を使用する 関連論文 Haptic Shoes [Fu et al 2010]

20150522 橋爪智 2鬼

ExoInterfaces novel exosceleton haptic interfaces for virtual reality augmented sport and rehabilitation

Dzmitry Tsetserukou Katsunari Sato Susumu Tachi13

どのようなものか 腕に装着し物理的なinteractionを可能にするデバイス 先行研究と比べてどこがすごいか Exoskeleton 力を増幅するためだが重たく危険なこともある String-based wireが視界をまたぐ動きに制限がある rarr腕の動きに制限を与えない安全 技術や手法のキモ 「FlexTorque」人間の筋肉の構造を再現するベルトとモーターを使用する肩の近くに装着することで

腕に負担がかかりにくい 触覚feedback弱いトルク 運動を支援強いトルク 課題 物理的な接触を表現するゲームやスポーツにより没頭させるリハビリのサポートをする視覚障害者の支援（ものの場所を教える） 関連論文 FlexTorque [Dzmitry et al 2010]

20150522 橋爪智 2 鬼

Perception of Ultrasonic Haptic Feedback on the Hand Localisation and Apparent Motion13

Graham Wilson Tom Carter Sriram Subramanian Stephen Brewster13

どのようなものか 超音波を用いた触覚フィードバック有効性の検討を行う 先行研究と比べてどこがすごいか 超音波触覚フィードバックは比較的新しく研究や操作方法に関する知識が少ない 腕を自由に動かすことができ小さいものは着用可能 技術や手法のキモ 88のアレイ状に超音波発生器を設置

有効性の確認 bull  局所的な触感 　　　25箇所に分割しそれぞれに超音波を当てる 　　　触感を感じた989 　　　場所の誤差85mm bull  手のひらを動く触感 上下左右に動く 　　　動いてると感じた629

20150522 橋爪智 2 鬼

Friction Measurements on a Large Area TPaD13Nicholas D Marchuk J Edward Colgate Michael A Peshkin13

どのようなものか 超音波の振動により触感を与える 先行研究と比べてどこがすごいか ガラス板を使うので透明後ろにディスプレイを配置可能 技術や手法のキモ 「Squeeze Film Effect（スクイズ膜効果）」 ガラス板に取り付けた圧電素子の円盤に高周波信号

をかける 実験 振動しない部分＝摩擦が発生しない部分が発生周波数により場所が変わる rarr摩擦を大きさをかける力の大きさから計測 rarr指の場所に合わせて複数の周波数を使い分ける 関連論文 T-PaD[Winfield et al 2007]

20150522 橋爪智 2 鬼

STIMTAC a Tactile Input Device with Programmable Friction13Michel Amberg Freacutedeacuteric Giraud Betty Semail Paolo Olivo Geacutery Casiez Nicolas Roussel13

どのようなものか 触感を与えられるタッチデバイス 先行研究と比べてどこがすごいか LATPaD サイズ大きいノイズが大きい TeslaTouch 高い電圧付加が必要GNDに接続しなければいけない

技術や手法のキモ 「Squeeze Film Effect」超音波を用いて振動を与える 圧電性セラミックを電極にコーディング 指トラッキングは力センサを用いる 活用法 マウスキーボード絵を描く 関連論文 LATPaD[Vincent et al 2011] TeslaTouch[Bau et al 2010]

20150522 橋爪智 2 鬼

Surround Haptics Tactile Feedback for Immersive Gaming Experiences Ali Israr Seung-Chan Kim Ivan Poupyrev Jan Stec13

どのようなものか ゲームに合わせて高解像度の触覚フィードバックをユーザーに与える椅子 先行研究と比べてどこがすごいか 荒く配置した安価な振動アクチュエータで高解像度の触覚フィードバックを行える 一点の振動連続した動き範囲の振動などを再現

技術や手法のキモ 仮想的な振動アクチュエータをいくつかの振動アクチュエータを使って作り出す physical-physicalphysical-virtualvirtual-virtual ゲームにHaptics Engineを導入しHaptics APIを用いてHaptic Displayを操作する 関連論文 Exploring Surround Haptics Displays[Israr et al 2010]

20150522 橋爪智 2 鬼

Audio-Haptic Feedback in Mobile Phones Angela Chang Conor OrsquoSullivan13

どのようなものか haptics機能のついてない携帯電話にオーディオ機能を利用した触覚フィードバックを追加する 先行研究と比べてどこがすごいか 簡単に作れてnon-haptic mobile devicesでも大丈夫 技術や手法のキモ 「MultiFunction Transducer(MFT)」 スピーカーから音と信号の両方を出力できる

bull  Haptic Inheritance 　　音を2つの周波数帯に分ける bull  Synthesis and Matching 　　低周波数帯(20-300Hz)を使い触感を伝える 有効性の検討 42人の人を対象に実験を行う83の人が触感を感じた

20150522 橋爪智 2 鬼

Resolution of Sleep Deprivation Problems using ZZZoo Pillows13Shunsuke Yanaka Motoki Ishida13

どのようなものか 近年不眠症の人が多い rarr誰かと接していると安心し睡眠に導入しやすくなる rarrまるで添い寝をしているようなリアルな抱きまくらを使う 技術や手法のキモ breathing sensation 風船を使って人の呼吸を再現肺の形の風船弱く長い呼吸をする

heating お湯を使って人の体温を再現45 有効性の確認 84人の人が実験 呼吸が睡眠を誘ったかrarr61 体温が睡眠を誘ったかrarr85 関連論文 The Impact of Sleep Disorders on Social Life[Komada et al 2007]

20150522 橋爪智 2 鬼

まとめ13超音波 モーター 風

20150522 橋爪智 2 鬼

コイル 電気刺激 Electrovibration

振動 音 お湯

なかの

Temporally Consistent Disparity and Optical Flow via Efficient Spatio-temporal Filtering1

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示した

議論論はあるか

時間的に一定の視差を算出する手法静止画ステレオよりも精度度が良良いことを示す従来よりも推定精度度が良良いオプティカルフローも算出する

一枚の静止画に対するフィルタリング[1]をステレオ動画に拡張している

ケンブリッジのステレオ動画のデータセットを利利用 実写動画に対する比較も行行うノイズ耐性も検証する

フィルタベースとエネルギーベースの関係性を良良り理理解することで推定精度度を上げる

実装が簡単でリアルタイム視差推定が可能

Fast Cost-Volume Filtering for Visual Correspondence and Beyond [Rhemann C Hosni A Bleyer M Rother C Gelautz M CVPR2011] Real-time Spatiotemporal Stereo Matching Using the Dual-Cross-Bilateral Grid [Richardt C Orr D Davies I Criminisi A Dodgson NA ECCV2010] Secrets of optical flow estimation and their principles [Sun D Roth S Black MJ 2010] Motion estimation with non-local total variation regularization [Werlberger M Pock T Bischof H CVPR2010] Temporally Consistent Disparity Maps from Uncalibrated Stereo Videos [Bleyer M Gelatuz M ISPA2011]

なかの

SymStereo Matching using Induced Symmetry (2014)2

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示した

議論論はあるか

画像の対称性を用いてステレオマッチングを行行う 左右の画像を反転させて重ね合わせることで対称性を測る

絵的な類似の代わりに対称性を使う今まで対称性を用いる手法はなく新規性が大きい

三つのSymmetry-baseの手法で精度度を検証従来手法よりも精度度が向上しているMiddlebury Oxford Corridorfountain-P11のデータセット使用

ステレオの問題である不不連続な箇所オクルージョン部分は未解決である演算時間はやや増加

1-Dラインのコストを考える今までは撮像面に対して平行行な平面でデプスを考えていたが垂直な平面を考える

BT[Birchfield and Tomasi 1998] Census transform[Zabih and Woodfill 1994] Log N[Kovesi 1997] radio-metoric differences[Hirschmuller Scharstein 2009]

なかの

Camouflaging an Object from Many Viewpoints3

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

多くの視点から三次元の物体をカモフラージュするカモフラージュによってオクルージョン部分の不不連続がどの程度度生じるか他の視点ではどれほどになるかの検証

MRF（Markov Random Fields）ベース

新しい三次元物体のカモフラージュモデルを構築 37種類のデータセットを作る

箱形の物体に対してカモフラージュ処理理を施し 結果を評価する

オクルージョン不不連続テクスチャの歪みが問題 照明や画像の貼りつけに制限あり

なかの

Aliasing Detection and Reduction in Plenoptic Imaging4

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

カメラアレイ撮影の角度度のエイリアシングを除去するエイリアシングの探索索と打ち消しを行行う

周波数領領域ではなく空間領領域で探索索を行行う

先行行研究がフィルタデモザイキング再パラメータ調整などの前処理理でエイリアシング除去を行行うのに対しエイリアシング探索索後にリフォーカスの段階でエイリアシングを取り除く

8times8の平行行カメラアレイで検証するカメラ間の 基線長は70mm

今回は基線長が長いデータセットを使った 次はLytroなどのマイクロレンズアレイで検証する

Globally consistent multi-label assignment on the ray space of 4d light fields [S Wanner C Straehle B Goldluecke CVPR2013] Lineassisted light field triangulation and stereo matching [Z Yu X Guo H Lin A Lumsdaine J Yu ICCV 2013]

なかの

Globally Consistent Multi-Label Assignment on the Ray Space of 4D Light Fields5

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

四次元ライトフィールドの光線情報において マルチラベルの領領域分割を行行う

深度度情報光線情報を用いて領領域分割することで 二次元（空間）情報だけでは分割が難しかった 領領域を分割可能とする

The light field camera Extended depth of field aliasing and superresolution [T Bishop P Favaro IEEE Transactions on Pattern Analysis and Machine Intelligence 2012]

なかの

Line Assisted Light Field Triangulation and Stereo Matching6

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

光線情報を利利用してステレオマッチングの精度度を 向上させる手法三角測量量の誤差を減らす

Light Field Stereo Matchingとかいう手法 グラフ構造を作成

Variational light field analysis for disparity estimation and super-resolution [S Wanner and B Goldlumluecke 2013]

なかの

Adaptive stereo similarity fusion using confidence measures 20157

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

ステレオマッチングの新しい方式fusion weightsを提案複数の手法を組み合わせてコスト計算を行行う手法付録に既存手法のコスト関数一覧あり

パラメータに依存する手法を用いないことで高速化を図っている

一つのアルゴリズムでは異異なる特性を持つ領領域全てに対して適切切なマッチングはできない複数を組み合わせることでそれを補う13種と多い

middleburyとKITTIのデータセットで評価

一枚あたり03sと高速だが001sとより高速なアルゴリズムが存在する

Segment-based stereo matching using belief propagation and a self-adapting dissimilarity measure [A Klaus M Sormann K Karner ICPR2006] On building an accurate stereo matching system on graphics hardware [X Mei X Sun M Zhou S Jiao H Wang X Zhang ICCV2011] Similarity measures for depth estimation [K Wegner O Stankiewicz 3DTV-CON2009] On accurate dense stereo-matching using a local adaptive multi-cost approach [C Stentoumis L Grammatikopoulos I Kalisperakis G Karras ISPRS2014] A quantitative evaluation of confidence measures for stereo vision [X Hu P Mordohai PAMI2012]

なかの

SIMILARITY MEASURE FOR DEPTH ESTIMATIOM 20098

どんなもの

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

4種類の視差推定アルゴリズムを組み合わせている 類似度度の選択性の解析

Belief Propagationの枠組みを用いる

名古屋大学の多視点データベースを利利用

HHI Test Material for 3D Video [I Feldmann M Muller F Zilly R Tanger A SmolicP Kauff T Wiegand 2008] Multiview Video Test Sequence and Camera Parameters [Yo-Sung Ho Eun-Kyung Lee and Cheon Lee 2008] 1D Parallel Test Sequences for MPEG-FTV [M Tanimoto T Fujii N Fukushima 2008] Non-parametric Local Transforms for Computing Visual Correspondence [R Zabih J Woodfill 1994]

なかの

Spatiotemporal Stereo via Spatiotemporal Quadric Element (Stequel) Matching9

どんなもの

技術や手法のキモはどこ

新しいマッチング手法を提案動き考慮することなく時間情報を取り込むことができる 時間方向のエピ線を考える

オプティカルフロー推定は3D境界や低テクスチャで弱いが提案手法はロバストである

なかの

Depth Video Enhancement Based on Weighted Mode Filtering10

どんなもの

議論論はある

ノイズを含んだ低解像度度のデプスマップの質を高める手法（超解像度度とデノイズ）時間方向も使用簡単なオプティカルフローを計算し利利用する

非反復復アルゴリズムのためGPUに載せやすく高速化が考えられる

なかの

Fast Bilateral-Space Stereo for Synthetic Defocus11

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

議論論はある

次に読むべき論論文は

高速な自由焦点ぼけ画像の作成

Bilateral-spaceを提案

従来研究よりも10から100倍速くぼけ具合の精度度も良良い

ぼけを作成するというアプリケーションに利利用する距離離という面では提案手法が有益であるが実測的な距離離という面での精度度は悪い背景と前景が同じ色で近くにある場合同一ととらえてしまう

Efficient high-resolution stereo matching using local plane sweeps [S N Sinha D Scharstein and R SzeliskiCVPR2014] Bilateral filtering-based optical flow estimation with occlusion detection [J Xiao H Cheng H Sawhney C Rao and M IsnardiECCV2006] Efficient nonlocal regularization for optical flow [P Krumlahenbumluhl and V KoltunECCV2012] Real-time spatiotemporal stereo matching using the dual-cross-bilateral grid [C Richardt D Orr I Davies A Criminisi and N A DodgsonECCV2010]

どうやって有効性を示した視差推定の精度度はmiddleburyKITTI

なかの

Robust Spatiotemporal Stereo for Dynamic Scenes12

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

ステレオ動画のフレーム間情報を取り入れることでノイズ耐性を向上させるまた動きの大きなものも考える

時間を含めたウインドウの提案自動的にそのような変化に対応する画像領領域を検出する

従来の時空間ステレオと比べ大きな動きによる急激な視差の時間変化に対して頑健である

なかの

Spacetime Stereo A Unifying Framework for Depth from Triangulation13

どんなもの

先行行研究と比べてどこがすごい

space time stereoを提案ステレオカメラの視差推定でも構造光を用いた視差推定でも利利用可能 動的なシーンでの利利用も可能

フレームごとマッチングを取っていたが複数フレームでのマッチングを可能とした

なかの

Learning to Select and Order Vacation Photographs (Disney research)14

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示したあまりにもたくさん撮影した写真たちから自動的にフォトアルバムを作成する研究

複雑な視覚での区別を試みたのはこの論論文が初

５つの異異なるトピックから63の個人的な写真コレクションのデータセットを利利用し定量量的に評価する

写真間の差別かを定義する顔全体の絵何が写っているか写っていないかを評価する

Jointly aligning and segmenting multiple web photo streams for the inference of collective photo storylines [G Kim and E P Xing CVPR2013] Photo sequencing [T Basha Y Moses and S Avidan CVPR2012]

なかの

A Taxonomy and Evaluation of Dense Two-Frame Stereo Correspondence Algorithms15

どんなもの

どうやって有効性を示した

次に読むべき論論文は

ステレオマッチングに関する分類を行行う 新たなデータセットを作成する

というよりも他の手法が有効性を示すことができるようにデータセットを作成した 今ではmiddleburyのデータセットと言えばステレオ業界では超有名

High-resolution stereo datasets with subpixel-accurate ground truth

なかの

Discriminability Limits in Spatio-Temporal Stereo Block Matching1

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

spatio-temporal disparity estimationの根本的な前提の正当性を解析しマッチング処理理の際に動きが助けとなる程度度を決定する

時空間マッチングのエラーを分析し誤りの原因を確率率率で導出する（フレーム数動きの分散画像特徴ノイズの関数）

[34243334]は時空間マッチングの利利点を指摘していたが本論論文はマッチング精度度の向上のために動きを用いる手法の程度度や性質を研究する

6つのステレオビデオを用いて検証を行行った

Spacetime stereo Shape recovery for dynamic scenes [L Zhang B Curless and S Seitz CVPR2003] Spatiotemporal stereo and scene flow via stequel matching [M Sizintsev and R Wildes PAMI2012] Temporally consistent disparity and optical flow via efficient spatio-temporal filtering [A Hosni C Rhemann M Bleyer and M Gelautz PRCAIVT2012] Spacetime stereo A unifying framework for depth from triangulation [PAMI2005] Dynamic depth recovery from multiple synchronized video streams [H Tao H Sawhney and R Kumar CVPR2001] Spatiotemporal descriptor for wide-baseline stereo reconstruction of non-rigid and ambiguous scenes [ECCV2003]

なかの

Depth-Based Patch Scaling for Content-Aware Stereo Image Completion2

どんなもの

どうやって有効性を示した

ステレオでデプスを取り物体の三次元情報を使ってインペインティングを行行う

bookのデータセット背景が繰り返しパターンが多いものを使っている

なかの

Fast Semi-dense Surface Reconstruction from Stereoscopic Video in Laparoscopic Surgery3

どんなもの

手法の流流れ

次に読むべき論論文は

腹腔内手術の際にステレオビデオから高速に物体の三次元再構成を行行う研究

Evaluation of stereo matching costs on images with radiometric differences [Hirschmueller H Scharstein D PAMI2008]

スコープカメラから画像取得GPUで演算する 視差を算出しフィルタにかける距離離に変換 点群を再びフィルタにかけて三次元再構成

なかの

3D Reconstruction from Accidental Motion4

どんなもの

技術や手法のキモはどこ

議論論はある

数秒のビデオ（単眼）から三次元再構成を行行う 手ぶれなどの動きから再構成が可能で特定の動きや機材を必要としない

短い基線長でも再構成が可能（3mmの基線長）

基線長が短いため背景の精度度が低くなる リフォーカス画像作成には十分 練習では上手く動作したが検証がまだ必要

なかの

Panoramic Video from Unstructured Camera Arrays5

どんなもの

技術や手法のキモはどこ

議論論はある

複数のカメラを用いたパノラマ撮影を行行う その際に不不自然さがないような動画を作成する

不不自然さを感じる感覚特性を提示しそれにのっとって対策を講じている

一つのカメラの解像度度と品質を向上させるよりも複数台のカメラを組み合わせることがはるかに簡単で有益である専門家でなくてもGoProのカメラセットを組み合わせることは容易易

カメラの配置は厳密に決められていない完璧な時間同期やローリングシャッターの不不足のような実撮影での問題もクリアしている

先行行研究と比べてどこがすごい

どうやって有効性を示した左のシステムは14台のカメラを使用 右のシステムはGoProを5台使用

Disney 201558

なかの

Floating Scale Surface Reconstruction6

どんなもの

技術や手法のキモはどこ

流流動的にスケールを変えられる三次元再構成手法

サンプル規模に依存するパラメータがない rarrどのスケールのサンプルにも対応できる

siggraph2014

なかの

A Super Resolution Reconstruction Scheme for Mixed Spatio-Temporal Stereo Video7

どんなもの

技術や手法のキモはどこ

ビデオ超解像アルゴリズム

二台のカメラを使用 一台は低解像度度で高速一台は高解像度度で低速

HHI 3DV ftp siteのBookarrivalとbeergadenを使用どうやって有効性を示した

なかの

What Is a Good Day for Outdoor Photometric Stereo8

どんなもの

先行行研究と比べてどこがすごい

議論論はある

次に読むべき論論文は

屋外における照度度差があるステレオの研究 屋外でステレオを行行う際に有利利or不不利利な日照条件を明らかにする

点光源を用いた研究は行行われていたが屋外での研究はされていなかった

晴れより曇りの方が精度度が良良い雲があるから特徴量量を取りやすい雑音を白色ガウスモデルを想定 季節ごとのデータセットを利利用してみても良良い

Time-lapse photometric stereo and applications [F Shen K Sunkavalli N Bonneel S Rusinkiewicz H Pfisterand X Tong2014] Outdoor photometric stereo [L-F Yu S-K Yeung Y-W Tai D Terzopoulos and T FChan ICCP2013]

どうやって有効性を示した屋外の照明に関するHDR環境マップのデータベースを利利用

Disney 2015424

なかの

COLORBRUSH ANIMATED DIFFUSION FOR INTUITIVE COLORIZATION SIMULATING WATER PAINTING 9

どんなものアニメを水彩画で描いたように変換する 水彩画を描くには経験が必要であるがそれを作成するアルゴリズムを考案絵具が水によりどうにじむかシュミレーションしている

Disney 20141027 ICIP2014

次に読むべき論論文はGabor-space geodesic active contoursrdquo In Algebraic Frames for the Perception-Action Cycle [C Sagiv NA Sochen and YY Zeevi 2000] Practical temporal consistency for image-based graphics applications [M Lang O Wang T Aydin A Smolic and M Gross SIGGRAPH2012] Computer-Generated Watercolor [CJ Curtis SE Anderson JE Seims KW Fleischer and DH Salesin SIGGRAPH1997]

なかの

From Sound to Sight Using Audio Processing to enable Visible Light Communication 10

どんなもの光に情報を載せる技術プロジェクトページがあって光関係の研究が8個載っている

httpwwwdisneyresearchcomprojectvisible-light-communication

ビデオのURL httpwwwdisneyresearchcomwpcontentuploadsPub_InvisibleLightCommunication_Siggraph14_videomp4

• 201211106_KeisukeKawahara
• 201311421_KeitaKanai_02
• 201313095_AkiraIshii_02
• 201413109_YuukiKubo_02
• 201513110_SatoshiHashizume_02
• 鬼輪講マラソン③_1
• 鬼輪講マラソン③_2

MirageTable13 Freehand13 Interac4on13 on13 a13 Projected13 13 Augmented13 Reality13 Tabletop(CHIrsquo12)

Hrvoje Benko Ricardo Jota Andrew D Wilson

201413109　久保勇貴 2（鬼コース）13

どんなもの13

テーブル上においてバーチャルな物体をリアルタイムで現実でものを動かすことと同様な動作に操作可能なシステム13

先行研究と比べてどこがすごい13

現実の物体をリアルタイムで画面に取りこむことができ質の高いフリーハンドインタラクションを実現した点13

技術や手法のキモはどこ13

色深度前景頭追跡プロキシパーティクルを駆使したリアルタイムメッシュの作成13

どうやって有効だと検証した13

凹凸など例外な表面に対しての投影した際の画像の質についての評価実験また仮想物体の奥行き知覚に関する実験も行った13

議論はある13

前面のみしかキャプチャしていないため差が生じる握っている場所の再現は未解決な課題である13

次に読むべき論文は13

Hirsch13 et13 al13 201413 (SIGGRAPHrsquo14)13

A13 Compressive13 Light13 Field13 Projec4on13 System13 (SIGGRAPHrsquo14)MaChew13 Hirsch13 Gordon13 Wetzstein13 Ramesh13 Raskar

201413109　久保勇貴 2（鬼コース）13

どんなもの13

通常の3Dディスプレイに比べて解像度輝度コントラストを改善した圧縮ライトフィードディスプレイ13

先行研究と比べてどこがすごい13

多視点立体視を複数でなく１台のプロジェクタを用いて実現した13

技術や手法のキモはどこ13

受動的スクリーンと高速切り替えプロジェクタによる新しい光学設計13

どうやって有効だと検証した13

4つのシーン例を投影したものを示したアニメーションの3D効果について観察を行った13

議論はある13

光路長を広げると観察できる画質が大幅に制限され他のライトフィードビューと混線が生じる13

次に読むべき論文は13

Butler13 et13 al13 201113

Vermeer13 Direct13 Interac4on13 with13 a13 360deg13 Viewable13 3D13 Display(UISTrsquo11) Alex Butler Otmar Hilliges Shahram Izadi Steve Hodges David Molyneaux David Kim

201413109　久保勇貴 2（鬼コース）13

どんなもの13

映し出された3Dオブジェクトとインタラクションを行えるシステム13

先行研究と比べてどこがすごい13

ディスプレイ内の画像とのインタラクションを提案ボリュームディスプレイを支援する新しいセンシング法の提案13

技術や手法のキモはどこ13

パラボラ鏡に取り付けた赤外線カメラセンサによる指先検出13

どうやって有効だと検証した13

アプリケーション例を示した13

議論はある13

パラボラ鏡の大きさよりもディスプレイサイズが小さくなってしまう13

次に読むべき論文は13

Hirsch13 et13 al13 201213

8D13 Interac4ng13 with13 a13 Relightable13 Glasses-shy‐Free13 3D13 Display(CHIrsquo12)Li-Wei Chan Hui-Shan Kao Mike Y Chen Ming-Sui Jane Yi-Ping Hung

201413109　久保勇貴 2（鬼コース）13

どんなもの13

ライトフィードによる入力とライトフィールドによる表示を行うリアルタイム8Dディスプレイ13

先行研究と比べてどこがすごい13

リアルタイムでの8Dディスプレイの実現（先行研究は7fps）13

技術や手法のキモはどこ13

GPUにおけるレンダリング処理13

どうやって有効だと検証した13

MRIデータを用いたディスプレイのデモを示した13

議論はある13

現在はグレースケールの入力のみだがカラーでの入力できればより強力になるだろう13

次に読むべき論文は13

Sahoo13 et13 al13 201513

Control13 of13 Non-shy‐Solid13 Diffusers13 by13 Electrosta4c13 Charging13 (CHIrsquo15) Deepak Ranjan Sahoo Diego Martinez Plasencia Sriram Subramanian

201413109　久保勇貴 2（鬼コース）13

どんなもの13

シャボン玉や霧などの非固体を電場による制御を試みた研究13

先行研究と比べてどこがすごい13

非固体の形や位置の制御法を提案した点13

技術や手法のキモはどこ13

[Intra13 et13 al13 11]中のldquowire-shy‐to-shy‐Cylinderdquoを用いたエアゾール粒子の帯電13

どうやって有効だと検証した13

霧及びシャボン玉によるディスプレイのアプリケーション例で実際に制御して見せた13

議論はある13

風による影響を本手法は打ち消すことができた13

次に読むべき論文は13

Barnum13 et13 al13 201013

A13 Mul4-shy‐Layered13 Display13 with13 Water13 Drops(SIGGRAPHrsquo10)Peter C Barnum Srinivasa G Narasimhan Takeo Kanade

201413109　久保勇貴 2（鬼コース）13

どんなもの13

複数層の落下水滴にプロジェクションマッピングを行いディスプレイとした研究13

先行研究と比べてどこがすごい13

水滴の制御を行うことで単一のプロジェクタによって複数層の映像投影を可能とした点13

技術や手法のキモはどこ13

[Ambravaneswaran13 et13 al13 2002]及び本研究における実験結果に基づく水滴生成13

どうやって有効だと検証した13

複数のディスプレイ例を示した13 例）顔の投影水槽シミュレータなど13

議論はある13

本当の3Dディスプレイにするにはより多くの水滴制御が必要13

次に読むべき論文は13

Lee13 et13 al13 200713

An13 Immaterial13 Depth-shy‐Fused13 3D13 Display(VRSTrsquo07)Cha Lee Stephen DiVerdi Tobias Humlollerer

201413109　久保勇貴 2（鬼コース）13

どんなもの13

２つのスクリーンを駆使し3Dディスプレイを実現するdepth-shy‐fused13 3D(DFD)に関する評価を行いその結果よりディスプレイを提案した研究13

先行研究と比べてどこがすごい13

DFDが任意のスクリーン設定及び見る位置に対して有効であることを示した13

技術や手法のキモはどこ13

６通りのスクリーン組合せから２つを抽出し見え方の違いを検証した点13

どうやって有効だと検証した13

６通りのスクリーンについて立体的に見えるか被験者実験を実施その後それぞれに有意差がみられるか調べた13

議論はある13

ステレオイメージを認めることができなかったユーザに対しても強い3D効果が見られた13

次に読むべき論文は13

Tokuda13 et13 al13 201013

Cloud13 Display13 (ACErsquo10)Yutaka Tokuda Yasuhiro Suzuki Kunihiro Nishimura Tomohiro Tanikawa Michitaka Hirose

201413109　久保勇貴 2（鬼コース）13

どんなもの13

煙の渦輪を用いた空間を埋めるディスプレイ13

先行研究と比べてどこがすごい13

制御可能な手法により高所へのパーティクルを運搬することに着目した点13

技術や手法のキモはどこ13

コンピュータによって制御が行われる空気砲アレイ13

どうやって有効だと検証した13

箱の中で実験を行い安定して渦輪をできるようにした実際にデモを行ったことを示した13

議論はある13

今の試作機をより早くリフレッシュ速度を高めることによりより濃く空間を埋められることを目指す13

次に読むべき論文は13

Sato13 et13 al13 200913

Par]cle13 Display13 System　(JVRC09)13 -shy‐13 A13 Large13 Scale13 Display13 for13 Public13 Space13 -shy‐

Munehiko13 Sato13 Yasuhiro13 Suzuki13 13 Atsushi13 Hiyama13 Tomohiro13 Tanikawa13 Michitaka13 Hirose

201413109　久保勇貴 2（鬼コース）13

どんなもの13

パーティクルディスプレイによる公共スペースのための大画面ディスプレイの提案13

先行研究と比べてどこがすごい13

公共スペースにおける要求と制限に基づいたシステムを提案した点13

技術や手法のキモはどこ13

実験に基づく表示画像のスクロール時間の制御13

どうやって有効だと検証した13

Aという文字の知覚実験によって 適な点滅周期の調査を行った13

議論はある13

現在の試作機を組合せより高解像度にする必要がある13

次に読むべき論文は13

Kwon13 et13 al13 201513

FugaciousFilm13 Exploring13 Aen4ve13 Interac4on13 with13 Ephemeral13 Material13 (CHIrsquo15)Hyosun13 Kwon13 Shashank13 Jaiswal13 Steve13 Benford13 Sue13 Ann13 Seah13

13 Peter13 BenneC13 Boriana13 Koleva13 Holger13 Schnaumldelbach

201413109　久保勇貴 2（鬼コース）13

どんなもの13

膜を押す引く飛び出ることができる新しい石鹸膜インタフェースの提案13

先行研究と比べてどこがすごい13

徐々に消えるインタフェースは高い注意を有するインタラクションを提供するという点を示したこと13

技術や手法のキモはどこ13

水グリセリンを201の対比で混ぜることでldquopoprdquoがきれいになるようにしかつ膜の耐久性を向上させた13

どうやって有効だと検証した13

３目並べを用いた被験者実験を実施13 ユーザは膜を割ると負け膜を自分のマスにするにはタッチ押す引くの書かれた通りの操作を行う13

議論はある13

ユーザに精密な動作を要求することはとりわけ注意を払うことを誘発する13

次に読むべき論文は13

Wetzstein13 et13 al13 201213

Tensor13 Displays13 Compressive13 Light13 Field13 Synthesis13 using13 Mul4layer13 Displays13 with13 Direc4onal13 Backligh4ng(SIGGRAPHrsquo12)

Gordon13 Wetzstein13 Douglas13 Lanman13 MaChew13 Hirsch13 Ramesh13 Raskar

201413109　久保勇貴 2（鬼コース）13

どんなもの13

視点によって異なる立体映像を見ることができる複数の層からなるディスプレイ13

先行研究と比べてどこがすごい13

既存の手法を合成したcomputa(onal13 displaysというディスプレイの新しいフレームワークを提案した13

技術や手法のキモはどこ13

時分割で視差マスクを表示することでユーザの視線ごとに立体像を表現する13

どうやって有効だと検証した13

通常のディスプレイ３層LCDLCD及び指向性バックライトの例による比較13 13

議論はある13

波紋を含むこと色チャンネルが悪影響を与える相互反射不均一などの問題が見られた13

次に読むべき論文は13

Matoba13 et13 al13 1213

SplashDisplay(VRICrsquo12)Yasuo Matoba Taro Tokui Ryo Sato Tochiki Sato Hideki Koike

201413109　久保勇貴 2（鬼コース）13

どんなもの13

パーティクルにCGを投射しパーティクルがテーブル上に投げられると爆発しパーティクルが噴きあがる13

先行研究と比べてどこがすごい13

ビーズがミリメートルからメートル単位までZ軸方向について空中で奥行きを表現する13

技術や手法のキモはどこ13

スピーカによって風力が発生させビーズを舞い上げる点13

どうやって有効だと検証した13

ビーズを投げると花火が打ちあがっているかのようなアプリケーション例を示した13

議論はある13

高いレベルの表現及び幅広い入力範囲を提供できた13

次に読むべき論文は13

Kim13 et13 al13 1413

MARIO13 Mid-shy‐air13 Augmented13 Reality13 Interac4on13 with13 Objects13 (ECrsquo14)Hanyuool13 Kim13 13 Issei13 Takahashi13 Hiroki13 Yamamoto13 Satoshi13 Maekawa13 Takeshi13 Naemura

201413109　久保勇貴 2（鬼コース）13

どんなもの13

350times300times250のテーブル上のスペースにおいて自由に動かせる空中像を造りだすことができる13

先行研究と比べてどこがすごい13

凹面鏡や凹レンズのように曲面でないため画像の歪曲が発生しない13

技術や手法のキモはどこ13

Aerial13 Imaging13 Plate(AIP)を用いた空中像の生成及びそのためのディスプレイ移動装置13

どうやって有効だと検証した13

左右からの視差の考慮及び奥行き表現時の画像提示視野角の検証などを行った13 13

議論はある13

投影しているひよこを叩いたり払いのけたりするような動作がデモ中見られた13

次に読むべき論文は13

Tactile Feedback on Flat Surfaces for the Visually Impaired13Ali Israr Olivier Bau Seung-Chan Kim Ivan Poupyrev13

どのようなものか 視覚障害者のための触覚を用いた視覚代用デバイス 先行研究と比べてどこがすごいか 道案内をしてくれる機械などはあるが日用品の場所を教えたり探すのを手伝ってくれるデバイスはない 技術や手法のキモ タッチパネルとカメラを搭載したデバイス 触覚を与える技術はTeslaTouchを利用 色を基準にオブジェクトの位置を認識 有用性の確認 視覚障害者二人に対して実験このデバイスを使

わなくても各自の方法で物を見つけられるが間違えることが多いこのデバイスを使用することで間違えることなく正確に物の位置を特定できた 課題 一つの色でしか判断できない 触感のあるなしでしか情報を伝えられない 関連論文 TeslaTouch [Bau et al 2010]

20150522 橋爪智 2鬼

Fingernail-Mounted Display of Attraction Force and Texture13Masataka Niwa Tomoko Nozaki Taro Maeda and Hideyuki And13

どのようなものか 指先に取り付けて触感と力を両方表現できるデバイス 先行研究と比べてどこがすごいか 触感と引力をそれぞれ表現するデバイスはあるが両方を一つのデバイスで表現した例は少ない 引力は自由な方向に付加することができる 技術や手法のキモ 偏心に重さを付けた円盤を4枚使用する 5-9Hz 引力　100-200Hz 触感 それぞれの円盤の位相や回転数を調整することで

触感と力 を表現する 4つのモータを使いそれぞれの円盤を独立して制御する 有用性の確認 4人の男性に対して実験80以上の精度で認識できた 関連論文 The nail-mounted attraction forcebump display [Nozaki et al 2008]

20150522 橋爪智 2 鬼

Gilded gait reshaping the urban experience with augmented footsteps13Yuichiro Takeuchi13

どのようなものか 靴に装着し地面の触感をコントロールするデバイス 先行研究と比べてどこがすごいか 単独で動作しなかったり特定の環境のみでしか動作しなかったりするrarr靴単体で動作環境に依存しない 技術や手法のキモ 6個の振動パネルを取り付けゲルでカバー app modulesを取り替えることができ様々な機能を付加できる（GPSsound) 4種類の地面を再現

bull  Hard Ground 振動させない bull  Soft Ground すべてのパネルを振動 bull  Bumpy Ground ジグザグに振動 bull  Godzilla 全てのパネルを振動何回か繰り返す 課題 モーターを使っているため波形をプログラミングできないrarr圧電素子を使用する 関連論文 Haptic Shoes [Fu et al 2010]

20150522 橋爪智 2鬼

ExoInterfaces novel exosceleton haptic interfaces for virtual reality augmented sport and rehabilitation

Dzmitry Tsetserukou Katsunari Sato Susumu Tachi13

どのようなものか 腕に装着し物理的なinteractionを可能にするデバイス 先行研究と比べてどこがすごいか Exoskeleton 力を増幅するためだが重たく危険なこともある String-based wireが視界をまたぐ動きに制限がある rarr腕の動きに制限を与えない安全 技術や手法のキモ 「FlexTorque」人間の筋肉の構造を再現するベルトとモーターを使用する肩の近くに装着することで

腕に負担がかかりにくい 触覚feedback弱いトルク 運動を支援強いトルク 課題 物理的な接触を表現するゲームやスポーツにより没頭させるリハビリのサポートをする視覚障害者の支援（ものの場所を教える） 関連論文 FlexTorque [Dzmitry et al 2010]

20150522 橋爪智 2 鬼

Perception of Ultrasonic Haptic Feedback on the Hand Localisation and Apparent Motion13

Graham Wilson Tom Carter Sriram Subramanian Stephen Brewster13

どのようなものか 超音波を用いた触覚フィードバック有効性の検討を行う 先行研究と比べてどこがすごいか 超音波触覚フィードバックは比較的新しく研究や操作方法に関する知識が少ない 腕を自由に動かすことができ小さいものは着用可能 技術や手法のキモ 88のアレイ状に超音波発生器を設置

有効性の確認 bull  局所的な触感 　　　25箇所に分割しそれぞれに超音波を当てる 　　　触感を感じた989 　　　場所の誤差85mm bull  手のひらを動く触感 上下左右に動く 　　　動いてると感じた629

20150522 橋爪智 2 鬼

Friction Measurements on a Large Area TPaD13Nicholas D Marchuk J Edward Colgate Michael A Peshkin13

どのようなものか 超音波の振動により触感を与える 先行研究と比べてどこがすごいか ガラス板を使うので透明後ろにディスプレイを配置可能 技術や手法のキモ 「Squeeze Film Effect（スクイズ膜効果）」 ガラス板に取り付けた圧電素子の円盤に高周波信号

をかける 実験 振動しない部分＝摩擦が発生しない部分が発生周波数により場所が変わる rarr摩擦を大きさをかける力の大きさから計測 rarr指の場所に合わせて複数の周波数を使い分ける 関連論文 T-PaD[Winfield et al 2007]

20150522 橋爪智 2 鬼

STIMTAC a Tactile Input Device with Programmable Friction13Michel Amberg Freacutedeacuteric Giraud Betty Semail Paolo Olivo Geacutery Casiez Nicolas Roussel13

どのようなものか 触感を与えられるタッチデバイス 先行研究と比べてどこがすごいか LATPaD サイズ大きいノイズが大きい TeslaTouch 高い電圧付加が必要GNDに接続しなければいけない

技術や手法のキモ 「Squeeze Film Effect」超音波を用いて振動を与える 圧電性セラミックを電極にコーディング 指トラッキングは力センサを用いる 活用法 マウスキーボード絵を描く 関連論文 LATPaD[Vincent et al 2011] TeslaTouch[Bau et al 2010]

20150522 橋爪智 2 鬼

Surround Haptics Tactile Feedback for Immersive Gaming Experiences Ali Israr Seung-Chan Kim Ivan Poupyrev Jan Stec13

どのようなものか ゲームに合わせて高解像度の触覚フィードバックをユーザーに与える椅子 先行研究と比べてどこがすごいか 荒く配置した安価な振動アクチュエータで高解像度の触覚フィードバックを行える 一点の振動連続した動き範囲の振動などを再現

技術や手法のキモ 仮想的な振動アクチュエータをいくつかの振動アクチュエータを使って作り出す physical-physicalphysical-virtualvirtual-virtual ゲームにHaptics Engineを導入しHaptics APIを用いてHaptic Displayを操作する 関連論文 Exploring Surround Haptics Displays[Israr et al 2010]

20150522 橋爪智 2 鬼

Audio-Haptic Feedback in Mobile Phones Angela Chang Conor OrsquoSullivan13

どのようなものか haptics機能のついてない携帯電話にオーディオ機能を利用した触覚フィードバックを追加する 先行研究と比べてどこがすごいか 簡単に作れてnon-haptic mobile devicesでも大丈夫 技術や手法のキモ 「MultiFunction Transducer(MFT)」 スピーカーから音と信号の両方を出力できる

bull  Haptic Inheritance 　　音を2つの周波数帯に分ける bull  Synthesis and Matching 　　低周波数帯(20-300Hz)を使い触感を伝える 有効性の検討 42人の人を対象に実験を行う83の人が触感を感じた

20150522 橋爪智 2 鬼

Resolution of Sleep Deprivation Problems using ZZZoo Pillows13Shunsuke Yanaka Motoki Ishida13

どのようなものか 近年不眠症の人が多い rarr誰かと接していると安心し睡眠に導入しやすくなる rarrまるで添い寝をしているようなリアルな抱きまくらを使う 技術や手法のキモ breathing sensation 風船を使って人の呼吸を再現肺の形の風船弱く長い呼吸をする

heating お湯を使って人の体温を再現45 有効性の確認 84人の人が実験 呼吸が睡眠を誘ったかrarr61 体温が睡眠を誘ったかrarr85 関連論文 The Impact of Sleep Disorders on Social Life[Komada et al 2007]

20150522 橋爪智 2 鬼

まとめ13超音波 モーター 風

20150522 橋爪智 2 鬼

コイル 電気刺激 Electrovibration

振動 音 お湯

なかの

Temporally Consistent Disparity and Optical Flow via Efficient Spatio-temporal Filtering1

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示した

議論論はあるか

時間的に一定の視差を算出する手法静止画ステレオよりも精度度が良良いことを示す従来よりも推定精度度が良良いオプティカルフローも算出する

一枚の静止画に対するフィルタリング[1]をステレオ動画に拡張している

ケンブリッジのステレオ動画のデータセットを利利用 実写動画に対する比較も行行うノイズ耐性も検証する

フィルタベースとエネルギーベースの関係性を良良り理理解することで推定精度度を上げる

実装が簡単でリアルタイム視差推定が可能

Fast Cost-Volume Filtering for Visual Correspondence and Beyond [Rhemann C Hosni A Bleyer M Rother C Gelautz M CVPR2011] Real-time Spatiotemporal Stereo Matching Using the Dual-Cross-Bilateral Grid [Richardt C Orr D Davies I Criminisi A Dodgson NA ECCV2010] Secrets of optical flow estimation and their principles [Sun D Roth S Black MJ 2010] Motion estimation with non-local total variation regularization [Werlberger M Pock T Bischof H CVPR2010] Temporally Consistent Disparity Maps from Uncalibrated Stereo Videos [Bleyer M Gelatuz M ISPA2011]

なかの

SymStereo Matching using Induced Symmetry (2014)2

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示した

議論論はあるか

画像の対称性を用いてステレオマッチングを行行う 左右の画像を反転させて重ね合わせることで対称性を測る

絵的な類似の代わりに対称性を使う今まで対称性を用いる手法はなく新規性が大きい

三つのSymmetry-baseの手法で精度度を検証従来手法よりも精度度が向上しているMiddlebury Oxford Corridorfountain-P11のデータセット使用

ステレオの問題である不不連続な箇所オクルージョン部分は未解決である演算時間はやや増加

1-Dラインのコストを考える今までは撮像面に対して平行行な平面でデプスを考えていたが垂直な平面を考える

BT[Birchfield and Tomasi 1998] Census transform[Zabih and Woodfill 1994] Log N[Kovesi 1997] radio-metoric differences[Hirschmuller Scharstein 2009]

なかの

Camouflaging an Object from Many Viewpoints3

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

多くの視点から三次元の物体をカモフラージュするカモフラージュによってオクルージョン部分の不不連続がどの程度度生じるか他の視点ではどれほどになるかの検証

MRF（Markov Random Fields）ベース

新しい三次元物体のカモフラージュモデルを構築 37種類のデータセットを作る

箱形の物体に対してカモフラージュ処理理を施し 結果を評価する

オクルージョン不不連続テクスチャの歪みが問題 照明や画像の貼りつけに制限あり

なかの

Aliasing Detection and Reduction in Plenoptic Imaging4

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

カメラアレイ撮影の角度度のエイリアシングを除去するエイリアシングの探索索と打ち消しを行行う

周波数領領域ではなく空間領領域で探索索を行行う

先行行研究がフィルタデモザイキング再パラメータ調整などの前処理理でエイリアシング除去を行行うのに対しエイリアシング探索索後にリフォーカスの段階でエイリアシングを取り除く

8times8の平行行カメラアレイで検証するカメラ間の 基線長は70mm

今回は基線長が長いデータセットを使った 次はLytroなどのマイクロレンズアレイで検証する

Globally consistent multi-label assignment on the ray space of 4d light fields [S Wanner C Straehle B Goldluecke CVPR2013] Lineassisted light field triangulation and stereo matching [Z Yu X Guo H Lin A Lumsdaine J Yu ICCV 2013]

なかの

Globally Consistent Multi-Label Assignment on the Ray Space of 4D Light Fields5

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

四次元ライトフィールドの光線情報において マルチラベルの領領域分割を行行う

深度度情報光線情報を用いて領領域分割することで 二次元（空間）情報だけでは分割が難しかった 領領域を分割可能とする

The light field camera Extended depth of field aliasing and superresolution [T Bishop P Favaro IEEE Transactions on Pattern Analysis and Machine Intelligence 2012]

なかの

Line Assisted Light Field Triangulation and Stereo Matching6

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

光線情報を利利用してステレオマッチングの精度度を 向上させる手法三角測量量の誤差を減らす

Light Field Stereo Matchingとかいう手法 グラフ構造を作成

Variational light field analysis for disparity estimation and super-resolution [S Wanner and B Goldlumluecke 2013]

なかの

Adaptive stereo similarity fusion using confidence measures 20157

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

ステレオマッチングの新しい方式fusion weightsを提案複数の手法を組み合わせてコスト計算を行行う手法付録に既存手法のコスト関数一覧あり

パラメータに依存する手法を用いないことで高速化を図っている

一つのアルゴリズムでは異異なる特性を持つ領領域全てに対して適切切なマッチングはできない複数を組み合わせることでそれを補う13種と多い

middleburyとKITTIのデータセットで評価

一枚あたり03sと高速だが001sとより高速なアルゴリズムが存在する

Segment-based stereo matching using belief propagation and a self-adapting dissimilarity measure [A Klaus M Sormann K Karner ICPR2006] On building an accurate stereo matching system on graphics hardware [X Mei X Sun M Zhou S Jiao H Wang X Zhang ICCV2011] Similarity measures for depth estimation [K Wegner O Stankiewicz 3DTV-CON2009] On accurate dense stereo-matching using a local adaptive multi-cost approach [C Stentoumis L Grammatikopoulos I Kalisperakis G Karras ISPRS2014] A quantitative evaluation of confidence measures for stereo vision [X Hu P Mordohai PAMI2012]

なかの

SIMILARITY MEASURE FOR DEPTH ESTIMATIOM 20098

どんなもの

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

4種類の視差推定アルゴリズムを組み合わせている 類似度度の選択性の解析

Belief Propagationの枠組みを用いる

名古屋大学の多視点データベースを利利用

HHI Test Material for 3D Video [I Feldmann M Muller F Zilly R Tanger A SmolicP Kauff T Wiegand 2008] Multiview Video Test Sequence and Camera Parameters [Yo-Sung Ho Eun-Kyung Lee and Cheon Lee 2008] 1D Parallel Test Sequences for MPEG-FTV [M Tanimoto T Fujii N Fukushima 2008] Non-parametric Local Transforms for Computing Visual Correspondence [R Zabih J Woodfill 1994]

なかの

Spatiotemporal Stereo via Spatiotemporal Quadric Element (Stequel) Matching9

どんなもの

技術や手法のキモはどこ

新しいマッチング手法を提案動き考慮することなく時間情報を取り込むことができる 時間方向のエピ線を考える

オプティカルフロー推定は3D境界や低テクスチャで弱いが提案手法はロバストである

なかの

Depth Video Enhancement Based on Weighted Mode Filtering10

どんなもの

議論論はある

ノイズを含んだ低解像度度のデプスマップの質を高める手法（超解像度度とデノイズ）時間方向も使用簡単なオプティカルフローを計算し利利用する

非反復復アルゴリズムのためGPUに載せやすく高速化が考えられる

なかの

Fast Bilateral-Space Stereo for Synthetic Defocus11

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

議論論はある

次に読むべき論論文は

高速な自由焦点ぼけ画像の作成

Bilateral-spaceを提案

従来研究よりも10から100倍速くぼけ具合の精度度も良良い

ぼけを作成するというアプリケーションに利利用する距離離という面では提案手法が有益であるが実測的な距離離という面での精度度は悪い背景と前景が同じ色で近くにある場合同一ととらえてしまう

Efficient high-resolution stereo matching using local plane sweeps [S N Sinha D Scharstein and R SzeliskiCVPR2014] Bilateral filtering-based optical flow estimation with occlusion detection [J Xiao H Cheng H Sawhney C Rao and M IsnardiECCV2006] Efficient nonlocal regularization for optical flow [P Krumlahenbumluhl and V KoltunECCV2012] Real-time spatiotemporal stereo matching using the dual-cross-bilateral grid [C Richardt D Orr I Davies A Criminisi and N A DodgsonECCV2010]

どうやって有効性を示した視差推定の精度度はmiddleburyKITTI

なかの

Robust Spatiotemporal Stereo for Dynamic Scenes12

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

ステレオ動画のフレーム間情報を取り入れることでノイズ耐性を向上させるまた動きの大きなものも考える

時間を含めたウインドウの提案自動的にそのような変化に対応する画像領領域を検出する

従来の時空間ステレオと比べ大きな動きによる急激な視差の時間変化に対して頑健である

なかの

Spacetime Stereo A Unifying Framework for Depth from Triangulation13

どんなもの

先行行研究と比べてどこがすごい

space time stereoを提案ステレオカメラの視差推定でも構造光を用いた視差推定でも利利用可能 動的なシーンでの利利用も可能

フレームごとマッチングを取っていたが複数フレームでのマッチングを可能とした

なかの

Learning to Select and Order Vacation Photographs (Disney research)14

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示したあまりにもたくさん撮影した写真たちから自動的にフォトアルバムを作成する研究

複雑な視覚での区別を試みたのはこの論論文が初

５つの異異なるトピックから63の個人的な写真コレクションのデータセットを利利用し定量量的に評価する

写真間の差別かを定義する顔全体の絵何が写っているか写っていないかを評価する

Jointly aligning and segmenting multiple web photo streams for the inference of collective photo storylines [G Kim and E P Xing CVPR2013] Photo sequencing [T Basha Y Moses and S Avidan CVPR2012]

なかの

A Taxonomy and Evaluation of Dense Two-Frame Stereo Correspondence Algorithms15

どんなもの

どうやって有効性を示した

次に読むべき論論文は

ステレオマッチングに関する分類を行行う 新たなデータセットを作成する

というよりも他の手法が有効性を示すことができるようにデータセットを作成した 今ではmiddleburyのデータセットと言えばステレオ業界では超有名

High-resolution stereo datasets with subpixel-accurate ground truth

なかの

Discriminability Limits in Spatio-Temporal Stereo Block Matching1

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

spatio-temporal disparity estimationの根本的な前提の正当性を解析しマッチング処理理の際に動きが助けとなる程度度を決定する

時空間マッチングのエラーを分析し誤りの原因を確率率率で導出する（フレーム数動きの分散画像特徴ノイズの関数）

[34243334]は時空間マッチングの利利点を指摘していたが本論論文はマッチング精度度の向上のために動きを用いる手法の程度度や性質を研究する

6つのステレオビデオを用いて検証を行行った

Spacetime stereo Shape recovery for dynamic scenes [L Zhang B Curless and S Seitz CVPR2003] Spatiotemporal stereo and scene flow via stequel matching [M Sizintsev and R Wildes PAMI2012] Temporally consistent disparity and optical flow via efficient spatio-temporal filtering [A Hosni C Rhemann M Bleyer and M Gelautz PRCAIVT2012] Spacetime stereo A unifying framework for depth from triangulation [PAMI2005] Dynamic depth recovery from multiple synchronized video streams [H Tao H Sawhney and R Kumar CVPR2001] Spatiotemporal descriptor for wide-baseline stereo reconstruction of non-rigid and ambiguous scenes [ECCV2003]

なかの

Depth-Based Patch Scaling for Content-Aware Stereo Image Completion2

どんなもの

どうやって有効性を示した

ステレオでデプスを取り物体の三次元情報を使ってインペインティングを行行う

bookのデータセット背景が繰り返しパターンが多いものを使っている

なかの

Fast Semi-dense Surface Reconstruction from Stereoscopic Video in Laparoscopic Surgery3

どんなもの

手法の流流れ

次に読むべき論論文は

腹腔内手術の際にステレオビデオから高速に物体の三次元再構成を行行う研究

Evaluation of stereo matching costs on images with radiometric differences [Hirschmueller H Scharstein D PAMI2008]

スコープカメラから画像取得GPUで演算する 視差を算出しフィルタにかける距離離に変換 点群を再びフィルタにかけて三次元再構成

なかの

3D Reconstruction from Accidental Motion4

どんなもの

技術や手法のキモはどこ

議論論はある

数秒のビデオ（単眼）から三次元再構成を行行う 手ぶれなどの動きから再構成が可能で特定の動きや機材を必要としない

短い基線長でも再構成が可能（3mmの基線長）

基線長が短いため背景の精度度が低くなる リフォーカス画像作成には十分 練習では上手く動作したが検証がまだ必要

なかの

Panoramic Video from Unstructured Camera Arrays5

どんなもの

技術や手法のキモはどこ

議論論はある

複数のカメラを用いたパノラマ撮影を行行う その際に不不自然さがないような動画を作成する

不不自然さを感じる感覚特性を提示しそれにのっとって対策を講じている

一つのカメラの解像度度と品質を向上させるよりも複数台のカメラを組み合わせることがはるかに簡単で有益である専門家でなくてもGoProのカメラセットを組み合わせることは容易易

カメラの配置は厳密に決められていない完璧な時間同期やローリングシャッターの不不足のような実撮影での問題もクリアしている

先行行研究と比べてどこがすごい

どうやって有効性を示した左のシステムは14台のカメラを使用 右のシステムはGoProを5台使用

Disney 201558

なかの

Floating Scale Surface Reconstruction6

どんなもの

技術や手法のキモはどこ

流流動的にスケールを変えられる三次元再構成手法

サンプル規模に依存するパラメータがない rarrどのスケールのサンプルにも対応できる

siggraph2014

なかの

A Super Resolution Reconstruction Scheme for Mixed Spatio-Temporal Stereo Video7

どんなもの

技術や手法のキモはどこ

ビデオ超解像アルゴリズム

二台のカメラを使用 一台は低解像度度で高速一台は高解像度度で低速

HHI 3DV ftp siteのBookarrivalとbeergadenを使用どうやって有効性を示した

なかの

What Is a Good Day for Outdoor Photometric Stereo8

どんなもの

先行行研究と比べてどこがすごい

議論論はある

次に読むべき論論文は

屋外における照度度差があるステレオの研究 屋外でステレオを行行う際に有利利or不不利利な日照条件を明らかにする

点光源を用いた研究は行行われていたが屋外での研究はされていなかった

晴れより曇りの方が精度度が良良い雲があるから特徴量量を取りやすい雑音を白色ガウスモデルを想定 季節ごとのデータセットを利利用してみても良良い

Time-lapse photometric stereo and applications [F Shen K Sunkavalli N Bonneel S Rusinkiewicz H Pfisterand X Tong2014] Outdoor photometric stereo [L-F Yu S-K Yeung Y-W Tai D Terzopoulos and T FChan ICCP2013]

どうやって有効性を示した屋外の照明に関するHDR環境マップのデータベースを利利用

Disney 2015424

なかの

COLORBRUSH ANIMATED DIFFUSION FOR INTUITIVE COLORIZATION SIMULATING WATER PAINTING 9

どんなものアニメを水彩画で描いたように変換する 水彩画を描くには経験が必要であるがそれを作成するアルゴリズムを考案絵具が水によりどうにじむかシュミレーションしている

Disney 20141027 ICIP2014

次に読むべき論論文はGabor-space geodesic active contoursrdquo In Algebraic Frames for the Perception-Action Cycle [C Sagiv NA Sochen and YY Zeevi 2000] Practical temporal consistency for image-based graphics applications [M Lang O Wang T Aydin A Smolic and M Gross SIGGRAPH2012] Computer-Generated Watercolor [CJ Curtis SE Anderson JE Seims KW Fleischer and DH Salesin SIGGRAPH1997]

なかの

From Sound to Sight Using Audio Processing to enable Visible Light Communication 10

どんなもの光に情報を載せる技術プロジェクトページがあって光関係の研究が8個載っている

httpwwwdisneyresearchcomprojectvisible-light-communication

ビデオのURL httpwwwdisneyresearchcomwpcontentuploadsPub_InvisibleLightCommunication_Siggraph14_videomp4

• 201211106_KeisukeKawahara
• 201311421_KeitaKanai_02
• 201313095_AkiraIshii_02
• 201413109_YuukiKubo_02
• 201513110_SatoshiHashizume_02
• 鬼輪講マラソン③_1
• 鬼輪講マラソン③_2

A13 Compressive13 Light13 Field13 Projec4on13 System13 (SIGGRAPHrsquo14)MaChew13 Hirsch13 Gordon13 Wetzstein13 Ramesh13 Raskar

201413109　久保勇貴 2（鬼コース）13

どんなもの13

通常の3Dディスプレイに比べて解像度輝度コントラストを改善した圧縮ライトフィードディスプレイ13

先行研究と比べてどこがすごい13

多視点立体視を複数でなく１台のプロジェクタを用いて実現した13

技術や手法のキモはどこ13

受動的スクリーンと高速切り替えプロジェクタによる新しい光学設計13

どうやって有効だと検証した13

4つのシーン例を投影したものを示したアニメーションの3D効果について観察を行った13

議論はある13

光路長を広げると観察できる画質が大幅に制限され他のライトフィードビューと混線が生じる13

次に読むべき論文は13

Butler13 et13 al13 201113

Vermeer13 Direct13 Interac4on13 with13 a13 360deg13 Viewable13 3D13 Display(UISTrsquo11) Alex Butler Otmar Hilliges Shahram Izadi Steve Hodges David Molyneaux David Kim

201413109　久保勇貴 2（鬼コース）13

どんなもの13

映し出された3Dオブジェクトとインタラクションを行えるシステム13

先行研究と比べてどこがすごい13

ディスプレイ内の画像とのインタラクションを提案ボリュームディスプレイを支援する新しいセンシング法の提案13

技術や手法のキモはどこ13

パラボラ鏡に取り付けた赤外線カメラセンサによる指先検出13

どうやって有効だと検証した13

アプリケーション例を示した13

議論はある13

パラボラ鏡の大きさよりもディスプレイサイズが小さくなってしまう13

次に読むべき論文は13

Hirsch13 et13 al13 201213

8D13 Interac4ng13 with13 a13 Relightable13 Glasses-shy‐Free13 3D13 Display(CHIrsquo12)Li-Wei Chan Hui-Shan Kao Mike Y Chen Ming-Sui Jane Yi-Ping Hung

201413109　久保勇貴 2（鬼コース）13

どんなもの13

ライトフィードによる入力とライトフィールドによる表示を行うリアルタイム8Dディスプレイ13

先行研究と比べてどこがすごい13

リアルタイムでの8Dディスプレイの実現（先行研究は7fps）13

技術や手法のキモはどこ13

GPUにおけるレンダリング処理13

どうやって有効だと検証した13

MRIデータを用いたディスプレイのデモを示した13

議論はある13

現在はグレースケールの入力のみだがカラーでの入力できればより強力になるだろう13

次に読むべき論文は13

Sahoo13 et13 al13 201513

Control13 of13 Non-shy‐Solid13 Diffusers13 by13 Electrosta4c13 Charging13 (CHIrsquo15) Deepak Ranjan Sahoo Diego Martinez Plasencia Sriram Subramanian

201413109　久保勇貴 2（鬼コース）13

どんなもの13

シャボン玉や霧などの非固体を電場による制御を試みた研究13

先行研究と比べてどこがすごい13

非固体の形や位置の制御法を提案した点13

技術や手法のキモはどこ13

[Intra13 et13 al13 11]中のldquowire-shy‐to-shy‐Cylinderdquoを用いたエアゾール粒子の帯電13

どうやって有効だと検証した13

霧及びシャボン玉によるディスプレイのアプリケーション例で実際に制御して見せた13

議論はある13

風による影響を本手法は打ち消すことができた13

次に読むべき論文は13

Barnum13 et13 al13 201013

A13 Mul4-shy‐Layered13 Display13 with13 Water13 Drops(SIGGRAPHrsquo10)Peter C Barnum Srinivasa G Narasimhan Takeo Kanade

201413109　久保勇貴 2（鬼コース）13

どんなもの13

複数層の落下水滴にプロジェクションマッピングを行いディスプレイとした研究13

先行研究と比べてどこがすごい13

水滴の制御を行うことで単一のプロジェクタによって複数層の映像投影を可能とした点13

技術や手法のキモはどこ13

[Ambravaneswaran13 et13 al13 2002]及び本研究における実験結果に基づく水滴生成13

どうやって有効だと検証した13

複数のディスプレイ例を示した13 例）顔の投影水槽シミュレータなど13

議論はある13

本当の3Dディスプレイにするにはより多くの水滴制御が必要13

次に読むべき論文は13

Lee13 et13 al13 200713

An13 Immaterial13 Depth-shy‐Fused13 3D13 Display(VRSTrsquo07)Cha Lee Stephen DiVerdi Tobias Humlollerer

201413109　久保勇貴 2（鬼コース）13

どんなもの13

２つのスクリーンを駆使し3Dディスプレイを実現するdepth-shy‐fused13 3D(DFD)に関する評価を行いその結果よりディスプレイを提案した研究13

先行研究と比べてどこがすごい13

DFDが任意のスクリーン設定及び見る位置に対して有効であることを示した13

技術や手法のキモはどこ13

６通りのスクリーン組合せから２つを抽出し見え方の違いを検証した点13

どうやって有効だと検証した13

６通りのスクリーンについて立体的に見えるか被験者実験を実施その後それぞれに有意差がみられるか調べた13

議論はある13

ステレオイメージを認めることができなかったユーザに対しても強い3D効果が見られた13

次に読むべき論文は13

Tokuda13 et13 al13 201013

Cloud13 Display13 (ACErsquo10)Yutaka Tokuda Yasuhiro Suzuki Kunihiro Nishimura Tomohiro Tanikawa Michitaka Hirose

201413109　久保勇貴 2（鬼コース）13

どんなもの13

煙の渦輪を用いた空間を埋めるディスプレイ13

先行研究と比べてどこがすごい13

制御可能な手法により高所へのパーティクルを運搬することに着目した点13

技術や手法のキモはどこ13

コンピュータによって制御が行われる空気砲アレイ13

どうやって有効だと検証した13

箱の中で実験を行い安定して渦輪をできるようにした実際にデモを行ったことを示した13

議論はある13

今の試作機をより早くリフレッシュ速度を高めることによりより濃く空間を埋められることを目指す13

次に読むべき論文は13

Sato13 et13 al13 200913

Par]cle13 Display13 System　(JVRC09)13 -shy‐13 A13 Large13 Scale13 Display13 for13 Public13 Space13 -shy‐

Munehiko13 Sato13 Yasuhiro13 Suzuki13 13 Atsushi13 Hiyama13 Tomohiro13 Tanikawa13 Michitaka13 Hirose

201413109　久保勇貴 2（鬼コース）13

どんなもの13

パーティクルディスプレイによる公共スペースのための大画面ディスプレイの提案13

先行研究と比べてどこがすごい13

公共スペースにおける要求と制限に基づいたシステムを提案した点13

技術や手法のキモはどこ13

実験に基づく表示画像のスクロール時間の制御13

どうやって有効だと検証した13

Aという文字の知覚実験によって 適な点滅周期の調査を行った13

議論はある13

現在の試作機を組合せより高解像度にする必要がある13

次に読むべき論文は13

Kwon13 et13 al13 201513

FugaciousFilm13 Exploring13 Aen4ve13 Interac4on13 with13 Ephemeral13 Material13 (CHIrsquo15)Hyosun13 Kwon13 Shashank13 Jaiswal13 Steve13 Benford13 Sue13 Ann13 Seah13

13 Peter13 BenneC13 Boriana13 Koleva13 Holger13 Schnaumldelbach

201413109　久保勇貴 2（鬼コース）13

どんなもの13

膜を押す引く飛び出ることができる新しい石鹸膜インタフェースの提案13

先行研究と比べてどこがすごい13

徐々に消えるインタフェースは高い注意を有するインタラクションを提供するという点を示したこと13

技術や手法のキモはどこ13

水グリセリンを201の対比で混ぜることでldquopoprdquoがきれいになるようにしかつ膜の耐久性を向上させた13

どうやって有効だと検証した13

３目並べを用いた被験者実験を実施13 ユーザは膜を割ると負け膜を自分のマスにするにはタッチ押す引くの書かれた通りの操作を行う13

議論はある13

ユーザに精密な動作を要求することはとりわけ注意を払うことを誘発する13

次に読むべき論文は13

Wetzstein13 et13 al13 201213

Tensor13 Displays13 Compressive13 Light13 Field13 Synthesis13 using13 Mul4layer13 Displays13 with13 Direc4onal13 Backligh4ng(SIGGRAPHrsquo12)

Gordon13 Wetzstein13 Douglas13 Lanman13 MaChew13 Hirsch13 Ramesh13 Raskar

201413109　久保勇貴 2（鬼コース）13

どんなもの13

視点によって異なる立体映像を見ることができる複数の層からなるディスプレイ13

先行研究と比べてどこがすごい13

既存の手法を合成したcomputa(onal13 displaysというディスプレイの新しいフレームワークを提案した13

技術や手法のキモはどこ13

時分割で視差マスクを表示することでユーザの視線ごとに立体像を表現する13

どうやって有効だと検証した13

通常のディスプレイ３層LCDLCD及び指向性バックライトの例による比較13 13

議論はある13

波紋を含むこと色チャンネルが悪影響を与える相互反射不均一などの問題が見られた13

次に読むべき論文は13

Matoba13 et13 al13 1213

SplashDisplay(VRICrsquo12)Yasuo Matoba Taro Tokui Ryo Sato Tochiki Sato Hideki Koike

201413109　久保勇貴 2（鬼コース）13

どんなもの13

パーティクルにCGを投射しパーティクルがテーブル上に投げられると爆発しパーティクルが噴きあがる13

先行研究と比べてどこがすごい13

ビーズがミリメートルからメートル単位までZ軸方向について空中で奥行きを表現する13

技術や手法のキモはどこ13

スピーカによって風力が発生させビーズを舞い上げる点13

どうやって有効だと検証した13

ビーズを投げると花火が打ちあがっているかのようなアプリケーション例を示した13

議論はある13

高いレベルの表現及び幅広い入力範囲を提供できた13

次に読むべき論文は13

Kim13 et13 al13 1413

MARIO13 Mid-shy‐air13 Augmented13 Reality13 Interac4on13 with13 Objects13 (ECrsquo14)Hanyuool13 Kim13 13 Issei13 Takahashi13 Hiroki13 Yamamoto13 Satoshi13 Maekawa13 Takeshi13 Naemura

201413109　久保勇貴 2（鬼コース）13

どんなもの13

350times300times250のテーブル上のスペースにおいて自由に動かせる空中像を造りだすことができる13

先行研究と比べてどこがすごい13

凹面鏡や凹レンズのように曲面でないため画像の歪曲が発生しない13

技術や手法のキモはどこ13

Aerial13 Imaging13 Plate(AIP)を用いた空中像の生成及びそのためのディスプレイ移動装置13

どうやって有効だと検証した13

左右からの視差の考慮及び奥行き表現時の画像提示視野角の検証などを行った13 13

議論はある13

投影しているひよこを叩いたり払いのけたりするような動作がデモ中見られた13

次に読むべき論文は13

Tactile Feedback on Flat Surfaces for the Visually Impaired13Ali Israr Olivier Bau Seung-Chan Kim Ivan Poupyrev13

どのようなものか 視覚障害者のための触覚を用いた視覚代用デバイス 先行研究と比べてどこがすごいか 道案内をしてくれる機械などはあるが日用品の場所を教えたり探すのを手伝ってくれるデバイスはない 技術や手法のキモ タッチパネルとカメラを搭載したデバイス 触覚を与える技術はTeslaTouchを利用 色を基準にオブジェクトの位置を認識 有用性の確認 視覚障害者二人に対して実験このデバイスを使

わなくても各自の方法で物を見つけられるが間違えることが多いこのデバイスを使用することで間違えることなく正確に物の位置を特定できた 課題 一つの色でしか判断できない 触感のあるなしでしか情報を伝えられない 関連論文 TeslaTouch [Bau et al 2010]

20150522 橋爪智 2鬼

Fingernail-Mounted Display of Attraction Force and Texture13Masataka Niwa Tomoko Nozaki Taro Maeda and Hideyuki And13

どのようなものか 指先に取り付けて触感と力を両方表現できるデバイス 先行研究と比べてどこがすごいか 触感と引力をそれぞれ表現するデバイスはあるが両方を一つのデバイスで表現した例は少ない 引力は自由な方向に付加することができる 技術や手法のキモ 偏心に重さを付けた円盤を4枚使用する 5-9Hz 引力　100-200Hz 触感 それぞれの円盤の位相や回転数を調整することで

触感と力 を表現する 4つのモータを使いそれぞれの円盤を独立して制御する 有用性の確認 4人の男性に対して実験80以上の精度で認識できた 関連論文 The nail-mounted attraction forcebump display [Nozaki et al 2008]

20150522 橋爪智 2 鬼

Gilded gait reshaping the urban experience with augmented footsteps13Yuichiro Takeuchi13

どのようなものか 靴に装着し地面の触感をコントロールするデバイス 先行研究と比べてどこがすごいか 単独で動作しなかったり特定の環境のみでしか動作しなかったりするrarr靴単体で動作環境に依存しない 技術や手法のキモ 6個の振動パネルを取り付けゲルでカバー app modulesを取り替えることができ様々な機能を付加できる（GPSsound) 4種類の地面を再現

bull  Hard Ground 振動させない bull  Soft Ground すべてのパネルを振動 bull  Bumpy Ground ジグザグに振動 bull  Godzilla 全てのパネルを振動何回か繰り返す 課題 モーターを使っているため波形をプログラミングできないrarr圧電素子を使用する 関連論文 Haptic Shoes [Fu et al 2010]

20150522 橋爪智 2鬼

ExoInterfaces novel exosceleton haptic interfaces for virtual reality augmented sport and rehabilitation

Dzmitry Tsetserukou Katsunari Sato Susumu Tachi13

どのようなものか 腕に装着し物理的なinteractionを可能にするデバイス 先行研究と比べてどこがすごいか Exoskeleton 力を増幅するためだが重たく危険なこともある String-based wireが視界をまたぐ動きに制限がある rarr腕の動きに制限を与えない安全 技術や手法のキモ 「FlexTorque」人間の筋肉の構造を再現するベルトとモーターを使用する肩の近くに装着することで

腕に負担がかかりにくい 触覚feedback弱いトルク 運動を支援強いトルク 課題 物理的な接触を表現するゲームやスポーツにより没頭させるリハビリのサポートをする視覚障害者の支援（ものの場所を教える） 関連論文 FlexTorque [Dzmitry et al 2010]

20150522 橋爪智 2 鬼

Perception of Ultrasonic Haptic Feedback on the Hand Localisation and Apparent Motion13

Graham Wilson Tom Carter Sriram Subramanian Stephen Brewster13

どのようなものか 超音波を用いた触覚フィードバック有効性の検討を行う 先行研究と比べてどこがすごいか 超音波触覚フィードバックは比較的新しく研究や操作方法に関する知識が少ない 腕を自由に動かすことができ小さいものは着用可能 技術や手法のキモ 88のアレイ状に超音波発生器を設置

有効性の確認 bull  局所的な触感 　　　25箇所に分割しそれぞれに超音波を当てる 　　　触感を感じた989 　　　場所の誤差85mm bull  手のひらを動く触感 上下左右に動く 　　　動いてると感じた629

20150522 橋爪智 2 鬼

Friction Measurements on a Large Area TPaD13Nicholas D Marchuk J Edward Colgate Michael A Peshkin13

どのようなものか 超音波の振動により触感を与える 先行研究と比べてどこがすごいか ガラス板を使うので透明後ろにディスプレイを配置可能 技術や手法のキモ 「Squeeze Film Effect（スクイズ膜効果）」 ガラス板に取り付けた圧電素子の円盤に高周波信号

をかける 実験 振動しない部分＝摩擦が発生しない部分が発生周波数により場所が変わる rarr摩擦を大きさをかける力の大きさから計測 rarr指の場所に合わせて複数の周波数を使い分ける 関連論文 T-PaD[Winfield et al 2007]

20150522 橋爪智 2 鬼

STIMTAC a Tactile Input Device with Programmable Friction13Michel Amberg Freacutedeacuteric Giraud Betty Semail Paolo Olivo Geacutery Casiez Nicolas Roussel13

どのようなものか 触感を与えられるタッチデバイス 先行研究と比べてどこがすごいか LATPaD サイズ大きいノイズが大きい TeslaTouch 高い電圧付加が必要GNDに接続しなければいけない

技術や手法のキモ 「Squeeze Film Effect」超音波を用いて振動を与える 圧電性セラミックを電極にコーディング 指トラッキングは力センサを用いる 活用法 マウスキーボード絵を描く 関連論文 LATPaD[Vincent et al 2011] TeslaTouch[Bau et al 2010]

20150522 橋爪智 2 鬼

Surround Haptics Tactile Feedback for Immersive Gaming Experiences Ali Israr Seung-Chan Kim Ivan Poupyrev Jan Stec13

どのようなものか ゲームに合わせて高解像度の触覚フィードバックをユーザーに与える椅子 先行研究と比べてどこがすごいか 荒く配置した安価な振動アクチュエータで高解像度の触覚フィードバックを行える 一点の振動連続した動き範囲の振動などを再現

技術や手法のキモ 仮想的な振動アクチュエータをいくつかの振動アクチュエータを使って作り出す physical-physicalphysical-virtualvirtual-virtual ゲームにHaptics Engineを導入しHaptics APIを用いてHaptic Displayを操作する 関連論文 Exploring Surround Haptics Displays[Israr et al 2010]

20150522 橋爪智 2 鬼

Audio-Haptic Feedback in Mobile Phones Angela Chang Conor OrsquoSullivan13

どのようなものか haptics機能のついてない携帯電話にオーディオ機能を利用した触覚フィードバックを追加する 先行研究と比べてどこがすごいか 簡単に作れてnon-haptic mobile devicesでも大丈夫 技術や手法のキモ 「MultiFunction Transducer(MFT)」 スピーカーから音と信号の両方を出力できる

bull  Haptic Inheritance 　　音を2つの周波数帯に分ける bull  Synthesis and Matching 　　低周波数帯(20-300Hz)を使い触感を伝える 有効性の検討 42人の人を対象に実験を行う83の人が触感を感じた

20150522 橋爪智 2 鬼

Resolution of Sleep Deprivation Problems using ZZZoo Pillows13Shunsuke Yanaka Motoki Ishida13

どのようなものか 近年不眠症の人が多い rarr誰かと接していると安心し睡眠に導入しやすくなる rarrまるで添い寝をしているようなリアルな抱きまくらを使う 技術や手法のキモ breathing sensation 風船を使って人の呼吸を再現肺の形の風船弱く長い呼吸をする

heating お湯を使って人の体温を再現45 有効性の確認 84人の人が実験 呼吸が睡眠を誘ったかrarr61 体温が睡眠を誘ったかrarr85 関連論文 The Impact of Sleep Disorders on Social Life[Komada et al 2007]

20150522 橋爪智 2 鬼

まとめ13超音波 モーター 風

20150522 橋爪智 2 鬼

コイル 電気刺激 Electrovibration

振動 音 お湯

なかの

Temporally Consistent Disparity and Optical Flow via Efficient Spatio-temporal Filtering1

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示した

議論論はあるか

時間的に一定の視差を算出する手法静止画ステレオよりも精度度が良良いことを示す従来よりも推定精度度が良良いオプティカルフローも算出する

一枚の静止画に対するフィルタリング[1]をステレオ動画に拡張している

ケンブリッジのステレオ動画のデータセットを利利用 実写動画に対する比較も行行うノイズ耐性も検証する

フィルタベースとエネルギーベースの関係性を良良り理理解することで推定精度度を上げる

実装が簡単でリアルタイム視差推定が可能

Fast Cost-Volume Filtering for Visual Correspondence and Beyond [Rhemann C Hosni A Bleyer M Rother C Gelautz M CVPR2011] Real-time Spatiotemporal Stereo Matching Using the Dual-Cross-Bilateral Grid [Richardt C Orr D Davies I Criminisi A Dodgson NA ECCV2010] Secrets of optical flow estimation and their principles [Sun D Roth S Black MJ 2010] Motion estimation with non-local total variation regularization [Werlberger M Pock T Bischof H CVPR2010] Temporally Consistent Disparity Maps from Uncalibrated Stereo Videos [Bleyer M Gelatuz M ISPA2011]

なかの

SymStereo Matching using Induced Symmetry (2014)2

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示した

議論論はあるか

画像の対称性を用いてステレオマッチングを行行う 左右の画像を反転させて重ね合わせることで対称性を測る

絵的な類似の代わりに対称性を使う今まで対称性を用いる手法はなく新規性が大きい

三つのSymmetry-baseの手法で精度度を検証従来手法よりも精度度が向上しているMiddlebury Oxford Corridorfountain-P11のデータセット使用

ステレオの問題である不不連続な箇所オクルージョン部分は未解決である演算時間はやや増加

1-Dラインのコストを考える今までは撮像面に対して平行行な平面でデプスを考えていたが垂直な平面を考える

BT[Birchfield and Tomasi 1998] Census transform[Zabih and Woodfill 1994] Log N[Kovesi 1997] radio-metoric differences[Hirschmuller Scharstein 2009]

なかの

Camouflaging an Object from Many Viewpoints3

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

多くの視点から三次元の物体をカモフラージュするカモフラージュによってオクルージョン部分の不不連続がどの程度度生じるか他の視点ではどれほどになるかの検証

MRF（Markov Random Fields）ベース

新しい三次元物体のカモフラージュモデルを構築 37種類のデータセットを作る

箱形の物体に対してカモフラージュ処理理を施し 結果を評価する

オクルージョン不不連続テクスチャの歪みが問題 照明や画像の貼りつけに制限あり

なかの

Aliasing Detection and Reduction in Plenoptic Imaging4

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

カメラアレイ撮影の角度度のエイリアシングを除去するエイリアシングの探索索と打ち消しを行行う

周波数領領域ではなく空間領領域で探索索を行行う

先行行研究がフィルタデモザイキング再パラメータ調整などの前処理理でエイリアシング除去を行行うのに対しエイリアシング探索索後にリフォーカスの段階でエイリアシングを取り除く

8times8の平行行カメラアレイで検証するカメラ間の 基線長は70mm

今回は基線長が長いデータセットを使った 次はLytroなどのマイクロレンズアレイで検証する

Globally consistent multi-label assignment on the ray space of 4d light fields [S Wanner C Straehle B Goldluecke CVPR2013] Lineassisted light field triangulation and stereo matching [Z Yu X Guo H Lin A Lumsdaine J Yu ICCV 2013]

なかの

Globally Consistent Multi-Label Assignment on the Ray Space of 4D Light Fields5

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

四次元ライトフィールドの光線情報において マルチラベルの領領域分割を行行う

深度度情報光線情報を用いて領領域分割することで 二次元（空間）情報だけでは分割が難しかった 領領域を分割可能とする

The light field camera Extended depth of field aliasing and superresolution [T Bishop P Favaro IEEE Transactions on Pattern Analysis and Machine Intelligence 2012]

なかの

Line Assisted Light Field Triangulation and Stereo Matching6

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

光線情報を利利用してステレオマッチングの精度度を 向上させる手法三角測量量の誤差を減らす

Light Field Stereo Matchingとかいう手法 グラフ構造を作成

Variational light field analysis for disparity estimation and super-resolution [S Wanner and B Goldlumluecke 2013]

なかの

Adaptive stereo similarity fusion using confidence measures 20157

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

ステレオマッチングの新しい方式fusion weightsを提案複数の手法を組み合わせてコスト計算を行行う手法付録に既存手法のコスト関数一覧あり

パラメータに依存する手法を用いないことで高速化を図っている

一つのアルゴリズムでは異異なる特性を持つ領領域全てに対して適切切なマッチングはできない複数を組み合わせることでそれを補う13種と多い

middleburyとKITTIのデータセットで評価

一枚あたり03sと高速だが001sとより高速なアルゴリズムが存在する

Segment-based stereo matching using belief propagation and a self-adapting dissimilarity measure [A Klaus M Sormann K Karner ICPR2006] On building an accurate stereo matching system on graphics hardware [X Mei X Sun M Zhou S Jiao H Wang X Zhang ICCV2011] Similarity measures for depth estimation [K Wegner O Stankiewicz 3DTV-CON2009] On accurate dense stereo-matching using a local adaptive multi-cost approach [C Stentoumis L Grammatikopoulos I Kalisperakis G Karras ISPRS2014] A quantitative evaluation of confidence measures for stereo vision [X Hu P Mordohai PAMI2012]

なかの

SIMILARITY MEASURE FOR DEPTH ESTIMATIOM 20098

どんなもの

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

4種類の視差推定アルゴリズムを組み合わせている 類似度度の選択性の解析

Belief Propagationの枠組みを用いる

名古屋大学の多視点データベースを利利用

HHI Test Material for 3D Video [I Feldmann M Muller F Zilly R Tanger A SmolicP Kauff T Wiegand 2008] Multiview Video Test Sequence and Camera Parameters [Yo-Sung Ho Eun-Kyung Lee and Cheon Lee 2008] 1D Parallel Test Sequences for MPEG-FTV [M Tanimoto T Fujii N Fukushima 2008] Non-parametric Local Transforms for Computing Visual Correspondence [R Zabih J Woodfill 1994]

なかの

Spatiotemporal Stereo via Spatiotemporal Quadric Element (Stequel) Matching9

どんなもの

技術や手法のキモはどこ

新しいマッチング手法を提案動き考慮することなく時間情報を取り込むことができる 時間方向のエピ線を考える

オプティカルフロー推定は3D境界や低テクスチャで弱いが提案手法はロバストである

なかの

Depth Video Enhancement Based on Weighted Mode Filtering10

どんなもの

議論論はある

ノイズを含んだ低解像度度のデプスマップの質を高める手法（超解像度度とデノイズ）時間方向も使用簡単なオプティカルフローを計算し利利用する

非反復復アルゴリズムのためGPUに載せやすく高速化が考えられる

なかの

Fast Bilateral-Space Stereo for Synthetic Defocus11

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

議論論はある

次に読むべき論論文は

高速な自由焦点ぼけ画像の作成

Bilateral-spaceを提案

従来研究よりも10から100倍速くぼけ具合の精度度も良良い

ぼけを作成するというアプリケーションに利利用する距離離という面では提案手法が有益であるが実測的な距離離という面での精度度は悪い背景と前景が同じ色で近くにある場合同一ととらえてしまう

Efficient high-resolution stereo matching using local plane sweeps [S N Sinha D Scharstein and R SzeliskiCVPR2014] Bilateral filtering-based optical flow estimation with occlusion detection [J Xiao H Cheng H Sawhney C Rao and M IsnardiECCV2006] Efficient nonlocal regularization for optical flow [P Krumlahenbumluhl and V KoltunECCV2012] Real-time spatiotemporal stereo matching using the dual-cross-bilateral grid [C Richardt D Orr I Davies A Criminisi and N A DodgsonECCV2010]

どうやって有効性を示した視差推定の精度度はmiddleburyKITTI

なかの

Robust Spatiotemporal Stereo for Dynamic Scenes12

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

ステレオ動画のフレーム間情報を取り入れることでノイズ耐性を向上させるまた動きの大きなものも考える

時間を含めたウインドウの提案自動的にそのような変化に対応する画像領領域を検出する

従来の時空間ステレオと比べ大きな動きによる急激な視差の時間変化に対して頑健である

なかの

Spacetime Stereo A Unifying Framework for Depth from Triangulation13

どんなもの

先行行研究と比べてどこがすごい

space time stereoを提案ステレオカメラの視差推定でも構造光を用いた視差推定でも利利用可能 動的なシーンでの利利用も可能

フレームごとマッチングを取っていたが複数フレームでのマッチングを可能とした

なかの

Learning to Select and Order Vacation Photographs (Disney research)14

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示したあまりにもたくさん撮影した写真たちから自動的にフォトアルバムを作成する研究

複雑な視覚での区別を試みたのはこの論論文が初

５つの異異なるトピックから63の個人的な写真コレクションのデータセットを利利用し定量量的に評価する

写真間の差別かを定義する顔全体の絵何が写っているか写っていないかを評価する

Jointly aligning and segmenting multiple web photo streams for the inference of collective photo storylines [G Kim and E P Xing CVPR2013] Photo sequencing [T Basha Y Moses and S Avidan CVPR2012]

なかの

A Taxonomy and Evaluation of Dense Two-Frame Stereo Correspondence Algorithms15

どんなもの

どうやって有効性を示した

次に読むべき論論文は

ステレオマッチングに関する分類を行行う 新たなデータセットを作成する

というよりも他の手法が有効性を示すことができるようにデータセットを作成した 今ではmiddleburyのデータセットと言えばステレオ業界では超有名

High-resolution stereo datasets with subpixel-accurate ground truth

なかの

Discriminability Limits in Spatio-Temporal Stereo Block Matching1

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

spatio-temporal disparity estimationの根本的な前提の正当性を解析しマッチング処理理の際に動きが助けとなる程度度を決定する

時空間マッチングのエラーを分析し誤りの原因を確率率率で導出する（フレーム数動きの分散画像特徴ノイズの関数）

[34243334]は時空間マッチングの利利点を指摘していたが本論論文はマッチング精度度の向上のために動きを用いる手法の程度度や性質を研究する

6つのステレオビデオを用いて検証を行行った

Spacetime stereo Shape recovery for dynamic scenes [L Zhang B Curless and S Seitz CVPR2003] Spatiotemporal stereo and scene flow via stequel matching [M Sizintsev and R Wildes PAMI2012] Temporally consistent disparity and optical flow via efficient spatio-temporal filtering [A Hosni C Rhemann M Bleyer and M Gelautz PRCAIVT2012] Spacetime stereo A unifying framework for depth from triangulation [PAMI2005] Dynamic depth recovery from multiple synchronized video streams [H Tao H Sawhney and R Kumar CVPR2001] Spatiotemporal descriptor for wide-baseline stereo reconstruction of non-rigid and ambiguous scenes [ECCV2003]

なかの

Depth-Based Patch Scaling for Content-Aware Stereo Image Completion2

どんなもの

どうやって有効性を示した

ステレオでデプスを取り物体の三次元情報を使ってインペインティングを行行う

bookのデータセット背景が繰り返しパターンが多いものを使っている

なかの

Fast Semi-dense Surface Reconstruction from Stereoscopic Video in Laparoscopic Surgery3

どんなもの

手法の流流れ

次に読むべき論論文は

腹腔内手術の際にステレオビデオから高速に物体の三次元再構成を行行う研究

Evaluation of stereo matching costs on images with radiometric differences [Hirschmueller H Scharstein D PAMI2008]

スコープカメラから画像取得GPUで演算する 視差を算出しフィルタにかける距離離に変換 点群を再びフィルタにかけて三次元再構成

なかの

3D Reconstruction from Accidental Motion4

どんなもの

技術や手法のキモはどこ

議論論はある

数秒のビデオ（単眼）から三次元再構成を行行う 手ぶれなどの動きから再構成が可能で特定の動きや機材を必要としない

短い基線長でも再構成が可能（3mmの基線長）

基線長が短いため背景の精度度が低くなる リフォーカス画像作成には十分 練習では上手く動作したが検証がまだ必要

なかの

Panoramic Video from Unstructured Camera Arrays5

どんなもの

技術や手法のキモはどこ

議論論はある

複数のカメラを用いたパノラマ撮影を行行う その際に不不自然さがないような動画を作成する

不不自然さを感じる感覚特性を提示しそれにのっとって対策を講じている

一つのカメラの解像度度と品質を向上させるよりも複数台のカメラを組み合わせることがはるかに簡単で有益である専門家でなくてもGoProのカメラセットを組み合わせることは容易易

カメラの配置は厳密に決められていない完璧な時間同期やローリングシャッターの不不足のような実撮影での問題もクリアしている

先行行研究と比べてどこがすごい

どうやって有効性を示した左のシステムは14台のカメラを使用 右のシステムはGoProを5台使用

Disney 201558

なかの

Floating Scale Surface Reconstruction6

どんなもの

技術や手法のキモはどこ

流流動的にスケールを変えられる三次元再構成手法

サンプル規模に依存するパラメータがない rarrどのスケールのサンプルにも対応できる

siggraph2014

なかの

A Super Resolution Reconstruction Scheme for Mixed Spatio-Temporal Stereo Video7

どんなもの

技術や手法のキモはどこ

ビデオ超解像アルゴリズム

二台のカメラを使用 一台は低解像度度で高速一台は高解像度度で低速

HHI 3DV ftp siteのBookarrivalとbeergadenを使用どうやって有効性を示した

なかの

What Is a Good Day for Outdoor Photometric Stereo8

どんなもの

先行行研究と比べてどこがすごい

議論論はある

次に読むべき論論文は

屋外における照度度差があるステレオの研究 屋外でステレオを行行う際に有利利or不不利利な日照条件を明らかにする

点光源を用いた研究は行行われていたが屋外での研究はされていなかった

晴れより曇りの方が精度度が良良い雲があるから特徴量量を取りやすい雑音を白色ガウスモデルを想定 季節ごとのデータセットを利利用してみても良良い

Time-lapse photometric stereo and applications [F Shen K Sunkavalli N Bonneel S Rusinkiewicz H Pfisterand X Tong2014] Outdoor photometric stereo [L-F Yu S-K Yeung Y-W Tai D Terzopoulos and T FChan ICCP2013]

どうやって有効性を示した屋外の照明に関するHDR環境マップのデータベースを利利用

Disney 2015424

なかの

COLORBRUSH ANIMATED DIFFUSION FOR INTUITIVE COLORIZATION SIMULATING WATER PAINTING 9

どんなものアニメを水彩画で描いたように変換する 水彩画を描くには経験が必要であるがそれを作成するアルゴリズムを考案絵具が水によりどうにじむかシュミレーションしている

Disney 20141027 ICIP2014

次に読むべき論論文はGabor-space geodesic active contoursrdquo In Algebraic Frames for the Perception-Action Cycle [C Sagiv NA Sochen and YY Zeevi 2000] Practical temporal consistency for image-based graphics applications [M Lang O Wang T Aydin A Smolic and M Gross SIGGRAPH2012] Computer-Generated Watercolor [CJ Curtis SE Anderson JE Seims KW Fleischer and DH Salesin SIGGRAPH1997]

なかの

From Sound to Sight Using Audio Processing to enable Visible Light Communication 10

どんなもの光に情報を載せる技術プロジェクトページがあって光関係の研究が8個載っている

httpwwwdisneyresearchcomprojectvisible-light-communication

ビデオのURL httpwwwdisneyresearchcomwpcontentuploadsPub_InvisibleLightCommunication_Siggraph14_videomp4

• 201211106_KeisukeKawahara
• 201311421_KeitaKanai_02
• 201313095_AkiraIshii_02
• 201413109_YuukiKubo_02
• 201513110_SatoshiHashizume_02
• 鬼輪講マラソン③_1
• 鬼輪講マラソン③_2

Vermeer13 Direct13 Interac4on13 with13 a13 360deg13 Viewable13 3D13 Display(UISTrsquo11) Alex Butler Otmar Hilliges Shahram Izadi Steve Hodges David Molyneaux David Kim

201413109　久保勇貴 2（鬼コース）13

どんなもの13

映し出された3Dオブジェクトとインタラクションを行えるシステム13

先行研究と比べてどこがすごい13

ディスプレイ内の画像とのインタラクションを提案ボリュームディスプレイを支援する新しいセンシング法の提案13

技術や手法のキモはどこ13

パラボラ鏡に取り付けた赤外線カメラセンサによる指先検出13

どうやって有効だと検証した13

アプリケーション例を示した13

議論はある13

パラボラ鏡の大きさよりもディスプレイサイズが小さくなってしまう13

次に読むべき論文は13

Hirsch13 et13 al13 201213

8D13 Interac4ng13 with13 a13 Relightable13 Glasses-shy‐Free13 3D13 Display(CHIrsquo12)Li-Wei Chan Hui-Shan Kao Mike Y Chen Ming-Sui Jane Yi-Ping Hung

201413109　久保勇貴 2（鬼コース）13

どんなもの13

ライトフィードによる入力とライトフィールドによる表示を行うリアルタイム8Dディスプレイ13

先行研究と比べてどこがすごい13

リアルタイムでの8Dディスプレイの実現（先行研究は7fps）13

技術や手法のキモはどこ13

GPUにおけるレンダリング処理13

どうやって有効だと検証した13

MRIデータを用いたディスプレイのデモを示した13

議論はある13

現在はグレースケールの入力のみだがカラーでの入力できればより強力になるだろう13

次に読むべき論文は13

Sahoo13 et13 al13 201513

Control13 of13 Non-shy‐Solid13 Diffusers13 by13 Electrosta4c13 Charging13 (CHIrsquo15) Deepak Ranjan Sahoo Diego Martinez Plasencia Sriram Subramanian

201413109　久保勇貴 2（鬼コース）13

どんなもの13

シャボン玉や霧などの非固体を電場による制御を試みた研究13

先行研究と比べてどこがすごい13

非固体の形や位置の制御法を提案した点13

技術や手法のキモはどこ13

[Intra13 et13 al13 11]中のldquowire-shy‐to-shy‐Cylinderdquoを用いたエアゾール粒子の帯電13

どうやって有効だと検証した13

霧及びシャボン玉によるディスプレイのアプリケーション例で実際に制御して見せた13

議論はある13

風による影響を本手法は打ち消すことができた13

次に読むべき論文は13

Barnum13 et13 al13 201013

A13 Mul4-shy‐Layered13 Display13 with13 Water13 Drops(SIGGRAPHrsquo10)Peter C Barnum Srinivasa G Narasimhan Takeo Kanade

201413109　久保勇貴 2（鬼コース）13

どんなもの13

複数層の落下水滴にプロジェクションマッピングを行いディスプレイとした研究13

先行研究と比べてどこがすごい13

水滴の制御を行うことで単一のプロジェクタによって複数層の映像投影を可能とした点13

技術や手法のキモはどこ13

[Ambravaneswaran13 et13 al13 2002]及び本研究における実験結果に基づく水滴生成13

どうやって有効だと検証した13

複数のディスプレイ例を示した13 例）顔の投影水槽シミュレータなど13

議論はある13

本当の3Dディスプレイにするにはより多くの水滴制御が必要13

次に読むべき論文は13

Lee13 et13 al13 200713

An13 Immaterial13 Depth-shy‐Fused13 3D13 Display(VRSTrsquo07)Cha Lee Stephen DiVerdi Tobias Humlollerer

201413109　久保勇貴 2（鬼コース）13

どんなもの13

２つのスクリーンを駆使し3Dディスプレイを実現するdepth-shy‐fused13 3D(DFD)に関する評価を行いその結果よりディスプレイを提案した研究13

先行研究と比べてどこがすごい13

DFDが任意のスクリーン設定及び見る位置に対して有効であることを示した13

技術や手法のキモはどこ13

６通りのスクリーン組合せから２つを抽出し見え方の違いを検証した点13

どうやって有効だと検証した13

６通りのスクリーンについて立体的に見えるか被験者実験を実施その後それぞれに有意差がみられるか調べた13

議論はある13

ステレオイメージを認めることができなかったユーザに対しても強い3D効果が見られた13

次に読むべき論文は13

Tokuda13 et13 al13 201013

Cloud13 Display13 (ACErsquo10)Yutaka Tokuda Yasuhiro Suzuki Kunihiro Nishimura Tomohiro Tanikawa Michitaka Hirose

201413109　久保勇貴 2（鬼コース）13

どんなもの13

煙の渦輪を用いた空間を埋めるディスプレイ13

先行研究と比べてどこがすごい13

制御可能な手法により高所へのパーティクルを運搬することに着目した点13

技術や手法のキモはどこ13

コンピュータによって制御が行われる空気砲アレイ13

どうやって有効だと検証した13

箱の中で実験を行い安定して渦輪をできるようにした実際にデモを行ったことを示した13

議論はある13

今の試作機をより早くリフレッシュ速度を高めることによりより濃く空間を埋められることを目指す13

次に読むべき論文は13

Sato13 et13 al13 200913

Par]cle13 Display13 System　(JVRC09)13 -shy‐13 A13 Large13 Scale13 Display13 for13 Public13 Space13 -shy‐

Munehiko13 Sato13 Yasuhiro13 Suzuki13 13 Atsushi13 Hiyama13 Tomohiro13 Tanikawa13 Michitaka13 Hirose

201413109　久保勇貴 2（鬼コース）13

どんなもの13

パーティクルディスプレイによる公共スペースのための大画面ディスプレイの提案13

先行研究と比べてどこがすごい13

公共スペースにおける要求と制限に基づいたシステムを提案した点13

技術や手法のキモはどこ13

実験に基づく表示画像のスクロール時間の制御13

どうやって有効だと検証した13

Aという文字の知覚実験によって 適な点滅周期の調査を行った13

議論はある13

現在の試作機を組合せより高解像度にする必要がある13

次に読むべき論文は13

Kwon13 et13 al13 201513

FugaciousFilm13 Exploring13 Aen4ve13 Interac4on13 with13 Ephemeral13 Material13 (CHIrsquo15)Hyosun13 Kwon13 Shashank13 Jaiswal13 Steve13 Benford13 Sue13 Ann13 Seah13

13 Peter13 BenneC13 Boriana13 Koleva13 Holger13 Schnaumldelbach

201413109　久保勇貴 2（鬼コース）13

どんなもの13

膜を押す引く飛び出ることができる新しい石鹸膜インタフェースの提案13

先行研究と比べてどこがすごい13

徐々に消えるインタフェースは高い注意を有するインタラクションを提供するという点を示したこと13

技術や手法のキモはどこ13

水グリセリンを201の対比で混ぜることでldquopoprdquoがきれいになるようにしかつ膜の耐久性を向上させた13

どうやって有効だと検証した13

３目並べを用いた被験者実験を実施13 ユーザは膜を割ると負け膜を自分のマスにするにはタッチ押す引くの書かれた通りの操作を行う13

議論はある13

ユーザに精密な動作を要求することはとりわけ注意を払うことを誘発する13

次に読むべき論文は13

Wetzstein13 et13 al13 201213

Tensor13 Displays13 Compressive13 Light13 Field13 Synthesis13 using13 Mul4layer13 Displays13 with13 Direc4onal13 Backligh4ng(SIGGRAPHrsquo12)

Gordon13 Wetzstein13 Douglas13 Lanman13 MaChew13 Hirsch13 Ramesh13 Raskar

201413109　久保勇貴 2（鬼コース）13

どんなもの13

視点によって異なる立体映像を見ることができる複数の層からなるディスプレイ13

先行研究と比べてどこがすごい13

既存の手法を合成したcomputa(onal13 displaysというディスプレイの新しいフレームワークを提案した13

技術や手法のキモはどこ13

時分割で視差マスクを表示することでユーザの視線ごとに立体像を表現する13

どうやって有効だと検証した13

通常のディスプレイ３層LCDLCD及び指向性バックライトの例による比較13 13

議論はある13

波紋を含むこと色チャンネルが悪影響を与える相互反射不均一などの問題が見られた13

次に読むべき論文は13

Matoba13 et13 al13 1213

SplashDisplay(VRICrsquo12)Yasuo Matoba Taro Tokui Ryo Sato Tochiki Sato Hideki Koike

201413109　久保勇貴 2（鬼コース）13

どんなもの13

パーティクルにCGを投射しパーティクルがテーブル上に投げられると爆発しパーティクルが噴きあがる13

先行研究と比べてどこがすごい13

ビーズがミリメートルからメートル単位までZ軸方向について空中で奥行きを表現する13

技術や手法のキモはどこ13

スピーカによって風力が発生させビーズを舞い上げる点13

どうやって有効だと検証した13

ビーズを投げると花火が打ちあがっているかのようなアプリケーション例を示した13

議論はある13

高いレベルの表現及び幅広い入力範囲を提供できた13

次に読むべき論文は13

Kim13 et13 al13 1413

MARIO13 Mid-shy‐air13 Augmented13 Reality13 Interac4on13 with13 Objects13 (ECrsquo14)Hanyuool13 Kim13 13 Issei13 Takahashi13 Hiroki13 Yamamoto13 Satoshi13 Maekawa13 Takeshi13 Naemura

201413109　久保勇貴 2（鬼コース）13

どんなもの13

350times300times250のテーブル上のスペースにおいて自由に動かせる空中像を造りだすことができる13

先行研究と比べてどこがすごい13

凹面鏡や凹レンズのように曲面でないため画像の歪曲が発生しない13

技術や手法のキモはどこ13

Aerial13 Imaging13 Plate(AIP)を用いた空中像の生成及びそのためのディスプレイ移動装置13

どうやって有効だと検証した13

左右からの視差の考慮及び奥行き表現時の画像提示視野角の検証などを行った13 13

議論はある13

投影しているひよこを叩いたり払いのけたりするような動作がデモ中見られた13

次に読むべき論文は13

Tactile Feedback on Flat Surfaces for the Visually Impaired13Ali Israr Olivier Bau Seung-Chan Kim Ivan Poupyrev13

どのようなものか 視覚障害者のための触覚を用いた視覚代用デバイス 先行研究と比べてどこがすごいか 道案内をしてくれる機械などはあるが日用品の場所を教えたり探すのを手伝ってくれるデバイスはない 技術や手法のキモ タッチパネルとカメラを搭載したデバイス 触覚を与える技術はTeslaTouchを利用 色を基準にオブジェクトの位置を認識 有用性の確認 視覚障害者二人に対して実験このデバイスを使

わなくても各自の方法で物を見つけられるが間違えることが多いこのデバイスを使用することで間違えることなく正確に物の位置を特定できた 課題 一つの色でしか判断できない 触感のあるなしでしか情報を伝えられない 関連論文 TeslaTouch [Bau et al 2010]

20150522 橋爪智 2鬼

Fingernail-Mounted Display of Attraction Force and Texture13Masataka Niwa Tomoko Nozaki Taro Maeda and Hideyuki And13

どのようなものか 指先に取り付けて触感と力を両方表現できるデバイス 先行研究と比べてどこがすごいか 触感と引力をそれぞれ表現するデバイスはあるが両方を一つのデバイスで表現した例は少ない 引力は自由な方向に付加することができる 技術や手法のキモ 偏心に重さを付けた円盤を4枚使用する 5-9Hz 引力　100-200Hz 触感 それぞれの円盤の位相や回転数を調整することで

触感と力 を表現する 4つのモータを使いそれぞれの円盤を独立して制御する 有用性の確認 4人の男性に対して実験80以上の精度で認識できた 関連論文 The nail-mounted attraction forcebump display [Nozaki et al 2008]

20150522 橋爪智 2 鬼

Gilded gait reshaping the urban experience with augmented footsteps13Yuichiro Takeuchi13

どのようなものか 靴に装着し地面の触感をコントロールするデバイス 先行研究と比べてどこがすごいか 単独で動作しなかったり特定の環境のみでしか動作しなかったりするrarr靴単体で動作環境に依存しない 技術や手法のキモ 6個の振動パネルを取り付けゲルでカバー app modulesを取り替えることができ様々な機能を付加できる（GPSsound) 4種類の地面を再現

bull  Hard Ground 振動させない bull  Soft Ground すべてのパネルを振動 bull  Bumpy Ground ジグザグに振動 bull  Godzilla 全てのパネルを振動何回か繰り返す 課題 モーターを使っているため波形をプログラミングできないrarr圧電素子を使用する 関連論文 Haptic Shoes [Fu et al 2010]

20150522 橋爪智 2鬼

ExoInterfaces novel exosceleton haptic interfaces for virtual reality augmented sport and rehabilitation

Dzmitry Tsetserukou Katsunari Sato Susumu Tachi13

どのようなものか 腕に装着し物理的なinteractionを可能にするデバイス 先行研究と比べてどこがすごいか Exoskeleton 力を増幅するためだが重たく危険なこともある String-based wireが視界をまたぐ動きに制限がある rarr腕の動きに制限を与えない安全 技術や手法のキモ 「FlexTorque」人間の筋肉の構造を再現するベルトとモーターを使用する肩の近くに装着することで

腕に負担がかかりにくい 触覚feedback弱いトルク 運動を支援強いトルク 課題 物理的な接触を表現するゲームやスポーツにより没頭させるリハビリのサポートをする視覚障害者の支援（ものの場所を教える） 関連論文 FlexTorque [Dzmitry et al 2010]

20150522 橋爪智 2 鬼

Perception of Ultrasonic Haptic Feedback on the Hand Localisation and Apparent Motion13

Graham Wilson Tom Carter Sriram Subramanian Stephen Brewster13

どのようなものか 超音波を用いた触覚フィードバック有効性の検討を行う 先行研究と比べてどこがすごいか 超音波触覚フィードバックは比較的新しく研究や操作方法に関する知識が少ない 腕を自由に動かすことができ小さいものは着用可能 技術や手法のキモ 88のアレイ状に超音波発生器を設置

有効性の確認 bull  局所的な触感 　　　25箇所に分割しそれぞれに超音波を当てる 　　　触感を感じた989 　　　場所の誤差85mm bull  手のひらを動く触感 上下左右に動く 　　　動いてると感じた629

20150522 橋爪智 2 鬼

Friction Measurements on a Large Area TPaD13Nicholas D Marchuk J Edward Colgate Michael A Peshkin13

どのようなものか 超音波の振動により触感を与える 先行研究と比べてどこがすごいか ガラス板を使うので透明後ろにディスプレイを配置可能 技術や手法のキモ 「Squeeze Film Effect（スクイズ膜効果）」 ガラス板に取り付けた圧電素子の円盤に高周波信号

をかける 実験 振動しない部分＝摩擦が発生しない部分が発生周波数により場所が変わる rarr摩擦を大きさをかける力の大きさから計測 rarr指の場所に合わせて複数の周波数を使い分ける 関連論文 T-PaD[Winfield et al 2007]

20150522 橋爪智 2 鬼

STIMTAC a Tactile Input Device with Programmable Friction13Michel Amberg Freacutedeacuteric Giraud Betty Semail Paolo Olivo Geacutery Casiez Nicolas Roussel13

どのようなものか 触感を与えられるタッチデバイス 先行研究と比べてどこがすごいか LATPaD サイズ大きいノイズが大きい TeslaTouch 高い電圧付加が必要GNDに接続しなければいけない

技術や手法のキモ 「Squeeze Film Effect」超音波を用いて振動を与える 圧電性セラミックを電極にコーディング 指トラッキングは力センサを用いる 活用法 マウスキーボード絵を描く 関連論文 LATPaD[Vincent et al 2011] TeslaTouch[Bau et al 2010]

20150522 橋爪智 2 鬼

Surround Haptics Tactile Feedback for Immersive Gaming Experiences Ali Israr Seung-Chan Kim Ivan Poupyrev Jan Stec13

どのようなものか ゲームに合わせて高解像度の触覚フィードバックをユーザーに与える椅子 先行研究と比べてどこがすごいか 荒く配置した安価な振動アクチュエータで高解像度の触覚フィードバックを行える 一点の振動連続した動き範囲の振動などを再現

技術や手法のキモ 仮想的な振動アクチュエータをいくつかの振動アクチュエータを使って作り出す physical-physicalphysical-virtualvirtual-virtual ゲームにHaptics Engineを導入しHaptics APIを用いてHaptic Displayを操作する 関連論文 Exploring Surround Haptics Displays[Israr et al 2010]

20150522 橋爪智 2 鬼

Audio-Haptic Feedback in Mobile Phones Angela Chang Conor OrsquoSullivan13

どのようなものか haptics機能のついてない携帯電話にオーディオ機能を利用した触覚フィードバックを追加する 先行研究と比べてどこがすごいか 簡単に作れてnon-haptic mobile devicesでも大丈夫 技術や手法のキモ 「MultiFunction Transducer(MFT)」 スピーカーから音と信号の両方を出力できる

bull  Haptic Inheritance 　　音を2つの周波数帯に分ける bull  Synthesis and Matching 　　低周波数帯(20-300Hz)を使い触感を伝える 有効性の検討 42人の人を対象に実験を行う83の人が触感を感じた

20150522 橋爪智 2 鬼

Resolution of Sleep Deprivation Problems using ZZZoo Pillows13Shunsuke Yanaka Motoki Ishida13

どのようなものか 近年不眠症の人が多い rarr誰かと接していると安心し睡眠に導入しやすくなる rarrまるで添い寝をしているようなリアルな抱きまくらを使う 技術や手法のキモ breathing sensation 風船を使って人の呼吸を再現肺の形の風船弱く長い呼吸をする

heating お湯を使って人の体温を再現45 有効性の確認 84人の人が実験 呼吸が睡眠を誘ったかrarr61 体温が睡眠を誘ったかrarr85 関連論文 The Impact of Sleep Disorders on Social Life[Komada et al 2007]

20150522 橋爪智 2 鬼

まとめ13超音波 モーター 風

20150522 橋爪智 2 鬼

コイル 電気刺激 Electrovibration

振動 音 お湯

なかの

Temporally Consistent Disparity and Optical Flow via Efficient Spatio-temporal Filtering1

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示した

議論論はあるか

時間的に一定の視差を算出する手法静止画ステレオよりも精度度が良良いことを示す従来よりも推定精度度が良良いオプティカルフローも算出する

一枚の静止画に対するフィルタリング[1]をステレオ動画に拡張している

ケンブリッジのステレオ動画のデータセットを利利用 実写動画に対する比較も行行うノイズ耐性も検証する

フィルタベースとエネルギーベースの関係性を良良り理理解することで推定精度度を上げる

実装が簡単でリアルタイム視差推定が可能

Fast Cost-Volume Filtering for Visual Correspondence and Beyond [Rhemann C Hosni A Bleyer M Rother C Gelautz M CVPR2011] Real-time Spatiotemporal Stereo Matching Using the Dual-Cross-Bilateral Grid [Richardt C Orr D Davies I Criminisi A Dodgson NA ECCV2010] Secrets of optical flow estimation and their principles [Sun D Roth S Black MJ 2010] Motion estimation with non-local total variation regularization [Werlberger M Pock T Bischof H CVPR2010] Temporally Consistent Disparity Maps from Uncalibrated Stereo Videos [Bleyer M Gelatuz M ISPA2011]

なかの

SymStereo Matching using Induced Symmetry (2014)2

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示した

議論論はあるか

画像の対称性を用いてステレオマッチングを行行う 左右の画像を反転させて重ね合わせることで対称性を測る

絵的な類似の代わりに対称性を使う今まで対称性を用いる手法はなく新規性が大きい

三つのSymmetry-baseの手法で精度度を検証従来手法よりも精度度が向上しているMiddlebury Oxford Corridorfountain-P11のデータセット使用

ステレオの問題である不不連続な箇所オクルージョン部分は未解決である演算時間はやや増加

1-Dラインのコストを考える今までは撮像面に対して平行行な平面でデプスを考えていたが垂直な平面を考える

BT[Birchfield and Tomasi 1998] Census transform[Zabih and Woodfill 1994] Log N[Kovesi 1997] radio-metoric differences[Hirschmuller Scharstein 2009]

なかの

Camouflaging an Object from Many Viewpoints3

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

多くの視点から三次元の物体をカモフラージュするカモフラージュによってオクルージョン部分の不不連続がどの程度度生じるか他の視点ではどれほどになるかの検証

MRF（Markov Random Fields）ベース

新しい三次元物体のカモフラージュモデルを構築 37種類のデータセットを作る

箱形の物体に対してカモフラージュ処理理を施し 結果を評価する

オクルージョン不不連続テクスチャの歪みが問題 照明や画像の貼りつけに制限あり

なかの

Aliasing Detection and Reduction in Plenoptic Imaging4

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

カメラアレイ撮影の角度度のエイリアシングを除去するエイリアシングの探索索と打ち消しを行行う

周波数領領域ではなく空間領領域で探索索を行行う

先行行研究がフィルタデモザイキング再パラメータ調整などの前処理理でエイリアシング除去を行行うのに対しエイリアシング探索索後にリフォーカスの段階でエイリアシングを取り除く

8times8の平行行カメラアレイで検証するカメラ間の 基線長は70mm

今回は基線長が長いデータセットを使った 次はLytroなどのマイクロレンズアレイで検証する

Globally consistent multi-label assignment on the ray space of 4d light fields [S Wanner C Straehle B Goldluecke CVPR2013] Lineassisted light field triangulation and stereo matching [Z Yu X Guo H Lin A Lumsdaine J Yu ICCV 2013]

なかの

Globally Consistent Multi-Label Assignment on the Ray Space of 4D Light Fields5

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

四次元ライトフィールドの光線情報において マルチラベルの領領域分割を行行う

深度度情報光線情報を用いて領領域分割することで 二次元（空間）情報だけでは分割が難しかった 領領域を分割可能とする

The light field camera Extended depth of field aliasing and superresolution [T Bishop P Favaro IEEE Transactions on Pattern Analysis and Machine Intelligence 2012]

なかの

Line Assisted Light Field Triangulation and Stereo Matching6

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

光線情報を利利用してステレオマッチングの精度度を 向上させる手法三角測量量の誤差を減らす

Light Field Stereo Matchingとかいう手法 グラフ構造を作成

Variational light field analysis for disparity estimation and super-resolution [S Wanner and B Goldlumluecke 2013]

なかの

Adaptive stereo similarity fusion using confidence measures 20157

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

ステレオマッチングの新しい方式fusion weightsを提案複数の手法を組み合わせてコスト計算を行行う手法付録に既存手法のコスト関数一覧あり

パラメータに依存する手法を用いないことで高速化を図っている

一つのアルゴリズムでは異異なる特性を持つ領領域全てに対して適切切なマッチングはできない複数を組み合わせることでそれを補う13種と多い

middleburyとKITTIのデータセットで評価

一枚あたり03sと高速だが001sとより高速なアルゴリズムが存在する

Segment-based stereo matching using belief propagation and a self-adapting dissimilarity measure [A Klaus M Sormann K Karner ICPR2006] On building an accurate stereo matching system on graphics hardware [X Mei X Sun M Zhou S Jiao H Wang X Zhang ICCV2011] Similarity measures for depth estimation [K Wegner O Stankiewicz 3DTV-CON2009] On accurate dense stereo-matching using a local adaptive multi-cost approach [C Stentoumis L Grammatikopoulos I Kalisperakis G Karras ISPRS2014] A quantitative evaluation of confidence measures for stereo vision [X Hu P Mordohai PAMI2012]

なかの

SIMILARITY MEASURE FOR DEPTH ESTIMATIOM 20098

どんなもの

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

4種類の視差推定アルゴリズムを組み合わせている 類似度度の選択性の解析

Belief Propagationの枠組みを用いる

名古屋大学の多視点データベースを利利用

HHI Test Material for 3D Video [I Feldmann M Muller F Zilly R Tanger A SmolicP Kauff T Wiegand 2008] Multiview Video Test Sequence and Camera Parameters [Yo-Sung Ho Eun-Kyung Lee and Cheon Lee 2008] 1D Parallel Test Sequences for MPEG-FTV [M Tanimoto T Fujii N Fukushima 2008] Non-parametric Local Transforms for Computing Visual Correspondence [R Zabih J Woodfill 1994]

なかの

Spatiotemporal Stereo via Spatiotemporal Quadric Element (Stequel) Matching9

どんなもの

技術や手法のキモはどこ

新しいマッチング手法を提案動き考慮することなく時間情報を取り込むことができる 時間方向のエピ線を考える

オプティカルフロー推定は3D境界や低テクスチャで弱いが提案手法はロバストである

なかの

Depth Video Enhancement Based on Weighted Mode Filtering10

どんなもの

議論論はある

ノイズを含んだ低解像度度のデプスマップの質を高める手法（超解像度度とデノイズ）時間方向も使用簡単なオプティカルフローを計算し利利用する

非反復復アルゴリズムのためGPUに載せやすく高速化が考えられる

なかの

Fast Bilateral-Space Stereo for Synthetic Defocus11

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

議論論はある

次に読むべき論論文は

高速な自由焦点ぼけ画像の作成

Bilateral-spaceを提案

従来研究よりも10から100倍速くぼけ具合の精度度も良良い

ぼけを作成するというアプリケーションに利利用する距離離という面では提案手法が有益であるが実測的な距離離という面での精度度は悪い背景と前景が同じ色で近くにある場合同一ととらえてしまう

Efficient high-resolution stereo matching using local plane sweeps [S N Sinha D Scharstein and R SzeliskiCVPR2014] Bilateral filtering-based optical flow estimation with occlusion detection [J Xiao H Cheng H Sawhney C Rao and M IsnardiECCV2006] Efficient nonlocal regularization for optical flow [P Krumlahenbumluhl and V KoltunECCV2012] Real-time spatiotemporal stereo matching using the dual-cross-bilateral grid [C Richardt D Orr I Davies A Criminisi and N A DodgsonECCV2010]

どうやって有効性を示した視差推定の精度度はmiddleburyKITTI

なかの

Robust Spatiotemporal Stereo for Dynamic Scenes12

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

ステレオ動画のフレーム間情報を取り入れることでノイズ耐性を向上させるまた動きの大きなものも考える

時間を含めたウインドウの提案自動的にそのような変化に対応する画像領領域を検出する

従来の時空間ステレオと比べ大きな動きによる急激な視差の時間変化に対して頑健である

なかの

Spacetime Stereo A Unifying Framework for Depth from Triangulation13

どんなもの

先行行研究と比べてどこがすごい

space time stereoを提案ステレオカメラの視差推定でも構造光を用いた視差推定でも利利用可能 動的なシーンでの利利用も可能

フレームごとマッチングを取っていたが複数フレームでのマッチングを可能とした

なかの

Learning to Select and Order Vacation Photographs (Disney research)14

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示したあまりにもたくさん撮影した写真たちから自動的にフォトアルバムを作成する研究

複雑な視覚での区別を試みたのはこの論論文が初

５つの異異なるトピックから63の個人的な写真コレクションのデータセットを利利用し定量量的に評価する

写真間の差別かを定義する顔全体の絵何が写っているか写っていないかを評価する

Jointly aligning and segmenting multiple web photo streams for the inference of collective photo storylines [G Kim and E P Xing CVPR2013] Photo sequencing [T Basha Y Moses and S Avidan CVPR2012]

なかの

A Taxonomy and Evaluation of Dense Two-Frame Stereo Correspondence Algorithms15

どんなもの

どうやって有効性を示した

次に読むべき論論文は

ステレオマッチングに関する分類を行行う 新たなデータセットを作成する

というよりも他の手法が有効性を示すことができるようにデータセットを作成した 今ではmiddleburyのデータセットと言えばステレオ業界では超有名

High-resolution stereo datasets with subpixel-accurate ground truth

なかの

Discriminability Limits in Spatio-Temporal Stereo Block Matching1

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

spatio-temporal disparity estimationの根本的な前提の正当性を解析しマッチング処理理の際に動きが助けとなる程度度を決定する

時空間マッチングのエラーを分析し誤りの原因を確率率率で導出する（フレーム数動きの分散画像特徴ノイズの関数）

[34243334]は時空間マッチングの利利点を指摘していたが本論論文はマッチング精度度の向上のために動きを用いる手法の程度度や性質を研究する

6つのステレオビデオを用いて検証を行行った

Spacetime stereo Shape recovery for dynamic scenes [L Zhang B Curless and S Seitz CVPR2003] Spatiotemporal stereo and scene flow via stequel matching [M Sizintsev and R Wildes PAMI2012] Temporally consistent disparity and optical flow via efficient spatio-temporal filtering [A Hosni C Rhemann M Bleyer and M Gelautz PRCAIVT2012] Spacetime stereo A unifying framework for depth from triangulation [PAMI2005] Dynamic depth recovery from multiple synchronized video streams [H Tao H Sawhney and R Kumar CVPR2001] Spatiotemporal descriptor for wide-baseline stereo reconstruction of non-rigid and ambiguous scenes [ECCV2003]

なかの

Depth-Based Patch Scaling for Content-Aware Stereo Image Completion2

どんなもの

どうやって有効性を示した

ステレオでデプスを取り物体の三次元情報を使ってインペインティングを行行う

bookのデータセット背景が繰り返しパターンが多いものを使っている

なかの

Fast Semi-dense Surface Reconstruction from Stereoscopic Video in Laparoscopic Surgery3

どんなもの

手法の流流れ

次に読むべき論論文は

腹腔内手術の際にステレオビデオから高速に物体の三次元再構成を行行う研究

Evaluation of stereo matching costs on images with radiometric differences [Hirschmueller H Scharstein D PAMI2008]

スコープカメラから画像取得GPUで演算する 視差を算出しフィルタにかける距離離に変換 点群を再びフィルタにかけて三次元再構成

なかの

3D Reconstruction from Accidental Motion4

どんなもの

技術や手法のキモはどこ

議論論はある

数秒のビデオ（単眼）から三次元再構成を行行う 手ぶれなどの動きから再構成が可能で特定の動きや機材を必要としない

短い基線長でも再構成が可能（3mmの基線長）

基線長が短いため背景の精度度が低くなる リフォーカス画像作成には十分 練習では上手く動作したが検証がまだ必要

なかの

Panoramic Video from Unstructured Camera Arrays5

どんなもの

技術や手法のキモはどこ

議論論はある

複数のカメラを用いたパノラマ撮影を行行う その際に不不自然さがないような動画を作成する

不不自然さを感じる感覚特性を提示しそれにのっとって対策を講じている

一つのカメラの解像度度と品質を向上させるよりも複数台のカメラを組み合わせることがはるかに簡単で有益である専門家でなくてもGoProのカメラセットを組み合わせることは容易易

カメラの配置は厳密に決められていない完璧な時間同期やローリングシャッターの不不足のような実撮影での問題もクリアしている

先行行研究と比べてどこがすごい

どうやって有効性を示した左のシステムは14台のカメラを使用 右のシステムはGoProを5台使用

Disney 201558

なかの

Floating Scale Surface Reconstruction6

どんなもの

技術や手法のキモはどこ

流流動的にスケールを変えられる三次元再構成手法

サンプル規模に依存するパラメータがない rarrどのスケールのサンプルにも対応できる

siggraph2014

なかの

A Super Resolution Reconstruction Scheme for Mixed Spatio-Temporal Stereo Video7

どんなもの

技術や手法のキモはどこ

ビデオ超解像アルゴリズム

二台のカメラを使用 一台は低解像度度で高速一台は高解像度度で低速

HHI 3DV ftp siteのBookarrivalとbeergadenを使用どうやって有効性を示した

なかの

What Is a Good Day for Outdoor Photometric Stereo8

どんなもの

先行行研究と比べてどこがすごい

議論論はある

次に読むべき論論文は

屋外における照度度差があるステレオの研究 屋外でステレオを行行う際に有利利or不不利利な日照条件を明らかにする

点光源を用いた研究は行行われていたが屋外での研究はされていなかった

晴れより曇りの方が精度度が良良い雲があるから特徴量量を取りやすい雑音を白色ガウスモデルを想定 季節ごとのデータセットを利利用してみても良良い

Time-lapse photometric stereo and applications [F Shen K Sunkavalli N Bonneel S Rusinkiewicz H Pfisterand X Tong2014] Outdoor photometric stereo [L-F Yu S-K Yeung Y-W Tai D Terzopoulos and T FChan ICCP2013]

どうやって有効性を示した屋外の照明に関するHDR環境マップのデータベースを利利用

Disney 2015424

なかの

COLORBRUSH ANIMATED DIFFUSION FOR INTUITIVE COLORIZATION SIMULATING WATER PAINTING 9

どんなものアニメを水彩画で描いたように変換する 水彩画を描くには経験が必要であるがそれを作成するアルゴリズムを考案絵具が水によりどうにじむかシュミレーションしている

Disney 20141027 ICIP2014

次に読むべき論論文はGabor-space geodesic active contoursrdquo In Algebraic Frames for the Perception-Action Cycle [C Sagiv NA Sochen and YY Zeevi 2000] Practical temporal consistency for image-based graphics applications [M Lang O Wang T Aydin A Smolic and M Gross SIGGRAPH2012] Computer-Generated Watercolor [CJ Curtis SE Anderson JE Seims KW Fleischer and DH Salesin SIGGRAPH1997]

なかの

From Sound to Sight Using Audio Processing to enable Visible Light Communication 10

どんなもの光に情報を載せる技術プロジェクトページがあって光関係の研究が8個載っている

httpwwwdisneyresearchcomprojectvisible-light-communication

ビデオのURL httpwwwdisneyresearchcomwpcontentuploadsPub_InvisibleLightCommunication_Siggraph14_videomp4

• 201211106_KeisukeKawahara
• 201311421_KeitaKanai_02
• 201313095_AkiraIshii_02
• 201413109_YuukiKubo_02
• 201513110_SatoshiHashizume_02
• 鬼輪講マラソン③_1
• 鬼輪講マラソン③_2

8D13 Interac4ng13 with13 a13 Relightable13 Glasses-shy‐Free13 3D13 Display(CHIrsquo12)Li-Wei Chan Hui-Shan Kao Mike Y Chen Ming-Sui Jane Yi-Ping Hung

201413109　久保勇貴 2（鬼コース）13

どんなもの13

ライトフィードによる入力とライトフィールドによる表示を行うリアルタイム8Dディスプレイ13

先行研究と比べてどこがすごい13

リアルタイムでの8Dディスプレイの実現（先行研究は7fps）13

技術や手法のキモはどこ13

GPUにおけるレンダリング処理13

どうやって有効だと検証した13

MRIデータを用いたディスプレイのデモを示した13

議論はある13

現在はグレースケールの入力のみだがカラーでの入力できればより強力になるだろう13

次に読むべき論文は13

Sahoo13 et13 al13 201513

Control13 of13 Non-shy‐Solid13 Diffusers13 by13 Electrosta4c13 Charging13 (CHIrsquo15) Deepak Ranjan Sahoo Diego Martinez Plasencia Sriram Subramanian

201413109　久保勇貴 2（鬼コース）13

どんなもの13

シャボン玉や霧などの非固体を電場による制御を試みた研究13

先行研究と比べてどこがすごい13

非固体の形や位置の制御法を提案した点13

技術や手法のキモはどこ13

[Intra13 et13 al13 11]中のldquowire-shy‐to-shy‐Cylinderdquoを用いたエアゾール粒子の帯電13

どうやって有効だと検証した13

霧及びシャボン玉によるディスプレイのアプリケーション例で実際に制御して見せた13

議論はある13

風による影響を本手法は打ち消すことができた13

次に読むべき論文は13

Barnum13 et13 al13 201013

A13 Mul4-shy‐Layered13 Display13 with13 Water13 Drops(SIGGRAPHrsquo10)Peter C Barnum Srinivasa G Narasimhan Takeo Kanade

201413109　久保勇貴 2（鬼コース）13

どんなもの13

複数層の落下水滴にプロジェクションマッピングを行いディスプレイとした研究13

先行研究と比べてどこがすごい13

水滴の制御を行うことで単一のプロジェクタによって複数層の映像投影を可能とした点13

技術や手法のキモはどこ13

[Ambravaneswaran13 et13 al13 2002]及び本研究における実験結果に基づく水滴生成13

どうやって有効だと検証した13

複数のディスプレイ例を示した13 例）顔の投影水槽シミュレータなど13

議論はある13

本当の3Dディスプレイにするにはより多くの水滴制御が必要13

次に読むべき論文は13

Lee13 et13 al13 200713

An13 Immaterial13 Depth-shy‐Fused13 3D13 Display(VRSTrsquo07)Cha Lee Stephen DiVerdi Tobias Humlollerer

201413109　久保勇貴 2（鬼コース）13

どんなもの13

２つのスクリーンを駆使し3Dディスプレイを実現するdepth-shy‐fused13 3D(DFD)に関する評価を行いその結果よりディスプレイを提案した研究13

先行研究と比べてどこがすごい13

DFDが任意のスクリーン設定及び見る位置に対して有効であることを示した13

技術や手法のキモはどこ13

６通りのスクリーン組合せから２つを抽出し見え方の違いを検証した点13

どうやって有効だと検証した13

６通りのスクリーンについて立体的に見えるか被験者実験を実施その後それぞれに有意差がみられるか調べた13

議論はある13

ステレオイメージを認めることができなかったユーザに対しても強い3D効果が見られた13

次に読むべき論文は13

Tokuda13 et13 al13 201013

Cloud13 Display13 (ACErsquo10)Yutaka Tokuda Yasuhiro Suzuki Kunihiro Nishimura Tomohiro Tanikawa Michitaka Hirose

201413109　久保勇貴 2（鬼コース）13

どんなもの13

煙の渦輪を用いた空間を埋めるディスプレイ13

先行研究と比べてどこがすごい13

制御可能な手法により高所へのパーティクルを運搬することに着目した点13

技術や手法のキモはどこ13

コンピュータによって制御が行われる空気砲アレイ13

どうやって有効だと検証した13

箱の中で実験を行い安定して渦輪をできるようにした実際にデモを行ったことを示した13

議論はある13

今の試作機をより早くリフレッシュ速度を高めることによりより濃く空間を埋められることを目指す13

次に読むべき論文は13

Sato13 et13 al13 200913

Par]cle13 Display13 System　(JVRC09)13 -shy‐13 A13 Large13 Scale13 Display13 for13 Public13 Space13 -shy‐

Munehiko13 Sato13 Yasuhiro13 Suzuki13 13 Atsushi13 Hiyama13 Tomohiro13 Tanikawa13 Michitaka13 Hirose

201413109　久保勇貴 2（鬼コース）13

どんなもの13

パーティクルディスプレイによる公共スペースのための大画面ディスプレイの提案13

先行研究と比べてどこがすごい13

公共スペースにおける要求と制限に基づいたシステムを提案した点13

技術や手法のキモはどこ13

実験に基づく表示画像のスクロール時間の制御13

どうやって有効だと検証した13

Aという文字の知覚実験によって 適な点滅周期の調査を行った13

議論はある13

現在の試作機を組合せより高解像度にする必要がある13

次に読むべき論文は13

Kwon13 et13 al13 201513

FugaciousFilm13 Exploring13 Aen4ve13 Interac4on13 with13 Ephemeral13 Material13 (CHIrsquo15)Hyosun13 Kwon13 Shashank13 Jaiswal13 Steve13 Benford13 Sue13 Ann13 Seah13

13 Peter13 BenneC13 Boriana13 Koleva13 Holger13 Schnaumldelbach

201413109　久保勇貴 2（鬼コース）13

どんなもの13

膜を押す引く飛び出ることができる新しい石鹸膜インタフェースの提案13

先行研究と比べてどこがすごい13

徐々に消えるインタフェースは高い注意を有するインタラクションを提供するという点を示したこと13

技術や手法のキモはどこ13

水グリセリンを201の対比で混ぜることでldquopoprdquoがきれいになるようにしかつ膜の耐久性を向上させた13

どうやって有効だと検証した13

３目並べを用いた被験者実験を実施13 ユーザは膜を割ると負け膜を自分のマスにするにはタッチ押す引くの書かれた通りの操作を行う13

議論はある13

ユーザに精密な動作を要求することはとりわけ注意を払うことを誘発する13

次に読むべき論文は13

Wetzstein13 et13 al13 201213

Tensor13 Displays13 Compressive13 Light13 Field13 Synthesis13 using13 Mul4layer13 Displays13 with13 Direc4onal13 Backligh4ng(SIGGRAPHrsquo12)

Gordon13 Wetzstein13 Douglas13 Lanman13 MaChew13 Hirsch13 Ramesh13 Raskar

201413109　久保勇貴 2（鬼コース）13

どんなもの13

視点によって異なる立体映像を見ることができる複数の層からなるディスプレイ13

先行研究と比べてどこがすごい13

既存の手法を合成したcomputa(onal13 displaysというディスプレイの新しいフレームワークを提案した13

技術や手法のキモはどこ13

時分割で視差マスクを表示することでユーザの視線ごとに立体像を表現する13

どうやって有効だと検証した13

通常のディスプレイ３層LCDLCD及び指向性バックライトの例による比較13 13

議論はある13

波紋を含むこと色チャンネルが悪影響を与える相互反射不均一などの問題が見られた13

次に読むべき論文は13

Matoba13 et13 al13 1213

SplashDisplay(VRICrsquo12)Yasuo Matoba Taro Tokui Ryo Sato Tochiki Sato Hideki Koike

201413109　久保勇貴 2（鬼コース）13

どんなもの13

パーティクルにCGを投射しパーティクルがテーブル上に投げられると爆発しパーティクルが噴きあがる13

先行研究と比べてどこがすごい13

ビーズがミリメートルからメートル単位までZ軸方向について空中で奥行きを表現する13

技術や手法のキモはどこ13

スピーカによって風力が発生させビーズを舞い上げる点13

どうやって有効だと検証した13

ビーズを投げると花火が打ちあがっているかのようなアプリケーション例を示した13

議論はある13

高いレベルの表現及び幅広い入力範囲を提供できた13

次に読むべき論文は13

Kim13 et13 al13 1413

MARIO13 Mid-shy‐air13 Augmented13 Reality13 Interac4on13 with13 Objects13 (ECrsquo14)Hanyuool13 Kim13 13 Issei13 Takahashi13 Hiroki13 Yamamoto13 Satoshi13 Maekawa13 Takeshi13 Naemura

201413109　久保勇貴 2（鬼コース）13

どんなもの13

350times300times250のテーブル上のスペースにおいて自由に動かせる空中像を造りだすことができる13

先行研究と比べてどこがすごい13

凹面鏡や凹レンズのように曲面でないため画像の歪曲が発生しない13

技術や手法のキモはどこ13

Aerial13 Imaging13 Plate(AIP)を用いた空中像の生成及びそのためのディスプレイ移動装置13

どうやって有効だと検証した13

左右からの視差の考慮及び奥行き表現時の画像提示視野角の検証などを行った13 13

議論はある13

投影しているひよこを叩いたり払いのけたりするような動作がデモ中見られた13

次に読むべき論文は13

Tactile Feedback on Flat Surfaces for the Visually Impaired13Ali Israr Olivier Bau Seung-Chan Kim Ivan Poupyrev13

どのようなものか 視覚障害者のための触覚を用いた視覚代用デバイス 先行研究と比べてどこがすごいか 道案内をしてくれる機械などはあるが日用品の場所を教えたり探すのを手伝ってくれるデバイスはない 技術や手法のキモ タッチパネルとカメラを搭載したデバイス 触覚を与える技術はTeslaTouchを利用 色を基準にオブジェクトの位置を認識 有用性の確認 視覚障害者二人に対して実験このデバイスを使

わなくても各自の方法で物を見つけられるが間違えることが多いこのデバイスを使用することで間違えることなく正確に物の位置を特定できた 課題 一つの色でしか判断できない 触感のあるなしでしか情報を伝えられない 関連論文 TeslaTouch [Bau et al 2010]

20150522 橋爪智 2鬼

Fingernail-Mounted Display of Attraction Force and Texture13Masataka Niwa Tomoko Nozaki Taro Maeda and Hideyuki And13

どのようなものか 指先に取り付けて触感と力を両方表現できるデバイス 先行研究と比べてどこがすごいか 触感と引力をそれぞれ表現するデバイスはあるが両方を一つのデバイスで表現した例は少ない 引力は自由な方向に付加することができる 技術や手法のキモ 偏心に重さを付けた円盤を4枚使用する 5-9Hz 引力　100-200Hz 触感 それぞれの円盤の位相や回転数を調整することで

触感と力 を表現する 4つのモータを使いそれぞれの円盤を独立して制御する 有用性の確認 4人の男性に対して実験80以上の精度で認識できた 関連論文 The nail-mounted attraction forcebump display [Nozaki et al 2008]

20150522 橋爪智 2 鬼

Gilded gait reshaping the urban experience with augmented footsteps13Yuichiro Takeuchi13

どのようなものか 靴に装着し地面の触感をコントロールするデバイス 先行研究と比べてどこがすごいか 単独で動作しなかったり特定の環境のみでしか動作しなかったりするrarr靴単体で動作環境に依存しない 技術や手法のキモ 6個の振動パネルを取り付けゲルでカバー app modulesを取り替えることができ様々な機能を付加できる（GPSsound) 4種類の地面を再現

bull  Hard Ground 振動させない bull  Soft Ground すべてのパネルを振動 bull  Bumpy Ground ジグザグに振動 bull  Godzilla 全てのパネルを振動何回か繰り返す 課題 モーターを使っているため波形をプログラミングできないrarr圧電素子を使用する 関連論文 Haptic Shoes [Fu et al 2010]

20150522 橋爪智 2鬼

ExoInterfaces novel exosceleton haptic interfaces for virtual reality augmented sport and rehabilitation

Dzmitry Tsetserukou Katsunari Sato Susumu Tachi13

どのようなものか 腕に装着し物理的なinteractionを可能にするデバイス 先行研究と比べてどこがすごいか Exoskeleton 力を増幅するためだが重たく危険なこともある String-based wireが視界をまたぐ動きに制限がある rarr腕の動きに制限を与えない安全 技術や手法のキモ 「FlexTorque」人間の筋肉の構造を再現するベルトとモーターを使用する肩の近くに装着することで

腕に負担がかかりにくい 触覚feedback弱いトルク 運動を支援強いトルク 課題 物理的な接触を表現するゲームやスポーツにより没頭させるリハビリのサポートをする視覚障害者の支援（ものの場所を教える） 関連論文 FlexTorque [Dzmitry et al 2010]

20150522 橋爪智 2 鬼

Perception of Ultrasonic Haptic Feedback on the Hand Localisation and Apparent Motion13

Graham Wilson Tom Carter Sriram Subramanian Stephen Brewster13

どのようなものか 超音波を用いた触覚フィードバック有効性の検討を行う 先行研究と比べてどこがすごいか 超音波触覚フィードバックは比較的新しく研究や操作方法に関する知識が少ない 腕を自由に動かすことができ小さいものは着用可能 技術や手法のキモ 88のアレイ状に超音波発生器を設置

有効性の確認 bull  局所的な触感 　　　25箇所に分割しそれぞれに超音波を当てる 　　　触感を感じた989 　　　場所の誤差85mm bull  手のひらを動く触感 上下左右に動く 　　　動いてると感じた629

20150522 橋爪智 2 鬼

Friction Measurements on a Large Area TPaD13Nicholas D Marchuk J Edward Colgate Michael A Peshkin13

どのようなものか 超音波の振動により触感を与える 先行研究と比べてどこがすごいか ガラス板を使うので透明後ろにディスプレイを配置可能 技術や手法のキモ 「Squeeze Film Effect（スクイズ膜効果）」 ガラス板に取り付けた圧電素子の円盤に高周波信号

をかける 実験 振動しない部分＝摩擦が発生しない部分が発生周波数により場所が変わる rarr摩擦を大きさをかける力の大きさから計測 rarr指の場所に合わせて複数の周波数を使い分ける 関連論文 T-PaD[Winfield et al 2007]

20150522 橋爪智 2 鬼

STIMTAC a Tactile Input Device with Programmable Friction13Michel Amberg Freacutedeacuteric Giraud Betty Semail Paolo Olivo Geacutery Casiez Nicolas Roussel13

どのようなものか 触感を与えられるタッチデバイス 先行研究と比べてどこがすごいか LATPaD サイズ大きいノイズが大きい TeslaTouch 高い電圧付加が必要GNDに接続しなければいけない

技術や手法のキモ 「Squeeze Film Effect」超音波を用いて振動を与える 圧電性セラミックを電極にコーディング 指トラッキングは力センサを用いる 活用法 マウスキーボード絵を描く 関連論文 LATPaD[Vincent et al 2011] TeslaTouch[Bau et al 2010]

20150522 橋爪智 2 鬼

Surround Haptics Tactile Feedback for Immersive Gaming Experiences Ali Israr Seung-Chan Kim Ivan Poupyrev Jan Stec13

どのようなものか ゲームに合わせて高解像度の触覚フィードバックをユーザーに与える椅子 先行研究と比べてどこがすごいか 荒く配置した安価な振動アクチュエータで高解像度の触覚フィードバックを行える 一点の振動連続した動き範囲の振動などを再現

技術や手法のキモ 仮想的な振動アクチュエータをいくつかの振動アクチュエータを使って作り出す physical-physicalphysical-virtualvirtual-virtual ゲームにHaptics Engineを導入しHaptics APIを用いてHaptic Displayを操作する 関連論文 Exploring Surround Haptics Displays[Israr et al 2010]

20150522 橋爪智 2 鬼

Audio-Haptic Feedback in Mobile Phones Angela Chang Conor OrsquoSullivan13

どのようなものか haptics機能のついてない携帯電話にオーディオ機能を利用した触覚フィードバックを追加する 先行研究と比べてどこがすごいか 簡単に作れてnon-haptic mobile devicesでも大丈夫 技術や手法のキモ 「MultiFunction Transducer(MFT)」 スピーカーから音と信号の両方を出力できる

bull  Haptic Inheritance 　　音を2つの周波数帯に分ける bull  Synthesis and Matching 　　低周波数帯(20-300Hz)を使い触感を伝える 有効性の検討 42人の人を対象に実験を行う83の人が触感を感じた

20150522 橋爪智 2 鬼

Resolution of Sleep Deprivation Problems using ZZZoo Pillows13Shunsuke Yanaka Motoki Ishida13

どのようなものか 近年不眠症の人が多い rarr誰かと接していると安心し睡眠に導入しやすくなる rarrまるで添い寝をしているようなリアルな抱きまくらを使う 技術や手法のキモ breathing sensation 風船を使って人の呼吸を再現肺の形の風船弱く長い呼吸をする

heating お湯を使って人の体温を再現45 有効性の確認 84人の人が実験 呼吸が睡眠を誘ったかrarr61 体温が睡眠を誘ったかrarr85 関連論文 The Impact of Sleep Disorders on Social Life[Komada et al 2007]

20150522 橋爪智 2 鬼

まとめ13超音波 モーター 風

20150522 橋爪智 2 鬼

コイル 電気刺激 Electrovibration

振動 音 お湯

なかの

Temporally Consistent Disparity and Optical Flow via Efficient Spatio-temporal Filtering1

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示した

議論論はあるか

時間的に一定の視差を算出する手法静止画ステレオよりも精度度が良良いことを示す従来よりも推定精度度が良良いオプティカルフローも算出する

一枚の静止画に対するフィルタリング[1]をステレオ動画に拡張している

ケンブリッジのステレオ動画のデータセットを利利用 実写動画に対する比較も行行うノイズ耐性も検証する

フィルタベースとエネルギーベースの関係性を良良り理理解することで推定精度度を上げる

実装が簡単でリアルタイム視差推定が可能

Fast Cost-Volume Filtering for Visual Correspondence and Beyond [Rhemann C Hosni A Bleyer M Rother C Gelautz M CVPR2011] Real-time Spatiotemporal Stereo Matching Using the Dual-Cross-Bilateral Grid [Richardt C Orr D Davies I Criminisi A Dodgson NA ECCV2010] Secrets of optical flow estimation and their principles [Sun D Roth S Black MJ 2010] Motion estimation with non-local total variation regularization [Werlberger M Pock T Bischof H CVPR2010] Temporally Consistent Disparity Maps from Uncalibrated Stereo Videos [Bleyer M Gelatuz M ISPA2011]

なかの

SymStereo Matching using Induced Symmetry (2014)2

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示した

議論論はあるか

画像の対称性を用いてステレオマッチングを行行う 左右の画像を反転させて重ね合わせることで対称性を測る

絵的な類似の代わりに対称性を使う今まで対称性を用いる手法はなく新規性が大きい

三つのSymmetry-baseの手法で精度度を検証従来手法よりも精度度が向上しているMiddlebury Oxford Corridorfountain-P11のデータセット使用

ステレオの問題である不不連続な箇所オクルージョン部分は未解決である演算時間はやや増加

1-Dラインのコストを考える今までは撮像面に対して平行行な平面でデプスを考えていたが垂直な平面を考える

BT[Birchfield and Tomasi 1998] Census transform[Zabih and Woodfill 1994] Log N[Kovesi 1997] radio-metoric differences[Hirschmuller Scharstein 2009]

なかの

Camouflaging an Object from Many Viewpoints3

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

多くの視点から三次元の物体をカモフラージュするカモフラージュによってオクルージョン部分の不不連続がどの程度度生じるか他の視点ではどれほどになるかの検証

MRF（Markov Random Fields）ベース

新しい三次元物体のカモフラージュモデルを構築 37種類のデータセットを作る

箱形の物体に対してカモフラージュ処理理を施し 結果を評価する

オクルージョン不不連続テクスチャの歪みが問題 照明や画像の貼りつけに制限あり

なかの

Aliasing Detection and Reduction in Plenoptic Imaging4

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

カメラアレイ撮影の角度度のエイリアシングを除去するエイリアシングの探索索と打ち消しを行行う

周波数領領域ではなく空間領領域で探索索を行行う

先行行研究がフィルタデモザイキング再パラメータ調整などの前処理理でエイリアシング除去を行行うのに対しエイリアシング探索索後にリフォーカスの段階でエイリアシングを取り除く

8times8の平行行カメラアレイで検証するカメラ間の 基線長は70mm

今回は基線長が長いデータセットを使った 次はLytroなどのマイクロレンズアレイで検証する

Globally consistent multi-label assignment on the ray space of 4d light fields [S Wanner C Straehle B Goldluecke CVPR2013] Lineassisted light field triangulation and stereo matching [Z Yu X Guo H Lin A Lumsdaine J Yu ICCV 2013]

なかの

Globally Consistent Multi-Label Assignment on the Ray Space of 4D Light Fields5

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

四次元ライトフィールドの光線情報において マルチラベルの領領域分割を行行う

深度度情報光線情報を用いて領領域分割することで 二次元（空間）情報だけでは分割が難しかった 領領域を分割可能とする

The light field camera Extended depth of field aliasing and superresolution [T Bishop P Favaro IEEE Transactions on Pattern Analysis and Machine Intelligence 2012]

なかの

Line Assisted Light Field Triangulation and Stereo Matching6

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

光線情報を利利用してステレオマッチングの精度度を 向上させる手法三角測量量の誤差を減らす

Light Field Stereo Matchingとかいう手法 グラフ構造を作成

Variational light field analysis for disparity estimation and super-resolution [S Wanner and B Goldlumluecke 2013]

なかの

Adaptive stereo similarity fusion using confidence measures 20157

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

ステレオマッチングの新しい方式fusion weightsを提案複数の手法を組み合わせてコスト計算を行行う手法付録に既存手法のコスト関数一覧あり

パラメータに依存する手法を用いないことで高速化を図っている

一つのアルゴリズムでは異異なる特性を持つ領領域全てに対して適切切なマッチングはできない複数を組み合わせることでそれを補う13種と多い

middleburyとKITTIのデータセットで評価

一枚あたり03sと高速だが001sとより高速なアルゴリズムが存在する

Segment-based stereo matching using belief propagation and a self-adapting dissimilarity measure [A Klaus M Sormann K Karner ICPR2006] On building an accurate stereo matching system on graphics hardware [X Mei X Sun M Zhou S Jiao H Wang X Zhang ICCV2011] Similarity measures for depth estimation [K Wegner O Stankiewicz 3DTV-CON2009] On accurate dense stereo-matching using a local adaptive multi-cost approach [C Stentoumis L Grammatikopoulos I Kalisperakis G Karras ISPRS2014] A quantitative evaluation of confidence measures for stereo vision [X Hu P Mordohai PAMI2012]

なかの

SIMILARITY MEASURE FOR DEPTH ESTIMATIOM 20098

どんなもの

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

4種類の視差推定アルゴリズムを組み合わせている 類似度度の選択性の解析

Belief Propagationの枠組みを用いる

名古屋大学の多視点データベースを利利用

HHI Test Material for 3D Video [I Feldmann M Muller F Zilly R Tanger A SmolicP Kauff T Wiegand 2008] Multiview Video Test Sequence and Camera Parameters [Yo-Sung Ho Eun-Kyung Lee and Cheon Lee 2008] 1D Parallel Test Sequences for MPEG-FTV [M Tanimoto T Fujii N Fukushima 2008] Non-parametric Local Transforms for Computing Visual Correspondence [R Zabih J Woodfill 1994]

なかの

Spatiotemporal Stereo via Spatiotemporal Quadric Element (Stequel) Matching9

どんなもの

技術や手法のキモはどこ

新しいマッチング手法を提案動き考慮することなく時間情報を取り込むことができる 時間方向のエピ線を考える

オプティカルフロー推定は3D境界や低テクスチャで弱いが提案手法はロバストである

なかの

Depth Video Enhancement Based on Weighted Mode Filtering10

どんなもの

議論論はある

ノイズを含んだ低解像度度のデプスマップの質を高める手法（超解像度度とデノイズ）時間方向も使用簡単なオプティカルフローを計算し利利用する

非反復復アルゴリズムのためGPUに載せやすく高速化が考えられる

なかの

Fast Bilateral-Space Stereo for Synthetic Defocus11

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

議論論はある

次に読むべき論論文は

高速な自由焦点ぼけ画像の作成

Bilateral-spaceを提案

従来研究よりも10から100倍速くぼけ具合の精度度も良良い

ぼけを作成するというアプリケーションに利利用する距離離という面では提案手法が有益であるが実測的な距離離という面での精度度は悪い背景と前景が同じ色で近くにある場合同一ととらえてしまう

Efficient high-resolution stereo matching using local plane sweeps [S N Sinha D Scharstein and R SzeliskiCVPR2014] Bilateral filtering-based optical flow estimation with occlusion detection [J Xiao H Cheng H Sawhney C Rao and M IsnardiECCV2006] Efficient nonlocal regularization for optical flow [P Krumlahenbumluhl and V KoltunECCV2012] Real-time spatiotemporal stereo matching using the dual-cross-bilateral grid [C Richardt D Orr I Davies A Criminisi and N A DodgsonECCV2010]

どうやって有効性を示した視差推定の精度度はmiddleburyKITTI

なかの

Robust Spatiotemporal Stereo for Dynamic Scenes12

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

ステレオ動画のフレーム間情報を取り入れることでノイズ耐性を向上させるまた動きの大きなものも考える

時間を含めたウインドウの提案自動的にそのような変化に対応する画像領領域を検出する

従来の時空間ステレオと比べ大きな動きによる急激な視差の時間変化に対して頑健である

なかの

Spacetime Stereo A Unifying Framework for Depth from Triangulation13

どんなもの

先行行研究と比べてどこがすごい

space time stereoを提案ステレオカメラの視差推定でも構造光を用いた視差推定でも利利用可能 動的なシーンでの利利用も可能

フレームごとマッチングを取っていたが複数フレームでのマッチングを可能とした

なかの

Learning to Select and Order Vacation Photographs (Disney research)14

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示したあまりにもたくさん撮影した写真たちから自動的にフォトアルバムを作成する研究

複雑な視覚での区別を試みたのはこの論論文が初

５つの異異なるトピックから63の個人的な写真コレクションのデータセットを利利用し定量量的に評価する

写真間の差別かを定義する顔全体の絵何が写っているか写っていないかを評価する

Jointly aligning and segmenting multiple web photo streams for the inference of collective photo storylines [G Kim and E P Xing CVPR2013] Photo sequencing [T Basha Y Moses and S Avidan CVPR2012]

なかの

A Taxonomy and Evaluation of Dense Two-Frame Stereo Correspondence Algorithms15

どんなもの

どうやって有効性を示した

次に読むべき論論文は

ステレオマッチングに関する分類を行行う 新たなデータセットを作成する

というよりも他の手法が有効性を示すことができるようにデータセットを作成した 今ではmiddleburyのデータセットと言えばステレオ業界では超有名

High-resolution stereo datasets with subpixel-accurate ground truth

なかの

Discriminability Limits in Spatio-Temporal Stereo Block Matching1

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

spatio-temporal disparity estimationの根本的な前提の正当性を解析しマッチング処理理の際に動きが助けとなる程度度を決定する

時空間マッチングのエラーを分析し誤りの原因を確率率率で導出する（フレーム数動きの分散画像特徴ノイズの関数）

[34243334]は時空間マッチングの利利点を指摘していたが本論論文はマッチング精度度の向上のために動きを用いる手法の程度度や性質を研究する

6つのステレオビデオを用いて検証を行行った

Spacetime stereo Shape recovery for dynamic scenes [L Zhang B Curless and S Seitz CVPR2003] Spatiotemporal stereo and scene flow via stequel matching [M Sizintsev and R Wildes PAMI2012] Temporally consistent disparity and optical flow via efficient spatio-temporal filtering [A Hosni C Rhemann M Bleyer and M Gelautz PRCAIVT2012] Spacetime stereo A unifying framework for depth from triangulation [PAMI2005] Dynamic depth recovery from multiple synchronized video streams [H Tao H Sawhney and R Kumar CVPR2001] Spatiotemporal descriptor for wide-baseline stereo reconstruction of non-rigid and ambiguous scenes [ECCV2003]

なかの

Depth-Based Patch Scaling for Content-Aware Stereo Image Completion2

どんなもの

どうやって有効性を示した

ステレオでデプスを取り物体の三次元情報を使ってインペインティングを行行う

bookのデータセット背景が繰り返しパターンが多いものを使っている

なかの

Fast Semi-dense Surface Reconstruction from Stereoscopic Video in Laparoscopic Surgery3

どんなもの

手法の流流れ

次に読むべき論論文は

腹腔内手術の際にステレオビデオから高速に物体の三次元再構成を行行う研究

Evaluation of stereo matching costs on images with radiometric differences [Hirschmueller H Scharstein D PAMI2008]

スコープカメラから画像取得GPUで演算する 視差を算出しフィルタにかける距離離に変換 点群を再びフィルタにかけて三次元再構成

なかの

3D Reconstruction from Accidental Motion4

どんなもの

技術や手法のキモはどこ

議論論はある

数秒のビデオ（単眼）から三次元再構成を行行う 手ぶれなどの動きから再構成が可能で特定の動きや機材を必要としない

短い基線長でも再構成が可能（3mmの基線長）

基線長が短いため背景の精度度が低くなる リフォーカス画像作成には十分 練習では上手く動作したが検証がまだ必要

なかの

Panoramic Video from Unstructured Camera Arrays5

どんなもの

技術や手法のキモはどこ

議論論はある

複数のカメラを用いたパノラマ撮影を行行う その際に不不自然さがないような動画を作成する

不不自然さを感じる感覚特性を提示しそれにのっとって対策を講じている

一つのカメラの解像度度と品質を向上させるよりも複数台のカメラを組み合わせることがはるかに簡単で有益である専門家でなくてもGoProのカメラセットを組み合わせることは容易易

カメラの配置は厳密に決められていない完璧な時間同期やローリングシャッターの不不足のような実撮影での問題もクリアしている

先行行研究と比べてどこがすごい

どうやって有効性を示した左のシステムは14台のカメラを使用 右のシステムはGoProを5台使用

Disney 201558

なかの

Floating Scale Surface Reconstruction6

どんなもの

技術や手法のキモはどこ

流流動的にスケールを変えられる三次元再構成手法

サンプル規模に依存するパラメータがない rarrどのスケールのサンプルにも対応できる

siggraph2014

なかの

A Super Resolution Reconstruction Scheme for Mixed Spatio-Temporal Stereo Video7

どんなもの

技術や手法のキモはどこ

ビデオ超解像アルゴリズム

二台のカメラを使用 一台は低解像度度で高速一台は高解像度度で低速

HHI 3DV ftp siteのBookarrivalとbeergadenを使用どうやって有効性を示した

なかの

What Is a Good Day for Outdoor Photometric Stereo8

どんなもの

先行行研究と比べてどこがすごい

議論論はある

次に読むべき論論文は

屋外における照度度差があるステレオの研究 屋外でステレオを行行う際に有利利or不不利利な日照条件を明らかにする

点光源を用いた研究は行行われていたが屋外での研究はされていなかった

晴れより曇りの方が精度度が良良い雲があるから特徴量量を取りやすい雑音を白色ガウスモデルを想定 季節ごとのデータセットを利利用してみても良良い

Time-lapse photometric stereo and applications [F Shen K Sunkavalli N Bonneel S Rusinkiewicz H Pfisterand X Tong2014] Outdoor photometric stereo [L-F Yu S-K Yeung Y-W Tai D Terzopoulos and T FChan ICCP2013]

どうやって有効性を示した屋外の照明に関するHDR環境マップのデータベースを利利用

Disney 2015424

なかの

COLORBRUSH ANIMATED DIFFUSION FOR INTUITIVE COLORIZATION SIMULATING WATER PAINTING 9

どんなものアニメを水彩画で描いたように変換する 水彩画を描くには経験が必要であるがそれを作成するアルゴリズムを考案絵具が水によりどうにじむかシュミレーションしている

Disney 20141027 ICIP2014

次に読むべき論論文はGabor-space geodesic active contoursrdquo In Algebraic Frames for the Perception-Action Cycle [C Sagiv NA Sochen and YY Zeevi 2000] Practical temporal consistency for image-based graphics applications [M Lang O Wang T Aydin A Smolic and M Gross SIGGRAPH2012] Computer-Generated Watercolor [CJ Curtis SE Anderson JE Seims KW Fleischer and DH Salesin SIGGRAPH1997]

なかの

From Sound to Sight Using Audio Processing to enable Visible Light Communication 10

どんなもの光に情報を載せる技術プロジェクトページがあって光関係の研究が8個載っている

httpwwwdisneyresearchcomprojectvisible-light-communication

ビデオのURL httpwwwdisneyresearchcomwpcontentuploadsPub_InvisibleLightCommunication_Siggraph14_videomp4

• 201211106_KeisukeKawahara
• 201311421_KeitaKanai_02
• 201313095_AkiraIshii_02
• 201413109_YuukiKubo_02
• 201513110_SatoshiHashizume_02
• 鬼輪講マラソン③_1
• 鬼輪講マラソン③_2

Control13 of13 Non-shy‐Solid13 Diffusers13 by13 Electrosta4c13 Charging13 (CHIrsquo15) Deepak Ranjan Sahoo Diego Martinez Plasencia Sriram Subramanian

201413109　久保勇貴 2（鬼コース）13

どんなもの13

シャボン玉や霧などの非固体を電場による制御を試みた研究13

先行研究と比べてどこがすごい13

非固体の形や位置の制御法を提案した点13

技術や手法のキモはどこ13

[Intra13 et13 al13 11]中のldquowire-shy‐to-shy‐Cylinderdquoを用いたエアゾール粒子の帯電13

どうやって有効だと検証した13

霧及びシャボン玉によるディスプレイのアプリケーション例で実際に制御して見せた13

議論はある13

風による影響を本手法は打ち消すことができた13

次に読むべき論文は13

Barnum13 et13 al13 201013

A13 Mul4-shy‐Layered13 Display13 with13 Water13 Drops(SIGGRAPHrsquo10)Peter C Barnum Srinivasa G Narasimhan Takeo Kanade

201413109　久保勇貴 2（鬼コース）13

どんなもの13

複数層の落下水滴にプロジェクションマッピングを行いディスプレイとした研究13

先行研究と比べてどこがすごい13

水滴の制御を行うことで単一のプロジェクタによって複数層の映像投影を可能とした点13

技術や手法のキモはどこ13

[Ambravaneswaran13 et13 al13 2002]及び本研究における実験結果に基づく水滴生成13

どうやって有効だと検証した13

複数のディスプレイ例を示した13 例）顔の投影水槽シミュレータなど13

議論はある13

本当の3Dディスプレイにするにはより多くの水滴制御が必要13

次に読むべき論文は13

Lee13 et13 al13 200713

An13 Immaterial13 Depth-shy‐Fused13 3D13 Display(VRSTrsquo07)Cha Lee Stephen DiVerdi Tobias Humlollerer

201413109　久保勇貴 2（鬼コース）13

どんなもの13

２つのスクリーンを駆使し3Dディスプレイを実現するdepth-shy‐fused13 3D(DFD)に関する評価を行いその結果よりディスプレイを提案した研究13

先行研究と比べてどこがすごい13

DFDが任意のスクリーン設定及び見る位置に対して有効であることを示した13

技術や手法のキモはどこ13

６通りのスクリーン組合せから２つを抽出し見え方の違いを検証した点13

どうやって有効だと検証した13

６通りのスクリーンについて立体的に見えるか被験者実験を実施その後それぞれに有意差がみられるか調べた13

議論はある13

ステレオイメージを認めることができなかったユーザに対しても強い3D効果が見られた13

次に読むべき論文は13

Tokuda13 et13 al13 201013

Cloud13 Display13 (ACErsquo10)Yutaka Tokuda Yasuhiro Suzuki Kunihiro Nishimura Tomohiro Tanikawa Michitaka Hirose

201413109　久保勇貴 2（鬼コース）13

どんなもの13

煙の渦輪を用いた空間を埋めるディスプレイ13

先行研究と比べてどこがすごい13

制御可能な手法により高所へのパーティクルを運搬することに着目した点13

技術や手法のキモはどこ13

コンピュータによって制御が行われる空気砲アレイ13

どうやって有効だと検証した13

箱の中で実験を行い安定して渦輪をできるようにした実際にデモを行ったことを示した13

議論はある13

今の試作機をより早くリフレッシュ速度を高めることによりより濃く空間を埋められることを目指す13

次に読むべき論文は13

Sato13 et13 al13 200913

Par]cle13 Display13 System　(JVRC09)13 -shy‐13 A13 Large13 Scale13 Display13 for13 Public13 Space13 -shy‐

Munehiko13 Sato13 Yasuhiro13 Suzuki13 13 Atsushi13 Hiyama13 Tomohiro13 Tanikawa13 Michitaka13 Hirose

201413109　久保勇貴 2（鬼コース）13

どんなもの13

パーティクルディスプレイによる公共スペースのための大画面ディスプレイの提案13

先行研究と比べてどこがすごい13

公共スペースにおける要求と制限に基づいたシステムを提案した点13

技術や手法のキモはどこ13

実験に基づく表示画像のスクロール時間の制御13

どうやって有効だと検証した13

Aという文字の知覚実験によって 適な点滅周期の調査を行った13

議論はある13

現在の試作機を組合せより高解像度にする必要がある13

次に読むべき論文は13

Kwon13 et13 al13 201513

FugaciousFilm13 Exploring13 Aen4ve13 Interac4on13 with13 Ephemeral13 Material13 (CHIrsquo15)Hyosun13 Kwon13 Shashank13 Jaiswal13 Steve13 Benford13 Sue13 Ann13 Seah13

13 Peter13 BenneC13 Boriana13 Koleva13 Holger13 Schnaumldelbach

201413109　久保勇貴 2（鬼コース）13

どんなもの13

膜を押す引く飛び出ることができる新しい石鹸膜インタフェースの提案13

先行研究と比べてどこがすごい13

徐々に消えるインタフェースは高い注意を有するインタラクションを提供するという点を示したこと13

技術や手法のキモはどこ13

水グリセリンを201の対比で混ぜることでldquopoprdquoがきれいになるようにしかつ膜の耐久性を向上させた13

どうやって有効だと検証した13

３目並べを用いた被験者実験を実施13 ユーザは膜を割ると負け膜を自分のマスにするにはタッチ押す引くの書かれた通りの操作を行う13

議論はある13

ユーザに精密な動作を要求することはとりわけ注意を払うことを誘発する13

次に読むべき論文は13

Wetzstein13 et13 al13 201213

Tensor13 Displays13 Compressive13 Light13 Field13 Synthesis13 using13 Mul4layer13 Displays13 with13 Direc4onal13 Backligh4ng(SIGGRAPHrsquo12)

Gordon13 Wetzstein13 Douglas13 Lanman13 MaChew13 Hirsch13 Ramesh13 Raskar

201413109　久保勇貴 2（鬼コース）13

どんなもの13

視点によって異なる立体映像を見ることができる複数の層からなるディスプレイ13

先行研究と比べてどこがすごい13

既存の手法を合成したcomputa(onal13 displaysというディスプレイの新しいフレームワークを提案した13

技術や手法のキモはどこ13

時分割で視差マスクを表示することでユーザの視線ごとに立体像を表現する13

どうやって有効だと検証した13

通常のディスプレイ３層LCDLCD及び指向性バックライトの例による比較13 13

議論はある13

波紋を含むこと色チャンネルが悪影響を与える相互反射不均一などの問題が見られた13

次に読むべき論文は13

Matoba13 et13 al13 1213

SplashDisplay(VRICrsquo12)Yasuo Matoba Taro Tokui Ryo Sato Tochiki Sato Hideki Koike

201413109　久保勇貴 2（鬼コース）13

どんなもの13

パーティクルにCGを投射しパーティクルがテーブル上に投げられると爆発しパーティクルが噴きあがる13

先行研究と比べてどこがすごい13

ビーズがミリメートルからメートル単位までZ軸方向について空中で奥行きを表現する13

技術や手法のキモはどこ13

スピーカによって風力が発生させビーズを舞い上げる点13

どうやって有効だと検証した13

ビーズを投げると花火が打ちあがっているかのようなアプリケーション例を示した13

議論はある13

高いレベルの表現及び幅広い入力範囲を提供できた13

次に読むべき論文は13

Kim13 et13 al13 1413

MARIO13 Mid-shy‐air13 Augmented13 Reality13 Interac4on13 with13 Objects13 (ECrsquo14)Hanyuool13 Kim13 13 Issei13 Takahashi13 Hiroki13 Yamamoto13 Satoshi13 Maekawa13 Takeshi13 Naemura

201413109　久保勇貴 2（鬼コース）13

どんなもの13

350times300times250のテーブル上のスペースにおいて自由に動かせる空中像を造りだすことができる13

先行研究と比べてどこがすごい13

凹面鏡や凹レンズのように曲面でないため画像の歪曲が発生しない13

技術や手法のキモはどこ13

Aerial13 Imaging13 Plate(AIP)を用いた空中像の生成及びそのためのディスプレイ移動装置13

どうやって有効だと検証した13

左右からの視差の考慮及び奥行き表現時の画像提示視野角の検証などを行った13 13

議論はある13

投影しているひよこを叩いたり払いのけたりするような動作がデモ中見られた13

次に読むべき論文は13

Tactile Feedback on Flat Surfaces for the Visually Impaired13Ali Israr Olivier Bau Seung-Chan Kim Ivan Poupyrev13

どのようなものか 視覚障害者のための触覚を用いた視覚代用デバイス 先行研究と比べてどこがすごいか 道案内をしてくれる機械などはあるが日用品の場所を教えたり探すのを手伝ってくれるデバイスはない 技術や手法のキモ タッチパネルとカメラを搭載したデバイス 触覚を与える技術はTeslaTouchを利用 色を基準にオブジェクトの位置を認識 有用性の確認 視覚障害者二人に対して実験このデバイスを使

わなくても各自の方法で物を見つけられるが間違えることが多いこのデバイスを使用することで間違えることなく正確に物の位置を特定できた 課題 一つの色でしか判断できない 触感のあるなしでしか情報を伝えられない 関連論文 TeslaTouch [Bau et al 2010]

20150522 橋爪智 2鬼

Fingernail-Mounted Display of Attraction Force and Texture13Masataka Niwa Tomoko Nozaki Taro Maeda and Hideyuki And13

どのようなものか 指先に取り付けて触感と力を両方表現できるデバイス 先行研究と比べてどこがすごいか 触感と引力をそれぞれ表現するデバイスはあるが両方を一つのデバイスで表現した例は少ない 引力は自由な方向に付加することができる 技術や手法のキモ 偏心に重さを付けた円盤を4枚使用する 5-9Hz 引力　100-200Hz 触感 それぞれの円盤の位相や回転数を調整することで

触感と力 を表現する 4つのモータを使いそれぞれの円盤を独立して制御する 有用性の確認 4人の男性に対して実験80以上の精度で認識できた 関連論文 The nail-mounted attraction forcebump display [Nozaki et al 2008]

20150522 橋爪智 2 鬼

Gilded gait reshaping the urban experience with augmented footsteps13Yuichiro Takeuchi13

どのようなものか 靴に装着し地面の触感をコントロールするデバイス 先行研究と比べてどこがすごいか 単独で動作しなかったり特定の環境のみでしか動作しなかったりするrarr靴単体で動作環境に依存しない 技術や手法のキモ 6個の振動パネルを取り付けゲルでカバー app modulesを取り替えることができ様々な機能を付加できる（GPSsound) 4種類の地面を再現

bull  Hard Ground 振動させない bull  Soft Ground すべてのパネルを振動 bull  Bumpy Ground ジグザグに振動 bull  Godzilla 全てのパネルを振動何回か繰り返す 課題 モーターを使っているため波形をプログラミングできないrarr圧電素子を使用する 関連論文 Haptic Shoes [Fu et al 2010]

20150522 橋爪智 2鬼

ExoInterfaces novel exosceleton haptic interfaces for virtual reality augmented sport and rehabilitation

Dzmitry Tsetserukou Katsunari Sato Susumu Tachi13

どのようなものか 腕に装着し物理的なinteractionを可能にするデバイス 先行研究と比べてどこがすごいか Exoskeleton 力を増幅するためだが重たく危険なこともある String-based wireが視界をまたぐ動きに制限がある rarr腕の動きに制限を与えない安全 技術や手法のキモ 「FlexTorque」人間の筋肉の構造を再現するベルトとモーターを使用する肩の近くに装着することで

腕に負担がかかりにくい 触覚feedback弱いトルク 運動を支援強いトルク 課題 物理的な接触を表現するゲームやスポーツにより没頭させるリハビリのサポートをする視覚障害者の支援（ものの場所を教える） 関連論文 FlexTorque [Dzmitry et al 2010]

20150522 橋爪智 2 鬼

Perception of Ultrasonic Haptic Feedback on the Hand Localisation and Apparent Motion13

Graham Wilson Tom Carter Sriram Subramanian Stephen Brewster13

どのようなものか 超音波を用いた触覚フィードバック有効性の検討を行う 先行研究と比べてどこがすごいか 超音波触覚フィードバックは比較的新しく研究や操作方法に関する知識が少ない 腕を自由に動かすことができ小さいものは着用可能 技術や手法のキモ 88のアレイ状に超音波発生器を設置

有効性の確認 bull  局所的な触感 　　　25箇所に分割しそれぞれに超音波を当てる 　　　触感を感じた989 　　　場所の誤差85mm bull  手のひらを動く触感 上下左右に動く 　　　動いてると感じた629

20150522 橋爪智 2 鬼

Friction Measurements on a Large Area TPaD13Nicholas D Marchuk J Edward Colgate Michael A Peshkin13

どのようなものか 超音波の振動により触感を与える 先行研究と比べてどこがすごいか ガラス板を使うので透明後ろにディスプレイを配置可能 技術や手法のキモ 「Squeeze Film Effect（スクイズ膜効果）」 ガラス板に取り付けた圧電素子の円盤に高周波信号

をかける 実験 振動しない部分＝摩擦が発生しない部分が発生周波数により場所が変わる rarr摩擦を大きさをかける力の大きさから計測 rarr指の場所に合わせて複数の周波数を使い分ける 関連論文 T-PaD[Winfield et al 2007]

20150522 橋爪智 2 鬼

STIMTAC a Tactile Input Device with Programmable Friction13Michel Amberg Freacutedeacuteric Giraud Betty Semail Paolo Olivo Geacutery Casiez Nicolas Roussel13

どのようなものか 触感を与えられるタッチデバイス 先行研究と比べてどこがすごいか LATPaD サイズ大きいノイズが大きい TeslaTouch 高い電圧付加が必要GNDに接続しなければいけない

技術や手法のキモ 「Squeeze Film Effect」超音波を用いて振動を与える 圧電性セラミックを電極にコーディング 指トラッキングは力センサを用いる 活用法 マウスキーボード絵を描く 関連論文 LATPaD[Vincent et al 2011] TeslaTouch[Bau et al 2010]

20150522 橋爪智 2 鬼

Surround Haptics Tactile Feedback for Immersive Gaming Experiences Ali Israr Seung-Chan Kim Ivan Poupyrev Jan Stec13

どのようなものか ゲームに合わせて高解像度の触覚フィードバックをユーザーに与える椅子 先行研究と比べてどこがすごいか 荒く配置した安価な振動アクチュエータで高解像度の触覚フィードバックを行える 一点の振動連続した動き範囲の振動などを再現

技術や手法のキモ 仮想的な振動アクチュエータをいくつかの振動アクチュエータを使って作り出す physical-physicalphysical-virtualvirtual-virtual ゲームにHaptics Engineを導入しHaptics APIを用いてHaptic Displayを操作する 関連論文 Exploring Surround Haptics Displays[Israr et al 2010]

20150522 橋爪智 2 鬼

Audio-Haptic Feedback in Mobile Phones Angela Chang Conor OrsquoSullivan13

どのようなものか haptics機能のついてない携帯電話にオーディオ機能を利用した触覚フィードバックを追加する 先行研究と比べてどこがすごいか 簡単に作れてnon-haptic mobile devicesでも大丈夫 技術や手法のキモ 「MultiFunction Transducer(MFT)」 スピーカーから音と信号の両方を出力できる

bull  Haptic Inheritance 　　音を2つの周波数帯に分ける bull  Synthesis and Matching 　　低周波数帯(20-300Hz)を使い触感を伝える 有効性の検討 42人の人を対象に実験を行う83の人が触感を感じた

20150522 橋爪智 2 鬼

Resolution of Sleep Deprivation Problems using ZZZoo Pillows13Shunsuke Yanaka Motoki Ishida13

どのようなものか 近年不眠症の人が多い rarr誰かと接していると安心し睡眠に導入しやすくなる rarrまるで添い寝をしているようなリアルな抱きまくらを使う 技術や手法のキモ breathing sensation 風船を使って人の呼吸を再現肺の形の風船弱く長い呼吸をする

heating お湯を使って人の体温を再現45 有効性の確認 84人の人が実験 呼吸が睡眠を誘ったかrarr61 体温が睡眠を誘ったかrarr85 関連論文 The Impact of Sleep Disorders on Social Life[Komada et al 2007]

20150522 橋爪智 2 鬼

まとめ13超音波 モーター 風

20150522 橋爪智 2 鬼

コイル 電気刺激 Electrovibration

振動 音 お湯

なかの

Temporally Consistent Disparity and Optical Flow via Efficient Spatio-temporal Filtering1

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示した

議論論はあるか

時間的に一定の視差を算出する手法静止画ステレオよりも精度度が良良いことを示す従来よりも推定精度度が良良いオプティカルフローも算出する

一枚の静止画に対するフィルタリング[1]をステレオ動画に拡張している

ケンブリッジのステレオ動画のデータセットを利利用 実写動画に対する比較も行行うノイズ耐性も検証する

フィルタベースとエネルギーベースの関係性を良良り理理解することで推定精度度を上げる

実装が簡単でリアルタイム視差推定が可能

Fast Cost-Volume Filtering for Visual Correspondence and Beyond [Rhemann C Hosni A Bleyer M Rother C Gelautz M CVPR2011] Real-time Spatiotemporal Stereo Matching Using the Dual-Cross-Bilateral Grid [Richardt C Orr D Davies I Criminisi A Dodgson NA ECCV2010] Secrets of optical flow estimation and their principles [Sun D Roth S Black MJ 2010] Motion estimation with non-local total variation regularization [Werlberger M Pock T Bischof H CVPR2010] Temporally Consistent Disparity Maps from Uncalibrated Stereo Videos [Bleyer M Gelatuz M ISPA2011]

なかの

SymStereo Matching using Induced Symmetry (2014)2

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示した

議論論はあるか

画像の対称性を用いてステレオマッチングを行行う 左右の画像を反転させて重ね合わせることで対称性を測る

絵的な類似の代わりに対称性を使う今まで対称性を用いる手法はなく新規性が大きい

三つのSymmetry-baseの手法で精度度を検証従来手法よりも精度度が向上しているMiddlebury Oxford Corridorfountain-P11のデータセット使用

ステレオの問題である不不連続な箇所オクルージョン部分は未解決である演算時間はやや増加

1-Dラインのコストを考える今までは撮像面に対して平行行な平面でデプスを考えていたが垂直な平面を考える

BT[Birchfield and Tomasi 1998] Census transform[Zabih and Woodfill 1994] Log N[Kovesi 1997] radio-metoric differences[Hirschmuller Scharstein 2009]

なかの

Camouflaging an Object from Many Viewpoints3

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

多くの視点から三次元の物体をカモフラージュするカモフラージュによってオクルージョン部分の不不連続がどの程度度生じるか他の視点ではどれほどになるかの検証

MRF（Markov Random Fields）ベース

新しい三次元物体のカモフラージュモデルを構築 37種類のデータセットを作る

箱形の物体に対してカモフラージュ処理理を施し 結果を評価する

オクルージョン不不連続テクスチャの歪みが問題 照明や画像の貼りつけに制限あり

なかの

Aliasing Detection and Reduction in Plenoptic Imaging4

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

カメラアレイ撮影の角度度のエイリアシングを除去するエイリアシングの探索索と打ち消しを行行う

周波数領領域ではなく空間領領域で探索索を行行う

先行行研究がフィルタデモザイキング再パラメータ調整などの前処理理でエイリアシング除去を行行うのに対しエイリアシング探索索後にリフォーカスの段階でエイリアシングを取り除く

8times8の平行行カメラアレイで検証するカメラ間の 基線長は70mm

今回は基線長が長いデータセットを使った 次はLytroなどのマイクロレンズアレイで検証する

Globally consistent multi-label assignment on the ray space of 4d light fields [S Wanner C Straehle B Goldluecke CVPR2013] Lineassisted light field triangulation and stereo matching [Z Yu X Guo H Lin A Lumsdaine J Yu ICCV 2013]

なかの

Globally Consistent Multi-Label Assignment on the Ray Space of 4D Light Fields5

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

四次元ライトフィールドの光線情報において マルチラベルの領領域分割を行行う

深度度情報光線情報を用いて領領域分割することで 二次元（空間）情報だけでは分割が難しかった 領領域を分割可能とする

The light field camera Extended depth of field aliasing and superresolution [T Bishop P Favaro IEEE Transactions on Pattern Analysis and Machine Intelligence 2012]

なかの

Line Assisted Light Field Triangulation and Stereo Matching6

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

光線情報を利利用してステレオマッチングの精度度を 向上させる手法三角測量量の誤差を減らす

Light Field Stereo Matchingとかいう手法 グラフ構造を作成

Variational light field analysis for disparity estimation and super-resolution [S Wanner and B Goldlumluecke 2013]

なかの

Adaptive stereo similarity fusion using confidence measures 20157

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

ステレオマッチングの新しい方式fusion weightsを提案複数の手法を組み合わせてコスト計算を行行う手法付録に既存手法のコスト関数一覧あり

パラメータに依存する手法を用いないことで高速化を図っている

一つのアルゴリズムでは異異なる特性を持つ領領域全てに対して適切切なマッチングはできない複数を組み合わせることでそれを補う13種と多い

middleburyとKITTIのデータセットで評価

一枚あたり03sと高速だが001sとより高速なアルゴリズムが存在する

Segment-based stereo matching using belief propagation and a self-adapting dissimilarity measure [A Klaus M Sormann K Karner ICPR2006] On building an accurate stereo matching system on graphics hardware [X Mei X Sun M Zhou S Jiao H Wang X Zhang ICCV2011] Similarity measures for depth estimation [K Wegner O Stankiewicz 3DTV-CON2009] On accurate dense stereo-matching using a local adaptive multi-cost approach [C Stentoumis L Grammatikopoulos I Kalisperakis G Karras ISPRS2014] A quantitative evaluation of confidence measures for stereo vision [X Hu P Mordohai PAMI2012]

なかの

SIMILARITY MEASURE FOR DEPTH ESTIMATIOM 20098

どんなもの

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

4種類の視差推定アルゴリズムを組み合わせている 類似度度の選択性の解析

Belief Propagationの枠組みを用いる

名古屋大学の多視点データベースを利利用

HHI Test Material for 3D Video [I Feldmann M Muller F Zilly R Tanger A SmolicP Kauff T Wiegand 2008] Multiview Video Test Sequence and Camera Parameters [Yo-Sung Ho Eun-Kyung Lee and Cheon Lee 2008] 1D Parallel Test Sequences for MPEG-FTV [M Tanimoto T Fujii N Fukushima 2008] Non-parametric Local Transforms for Computing Visual Correspondence [R Zabih J Woodfill 1994]

なかの

Spatiotemporal Stereo via Spatiotemporal Quadric Element (Stequel) Matching9

どんなもの

技術や手法のキモはどこ

新しいマッチング手法を提案動き考慮することなく時間情報を取り込むことができる 時間方向のエピ線を考える

オプティカルフロー推定は3D境界や低テクスチャで弱いが提案手法はロバストである

なかの

Depth Video Enhancement Based on Weighted Mode Filtering10

どんなもの

議論論はある

ノイズを含んだ低解像度度のデプスマップの質を高める手法（超解像度度とデノイズ）時間方向も使用簡単なオプティカルフローを計算し利利用する

非反復復アルゴリズムのためGPUに載せやすく高速化が考えられる

なかの

Fast Bilateral-Space Stereo for Synthetic Defocus11

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

議論論はある

次に読むべき論論文は

高速な自由焦点ぼけ画像の作成

Bilateral-spaceを提案

従来研究よりも10から100倍速くぼけ具合の精度度も良良い

ぼけを作成するというアプリケーションに利利用する距離離という面では提案手法が有益であるが実測的な距離離という面での精度度は悪い背景と前景が同じ色で近くにある場合同一ととらえてしまう

Efficient high-resolution stereo matching using local plane sweeps [S N Sinha D Scharstein and R SzeliskiCVPR2014] Bilateral filtering-based optical flow estimation with occlusion detection [J Xiao H Cheng H Sawhney C Rao and M IsnardiECCV2006] Efficient nonlocal regularization for optical flow [P Krumlahenbumluhl and V KoltunECCV2012] Real-time spatiotemporal stereo matching using the dual-cross-bilateral grid [C Richardt D Orr I Davies A Criminisi and N A DodgsonECCV2010]

どうやって有効性を示した視差推定の精度度はmiddleburyKITTI

なかの

Robust Spatiotemporal Stereo for Dynamic Scenes12

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

ステレオ動画のフレーム間情報を取り入れることでノイズ耐性を向上させるまた動きの大きなものも考える

時間を含めたウインドウの提案自動的にそのような変化に対応する画像領領域を検出する

従来の時空間ステレオと比べ大きな動きによる急激な視差の時間変化に対して頑健である

なかの

Spacetime Stereo A Unifying Framework for Depth from Triangulation13

どんなもの

先行行研究と比べてどこがすごい

space time stereoを提案ステレオカメラの視差推定でも構造光を用いた視差推定でも利利用可能 動的なシーンでの利利用も可能

フレームごとマッチングを取っていたが複数フレームでのマッチングを可能とした

なかの

Learning to Select and Order Vacation Photographs (Disney research)14

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示したあまりにもたくさん撮影した写真たちから自動的にフォトアルバムを作成する研究

複雑な視覚での区別を試みたのはこの論論文が初

５つの異異なるトピックから63の個人的な写真コレクションのデータセットを利利用し定量量的に評価する

写真間の差別かを定義する顔全体の絵何が写っているか写っていないかを評価する

Jointly aligning and segmenting multiple web photo streams for the inference of collective photo storylines [G Kim and E P Xing CVPR2013] Photo sequencing [T Basha Y Moses and S Avidan CVPR2012]

なかの

A Taxonomy and Evaluation of Dense Two-Frame Stereo Correspondence Algorithms15

どんなもの

どうやって有効性を示した

次に読むべき論論文は

ステレオマッチングに関する分類を行行う 新たなデータセットを作成する

というよりも他の手法が有効性を示すことができるようにデータセットを作成した 今ではmiddleburyのデータセットと言えばステレオ業界では超有名

High-resolution stereo datasets with subpixel-accurate ground truth

なかの

Discriminability Limits in Spatio-Temporal Stereo Block Matching1

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

spatio-temporal disparity estimationの根本的な前提の正当性を解析しマッチング処理理の際に動きが助けとなる程度度を決定する

時空間マッチングのエラーを分析し誤りの原因を確率率率で導出する（フレーム数動きの分散画像特徴ノイズの関数）

[34243334]は時空間マッチングの利利点を指摘していたが本論論文はマッチング精度度の向上のために動きを用いる手法の程度度や性質を研究する

6つのステレオビデオを用いて検証を行行った

Spacetime stereo Shape recovery for dynamic scenes [L Zhang B Curless and S Seitz CVPR2003] Spatiotemporal stereo and scene flow via stequel matching [M Sizintsev and R Wildes PAMI2012] Temporally consistent disparity and optical flow via efficient spatio-temporal filtering [A Hosni C Rhemann M Bleyer and M Gelautz PRCAIVT2012] Spacetime stereo A unifying framework for depth from triangulation [PAMI2005] Dynamic depth recovery from multiple synchronized video streams [H Tao H Sawhney and R Kumar CVPR2001] Spatiotemporal descriptor for wide-baseline stereo reconstruction of non-rigid and ambiguous scenes [ECCV2003]

なかの

Depth-Based Patch Scaling for Content-Aware Stereo Image Completion2

どんなもの

どうやって有効性を示した

ステレオでデプスを取り物体の三次元情報を使ってインペインティングを行行う

bookのデータセット背景が繰り返しパターンが多いものを使っている

なかの

Fast Semi-dense Surface Reconstruction from Stereoscopic Video in Laparoscopic Surgery3

どんなもの

手法の流流れ

次に読むべき論論文は

腹腔内手術の際にステレオビデオから高速に物体の三次元再構成を行行う研究

Evaluation of stereo matching costs on images with radiometric differences [Hirschmueller H Scharstein D PAMI2008]

スコープカメラから画像取得GPUで演算する 視差を算出しフィルタにかける距離離に変換 点群を再びフィルタにかけて三次元再構成

なかの

3D Reconstruction from Accidental Motion4

どんなもの

技術や手法のキモはどこ

議論論はある

数秒のビデオ（単眼）から三次元再構成を行行う 手ぶれなどの動きから再構成が可能で特定の動きや機材を必要としない

短い基線長でも再構成が可能（3mmの基線長）

基線長が短いため背景の精度度が低くなる リフォーカス画像作成には十分 練習では上手く動作したが検証がまだ必要

なかの

Panoramic Video from Unstructured Camera Arrays5

どんなもの

技術や手法のキモはどこ

議論論はある

複数のカメラを用いたパノラマ撮影を行行う その際に不不自然さがないような動画を作成する

不不自然さを感じる感覚特性を提示しそれにのっとって対策を講じている

一つのカメラの解像度度と品質を向上させるよりも複数台のカメラを組み合わせることがはるかに簡単で有益である専門家でなくてもGoProのカメラセットを組み合わせることは容易易

カメラの配置は厳密に決められていない完璧な時間同期やローリングシャッターの不不足のような実撮影での問題もクリアしている

先行行研究と比べてどこがすごい

どうやって有効性を示した左のシステムは14台のカメラを使用 右のシステムはGoProを5台使用

Disney 201558

なかの

Floating Scale Surface Reconstruction6

どんなもの

技術や手法のキモはどこ

流流動的にスケールを変えられる三次元再構成手法

サンプル規模に依存するパラメータがない rarrどのスケールのサンプルにも対応できる

siggraph2014

なかの

A Super Resolution Reconstruction Scheme for Mixed Spatio-Temporal Stereo Video7

どんなもの

技術や手法のキモはどこ

ビデオ超解像アルゴリズム

二台のカメラを使用 一台は低解像度度で高速一台は高解像度度で低速

HHI 3DV ftp siteのBookarrivalとbeergadenを使用どうやって有効性を示した

なかの

What Is a Good Day for Outdoor Photometric Stereo8

どんなもの

先行行研究と比べてどこがすごい

議論論はある

次に読むべき論論文は

屋外における照度度差があるステレオの研究 屋外でステレオを行行う際に有利利or不不利利な日照条件を明らかにする

点光源を用いた研究は行行われていたが屋外での研究はされていなかった

晴れより曇りの方が精度度が良良い雲があるから特徴量量を取りやすい雑音を白色ガウスモデルを想定 季節ごとのデータセットを利利用してみても良良い

Time-lapse photometric stereo and applications [F Shen K Sunkavalli N Bonneel S Rusinkiewicz H Pfisterand X Tong2014] Outdoor photometric stereo [L-F Yu S-K Yeung Y-W Tai D Terzopoulos and T FChan ICCP2013]

どうやって有効性を示した屋外の照明に関するHDR環境マップのデータベースを利利用

Disney 2015424

なかの

COLORBRUSH ANIMATED DIFFUSION FOR INTUITIVE COLORIZATION SIMULATING WATER PAINTING 9

どんなものアニメを水彩画で描いたように変換する 水彩画を描くには経験が必要であるがそれを作成するアルゴリズムを考案絵具が水によりどうにじむかシュミレーションしている

Disney 20141027 ICIP2014

次に読むべき論論文はGabor-space geodesic active contoursrdquo In Algebraic Frames for the Perception-Action Cycle [C Sagiv NA Sochen and YY Zeevi 2000] Practical temporal consistency for image-based graphics applications [M Lang O Wang T Aydin A Smolic and M Gross SIGGRAPH2012] Computer-Generated Watercolor [CJ Curtis SE Anderson JE Seims KW Fleischer and DH Salesin SIGGRAPH1997]

なかの

From Sound to Sight Using Audio Processing to enable Visible Light Communication 10

どんなもの光に情報を載せる技術プロジェクトページがあって光関係の研究が8個載っている

httpwwwdisneyresearchcomprojectvisible-light-communication

ビデオのURL httpwwwdisneyresearchcomwpcontentuploadsPub_InvisibleLightCommunication_Siggraph14_videomp4

• 201211106_KeisukeKawahara
• 201311421_KeitaKanai_02
• 201313095_AkiraIshii_02
• 201413109_YuukiKubo_02
• 201513110_SatoshiHashizume_02
• 鬼輪講マラソン③_1
• 鬼輪講マラソン③_2

A13 Mul4-shy‐Layered13 Display13 with13 Water13 Drops(SIGGRAPHrsquo10)Peter C Barnum Srinivasa G Narasimhan Takeo Kanade

201413109　久保勇貴 2（鬼コース）13

どんなもの13

複数層の落下水滴にプロジェクションマッピングを行いディスプレイとした研究13

先行研究と比べてどこがすごい13

水滴の制御を行うことで単一のプロジェクタによって複数層の映像投影を可能とした点13

技術や手法のキモはどこ13

[Ambravaneswaran13 et13 al13 2002]及び本研究における実験結果に基づく水滴生成13

どうやって有効だと検証した13

複数のディスプレイ例を示した13 例）顔の投影水槽シミュレータなど13

議論はある13

本当の3Dディスプレイにするにはより多くの水滴制御が必要13

次に読むべき論文は13

Lee13 et13 al13 200713

An13 Immaterial13 Depth-shy‐Fused13 3D13 Display(VRSTrsquo07)Cha Lee Stephen DiVerdi Tobias Humlollerer

201413109　久保勇貴 2（鬼コース）13

どんなもの13

２つのスクリーンを駆使し3Dディスプレイを実現するdepth-shy‐fused13 3D(DFD)に関する評価を行いその結果よりディスプレイを提案した研究13

先行研究と比べてどこがすごい13

DFDが任意のスクリーン設定及び見る位置に対して有効であることを示した13

技術や手法のキモはどこ13

６通りのスクリーン組合せから２つを抽出し見え方の違いを検証した点13

どうやって有効だと検証した13

６通りのスクリーンについて立体的に見えるか被験者実験を実施その後それぞれに有意差がみられるか調べた13

議論はある13

ステレオイメージを認めることができなかったユーザに対しても強い3D効果が見られた13

次に読むべき論文は13

Tokuda13 et13 al13 201013

Cloud13 Display13 (ACErsquo10)Yutaka Tokuda Yasuhiro Suzuki Kunihiro Nishimura Tomohiro Tanikawa Michitaka Hirose

201413109　久保勇貴 2（鬼コース）13

どんなもの13

煙の渦輪を用いた空間を埋めるディスプレイ13

先行研究と比べてどこがすごい13

制御可能な手法により高所へのパーティクルを運搬することに着目した点13

技術や手法のキモはどこ13

コンピュータによって制御が行われる空気砲アレイ13

どうやって有効だと検証した13

箱の中で実験を行い安定して渦輪をできるようにした実際にデモを行ったことを示した13

議論はある13

今の試作機をより早くリフレッシュ速度を高めることによりより濃く空間を埋められることを目指す13

次に読むべき論文は13

Sato13 et13 al13 200913

Par]cle13 Display13 System　(JVRC09)13 -shy‐13 A13 Large13 Scale13 Display13 for13 Public13 Space13 -shy‐

Munehiko13 Sato13 Yasuhiro13 Suzuki13 13 Atsushi13 Hiyama13 Tomohiro13 Tanikawa13 Michitaka13 Hirose

201413109　久保勇貴 2（鬼コース）13

どんなもの13

パーティクルディスプレイによる公共スペースのための大画面ディスプレイの提案13

先行研究と比べてどこがすごい13

公共スペースにおける要求と制限に基づいたシステムを提案した点13

技術や手法のキモはどこ13

実験に基づく表示画像のスクロール時間の制御13

どうやって有効だと検証した13

Aという文字の知覚実験によって 適な点滅周期の調査を行った13

議論はある13

現在の試作機を組合せより高解像度にする必要がある13

次に読むべき論文は13

Kwon13 et13 al13 201513

FugaciousFilm13 Exploring13 Aen4ve13 Interac4on13 with13 Ephemeral13 Material13 (CHIrsquo15)Hyosun13 Kwon13 Shashank13 Jaiswal13 Steve13 Benford13 Sue13 Ann13 Seah13

13 Peter13 BenneC13 Boriana13 Koleva13 Holger13 Schnaumldelbach

201413109　久保勇貴 2（鬼コース）13

どんなもの13

膜を押す引く飛び出ることができる新しい石鹸膜インタフェースの提案13

先行研究と比べてどこがすごい13

徐々に消えるインタフェースは高い注意を有するインタラクションを提供するという点を示したこと13

技術や手法のキモはどこ13

水グリセリンを201の対比で混ぜることでldquopoprdquoがきれいになるようにしかつ膜の耐久性を向上させた13

どうやって有効だと検証した13

３目並べを用いた被験者実験を実施13 ユーザは膜を割ると負け膜を自分のマスにするにはタッチ押す引くの書かれた通りの操作を行う13

議論はある13

ユーザに精密な動作を要求することはとりわけ注意を払うことを誘発する13

次に読むべき論文は13

Wetzstein13 et13 al13 201213

Tensor13 Displays13 Compressive13 Light13 Field13 Synthesis13 using13 Mul4layer13 Displays13 with13 Direc4onal13 Backligh4ng(SIGGRAPHrsquo12)

Gordon13 Wetzstein13 Douglas13 Lanman13 MaChew13 Hirsch13 Ramesh13 Raskar

201413109　久保勇貴 2（鬼コース）13

どんなもの13

視点によって異なる立体映像を見ることができる複数の層からなるディスプレイ13

先行研究と比べてどこがすごい13

既存の手法を合成したcomputa(onal13 displaysというディスプレイの新しいフレームワークを提案した13

技術や手法のキモはどこ13

時分割で視差マスクを表示することでユーザの視線ごとに立体像を表現する13

どうやって有効だと検証した13

通常のディスプレイ３層LCDLCD及び指向性バックライトの例による比較13 13

議論はある13

波紋を含むこと色チャンネルが悪影響を与える相互反射不均一などの問題が見られた13

次に読むべき論文は13

Matoba13 et13 al13 1213

SplashDisplay(VRICrsquo12)Yasuo Matoba Taro Tokui Ryo Sato Tochiki Sato Hideki Koike

201413109　久保勇貴 2（鬼コース）13

どんなもの13

パーティクルにCGを投射しパーティクルがテーブル上に投げられると爆発しパーティクルが噴きあがる13

先行研究と比べてどこがすごい13

ビーズがミリメートルからメートル単位までZ軸方向について空中で奥行きを表現する13

技術や手法のキモはどこ13

スピーカによって風力が発生させビーズを舞い上げる点13

どうやって有効だと検証した13

ビーズを投げると花火が打ちあがっているかのようなアプリケーション例を示した13

議論はある13

高いレベルの表現及び幅広い入力範囲を提供できた13

次に読むべき論文は13

Kim13 et13 al13 1413

MARIO13 Mid-shy‐air13 Augmented13 Reality13 Interac4on13 with13 Objects13 (ECrsquo14)Hanyuool13 Kim13 13 Issei13 Takahashi13 Hiroki13 Yamamoto13 Satoshi13 Maekawa13 Takeshi13 Naemura

201413109　久保勇貴 2（鬼コース）13

どんなもの13

350times300times250のテーブル上のスペースにおいて自由に動かせる空中像を造りだすことができる13

先行研究と比べてどこがすごい13

凹面鏡や凹レンズのように曲面でないため画像の歪曲が発生しない13

技術や手法のキモはどこ13

Aerial13 Imaging13 Plate(AIP)を用いた空中像の生成及びそのためのディスプレイ移動装置13

どうやって有効だと検証した13

左右からの視差の考慮及び奥行き表現時の画像提示視野角の検証などを行った13 13

議論はある13

投影しているひよこを叩いたり払いのけたりするような動作がデモ中見られた13

次に読むべき論文は13

Tactile Feedback on Flat Surfaces for the Visually Impaired13Ali Israr Olivier Bau Seung-Chan Kim Ivan Poupyrev13

どのようなものか 視覚障害者のための触覚を用いた視覚代用デバイス 先行研究と比べてどこがすごいか 道案内をしてくれる機械などはあるが日用品の場所を教えたり探すのを手伝ってくれるデバイスはない 技術や手法のキモ タッチパネルとカメラを搭載したデバイス 触覚を与える技術はTeslaTouchを利用 色を基準にオブジェクトの位置を認識 有用性の確認 視覚障害者二人に対して実験このデバイスを使

わなくても各自の方法で物を見つけられるが間違えることが多いこのデバイスを使用することで間違えることなく正確に物の位置を特定できた 課題 一つの色でしか判断できない 触感のあるなしでしか情報を伝えられない 関連論文 TeslaTouch [Bau et al 2010]

20150522 橋爪智 2鬼

Fingernail-Mounted Display of Attraction Force and Texture13Masataka Niwa Tomoko Nozaki Taro Maeda and Hideyuki And13

どのようなものか 指先に取り付けて触感と力を両方表現できるデバイス 先行研究と比べてどこがすごいか 触感と引力をそれぞれ表現するデバイスはあるが両方を一つのデバイスで表現した例は少ない 引力は自由な方向に付加することができる 技術や手法のキモ 偏心に重さを付けた円盤を4枚使用する 5-9Hz 引力　100-200Hz 触感 それぞれの円盤の位相や回転数を調整することで

触感と力 を表現する 4つのモータを使いそれぞれの円盤を独立して制御する 有用性の確認 4人の男性に対して実験80以上の精度で認識できた 関連論文 The nail-mounted attraction forcebump display [Nozaki et al 2008]

20150522 橋爪智 2 鬼

Gilded gait reshaping the urban experience with augmented footsteps13Yuichiro Takeuchi13

どのようなものか 靴に装着し地面の触感をコントロールするデバイス 先行研究と比べてどこがすごいか 単独で動作しなかったり特定の環境のみでしか動作しなかったりするrarr靴単体で動作環境に依存しない 技術や手法のキモ 6個の振動パネルを取り付けゲルでカバー app modulesを取り替えることができ様々な機能を付加できる（GPSsound) 4種類の地面を再現

bull  Hard Ground 振動させない bull  Soft Ground すべてのパネルを振動 bull  Bumpy Ground ジグザグに振動 bull  Godzilla 全てのパネルを振動何回か繰り返す 課題 モーターを使っているため波形をプログラミングできないrarr圧電素子を使用する 関連論文 Haptic Shoes [Fu et al 2010]

20150522 橋爪智 2鬼

ExoInterfaces novel exosceleton haptic interfaces for virtual reality augmented sport and rehabilitation

Dzmitry Tsetserukou Katsunari Sato Susumu Tachi13

どのようなものか 腕に装着し物理的なinteractionを可能にするデバイス 先行研究と比べてどこがすごいか Exoskeleton 力を増幅するためだが重たく危険なこともある String-based wireが視界をまたぐ動きに制限がある rarr腕の動きに制限を与えない安全 技術や手法のキモ 「FlexTorque」人間の筋肉の構造を再現するベルトとモーターを使用する肩の近くに装着することで

腕に負担がかかりにくい 触覚feedback弱いトルク 運動を支援強いトルク 課題 物理的な接触を表現するゲームやスポーツにより没頭させるリハビリのサポートをする視覚障害者の支援（ものの場所を教える） 関連論文 FlexTorque [Dzmitry et al 2010]

20150522 橋爪智 2 鬼

Perception of Ultrasonic Haptic Feedback on the Hand Localisation and Apparent Motion13

Graham Wilson Tom Carter Sriram Subramanian Stephen Brewster13

どのようなものか 超音波を用いた触覚フィードバック有効性の検討を行う 先行研究と比べてどこがすごいか 超音波触覚フィードバックは比較的新しく研究や操作方法に関する知識が少ない 腕を自由に動かすことができ小さいものは着用可能 技術や手法のキモ 88のアレイ状に超音波発生器を設置

有効性の確認 bull  局所的な触感 　　　25箇所に分割しそれぞれに超音波を当てる 　　　触感を感じた989 　　　場所の誤差85mm bull  手のひらを動く触感 上下左右に動く 　　　動いてると感じた629

20150522 橋爪智 2 鬼

Friction Measurements on a Large Area TPaD13Nicholas D Marchuk J Edward Colgate Michael A Peshkin13

どのようなものか 超音波の振動により触感を与える 先行研究と比べてどこがすごいか ガラス板を使うので透明後ろにディスプレイを配置可能 技術や手法のキモ 「Squeeze Film Effect（スクイズ膜効果）」 ガラス板に取り付けた圧電素子の円盤に高周波信号

をかける 実験 振動しない部分＝摩擦が発生しない部分が発生周波数により場所が変わる rarr摩擦を大きさをかける力の大きさから計測 rarr指の場所に合わせて複数の周波数を使い分ける 関連論文 T-PaD[Winfield et al 2007]

20150522 橋爪智 2 鬼

STIMTAC a Tactile Input Device with Programmable Friction13Michel Amberg Freacutedeacuteric Giraud Betty Semail Paolo Olivo Geacutery Casiez Nicolas Roussel13

どのようなものか 触感を与えられるタッチデバイス 先行研究と比べてどこがすごいか LATPaD サイズ大きいノイズが大きい TeslaTouch 高い電圧付加が必要GNDに接続しなければいけない

技術や手法のキモ 「Squeeze Film Effect」超音波を用いて振動を与える 圧電性セラミックを電極にコーディング 指トラッキングは力センサを用いる 活用法 マウスキーボード絵を描く 関連論文 LATPaD[Vincent et al 2011] TeslaTouch[Bau et al 2010]

20150522 橋爪智 2 鬼

Surround Haptics Tactile Feedback for Immersive Gaming Experiences Ali Israr Seung-Chan Kim Ivan Poupyrev Jan Stec13

どのようなものか ゲームに合わせて高解像度の触覚フィードバックをユーザーに与える椅子 先行研究と比べてどこがすごいか 荒く配置した安価な振動アクチュエータで高解像度の触覚フィードバックを行える 一点の振動連続した動き範囲の振動などを再現

技術や手法のキモ 仮想的な振動アクチュエータをいくつかの振動アクチュエータを使って作り出す physical-physicalphysical-virtualvirtual-virtual ゲームにHaptics Engineを導入しHaptics APIを用いてHaptic Displayを操作する 関連論文 Exploring Surround Haptics Displays[Israr et al 2010]

20150522 橋爪智 2 鬼

Audio-Haptic Feedback in Mobile Phones Angela Chang Conor OrsquoSullivan13

どのようなものか haptics機能のついてない携帯電話にオーディオ機能を利用した触覚フィードバックを追加する 先行研究と比べてどこがすごいか 簡単に作れてnon-haptic mobile devicesでも大丈夫 技術や手法のキモ 「MultiFunction Transducer(MFT)」 スピーカーから音と信号の両方を出力できる

bull  Haptic Inheritance 　　音を2つの周波数帯に分ける bull  Synthesis and Matching 　　低周波数帯(20-300Hz)を使い触感を伝える 有効性の検討 42人の人を対象に実験を行う83の人が触感を感じた

20150522 橋爪智 2 鬼

Resolution of Sleep Deprivation Problems using ZZZoo Pillows13Shunsuke Yanaka Motoki Ishida13

どのようなものか 近年不眠症の人が多い rarr誰かと接していると安心し睡眠に導入しやすくなる rarrまるで添い寝をしているようなリアルな抱きまくらを使う 技術や手法のキモ breathing sensation 風船を使って人の呼吸を再現肺の形の風船弱く長い呼吸をする

heating お湯を使って人の体温を再現45 有効性の確認 84人の人が実験 呼吸が睡眠を誘ったかrarr61 体温が睡眠を誘ったかrarr85 関連論文 The Impact of Sleep Disorders on Social Life[Komada et al 2007]

20150522 橋爪智 2 鬼

まとめ13超音波 モーター 風

20150522 橋爪智 2 鬼

コイル 電気刺激 Electrovibration

振動 音 お湯

なかの

Temporally Consistent Disparity and Optical Flow via Efficient Spatio-temporal Filtering1

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示した

議論論はあるか

時間的に一定の視差を算出する手法静止画ステレオよりも精度度が良良いことを示す従来よりも推定精度度が良良いオプティカルフローも算出する

一枚の静止画に対するフィルタリング[1]をステレオ動画に拡張している

ケンブリッジのステレオ動画のデータセットを利利用 実写動画に対する比較も行行うノイズ耐性も検証する

フィルタベースとエネルギーベースの関係性を良良り理理解することで推定精度度を上げる

実装が簡単でリアルタイム視差推定が可能

Fast Cost-Volume Filtering for Visual Correspondence and Beyond [Rhemann C Hosni A Bleyer M Rother C Gelautz M CVPR2011] Real-time Spatiotemporal Stereo Matching Using the Dual-Cross-Bilateral Grid [Richardt C Orr D Davies I Criminisi A Dodgson NA ECCV2010] Secrets of optical flow estimation and their principles [Sun D Roth S Black MJ 2010] Motion estimation with non-local total variation regularization [Werlberger M Pock T Bischof H CVPR2010] Temporally Consistent Disparity Maps from Uncalibrated Stereo Videos [Bleyer M Gelatuz M ISPA2011]

なかの

SymStereo Matching using Induced Symmetry (2014)2

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示した

議論論はあるか

画像の対称性を用いてステレオマッチングを行行う 左右の画像を反転させて重ね合わせることで対称性を測る

絵的な類似の代わりに対称性を使う今まで対称性を用いる手法はなく新規性が大きい

三つのSymmetry-baseの手法で精度度を検証従来手法よりも精度度が向上しているMiddlebury Oxford Corridorfountain-P11のデータセット使用

ステレオの問題である不不連続な箇所オクルージョン部分は未解決である演算時間はやや増加

1-Dラインのコストを考える今までは撮像面に対して平行行な平面でデプスを考えていたが垂直な平面を考える

BT[Birchfield and Tomasi 1998] Census transform[Zabih and Woodfill 1994] Log N[Kovesi 1997] radio-metoric differences[Hirschmuller Scharstein 2009]

なかの

Camouflaging an Object from Many Viewpoints3

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

多くの視点から三次元の物体をカモフラージュするカモフラージュによってオクルージョン部分の不不連続がどの程度度生じるか他の視点ではどれほどになるかの検証

MRF（Markov Random Fields）ベース

新しい三次元物体のカモフラージュモデルを構築 37種類のデータセットを作る

箱形の物体に対してカモフラージュ処理理を施し 結果を評価する

オクルージョン不不連続テクスチャの歪みが問題 照明や画像の貼りつけに制限あり

なかの

Aliasing Detection and Reduction in Plenoptic Imaging4

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

カメラアレイ撮影の角度度のエイリアシングを除去するエイリアシングの探索索と打ち消しを行行う

周波数領領域ではなく空間領領域で探索索を行行う

先行行研究がフィルタデモザイキング再パラメータ調整などの前処理理でエイリアシング除去を行行うのに対しエイリアシング探索索後にリフォーカスの段階でエイリアシングを取り除く

8times8の平行行カメラアレイで検証するカメラ間の 基線長は70mm

今回は基線長が長いデータセットを使った 次はLytroなどのマイクロレンズアレイで検証する

Globally consistent multi-label assignment on the ray space of 4d light fields [S Wanner C Straehle B Goldluecke CVPR2013] Lineassisted light field triangulation and stereo matching [Z Yu X Guo H Lin A Lumsdaine J Yu ICCV 2013]

なかの

Globally Consistent Multi-Label Assignment on the Ray Space of 4D Light Fields5

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

四次元ライトフィールドの光線情報において マルチラベルの領領域分割を行行う

深度度情報光線情報を用いて領領域分割することで 二次元（空間）情報だけでは分割が難しかった 領領域を分割可能とする

The light field camera Extended depth of field aliasing and superresolution [T Bishop P Favaro IEEE Transactions on Pattern Analysis and Machine Intelligence 2012]

なかの

Line Assisted Light Field Triangulation and Stereo Matching6

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

光線情報を利利用してステレオマッチングの精度度を 向上させる手法三角測量量の誤差を減らす

Light Field Stereo Matchingとかいう手法 グラフ構造を作成

Variational light field analysis for disparity estimation and super-resolution [S Wanner and B Goldlumluecke 2013]

なかの

Adaptive stereo similarity fusion using confidence measures 20157

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

ステレオマッチングの新しい方式fusion weightsを提案複数の手法を組み合わせてコスト計算を行行う手法付録に既存手法のコスト関数一覧あり

パラメータに依存する手法を用いないことで高速化を図っている

一つのアルゴリズムでは異異なる特性を持つ領領域全てに対して適切切なマッチングはできない複数を組み合わせることでそれを補う13種と多い

middleburyとKITTIのデータセットで評価

一枚あたり03sと高速だが001sとより高速なアルゴリズムが存在する

Segment-based stereo matching using belief propagation and a self-adapting dissimilarity measure [A Klaus M Sormann K Karner ICPR2006] On building an accurate stereo matching system on graphics hardware [X Mei X Sun M Zhou S Jiao H Wang X Zhang ICCV2011] Similarity measures for depth estimation [K Wegner O Stankiewicz 3DTV-CON2009] On accurate dense stereo-matching using a local adaptive multi-cost approach [C Stentoumis L Grammatikopoulos I Kalisperakis G Karras ISPRS2014] A quantitative evaluation of confidence measures for stereo vision [X Hu P Mordohai PAMI2012]

なかの

SIMILARITY MEASURE FOR DEPTH ESTIMATIOM 20098

どんなもの

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

4種類の視差推定アルゴリズムを組み合わせている 類似度度の選択性の解析

Belief Propagationの枠組みを用いる

名古屋大学の多視点データベースを利利用

HHI Test Material for 3D Video [I Feldmann M Muller F Zilly R Tanger A SmolicP Kauff T Wiegand 2008] Multiview Video Test Sequence and Camera Parameters [Yo-Sung Ho Eun-Kyung Lee and Cheon Lee 2008] 1D Parallel Test Sequences for MPEG-FTV [M Tanimoto T Fujii N Fukushima 2008] Non-parametric Local Transforms for Computing Visual Correspondence [R Zabih J Woodfill 1994]

なかの

Spatiotemporal Stereo via Spatiotemporal Quadric Element (Stequel) Matching9

どんなもの

技術や手法のキモはどこ

新しいマッチング手法を提案動き考慮することなく時間情報を取り込むことができる 時間方向のエピ線を考える

オプティカルフロー推定は3D境界や低テクスチャで弱いが提案手法はロバストである

なかの

Depth Video Enhancement Based on Weighted Mode Filtering10

どんなもの

議論論はある

ノイズを含んだ低解像度度のデプスマップの質を高める手法（超解像度度とデノイズ）時間方向も使用簡単なオプティカルフローを計算し利利用する

非反復復アルゴリズムのためGPUに載せやすく高速化が考えられる

なかの

Fast Bilateral-Space Stereo for Synthetic Defocus11

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

議論論はある

次に読むべき論論文は

高速な自由焦点ぼけ画像の作成

Bilateral-spaceを提案

従来研究よりも10から100倍速くぼけ具合の精度度も良良い

ぼけを作成するというアプリケーションに利利用する距離離という面では提案手法が有益であるが実測的な距離離という面での精度度は悪い背景と前景が同じ色で近くにある場合同一ととらえてしまう

Efficient high-resolution stereo matching using local plane sweeps [S N Sinha D Scharstein and R SzeliskiCVPR2014] Bilateral filtering-based optical flow estimation with occlusion detection [J Xiao H Cheng H Sawhney C Rao and M IsnardiECCV2006] Efficient nonlocal regularization for optical flow [P Krumlahenbumluhl and V KoltunECCV2012] Real-time spatiotemporal stereo matching using the dual-cross-bilateral grid [C Richardt D Orr I Davies A Criminisi and N A DodgsonECCV2010]

どうやって有効性を示した視差推定の精度度はmiddleburyKITTI

なかの

Robust Spatiotemporal Stereo for Dynamic Scenes12

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

ステレオ動画のフレーム間情報を取り入れることでノイズ耐性を向上させるまた動きの大きなものも考える

時間を含めたウインドウの提案自動的にそのような変化に対応する画像領領域を検出する

従来の時空間ステレオと比べ大きな動きによる急激な視差の時間変化に対して頑健である

なかの

Spacetime Stereo A Unifying Framework for Depth from Triangulation13

どんなもの

先行行研究と比べてどこがすごい

space time stereoを提案ステレオカメラの視差推定でも構造光を用いた視差推定でも利利用可能 動的なシーンでの利利用も可能

フレームごとマッチングを取っていたが複数フレームでのマッチングを可能とした

なかの

Learning to Select and Order Vacation Photographs (Disney research)14

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示したあまりにもたくさん撮影した写真たちから自動的にフォトアルバムを作成する研究

複雑な視覚での区別を試みたのはこの論論文が初

５つの異異なるトピックから63の個人的な写真コレクションのデータセットを利利用し定量量的に評価する

写真間の差別かを定義する顔全体の絵何が写っているか写っていないかを評価する

Jointly aligning and segmenting multiple web photo streams for the inference of collective photo storylines [G Kim and E P Xing CVPR2013] Photo sequencing [T Basha Y Moses and S Avidan CVPR2012]

なかの

A Taxonomy and Evaluation of Dense Two-Frame Stereo Correspondence Algorithms15

どんなもの

どうやって有効性を示した

次に読むべき論論文は

ステレオマッチングに関する分類を行行う 新たなデータセットを作成する

というよりも他の手法が有効性を示すことができるようにデータセットを作成した 今ではmiddleburyのデータセットと言えばステレオ業界では超有名

High-resolution stereo datasets with subpixel-accurate ground truth

なかの

Discriminability Limits in Spatio-Temporal Stereo Block Matching1

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

spatio-temporal disparity estimationの根本的な前提の正当性を解析しマッチング処理理の際に動きが助けとなる程度度を決定する

時空間マッチングのエラーを分析し誤りの原因を確率率率で導出する（フレーム数動きの分散画像特徴ノイズの関数）

[34243334]は時空間マッチングの利利点を指摘していたが本論論文はマッチング精度度の向上のために動きを用いる手法の程度度や性質を研究する

6つのステレオビデオを用いて検証を行行った

Spacetime stereo Shape recovery for dynamic scenes [L Zhang B Curless and S Seitz CVPR2003] Spatiotemporal stereo and scene flow via stequel matching [M Sizintsev and R Wildes PAMI2012] Temporally consistent disparity and optical flow via efficient spatio-temporal filtering [A Hosni C Rhemann M Bleyer and M Gelautz PRCAIVT2012] Spacetime stereo A unifying framework for depth from triangulation [PAMI2005] Dynamic depth recovery from multiple synchronized video streams [H Tao H Sawhney and R Kumar CVPR2001] Spatiotemporal descriptor for wide-baseline stereo reconstruction of non-rigid and ambiguous scenes [ECCV2003]

なかの

Depth-Based Patch Scaling for Content-Aware Stereo Image Completion2

どんなもの

どうやって有効性を示した

ステレオでデプスを取り物体の三次元情報を使ってインペインティングを行行う

bookのデータセット背景が繰り返しパターンが多いものを使っている

なかの

Fast Semi-dense Surface Reconstruction from Stereoscopic Video in Laparoscopic Surgery3

どんなもの

手法の流流れ

次に読むべき論論文は

腹腔内手術の際にステレオビデオから高速に物体の三次元再構成を行行う研究

Evaluation of stereo matching costs on images with radiometric differences [Hirschmueller H Scharstein D PAMI2008]

スコープカメラから画像取得GPUで演算する 視差を算出しフィルタにかける距離離に変換 点群を再びフィルタにかけて三次元再構成

なかの

3D Reconstruction from Accidental Motion4

どんなもの

技術や手法のキモはどこ

議論論はある

数秒のビデオ（単眼）から三次元再構成を行行う 手ぶれなどの動きから再構成が可能で特定の動きや機材を必要としない

短い基線長でも再構成が可能（3mmの基線長）

基線長が短いため背景の精度度が低くなる リフォーカス画像作成には十分 練習では上手く動作したが検証がまだ必要

なかの

Panoramic Video from Unstructured Camera Arrays5

どんなもの

技術や手法のキモはどこ

議論論はある

複数のカメラを用いたパノラマ撮影を行行う その際に不不自然さがないような動画を作成する

不不自然さを感じる感覚特性を提示しそれにのっとって対策を講じている

一つのカメラの解像度度と品質を向上させるよりも複数台のカメラを組み合わせることがはるかに簡単で有益である専門家でなくてもGoProのカメラセットを組み合わせることは容易易

カメラの配置は厳密に決められていない完璧な時間同期やローリングシャッターの不不足のような実撮影での問題もクリアしている

先行行研究と比べてどこがすごい

どうやって有効性を示した左のシステムは14台のカメラを使用 右のシステムはGoProを5台使用

Disney 201558

なかの

Floating Scale Surface Reconstruction6

どんなもの

技術や手法のキモはどこ

流流動的にスケールを変えられる三次元再構成手法

サンプル規模に依存するパラメータがない rarrどのスケールのサンプルにも対応できる

siggraph2014

なかの

A Super Resolution Reconstruction Scheme for Mixed Spatio-Temporal Stereo Video7

どんなもの

技術や手法のキモはどこ

ビデオ超解像アルゴリズム

二台のカメラを使用 一台は低解像度度で高速一台は高解像度度で低速

HHI 3DV ftp siteのBookarrivalとbeergadenを使用どうやって有効性を示した

なかの

What Is a Good Day for Outdoor Photometric Stereo8

どんなもの

先行行研究と比べてどこがすごい

議論論はある

次に読むべき論論文は

屋外における照度度差があるステレオの研究 屋外でステレオを行行う際に有利利or不不利利な日照条件を明らかにする

点光源を用いた研究は行行われていたが屋外での研究はされていなかった

晴れより曇りの方が精度度が良良い雲があるから特徴量量を取りやすい雑音を白色ガウスモデルを想定 季節ごとのデータセットを利利用してみても良良い

Time-lapse photometric stereo and applications [F Shen K Sunkavalli N Bonneel S Rusinkiewicz H Pfisterand X Tong2014] Outdoor photometric stereo [L-F Yu S-K Yeung Y-W Tai D Terzopoulos and T FChan ICCP2013]

どうやって有効性を示した屋外の照明に関するHDR環境マップのデータベースを利利用

Disney 2015424

なかの

COLORBRUSH ANIMATED DIFFUSION FOR INTUITIVE COLORIZATION SIMULATING WATER PAINTING 9

どんなものアニメを水彩画で描いたように変換する 水彩画を描くには経験が必要であるがそれを作成するアルゴリズムを考案絵具が水によりどうにじむかシュミレーションしている

Disney 20141027 ICIP2014

次に読むべき論論文はGabor-space geodesic active contoursrdquo In Algebraic Frames for the Perception-Action Cycle [C Sagiv NA Sochen and YY Zeevi 2000] Practical temporal consistency for image-based graphics applications [M Lang O Wang T Aydin A Smolic and M Gross SIGGRAPH2012] Computer-Generated Watercolor [CJ Curtis SE Anderson JE Seims KW Fleischer and DH Salesin SIGGRAPH1997]

なかの

From Sound to Sight Using Audio Processing to enable Visible Light Communication 10

どんなもの光に情報を載せる技術プロジェクトページがあって光関係の研究が8個載っている

httpwwwdisneyresearchcomprojectvisible-light-communication

ビデオのURL httpwwwdisneyresearchcomwpcontentuploadsPub_InvisibleLightCommunication_Siggraph14_videomp4

• 201211106_KeisukeKawahara
• 201311421_KeitaKanai_02
• 201313095_AkiraIshii_02
• 201413109_YuukiKubo_02
• 201513110_SatoshiHashizume_02
• 鬼輪講マラソン③_1
• 鬼輪講マラソン③_2

An13 Immaterial13 Depth-shy‐Fused13 3D13 Display(VRSTrsquo07)Cha Lee Stephen DiVerdi Tobias Humlollerer

201413109　久保勇貴 2（鬼コース）13

どんなもの13

２つのスクリーンを駆使し3Dディスプレイを実現するdepth-shy‐fused13 3D(DFD)に関する評価を行いその結果よりディスプレイを提案した研究13

先行研究と比べてどこがすごい13

DFDが任意のスクリーン設定及び見る位置に対して有効であることを示した13

技術や手法のキモはどこ13

６通りのスクリーン組合せから２つを抽出し見え方の違いを検証した点13

どうやって有効だと検証した13

６通りのスクリーンについて立体的に見えるか被験者実験を実施その後それぞれに有意差がみられるか調べた13

議論はある13

ステレオイメージを認めることができなかったユーザに対しても強い3D効果が見られた13

次に読むべき論文は13

Tokuda13 et13 al13 201013

Cloud13 Display13 (ACErsquo10)Yutaka Tokuda Yasuhiro Suzuki Kunihiro Nishimura Tomohiro Tanikawa Michitaka Hirose

201413109　久保勇貴 2（鬼コース）13

どんなもの13

煙の渦輪を用いた空間を埋めるディスプレイ13

先行研究と比べてどこがすごい13

制御可能な手法により高所へのパーティクルを運搬することに着目した点13

技術や手法のキモはどこ13

コンピュータによって制御が行われる空気砲アレイ13

どうやって有効だと検証した13

箱の中で実験を行い安定して渦輪をできるようにした実際にデモを行ったことを示した13

議論はある13

今の試作機をより早くリフレッシュ速度を高めることによりより濃く空間を埋められることを目指す13

次に読むべき論文は13

Sato13 et13 al13 200913

Par]cle13 Display13 System　(JVRC09)13 -shy‐13 A13 Large13 Scale13 Display13 for13 Public13 Space13 -shy‐

Munehiko13 Sato13 Yasuhiro13 Suzuki13 13 Atsushi13 Hiyama13 Tomohiro13 Tanikawa13 Michitaka13 Hirose

201413109　久保勇貴 2（鬼コース）13

どんなもの13

パーティクルディスプレイによる公共スペースのための大画面ディスプレイの提案13

先行研究と比べてどこがすごい13

公共スペースにおける要求と制限に基づいたシステムを提案した点13

技術や手法のキモはどこ13

実験に基づく表示画像のスクロール時間の制御13

どうやって有効だと検証した13

Aという文字の知覚実験によって 適な点滅周期の調査を行った13

議論はある13

現在の試作機を組合せより高解像度にする必要がある13

次に読むべき論文は13

Kwon13 et13 al13 201513

FugaciousFilm13 Exploring13 Aen4ve13 Interac4on13 with13 Ephemeral13 Material13 (CHIrsquo15)Hyosun13 Kwon13 Shashank13 Jaiswal13 Steve13 Benford13 Sue13 Ann13 Seah13

13 Peter13 BenneC13 Boriana13 Koleva13 Holger13 Schnaumldelbach

201413109　久保勇貴 2（鬼コース）13

どんなもの13

膜を押す引く飛び出ることができる新しい石鹸膜インタフェースの提案13

先行研究と比べてどこがすごい13

徐々に消えるインタフェースは高い注意を有するインタラクションを提供するという点を示したこと13

技術や手法のキモはどこ13

水グリセリンを201の対比で混ぜることでldquopoprdquoがきれいになるようにしかつ膜の耐久性を向上させた13

どうやって有効だと検証した13

３目並べを用いた被験者実験を実施13 ユーザは膜を割ると負け膜を自分のマスにするにはタッチ押す引くの書かれた通りの操作を行う13

議論はある13

ユーザに精密な動作を要求することはとりわけ注意を払うことを誘発する13

次に読むべき論文は13

Wetzstein13 et13 al13 201213

Tensor13 Displays13 Compressive13 Light13 Field13 Synthesis13 using13 Mul4layer13 Displays13 with13 Direc4onal13 Backligh4ng(SIGGRAPHrsquo12)

Gordon13 Wetzstein13 Douglas13 Lanman13 MaChew13 Hirsch13 Ramesh13 Raskar

201413109　久保勇貴 2（鬼コース）13

どんなもの13

視点によって異なる立体映像を見ることができる複数の層からなるディスプレイ13

先行研究と比べてどこがすごい13

既存の手法を合成したcomputa(onal13 displaysというディスプレイの新しいフレームワークを提案した13

技術や手法のキモはどこ13

時分割で視差マスクを表示することでユーザの視線ごとに立体像を表現する13

どうやって有効だと検証した13

通常のディスプレイ３層LCDLCD及び指向性バックライトの例による比較13 13

議論はある13

波紋を含むこと色チャンネルが悪影響を与える相互反射不均一などの問題が見られた13

次に読むべき論文は13

Matoba13 et13 al13 1213

SplashDisplay(VRICrsquo12)Yasuo Matoba Taro Tokui Ryo Sato Tochiki Sato Hideki Koike

201413109　久保勇貴 2（鬼コース）13

どんなもの13

パーティクルにCGを投射しパーティクルがテーブル上に投げられると爆発しパーティクルが噴きあがる13

先行研究と比べてどこがすごい13

ビーズがミリメートルからメートル単位までZ軸方向について空中で奥行きを表現する13

技術や手法のキモはどこ13

スピーカによって風力が発生させビーズを舞い上げる点13

どうやって有効だと検証した13

ビーズを投げると花火が打ちあがっているかのようなアプリケーション例を示した13

議論はある13

高いレベルの表現及び幅広い入力範囲を提供できた13

次に読むべき論文は13

Kim13 et13 al13 1413

MARIO13 Mid-shy‐air13 Augmented13 Reality13 Interac4on13 with13 Objects13 (ECrsquo14)Hanyuool13 Kim13 13 Issei13 Takahashi13 Hiroki13 Yamamoto13 Satoshi13 Maekawa13 Takeshi13 Naemura

201413109　久保勇貴 2（鬼コース）13

どんなもの13

350times300times250のテーブル上のスペースにおいて自由に動かせる空中像を造りだすことができる13

先行研究と比べてどこがすごい13

凹面鏡や凹レンズのように曲面でないため画像の歪曲が発生しない13

技術や手法のキモはどこ13

Aerial13 Imaging13 Plate(AIP)を用いた空中像の生成及びそのためのディスプレイ移動装置13

どうやって有効だと検証した13

左右からの視差の考慮及び奥行き表現時の画像提示視野角の検証などを行った13 13

議論はある13

投影しているひよこを叩いたり払いのけたりするような動作がデモ中見られた13

次に読むべき論文は13

Tactile Feedback on Flat Surfaces for the Visually Impaired13Ali Israr Olivier Bau Seung-Chan Kim Ivan Poupyrev13

どのようなものか 視覚障害者のための触覚を用いた視覚代用デバイス 先行研究と比べてどこがすごいか 道案内をしてくれる機械などはあるが日用品の場所を教えたり探すのを手伝ってくれるデバイスはない 技術や手法のキモ タッチパネルとカメラを搭載したデバイス 触覚を与える技術はTeslaTouchを利用 色を基準にオブジェクトの位置を認識 有用性の確認 視覚障害者二人に対して実験このデバイスを使

わなくても各自の方法で物を見つけられるが間違えることが多いこのデバイスを使用することで間違えることなく正確に物の位置を特定できた 課題 一つの色でしか判断できない 触感のあるなしでしか情報を伝えられない 関連論文 TeslaTouch [Bau et al 2010]

20150522 橋爪智 2鬼

Fingernail-Mounted Display of Attraction Force and Texture13Masataka Niwa Tomoko Nozaki Taro Maeda and Hideyuki And13

どのようなものか 指先に取り付けて触感と力を両方表現できるデバイス 先行研究と比べてどこがすごいか 触感と引力をそれぞれ表現するデバイスはあるが両方を一つのデバイスで表現した例は少ない 引力は自由な方向に付加することができる 技術や手法のキモ 偏心に重さを付けた円盤を4枚使用する 5-9Hz 引力　100-200Hz 触感 それぞれの円盤の位相や回転数を調整することで

触感と力 を表現する 4つのモータを使いそれぞれの円盤を独立して制御する 有用性の確認 4人の男性に対して実験80以上の精度で認識できた 関連論文 The nail-mounted attraction forcebump display [Nozaki et al 2008]

20150522 橋爪智 2 鬼

Gilded gait reshaping the urban experience with augmented footsteps13Yuichiro Takeuchi13

どのようなものか 靴に装着し地面の触感をコントロールするデバイス 先行研究と比べてどこがすごいか 単独で動作しなかったり特定の環境のみでしか動作しなかったりするrarr靴単体で動作環境に依存しない 技術や手法のキモ 6個の振動パネルを取り付けゲルでカバー app modulesを取り替えることができ様々な機能を付加できる（GPSsound) 4種類の地面を再現

bull  Hard Ground 振動させない bull  Soft Ground すべてのパネルを振動 bull  Bumpy Ground ジグザグに振動 bull  Godzilla 全てのパネルを振動何回か繰り返す 課題 モーターを使っているため波形をプログラミングできないrarr圧電素子を使用する 関連論文 Haptic Shoes [Fu et al 2010]

20150522 橋爪智 2鬼

ExoInterfaces novel exosceleton haptic interfaces for virtual reality augmented sport and rehabilitation

Dzmitry Tsetserukou Katsunari Sato Susumu Tachi13

どのようなものか 腕に装着し物理的なinteractionを可能にするデバイス 先行研究と比べてどこがすごいか Exoskeleton 力を増幅するためだが重たく危険なこともある String-based wireが視界をまたぐ動きに制限がある rarr腕の動きに制限を与えない安全 技術や手法のキモ 「FlexTorque」人間の筋肉の構造を再現するベルトとモーターを使用する肩の近くに装着することで

腕に負担がかかりにくい 触覚feedback弱いトルク 運動を支援強いトルク 課題 物理的な接触を表現するゲームやスポーツにより没頭させるリハビリのサポートをする視覚障害者の支援（ものの場所を教える） 関連論文 FlexTorque [Dzmitry et al 2010]

20150522 橋爪智 2 鬼

Perception of Ultrasonic Haptic Feedback on the Hand Localisation and Apparent Motion13

Graham Wilson Tom Carter Sriram Subramanian Stephen Brewster13

どのようなものか 超音波を用いた触覚フィードバック有効性の検討を行う 先行研究と比べてどこがすごいか 超音波触覚フィードバックは比較的新しく研究や操作方法に関する知識が少ない 腕を自由に動かすことができ小さいものは着用可能 技術や手法のキモ 88のアレイ状に超音波発生器を設置

有効性の確認 bull  局所的な触感 　　　25箇所に分割しそれぞれに超音波を当てる 　　　触感を感じた989 　　　場所の誤差85mm bull  手のひらを動く触感 上下左右に動く 　　　動いてると感じた629

20150522 橋爪智 2 鬼

Friction Measurements on a Large Area TPaD13Nicholas D Marchuk J Edward Colgate Michael A Peshkin13

どのようなものか 超音波の振動により触感を与える 先行研究と比べてどこがすごいか ガラス板を使うので透明後ろにディスプレイを配置可能 技術や手法のキモ 「Squeeze Film Effect（スクイズ膜効果）」 ガラス板に取り付けた圧電素子の円盤に高周波信号

をかける 実験 振動しない部分＝摩擦が発生しない部分が発生周波数により場所が変わる rarr摩擦を大きさをかける力の大きさから計測 rarr指の場所に合わせて複数の周波数を使い分ける 関連論文 T-PaD[Winfield et al 2007]

20150522 橋爪智 2 鬼

STIMTAC a Tactile Input Device with Programmable Friction13Michel Amberg Freacutedeacuteric Giraud Betty Semail Paolo Olivo Geacutery Casiez Nicolas Roussel13

どのようなものか 触感を与えられるタッチデバイス 先行研究と比べてどこがすごいか LATPaD サイズ大きいノイズが大きい TeslaTouch 高い電圧付加が必要GNDに接続しなければいけない

技術や手法のキモ 「Squeeze Film Effect」超音波を用いて振動を与える 圧電性セラミックを電極にコーディング 指トラッキングは力センサを用いる 活用法 マウスキーボード絵を描く 関連論文 LATPaD[Vincent et al 2011] TeslaTouch[Bau et al 2010]

20150522 橋爪智 2 鬼

Surround Haptics Tactile Feedback for Immersive Gaming Experiences Ali Israr Seung-Chan Kim Ivan Poupyrev Jan Stec13

どのようなものか ゲームに合わせて高解像度の触覚フィードバックをユーザーに与える椅子 先行研究と比べてどこがすごいか 荒く配置した安価な振動アクチュエータで高解像度の触覚フィードバックを行える 一点の振動連続した動き範囲の振動などを再現

技術や手法のキモ 仮想的な振動アクチュエータをいくつかの振動アクチュエータを使って作り出す physical-physicalphysical-virtualvirtual-virtual ゲームにHaptics Engineを導入しHaptics APIを用いてHaptic Displayを操作する 関連論文 Exploring Surround Haptics Displays[Israr et al 2010]

20150522 橋爪智 2 鬼

Audio-Haptic Feedback in Mobile Phones Angela Chang Conor OrsquoSullivan13

どのようなものか haptics機能のついてない携帯電話にオーディオ機能を利用した触覚フィードバックを追加する 先行研究と比べてどこがすごいか 簡単に作れてnon-haptic mobile devicesでも大丈夫 技術や手法のキモ 「MultiFunction Transducer(MFT)」 スピーカーから音と信号の両方を出力できる

bull  Haptic Inheritance 　　音を2つの周波数帯に分ける bull  Synthesis and Matching 　　低周波数帯(20-300Hz)を使い触感を伝える 有効性の検討 42人の人を対象に実験を行う83の人が触感を感じた

20150522 橋爪智 2 鬼

Resolution of Sleep Deprivation Problems using ZZZoo Pillows13Shunsuke Yanaka Motoki Ishida13

どのようなものか 近年不眠症の人が多い rarr誰かと接していると安心し睡眠に導入しやすくなる rarrまるで添い寝をしているようなリアルな抱きまくらを使う 技術や手法のキモ breathing sensation 風船を使って人の呼吸を再現肺の形の風船弱く長い呼吸をする

heating お湯を使って人の体温を再現45 有効性の確認 84人の人が実験 呼吸が睡眠を誘ったかrarr61 体温が睡眠を誘ったかrarr85 関連論文 The Impact of Sleep Disorders on Social Life[Komada et al 2007]

20150522 橋爪智 2 鬼

まとめ13超音波 モーター 風

20150522 橋爪智 2 鬼

コイル 電気刺激 Electrovibration

振動 音 お湯

なかの

Temporally Consistent Disparity and Optical Flow via Efficient Spatio-temporal Filtering1

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示した

議論論はあるか

時間的に一定の視差を算出する手法静止画ステレオよりも精度度が良良いことを示す従来よりも推定精度度が良良いオプティカルフローも算出する

一枚の静止画に対するフィルタリング[1]をステレオ動画に拡張している

ケンブリッジのステレオ動画のデータセットを利利用 実写動画に対する比較も行行うノイズ耐性も検証する

フィルタベースとエネルギーベースの関係性を良良り理理解することで推定精度度を上げる

実装が簡単でリアルタイム視差推定が可能

Fast Cost-Volume Filtering for Visual Correspondence and Beyond [Rhemann C Hosni A Bleyer M Rother C Gelautz M CVPR2011] Real-time Spatiotemporal Stereo Matching Using the Dual-Cross-Bilateral Grid [Richardt C Orr D Davies I Criminisi A Dodgson NA ECCV2010] Secrets of optical flow estimation and their principles [Sun D Roth S Black MJ 2010] Motion estimation with non-local total variation regularization [Werlberger M Pock T Bischof H CVPR2010] Temporally Consistent Disparity Maps from Uncalibrated Stereo Videos [Bleyer M Gelatuz M ISPA2011]

なかの

SymStereo Matching using Induced Symmetry (2014)2

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示した

議論論はあるか

画像の対称性を用いてステレオマッチングを行行う 左右の画像を反転させて重ね合わせることで対称性を測る

絵的な類似の代わりに対称性を使う今まで対称性を用いる手法はなく新規性が大きい

三つのSymmetry-baseの手法で精度度を検証従来手法よりも精度度が向上しているMiddlebury Oxford Corridorfountain-P11のデータセット使用

ステレオの問題である不不連続な箇所オクルージョン部分は未解決である演算時間はやや増加

1-Dラインのコストを考える今までは撮像面に対して平行行な平面でデプスを考えていたが垂直な平面を考える

BT[Birchfield and Tomasi 1998] Census transform[Zabih and Woodfill 1994] Log N[Kovesi 1997] radio-metoric differences[Hirschmuller Scharstein 2009]

なかの

Camouflaging an Object from Many Viewpoints3

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

多くの視点から三次元の物体をカモフラージュするカモフラージュによってオクルージョン部分の不不連続がどの程度度生じるか他の視点ではどれほどになるかの検証

MRF（Markov Random Fields）ベース

新しい三次元物体のカモフラージュモデルを構築 37種類のデータセットを作る

箱形の物体に対してカモフラージュ処理理を施し 結果を評価する

オクルージョン不不連続テクスチャの歪みが問題 照明や画像の貼りつけに制限あり

なかの

Aliasing Detection and Reduction in Plenoptic Imaging4

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

カメラアレイ撮影の角度度のエイリアシングを除去するエイリアシングの探索索と打ち消しを行行う

周波数領領域ではなく空間領領域で探索索を行行う

先行行研究がフィルタデモザイキング再パラメータ調整などの前処理理でエイリアシング除去を行行うのに対しエイリアシング探索索後にリフォーカスの段階でエイリアシングを取り除く

8times8の平行行カメラアレイで検証するカメラ間の 基線長は70mm

今回は基線長が長いデータセットを使った 次はLytroなどのマイクロレンズアレイで検証する

Globally consistent multi-label assignment on the ray space of 4d light fields [S Wanner C Straehle B Goldluecke CVPR2013] Lineassisted light field triangulation and stereo matching [Z Yu X Guo H Lin A Lumsdaine J Yu ICCV 2013]

なかの

Globally Consistent Multi-Label Assignment on the Ray Space of 4D Light Fields5

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

四次元ライトフィールドの光線情報において マルチラベルの領領域分割を行行う

深度度情報光線情報を用いて領領域分割することで 二次元（空間）情報だけでは分割が難しかった 領領域を分割可能とする

The light field camera Extended depth of field aliasing and superresolution [T Bishop P Favaro IEEE Transactions on Pattern Analysis and Machine Intelligence 2012]

なかの

Line Assisted Light Field Triangulation and Stereo Matching6

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

光線情報を利利用してステレオマッチングの精度度を 向上させる手法三角測量量の誤差を減らす

Light Field Stereo Matchingとかいう手法 グラフ構造を作成

Variational light field analysis for disparity estimation and super-resolution [S Wanner and B Goldlumluecke 2013]

なかの

Adaptive stereo similarity fusion using confidence measures 20157

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

ステレオマッチングの新しい方式fusion weightsを提案複数の手法を組み合わせてコスト計算を行行う手法付録に既存手法のコスト関数一覧あり

パラメータに依存する手法を用いないことで高速化を図っている

一つのアルゴリズムでは異異なる特性を持つ領領域全てに対して適切切なマッチングはできない複数を組み合わせることでそれを補う13種と多い

middleburyとKITTIのデータセットで評価

一枚あたり03sと高速だが001sとより高速なアルゴリズムが存在する

Segment-based stereo matching using belief propagation and a self-adapting dissimilarity measure [A Klaus M Sormann K Karner ICPR2006] On building an accurate stereo matching system on graphics hardware [X Mei X Sun M Zhou S Jiao H Wang X Zhang ICCV2011] Similarity measures for depth estimation [K Wegner O Stankiewicz 3DTV-CON2009] On accurate dense stereo-matching using a local adaptive multi-cost approach [C Stentoumis L Grammatikopoulos I Kalisperakis G Karras ISPRS2014] A quantitative evaluation of confidence measures for stereo vision [X Hu P Mordohai PAMI2012]

なかの

SIMILARITY MEASURE FOR DEPTH ESTIMATIOM 20098

どんなもの

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

4種類の視差推定アルゴリズムを組み合わせている 類似度度の選択性の解析

Belief Propagationの枠組みを用いる

名古屋大学の多視点データベースを利利用

HHI Test Material for 3D Video [I Feldmann M Muller F Zilly R Tanger A SmolicP Kauff T Wiegand 2008] Multiview Video Test Sequence and Camera Parameters [Yo-Sung Ho Eun-Kyung Lee and Cheon Lee 2008] 1D Parallel Test Sequences for MPEG-FTV [M Tanimoto T Fujii N Fukushima 2008] Non-parametric Local Transforms for Computing Visual Correspondence [R Zabih J Woodfill 1994]

なかの

Spatiotemporal Stereo via Spatiotemporal Quadric Element (Stequel) Matching9

どんなもの

技術や手法のキモはどこ

新しいマッチング手法を提案動き考慮することなく時間情報を取り込むことができる 時間方向のエピ線を考える

オプティカルフロー推定は3D境界や低テクスチャで弱いが提案手法はロバストである

なかの

Depth Video Enhancement Based on Weighted Mode Filtering10

どんなもの

議論論はある

ノイズを含んだ低解像度度のデプスマップの質を高める手法（超解像度度とデノイズ）時間方向も使用簡単なオプティカルフローを計算し利利用する

非反復復アルゴリズムのためGPUに載せやすく高速化が考えられる

なかの

Fast Bilateral-Space Stereo for Synthetic Defocus11

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

議論論はある

次に読むべき論論文は

高速な自由焦点ぼけ画像の作成

Bilateral-spaceを提案

従来研究よりも10から100倍速くぼけ具合の精度度も良良い

ぼけを作成するというアプリケーションに利利用する距離離という面では提案手法が有益であるが実測的な距離離という面での精度度は悪い背景と前景が同じ色で近くにある場合同一ととらえてしまう

Efficient high-resolution stereo matching using local plane sweeps [S N Sinha D Scharstein and R SzeliskiCVPR2014] Bilateral filtering-based optical flow estimation with occlusion detection [J Xiao H Cheng H Sawhney C Rao and M IsnardiECCV2006] Efficient nonlocal regularization for optical flow [P Krumlahenbumluhl and V KoltunECCV2012] Real-time spatiotemporal stereo matching using the dual-cross-bilateral grid [C Richardt D Orr I Davies A Criminisi and N A DodgsonECCV2010]

どうやって有効性を示した視差推定の精度度はmiddleburyKITTI

なかの

Robust Spatiotemporal Stereo for Dynamic Scenes12

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

ステレオ動画のフレーム間情報を取り入れることでノイズ耐性を向上させるまた動きの大きなものも考える

時間を含めたウインドウの提案自動的にそのような変化に対応する画像領領域を検出する

従来の時空間ステレオと比べ大きな動きによる急激な視差の時間変化に対して頑健である

なかの

Spacetime Stereo A Unifying Framework for Depth from Triangulation13

どんなもの

先行行研究と比べてどこがすごい

space time stereoを提案ステレオカメラの視差推定でも構造光を用いた視差推定でも利利用可能 動的なシーンでの利利用も可能

フレームごとマッチングを取っていたが複数フレームでのマッチングを可能とした

なかの

Learning to Select and Order Vacation Photographs (Disney research)14

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示したあまりにもたくさん撮影した写真たちから自動的にフォトアルバムを作成する研究

複雑な視覚での区別を試みたのはこの論論文が初

５つの異異なるトピックから63の個人的な写真コレクションのデータセットを利利用し定量量的に評価する

写真間の差別かを定義する顔全体の絵何が写っているか写っていないかを評価する

Jointly aligning and segmenting multiple web photo streams for the inference of collective photo storylines [G Kim and E P Xing CVPR2013] Photo sequencing [T Basha Y Moses and S Avidan CVPR2012]

なかの

A Taxonomy and Evaluation of Dense Two-Frame Stereo Correspondence Algorithms15

どんなもの

どうやって有効性を示した

次に読むべき論論文は

ステレオマッチングに関する分類を行行う 新たなデータセットを作成する

というよりも他の手法が有効性を示すことができるようにデータセットを作成した 今ではmiddleburyのデータセットと言えばステレオ業界では超有名

High-resolution stereo datasets with subpixel-accurate ground truth

なかの

Discriminability Limits in Spatio-Temporal Stereo Block Matching1

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

spatio-temporal disparity estimationの根本的な前提の正当性を解析しマッチング処理理の際に動きが助けとなる程度度を決定する

時空間マッチングのエラーを分析し誤りの原因を確率率率で導出する（フレーム数動きの分散画像特徴ノイズの関数）

[34243334]は時空間マッチングの利利点を指摘していたが本論論文はマッチング精度度の向上のために動きを用いる手法の程度度や性質を研究する

6つのステレオビデオを用いて検証を行行った

Spacetime stereo Shape recovery for dynamic scenes [L Zhang B Curless and S Seitz CVPR2003] Spatiotemporal stereo and scene flow via stequel matching [M Sizintsev and R Wildes PAMI2012] Temporally consistent disparity and optical flow via efficient spatio-temporal filtering [A Hosni C Rhemann M Bleyer and M Gelautz PRCAIVT2012] Spacetime stereo A unifying framework for depth from triangulation [PAMI2005] Dynamic depth recovery from multiple synchronized video streams [H Tao H Sawhney and R Kumar CVPR2001] Spatiotemporal descriptor for wide-baseline stereo reconstruction of non-rigid and ambiguous scenes [ECCV2003]

なかの

Depth-Based Patch Scaling for Content-Aware Stereo Image Completion2

どんなもの

どうやって有効性を示した

ステレオでデプスを取り物体の三次元情報を使ってインペインティングを行行う

bookのデータセット背景が繰り返しパターンが多いものを使っている

なかの

Fast Semi-dense Surface Reconstruction from Stereoscopic Video in Laparoscopic Surgery3

どんなもの

手法の流流れ

次に読むべき論論文は

腹腔内手術の際にステレオビデオから高速に物体の三次元再構成を行行う研究

Evaluation of stereo matching costs on images with radiometric differences [Hirschmueller H Scharstein D PAMI2008]

スコープカメラから画像取得GPUで演算する 視差を算出しフィルタにかける距離離に変換 点群を再びフィルタにかけて三次元再構成

なかの

3D Reconstruction from Accidental Motion4

どんなもの

技術や手法のキモはどこ

議論論はある

数秒のビデオ（単眼）から三次元再構成を行行う 手ぶれなどの動きから再構成が可能で特定の動きや機材を必要としない

短い基線長でも再構成が可能（3mmの基線長）

基線長が短いため背景の精度度が低くなる リフォーカス画像作成には十分 練習では上手く動作したが検証がまだ必要

なかの

Panoramic Video from Unstructured Camera Arrays5

どんなもの

技術や手法のキモはどこ

議論論はある

複数のカメラを用いたパノラマ撮影を行行う その際に不不自然さがないような動画を作成する

不不自然さを感じる感覚特性を提示しそれにのっとって対策を講じている

一つのカメラの解像度度と品質を向上させるよりも複数台のカメラを組み合わせることがはるかに簡単で有益である専門家でなくてもGoProのカメラセットを組み合わせることは容易易

カメラの配置は厳密に決められていない完璧な時間同期やローリングシャッターの不不足のような実撮影での問題もクリアしている

先行行研究と比べてどこがすごい

どうやって有効性を示した左のシステムは14台のカメラを使用 右のシステムはGoProを5台使用

Disney 201558

なかの

Floating Scale Surface Reconstruction6

どんなもの

技術や手法のキモはどこ

流流動的にスケールを変えられる三次元再構成手法

サンプル規模に依存するパラメータがない rarrどのスケールのサンプルにも対応できる

siggraph2014

なかの

A Super Resolution Reconstruction Scheme for Mixed Spatio-Temporal Stereo Video7

どんなもの

技術や手法のキモはどこ

ビデオ超解像アルゴリズム

二台のカメラを使用 一台は低解像度度で高速一台は高解像度度で低速

HHI 3DV ftp siteのBookarrivalとbeergadenを使用どうやって有効性を示した

なかの

What Is a Good Day for Outdoor Photometric Stereo8

どんなもの

先行行研究と比べてどこがすごい

議論論はある

次に読むべき論論文は

屋外における照度度差があるステレオの研究 屋外でステレオを行行う際に有利利or不不利利な日照条件を明らかにする

点光源を用いた研究は行行われていたが屋外での研究はされていなかった

晴れより曇りの方が精度度が良良い雲があるから特徴量量を取りやすい雑音を白色ガウスモデルを想定 季節ごとのデータセットを利利用してみても良良い

Time-lapse photometric stereo and applications [F Shen K Sunkavalli N Bonneel S Rusinkiewicz H Pfisterand X Tong2014] Outdoor photometric stereo [L-F Yu S-K Yeung Y-W Tai D Terzopoulos and T FChan ICCP2013]

どうやって有効性を示した屋外の照明に関するHDR環境マップのデータベースを利利用

Disney 2015424

なかの

COLORBRUSH ANIMATED DIFFUSION FOR INTUITIVE COLORIZATION SIMULATING WATER PAINTING 9

どんなものアニメを水彩画で描いたように変換する 水彩画を描くには経験が必要であるがそれを作成するアルゴリズムを考案絵具が水によりどうにじむかシュミレーションしている

Disney 20141027 ICIP2014

次に読むべき論論文はGabor-space geodesic active contoursrdquo In Algebraic Frames for the Perception-Action Cycle [C Sagiv NA Sochen and YY Zeevi 2000] Practical temporal consistency for image-based graphics applications [M Lang O Wang T Aydin A Smolic and M Gross SIGGRAPH2012] Computer-Generated Watercolor [CJ Curtis SE Anderson JE Seims KW Fleischer and DH Salesin SIGGRAPH1997]

なかの

From Sound to Sight Using Audio Processing to enable Visible Light Communication 10

どんなもの光に情報を載せる技術プロジェクトページがあって光関係の研究が8個載っている

httpwwwdisneyresearchcomprojectvisible-light-communication

ビデオのURL httpwwwdisneyresearchcomwpcontentuploadsPub_InvisibleLightCommunication_Siggraph14_videomp4

• 201211106_KeisukeKawahara
• 201311421_KeitaKanai_02
• 201313095_AkiraIshii_02
• 201413109_YuukiKubo_02
• 201513110_SatoshiHashizume_02
• 鬼輪講マラソン③_1
• 鬼輪講マラソン③_2

Cloud13 Display13 (ACErsquo10)Yutaka Tokuda Yasuhiro Suzuki Kunihiro Nishimura Tomohiro Tanikawa Michitaka Hirose

201413109　久保勇貴 2（鬼コース）13

どんなもの13

煙の渦輪を用いた空間を埋めるディスプレイ13

先行研究と比べてどこがすごい13

制御可能な手法により高所へのパーティクルを運搬することに着目した点13

技術や手法のキモはどこ13

コンピュータによって制御が行われる空気砲アレイ13

どうやって有効だと検証した13

箱の中で実験を行い安定して渦輪をできるようにした実際にデモを行ったことを示した13

議論はある13

今の試作機をより早くリフレッシュ速度を高めることによりより濃く空間を埋められることを目指す13

次に読むべき論文は13

Sato13 et13 al13 200913

Par]cle13 Display13 System　(JVRC09)13 -shy‐13 A13 Large13 Scale13 Display13 for13 Public13 Space13 -shy‐

Munehiko13 Sato13 Yasuhiro13 Suzuki13 13 Atsushi13 Hiyama13 Tomohiro13 Tanikawa13 Michitaka13 Hirose

201413109　久保勇貴 2（鬼コース）13

どんなもの13

パーティクルディスプレイによる公共スペースのための大画面ディスプレイの提案13

先行研究と比べてどこがすごい13

公共スペースにおける要求と制限に基づいたシステムを提案した点13

技術や手法のキモはどこ13

実験に基づく表示画像のスクロール時間の制御13

どうやって有効だと検証した13

Aという文字の知覚実験によって 適な点滅周期の調査を行った13

議論はある13

現在の試作機を組合せより高解像度にする必要がある13

次に読むべき論文は13

Kwon13 et13 al13 201513

FugaciousFilm13 Exploring13 Aen4ve13 Interac4on13 with13 Ephemeral13 Material13 (CHIrsquo15)Hyosun13 Kwon13 Shashank13 Jaiswal13 Steve13 Benford13 Sue13 Ann13 Seah13

13 Peter13 BenneC13 Boriana13 Koleva13 Holger13 Schnaumldelbach

201413109　久保勇貴 2（鬼コース）13

どんなもの13

膜を押す引く飛び出ることができる新しい石鹸膜インタフェースの提案13

先行研究と比べてどこがすごい13

徐々に消えるインタフェースは高い注意を有するインタラクションを提供するという点を示したこと13

技術や手法のキモはどこ13

水グリセリンを201の対比で混ぜることでldquopoprdquoがきれいになるようにしかつ膜の耐久性を向上させた13

どうやって有効だと検証した13

３目並べを用いた被験者実験を実施13 ユーザは膜を割ると負け膜を自分のマスにするにはタッチ押す引くの書かれた通りの操作を行う13

議論はある13

ユーザに精密な動作を要求することはとりわけ注意を払うことを誘発する13

次に読むべき論文は13

Wetzstein13 et13 al13 201213

Tensor13 Displays13 Compressive13 Light13 Field13 Synthesis13 using13 Mul4layer13 Displays13 with13 Direc4onal13 Backligh4ng(SIGGRAPHrsquo12)

Gordon13 Wetzstein13 Douglas13 Lanman13 MaChew13 Hirsch13 Ramesh13 Raskar

201413109　久保勇貴 2（鬼コース）13

どんなもの13

視点によって異なる立体映像を見ることができる複数の層からなるディスプレイ13

先行研究と比べてどこがすごい13

既存の手法を合成したcomputa(onal13 displaysというディスプレイの新しいフレームワークを提案した13

技術や手法のキモはどこ13

時分割で視差マスクを表示することでユーザの視線ごとに立体像を表現する13

どうやって有効だと検証した13

通常のディスプレイ３層LCDLCD及び指向性バックライトの例による比較13 13

議論はある13

波紋を含むこと色チャンネルが悪影響を与える相互反射不均一などの問題が見られた13

次に読むべき論文は13

Matoba13 et13 al13 1213

SplashDisplay(VRICrsquo12)Yasuo Matoba Taro Tokui Ryo Sato Tochiki Sato Hideki Koike

201413109　久保勇貴 2（鬼コース）13

どんなもの13

パーティクルにCGを投射しパーティクルがテーブル上に投げられると爆発しパーティクルが噴きあがる13

先行研究と比べてどこがすごい13

ビーズがミリメートルからメートル単位までZ軸方向について空中で奥行きを表現する13

技術や手法のキモはどこ13

スピーカによって風力が発生させビーズを舞い上げる点13

どうやって有効だと検証した13

ビーズを投げると花火が打ちあがっているかのようなアプリケーション例を示した13

議論はある13

高いレベルの表現及び幅広い入力範囲を提供できた13

次に読むべき論文は13

Kim13 et13 al13 1413

MARIO13 Mid-shy‐air13 Augmented13 Reality13 Interac4on13 with13 Objects13 (ECrsquo14)Hanyuool13 Kim13 13 Issei13 Takahashi13 Hiroki13 Yamamoto13 Satoshi13 Maekawa13 Takeshi13 Naemura

201413109　久保勇貴 2（鬼コース）13

どんなもの13

350times300times250のテーブル上のスペースにおいて自由に動かせる空中像を造りだすことができる13

先行研究と比べてどこがすごい13

凹面鏡や凹レンズのように曲面でないため画像の歪曲が発生しない13

技術や手法のキモはどこ13

Aerial13 Imaging13 Plate(AIP)を用いた空中像の生成及びそのためのディスプレイ移動装置13

どうやって有効だと検証した13

左右からの視差の考慮及び奥行き表現時の画像提示視野角の検証などを行った13 13

議論はある13

投影しているひよこを叩いたり払いのけたりするような動作がデモ中見られた13

次に読むべき論文は13

Tactile Feedback on Flat Surfaces for the Visually Impaired13Ali Israr Olivier Bau Seung-Chan Kim Ivan Poupyrev13

どのようなものか 視覚障害者のための触覚を用いた視覚代用デバイス 先行研究と比べてどこがすごいか 道案内をしてくれる機械などはあるが日用品の場所を教えたり探すのを手伝ってくれるデバイスはない 技術や手法のキモ タッチパネルとカメラを搭載したデバイス 触覚を与える技術はTeslaTouchを利用 色を基準にオブジェクトの位置を認識 有用性の確認 視覚障害者二人に対して実験このデバイスを使

わなくても各自の方法で物を見つけられるが間違えることが多いこのデバイスを使用することで間違えることなく正確に物の位置を特定できた 課題 一つの色でしか判断できない 触感のあるなしでしか情報を伝えられない 関連論文 TeslaTouch [Bau et al 2010]

20150522 橋爪智 2鬼

Fingernail-Mounted Display of Attraction Force and Texture13Masataka Niwa Tomoko Nozaki Taro Maeda and Hideyuki And13

どのようなものか 指先に取り付けて触感と力を両方表現できるデバイス 先行研究と比べてどこがすごいか 触感と引力をそれぞれ表現するデバイスはあるが両方を一つのデバイスで表現した例は少ない 引力は自由な方向に付加することができる 技術や手法のキモ 偏心に重さを付けた円盤を4枚使用する 5-9Hz 引力　100-200Hz 触感 それぞれの円盤の位相や回転数を調整することで

触感と力 を表現する 4つのモータを使いそれぞれの円盤を独立して制御する 有用性の確認 4人の男性に対して実験80以上の精度で認識できた 関連論文 The nail-mounted attraction forcebump display [Nozaki et al 2008]

20150522 橋爪智 2 鬼

Gilded gait reshaping the urban experience with augmented footsteps13Yuichiro Takeuchi13

どのようなものか 靴に装着し地面の触感をコントロールするデバイス 先行研究と比べてどこがすごいか 単独で動作しなかったり特定の環境のみでしか動作しなかったりするrarr靴単体で動作環境に依存しない 技術や手法のキモ 6個の振動パネルを取り付けゲルでカバー app modulesを取り替えることができ様々な機能を付加できる（GPSsound) 4種類の地面を再現

bull  Hard Ground 振動させない bull  Soft Ground すべてのパネルを振動 bull  Bumpy Ground ジグザグに振動 bull  Godzilla 全てのパネルを振動何回か繰り返す 課題 モーターを使っているため波形をプログラミングできないrarr圧電素子を使用する 関連論文 Haptic Shoes [Fu et al 2010]

20150522 橋爪智 2鬼

ExoInterfaces novel exosceleton haptic interfaces for virtual reality augmented sport and rehabilitation

Dzmitry Tsetserukou Katsunari Sato Susumu Tachi13

どのようなものか 腕に装着し物理的なinteractionを可能にするデバイス 先行研究と比べてどこがすごいか Exoskeleton 力を増幅するためだが重たく危険なこともある String-based wireが視界をまたぐ動きに制限がある rarr腕の動きに制限を与えない安全 技術や手法のキモ 「FlexTorque」人間の筋肉の構造を再現するベルトとモーターを使用する肩の近くに装着することで

腕に負担がかかりにくい 触覚feedback弱いトルク 運動を支援強いトルク 課題 物理的な接触を表現するゲームやスポーツにより没頭させるリハビリのサポートをする視覚障害者の支援（ものの場所を教える） 関連論文 FlexTorque [Dzmitry et al 2010]

20150522 橋爪智 2 鬼

Perception of Ultrasonic Haptic Feedback on the Hand Localisation and Apparent Motion13

Graham Wilson Tom Carter Sriram Subramanian Stephen Brewster13

どのようなものか 超音波を用いた触覚フィードバック有効性の検討を行う 先行研究と比べてどこがすごいか 超音波触覚フィードバックは比較的新しく研究や操作方法に関する知識が少ない 腕を自由に動かすことができ小さいものは着用可能 技術や手法のキモ 88のアレイ状に超音波発生器を設置

有効性の確認 bull  局所的な触感 　　　25箇所に分割しそれぞれに超音波を当てる 　　　触感を感じた989 　　　場所の誤差85mm bull  手のひらを動く触感 上下左右に動く 　　　動いてると感じた629

20150522 橋爪智 2 鬼

Friction Measurements on a Large Area TPaD13Nicholas D Marchuk J Edward Colgate Michael A Peshkin13

どのようなものか 超音波の振動により触感を与える 先行研究と比べてどこがすごいか ガラス板を使うので透明後ろにディスプレイを配置可能 技術や手法のキモ 「Squeeze Film Effect（スクイズ膜効果）」 ガラス板に取り付けた圧電素子の円盤に高周波信号

をかける 実験 振動しない部分＝摩擦が発生しない部分が発生周波数により場所が変わる rarr摩擦を大きさをかける力の大きさから計測 rarr指の場所に合わせて複数の周波数を使い分ける 関連論文 T-PaD[Winfield et al 2007]

20150522 橋爪智 2 鬼

STIMTAC a Tactile Input Device with Programmable Friction13Michel Amberg Freacutedeacuteric Giraud Betty Semail Paolo Olivo Geacutery Casiez Nicolas Roussel13

どのようなものか 触感を与えられるタッチデバイス 先行研究と比べてどこがすごいか LATPaD サイズ大きいノイズが大きい TeslaTouch 高い電圧付加が必要GNDに接続しなければいけない

技術や手法のキモ 「Squeeze Film Effect」超音波を用いて振動を与える 圧電性セラミックを電極にコーディング 指トラッキングは力センサを用いる 活用法 マウスキーボード絵を描く 関連論文 LATPaD[Vincent et al 2011] TeslaTouch[Bau et al 2010]

20150522 橋爪智 2 鬼

Surround Haptics Tactile Feedback for Immersive Gaming Experiences Ali Israr Seung-Chan Kim Ivan Poupyrev Jan Stec13

どのようなものか ゲームに合わせて高解像度の触覚フィードバックをユーザーに与える椅子 先行研究と比べてどこがすごいか 荒く配置した安価な振動アクチュエータで高解像度の触覚フィードバックを行える 一点の振動連続した動き範囲の振動などを再現

技術や手法のキモ 仮想的な振動アクチュエータをいくつかの振動アクチュエータを使って作り出す physical-physicalphysical-virtualvirtual-virtual ゲームにHaptics Engineを導入しHaptics APIを用いてHaptic Displayを操作する 関連論文 Exploring Surround Haptics Displays[Israr et al 2010]

20150522 橋爪智 2 鬼

Audio-Haptic Feedback in Mobile Phones Angela Chang Conor OrsquoSullivan13

どのようなものか haptics機能のついてない携帯電話にオーディオ機能を利用した触覚フィードバックを追加する 先行研究と比べてどこがすごいか 簡単に作れてnon-haptic mobile devicesでも大丈夫 技術や手法のキモ 「MultiFunction Transducer(MFT)」 スピーカーから音と信号の両方を出力できる

bull  Haptic Inheritance 　　音を2つの周波数帯に分ける bull  Synthesis and Matching 　　低周波数帯(20-300Hz)を使い触感を伝える 有効性の検討 42人の人を対象に実験を行う83の人が触感を感じた

20150522 橋爪智 2 鬼

Resolution of Sleep Deprivation Problems using ZZZoo Pillows13Shunsuke Yanaka Motoki Ishida13

どのようなものか 近年不眠症の人が多い rarr誰かと接していると安心し睡眠に導入しやすくなる rarrまるで添い寝をしているようなリアルな抱きまくらを使う 技術や手法のキモ breathing sensation 風船を使って人の呼吸を再現肺の形の風船弱く長い呼吸をする

heating お湯を使って人の体温を再現45 有効性の確認 84人の人が実験 呼吸が睡眠を誘ったかrarr61 体温が睡眠を誘ったかrarr85 関連論文 The Impact of Sleep Disorders on Social Life[Komada et al 2007]

20150522 橋爪智 2 鬼

まとめ13超音波 モーター 風

20150522 橋爪智 2 鬼

コイル 電気刺激 Electrovibration

振動 音 お湯

なかの

Temporally Consistent Disparity and Optical Flow via Efficient Spatio-temporal Filtering1

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示した

議論論はあるか

時間的に一定の視差を算出する手法静止画ステレオよりも精度度が良良いことを示す従来よりも推定精度度が良良いオプティカルフローも算出する

一枚の静止画に対するフィルタリング[1]をステレオ動画に拡張している

ケンブリッジのステレオ動画のデータセットを利利用 実写動画に対する比較も行行うノイズ耐性も検証する

フィルタベースとエネルギーベースの関係性を良良り理理解することで推定精度度を上げる

実装が簡単でリアルタイム視差推定が可能

Fast Cost-Volume Filtering for Visual Correspondence and Beyond [Rhemann C Hosni A Bleyer M Rother C Gelautz M CVPR2011] Real-time Spatiotemporal Stereo Matching Using the Dual-Cross-Bilateral Grid [Richardt C Orr D Davies I Criminisi A Dodgson NA ECCV2010] Secrets of optical flow estimation and their principles [Sun D Roth S Black MJ 2010] Motion estimation with non-local total variation regularization [Werlberger M Pock T Bischof H CVPR2010] Temporally Consistent Disparity Maps from Uncalibrated Stereo Videos [Bleyer M Gelatuz M ISPA2011]

なかの

SymStereo Matching using Induced Symmetry (2014)2

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示した

議論論はあるか

画像の対称性を用いてステレオマッチングを行行う 左右の画像を反転させて重ね合わせることで対称性を測る

絵的な類似の代わりに対称性を使う今まで対称性を用いる手法はなく新規性が大きい

三つのSymmetry-baseの手法で精度度を検証従来手法よりも精度度が向上しているMiddlebury Oxford Corridorfountain-P11のデータセット使用

ステレオの問題である不不連続な箇所オクルージョン部分は未解決である演算時間はやや増加

1-Dラインのコストを考える今までは撮像面に対して平行行な平面でデプスを考えていたが垂直な平面を考える

BT[Birchfield and Tomasi 1998] Census transform[Zabih and Woodfill 1994] Log N[Kovesi 1997] radio-metoric differences[Hirschmuller Scharstein 2009]

なかの

Camouflaging an Object from Many Viewpoints3

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

多くの視点から三次元の物体をカモフラージュするカモフラージュによってオクルージョン部分の不不連続がどの程度度生じるか他の視点ではどれほどになるかの検証

MRF（Markov Random Fields）ベース

新しい三次元物体のカモフラージュモデルを構築 37種類のデータセットを作る

箱形の物体に対してカモフラージュ処理理を施し 結果を評価する

オクルージョン不不連続テクスチャの歪みが問題 照明や画像の貼りつけに制限あり

なかの

Aliasing Detection and Reduction in Plenoptic Imaging4

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

カメラアレイ撮影の角度度のエイリアシングを除去するエイリアシングの探索索と打ち消しを行行う

周波数領領域ではなく空間領領域で探索索を行行う

先行行研究がフィルタデモザイキング再パラメータ調整などの前処理理でエイリアシング除去を行行うのに対しエイリアシング探索索後にリフォーカスの段階でエイリアシングを取り除く

8times8の平行行カメラアレイで検証するカメラ間の 基線長は70mm

今回は基線長が長いデータセットを使った 次はLytroなどのマイクロレンズアレイで検証する

Globally consistent multi-label assignment on the ray space of 4d light fields [S Wanner C Straehle B Goldluecke CVPR2013] Lineassisted light field triangulation and stereo matching [Z Yu X Guo H Lin A Lumsdaine J Yu ICCV 2013]

なかの

Globally Consistent Multi-Label Assignment on the Ray Space of 4D Light Fields5

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

四次元ライトフィールドの光線情報において マルチラベルの領領域分割を行行う

深度度情報光線情報を用いて領領域分割することで 二次元（空間）情報だけでは分割が難しかった 領領域を分割可能とする

The light field camera Extended depth of field aliasing and superresolution [T Bishop P Favaro IEEE Transactions on Pattern Analysis and Machine Intelligence 2012]

なかの

Line Assisted Light Field Triangulation and Stereo Matching6

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

光線情報を利利用してステレオマッチングの精度度を 向上させる手法三角測量量の誤差を減らす

Light Field Stereo Matchingとかいう手法 グラフ構造を作成

Variational light field analysis for disparity estimation and super-resolution [S Wanner and B Goldlumluecke 2013]

なかの

Adaptive stereo similarity fusion using confidence measures 20157

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

ステレオマッチングの新しい方式fusion weightsを提案複数の手法を組み合わせてコスト計算を行行う手法付録に既存手法のコスト関数一覧あり

パラメータに依存する手法を用いないことで高速化を図っている

一つのアルゴリズムでは異異なる特性を持つ領領域全てに対して適切切なマッチングはできない複数を組み合わせることでそれを補う13種と多い

middleburyとKITTIのデータセットで評価

一枚あたり03sと高速だが001sとより高速なアルゴリズムが存在する

Segment-based stereo matching using belief propagation and a self-adapting dissimilarity measure [A Klaus M Sormann K Karner ICPR2006] On building an accurate stereo matching system on graphics hardware [X Mei X Sun M Zhou S Jiao H Wang X Zhang ICCV2011] Similarity measures for depth estimation [K Wegner O Stankiewicz 3DTV-CON2009] On accurate dense stereo-matching using a local adaptive multi-cost approach [C Stentoumis L Grammatikopoulos I Kalisperakis G Karras ISPRS2014] A quantitative evaluation of confidence measures for stereo vision [X Hu P Mordohai PAMI2012]

なかの

SIMILARITY MEASURE FOR DEPTH ESTIMATIOM 20098

どんなもの

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

4種類の視差推定アルゴリズムを組み合わせている 類似度度の選択性の解析

Belief Propagationの枠組みを用いる

名古屋大学の多視点データベースを利利用

HHI Test Material for 3D Video [I Feldmann M Muller F Zilly R Tanger A SmolicP Kauff T Wiegand 2008] Multiview Video Test Sequence and Camera Parameters [Yo-Sung Ho Eun-Kyung Lee and Cheon Lee 2008] 1D Parallel Test Sequences for MPEG-FTV [M Tanimoto T Fujii N Fukushima 2008] Non-parametric Local Transforms for Computing Visual Correspondence [R Zabih J Woodfill 1994]

なかの

Spatiotemporal Stereo via Spatiotemporal Quadric Element (Stequel) Matching9

どんなもの

技術や手法のキモはどこ

新しいマッチング手法を提案動き考慮することなく時間情報を取り込むことができる 時間方向のエピ線を考える

オプティカルフロー推定は3D境界や低テクスチャで弱いが提案手法はロバストである

なかの

Depth Video Enhancement Based on Weighted Mode Filtering10

どんなもの

議論論はある

ノイズを含んだ低解像度度のデプスマップの質を高める手法（超解像度度とデノイズ）時間方向も使用簡単なオプティカルフローを計算し利利用する

非反復復アルゴリズムのためGPUに載せやすく高速化が考えられる

なかの

Fast Bilateral-Space Stereo for Synthetic Defocus11

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

議論論はある

次に読むべき論論文は

高速な自由焦点ぼけ画像の作成

Bilateral-spaceを提案

従来研究よりも10から100倍速くぼけ具合の精度度も良良い

ぼけを作成するというアプリケーションに利利用する距離離という面では提案手法が有益であるが実測的な距離離という面での精度度は悪い背景と前景が同じ色で近くにある場合同一ととらえてしまう

Efficient high-resolution stereo matching using local plane sweeps [S N Sinha D Scharstein and R SzeliskiCVPR2014] Bilateral filtering-based optical flow estimation with occlusion detection [J Xiao H Cheng H Sawhney C Rao and M IsnardiECCV2006] Efficient nonlocal regularization for optical flow [P Krumlahenbumluhl and V KoltunECCV2012] Real-time spatiotemporal stereo matching using the dual-cross-bilateral grid [C Richardt D Orr I Davies A Criminisi and N A DodgsonECCV2010]

どうやって有効性を示した視差推定の精度度はmiddleburyKITTI

なかの

Robust Spatiotemporal Stereo for Dynamic Scenes12

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

ステレオ動画のフレーム間情報を取り入れることでノイズ耐性を向上させるまた動きの大きなものも考える

時間を含めたウインドウの提案自動的にそのような変化に対応する画像領領域を検出する

従来の時空間ステレオと比べ大きな動きによる急激な視差の時間変化に対して頑健である

なかの

Spacetime Stereo A Unifying Framework for Depth from Triangulation13

どんなもの

先行行研究と比べてどこがすごい

space time stereoを提案ステレオカメラの視差推定でも構造光を用いた視差推定でも利利用可能 動的なシーンでの利利用も可能

フレームごとマッチングを取っていたが複数フレームでのマッチングを可能とした

なかの

Learning to Select and Order Vacation Photographs (Disney research)14

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示したあまりにもたくさん撮影した写真たちから自動的にフォトアルバムを作成する研究

複雑な視覚での区別を試みたのはこの論論文が初

５つの異異なるトピックから63の個人的な写真コレクションのデータセットを利利用し定量量的に評価する

写真間の差別かを定義する顔全体の絵何が写っているか写っていないかを評価する

Jointly aligning and segmenting multiple web photo streams for the inference of collective photo storylines [G Kim and E P Xing CVPR2013] Photo sequencing [T Basha Y Moses and S Avidan CVPR2012]

なかの

A Taxonomy and Evaluation of Dense Two-Frame Stereo Correspondence Algorithms15

どんなもの

どうやって有効性を示した

次に読むべき論論文は

ステレオマッチングに関する分類を行行う 新たなデータセットを作成する

というよりも他の手法が有効性を示すことができるようにデータセットを作成した 今ではmiddleburyのデータセットと言えばステレオ業界では超有名

High-resolution stereo datasets with subpixel-accurate ground truth

なかの

Discriminability Limits in Spatio-Temporal Stereo Block Matching1

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

spatio-temporal disparity estimationの根本的な前提の正当性を解析しマッチング処理理の際に動きが助けとなる程度度を決定する

時空間マッチングのエラーを分析し誤りの原因を確率率率で導出する（フレーム数動きの分散画像特徴ノイズの関数）

[34243334]は時空間マッチングの利利点を指摘していたが本論論文はマッチング精度度の向上のために動きを用いる手法の程度度や性質を研究する

6つのステレオビデオを用いて検証を行行った

Spacetime stereo Shape recovery for dynamic scenes [L Zhang B Curless and S Seitz CVPR2003] Spatiotemporal stereo and scene flow via stequel matching [M Sizintsev and R Wildes PAMI2012] Temporally consistent disparity and optical flow via efficient spatio-temporal filtering [A Hosni C Rhemann M Bleyer and M Gelautz PRCAIVT2012] Spacetime stereo A unifying framework for depth from triangulation [PAMI2005] Dynamic depth recovery from multiple synchronized video streams [H Tao H Sawhney and R Kumar CVPR2001] Spatiotemporal descriptor for wide-baseline stereo reconstruction of non-rigid and ambiguous scenes [ECCV2003]

なかの

Depth-Based Patch Scaling for Content-Aware Stereo Image Completion2

どんなもの

どうやって有効性を示した

ステレオでデプスを取り物体の三次元情報を使ってインペインティングを行行う

bookのデータセット背景が繰り返しパターンが多いものを使っている

なかの

Fast Semi-dense Surface Reconstruction from Stereoscopic Video in Laparoscopic Surgery3

どんなもの

手法の流流れ

次に読むべき論論文は

腹腔内手術の際にステレオビデオから高速に物体の三次元再構成を行行う研究

Evaluation of stereo matching costs on images with radiometric differences [Hirschmueller H Scharstein D PAMI2008]

スコープカメラから画像取得GPUで演算する 視差を算出しフィルタにかける距離離に変換 点群を再びフィルタにかけて三次元再構成

なかの

3D Reconstruction from Accidental Motion4

どんなもの

技術や手法のキモはどこ

議論論はある

数秒のビデオ（単眼）から三次元再構成を行行う 手ぶれなどの動きから再構成が可能で特定の動きや機材を必要としない

短い基線長でも再構成が可能（3mmの基線長）

基線長が短いため背景の精度度が低くなる リフォーカス画像作成には十分 練習では上手く動作したが検証がまだ必要

なかの

Panoramic Video from Unstructured Camera Arrays5

どんなもの

技術や手法のキモはどこ

議論論はある

複数のカメラを用いたパノラマ撮影を行行う その際に不不自然さがないような動画を作成する

不不自然さを感じる感覚特性を提示しそれにのっとって対策を講じている

一つのカメラの解像度度と品質を向上させるよりも複数台のカメラを組み合わせることがはるかに簡単で有益である専門家でなくてもGoProのカメラセットを組み合わせることは容易易

カメラの配置は厳密に決められていない完璧な時間同期やローリングシャッターの不不足のような実撮影での問題もクリアしている

先行行研究と比べてどこがすごい

どうやって有効性を示した左のシステムは14台のカメラを使用 右のシステムはGoProを5台使用

Disney 201558

なかの

Floating Scale Surface Reconstruction6

どんなもの

技術や手法のキモはどこ

流流動的にスケールを変えられる三次元再構成手法

サンプル規模に依存するパラメータがない rarrどのスケールのサンプルにも対応できる

siggraph2014

なかの

A Super Resolution Reconstruction Scheme for Mixed Spatio-Temporal Stereo Video7

どんなもの

技術や手法のキモはどこ

ビデオ超解像アルゴリズム

二台のカメラを使用 一台は低解像度度で高速一台は高解像度度で低速

HHI 3DV ftp siteのBookarrivalとbeergadenを使用どうやって有効性を示した

なかの

What Is a Good Day for Outdoor Photometric Stereo8

どんなもの

先行行研究と比べてどこがすごい

議論論はある

次に読むべき論論文は

屋外における照度度差があるステレオの研究 屋外でステレオを行行う際に有利利or不不利利な日照条件を明らかにする

点光源を用いた研究は行行われていたが屋外での研究はされていなかった

晴れより曇りの方が精度度が良良い雲があるから特徴量量を取りやすい雑音を白色ガウスモデルを想定 季節ごとのデータセットを利利用してみても良良い

Time-lapse photometric stereo and applications [F Shen K Sunkavalli N Bonneel S Rusinkiewicz H Pfisterand X Tong2014] Outdoor photometric stereo [L-F Yu S-K Yeung Y-W Tai D Terzopoulos and T FChan ICCP2013]

どうやって有効性を示した屋外の照明に関するHDR環境マップのデータベースを利利用

Disney 2015424

なかの

COLORBRUSH ANIMATED DIFFUSION FOR INTUITIVE COLORIZATION SIMULATING WATER PAINTING 9

どんなものアニメを水彩画で描いたように変換する 水彩画を描くには経験が必要であるがそれを作成するアルゴリズムを考案絵具が水によりどうにじむかシュミレーションしている

Disney 20141027 ICIP2014

次に読むべき論論文はGabor-space geodesic active contoursrdquo In Algebraic Frames for the Perception-Action Cycle [C Sagiv NA Sochen and YY Zeevi 2000] Practical temporal consistency for image-based graphics applications [M Lang O Wang T Aydin A Smolic and M Gross SIGGRAPH2012] Computer-Generated Watercolor [CJ Curtis SE Anderson JE Seims KW Fleischer and DH Salesin SIGGRAPH1997]

なかの

From Sound to Sight Using Audio Processing to enable Visible Light Communication 10

どんなもの光に情報を載せる技術プロジェクトページがあって光関係の研究が8個載っている

httpwwwdisneyresearchcomprojectvisible-light-communication

ビデオのURL httpwwwdisneyresearchcomwpcontentuploadsPub_InvisibleLightCommunication_Siggraph14_videomp4

• 201211106_KeisukeKawahara
• 201311421_KeitaKanai_02
• 201313095_AkiraIshii_02
• 201413109_YuukiKubo_02
• 201513110_SatoshiHashizume_02
• 鬼輪講マラソン③_1
• 鬼輪講マラソン③_2

Par]cle13 Display13 System　(JVRC09)13 -shy‐13 A13 Large13 Scale13 Display13 for13 Public13 Space13 -shy‐

Munehiko13 Sato13 Yasuhiro13 Suzuki13 13 Atsushi13 Hiyama13 Tomohiro13 Tanikawa13 Michitaka13 Hirose

201413109　久保勇貴 2（鬼コース）13

どんなもの13

パーティクルディスプレイによる公共スペースのための大画面ディスプレイの提案13

先行研究と比べてどこがすごい13

公共スペースにおける要求と制限に基づいたシステムを提案した点13

技術や手法のキモはどこ13

実験に基づく表示画像のスクロール時間の制御13

どうやって有効だと検証した13

Aという文字の知覚実験によって 適な点滅周期の調査を行った13

議論はある13

現在の試作機を組合せより高解像度にする必要がある13

次に読むべき論文は13

Kwon13 et13 al13 201513

FugaciousFilm13 Exploring13 Aen4ve13 Interac4on13 with13 Ephemeral13 Material13 (CHIrsquo15)Hyosun13 Kwon13 Shashank13 Jaiswal13 Steve13 Benford13 Sue13 Ann13 Seah13

13 Peter13 BenneC13 Boriana13 Koleva13 Holger13 Schnaumldelbach

201413109　久保勇貴 2（鬼コース）13

どんなもの13

膜を押す引く飛び出ることができる新しい石鹸膜インタフェースの提案13

先行研究と比べてどこがすごい13

徐々に消えるインタフェースは高い注意を有するインタラクションを提供するという点を示したこと13

技術や手法のキモはどこ13

水グリセリンを201の対比で混ぜることでldquopoprdquoがきれいになるようにしかつ膜の耐久性を向上させた13

どうやって有効だと検証した13

３目並べを用いた被験者実験を実施13 ユーザは膜を割ると負け膜を自分のマスにするにはタッチ押す引くの書かれた通りの操作を行う13

議論はある13

ユーザに精密な動作を要求することはとりわけ注意を払うことを誘発する13

次に読むべき論文は13

Wetzstein13 et13 al13 201213

Tensor13 Displays13 Compressive13 Light13 Field13 Synthesis13 using13 Mul4layer13 Displays13 with13 Direc4onal13 Backligh4ng(SIGGRAPHrsquo12)

Gordon13 Wetzstein13 Douglas13 Lanman13 MaChew13 Hirsch13 Ramesh13 Raskar

201413109　久保勇貴 2（鬼コース）13

どんなもの13

視点によって異なる立体映像を見ることができる複数の層からなるディスプレイ13

先行研究と比べてどこがすごい13

既存の手法を合成したcomputa(onal13 displaysというディスプレイの新しいフレームワークを提案した13

技術や手法のキモはどこ13

時分割で視差マスクを表示することでユーザの視線ごとに立体像を表現する13

どうやって有効だと検証した13

通常のディスプレイ３層LCDLCD及び指向性バックライトの例による比較13 13

議論はある13

波紋を含むこと色チャンネルが悪影響を与える相互反射不均一などの問題が見られた13

次に読むべき論文は13

Matoba13 et13 al13 1213

SplashDisplay(VRICrsquo12)Yasuo Matoba Taro Tokui Ryo Sato Tochiki Sato Hideki Koike

201413109　久保勇貴 2（鬼コース）13

どんなもの13

パーティクルにCGを投射しパーティクルがテーブル上に投げられると爆発しパーティクルが噴きあがる13

先行研究と比べてどこがすごい13

ビーズがミリメートルからメートル単位までZ軸方向について空中で奥行きを表現する13

技術や手法のキモはどこ13

スピーカによって風力が発生させビーズを舞い上げる点13

どうやって有効だと検証した13

ビーズを投げると花火が打ちあがっているかのようなアプリケーション例を示した13

議論はある13

高いレベルの表現及び幅広い入力範囲を提供できた13

次に読むべき論文は13

Kim13 et13 al13 1413

MARIO13 Mid-shy‐air13 Augmented13 Reality13 Interac4on13 with13 Objects13 (ECrsquo14)Hanyuool13 Kim13 13 Issei13 Takahashi13 Hiroki13 Yamamoto13 Satoshi13 Maekawa13 Takeshi13 Naemura

201413109　久保勇貴 2（鬼コース）13

どんなもの13

350times300times250のテーブル上のスペースにおいて自由に動かせる空中像を造りだすことができる13

先行研究と比べてどこがすごい13

凹面鏡や凹レンズのように曲面でないため画像の歪曲が発生しない13

技術や手法のキモはどこ13

Aerial13 Imaging13 Plate(AIP)を用いた空中像の生成及びそのためのディスプレイ移動装置13

どうやって有効だと検証した13

左右からの視差の考慮及び奥行き表現時の画像提示視野角の検証などを行った13 13

議論はある13

投影しているひよこを叩いたり払いのけたりするような動作がデモ中見られた13

次に読むべき論文は13

Tactile Feedback on Flat Surfaces for the Visually Impaired13Ali Israr Olivier Bau Seung-Chan Kim Ivan Poupyrev13

どのようなものか 視覚障害者のための触覚を用いた視覚代用デバイス 先行研究と比べてどこがすごいか 道案内をしてくれる機械などはあるが日用品の場所を教えたり探すのを手伝ってくれるデバイスはない 技術や手法のキモ タッチパネルとカメラを搭載したデバイス 触覚を与える技術はTeslaTouchを利用 色を基準にオブジェクトの位置を認識 有用性の確認 視覚障害者二人に対して実験このデバイスを使

わなくても各自の方法で物を見つけられるが間違えることが多いこのデバイスを使用することで間違えることなく正確に物の位置を特定できた 課題 一つの色でしか判断できない 触感のあるなしでしか情報を伝えられない 関連論文 TeslaTouch [Bau et al 2010]

20150522 橋爪智 2鬼

Fingernail-Mounted Display of Attraction Force and Texture13Masataka Niwa Tomoko Nozaki Taro Maeda and Hideyuki And13

どのようなものか 指先に取り付けて触感と力を両方表現できるデバイス 先行研究と比べてどこがすごいか 触感と引力をそれぞれ表現するデバイスはあるが両方を一つのデバイスで表現した例は少ない 引力は自由な方向に付加することができる 技術や手法のキモ 偏心に重さを付けた円盤を4枚使用する 5-9Hz 引力　100-200Hz 触感 それぞれの円盤の位相や回転数を調整することで

触感と力 を表現する 4つのモータを使いそれぞれの円盤を独立して制御する 有用性の確認 4人の男性に対して実験80以上の精度で認識できた 関連論文 The nail-mounted attraction forcebump display [Nozaki et al 2008]

20150522 橋爪智 2 鬼

Gilded gait reshaping the urban experience with augmented footsteps13Yuichiro Takeuchi13

どのようなものか 靴に装着し地面の触感をコントロールするデバイス 先行研究と比べてどこがすごいか 単独で動作しなかったり特定の環境のみでしか動作しなかったりするrarr靴単体で動作環境に依存しない 技術や手法のキモ 6個の振動パネルを取り付けゲルでカバー app modulesを取り替えることができ様々な機能を付加できる（GPSsound) 4種類の地面を再現

bull  Hard Ground 振動させない bull  Soft Ground すべてのパネルを振動 bull  Bumpy Ground ジグザグに振動 bull  Godzilla 全てのパネルを振動何回か繰り返す 課題 モーターを使っているため波形をプログラミングできないrarr圧電素子を使用する 関連論文 Haptic Shoes [Fu et al 2010]

20150522 橋爪智 2鬼

ExoInterfaces novel exosceleton haptic interfaces for virtual reality augmented sport and rehabilitation

Dzmitry Tsetserukou Katsunari Sato Susumu Tachi13

どのようなものか 腕に装着し物理的なinteractionを可能にするデバイス 先行研究と比べてどこがすごいか Exoskeleton 力を増幅するためだが重たく危険なこともある String-based wireが視界をまたぐ動きに制限がある rarr腕の動きに制限を与えない安全 技術や手法のキモ 「FlexTorque」人間の筋肉の構造を再現するベルトとモーターを使用する肩の近くに装着することで

腕に負担がかかりにくい 触覚feedback弱いトルク 運動を支援強いトルク 課題 物理的な接触を表現するゲームやスポーツにより没頭させるリハビリのサポートをする視覚障害者の支援（ものの場所を教える） 関連論文 FlexTorque [Dzmitry et al 2010]

20150522 橋爪智 2 鬼

Perception of Ultrasonic Haptic Feedback on the Hand Localisation and Apparent Motion13

Graham Wilson Tom Carter Sriram Subramanian Stephen Brewster13

どのようなものか 超音波を用いた触覚フィードバック有効性の検討を行う 先行研究と比べてどこがすごいか 超音波触覚フィードバックは比較的新しく研究や操作方法に関する知識が少ない 腕を自由に動かすことができ小さいものは着用可能 技術や手法のキモ 88のアレイ状に超音波発生器を設置

有効性の確認 bull  局所的な触感 　　　25箇所に分割しそれぞれに超音波を当てる 　　　触感を感じた989 　　　場所の誤差85mm bull  手のひらを動く触感 上下左右に動く 　　　動いてると感じた629

20150522 橋爪智 2 鬼

Friction Measurements on a Large Area TPaD13Nicholas D Marchuk J Edward Colgate Michael A Peshkin13

どのようなものか 超音波の振動により触感を与える 先行研究と比べてどこがすごいか ガラス板を使うので透明後ろにディスプレイを配置可能 技術や手法のキモ 「Squeeze Film Effect（スクイズ膜効果）」 ガラス板に取り付けた圧電素子の円盤に高周波信号

をかける 実験 振動しない部分＝摩擦が発生しない部分が発生周波数により場所が変わる rarr摩擦を大きさをかける力の大きさから計測 rarr指の場所に合わせて複数の周波数を使い分ける 関連論文 T-PaD[Winfield et al 2007]

20150522 橋爪智 2 鬼

STIMTAC a Tactile Input Device with Programmable Friction13Michel Amberg Freacutedeacuteric Giraud Betty Semail Paolo Olivo Geacutery Casiez Nicolas Roussel13

どのようなものか 触感を与えられるタッチデバイス 先行研究と比べてどこがすごいか LATPaD サイズ大きいノイズが大きい TeslaTouch 高い電圧付加が必要GNDに接続しなければいけない

技術や手法のキモ 「Squeeze Film Effect」超音波を用いて振動を与える 圧電性セラミックを電極にコーディング 指トラッキングは力センサを用いる 活用法 マウスキーボード絵を描く 関連論文 LATPaD[Vincent et al 2011] TeslaTouch[Bau et al 2010]

20150522 橋爪智 2 鬼

Surround Haptics Tactile Feedback for Immersive Gaming Experiences Ali Israr Seung-Chan Kim Ivan Poupyrev Jan Stec13

どのようなものか ゲームに合わせて高解像度の触覚フィードバックをユーザーに与える椅子 先行研究と比べてどこがすごいか 荒く配置した安価な振動アクチュエータで高解像度の触覚フィードバックを行える 一点の振動連続した動き範囲の振動などを再現

技術や手法のキモ 仮想的な振動アクチュエータをいくつかの振動アクチュエータを使って作り出す physical-physicalphysical-virtualvirtual-virtual ゲームにHaptics Engineを導入しHaptics APIを用いてHaptic Displayを操作する 関連論文 Exploring Surround Haptics Displays[Israr et al 2010]

20150522 橋爪智 2 鬼

Audio-Haptic Feedback in Mobile Phones Angela Chang Conor OrsquoSullivan13

どのようなものか haptics機能のついてない携帯電話にオーディオ機能を利用した触覚フィードバックを追加する 先行研究と比べてどこがすごいか 簡単に作れてnon-haptic mobile devicesでも大丈夫 技術や手法のキモ 「MultiFunction Transducer(MFT)」 スピーカーから音と信号の両方を出力できる

bull  Haptic Inheritance 　　音を2つの周波数帯に分ける bull  Synthesis and Matching 　　低周波数帯(20-300Hz)を使い触感を伝える 有効性の検討 42人の人を対象に実験を行う83の人が触感を感じた

20150522 橋爪智 2 鬼

Resolution of Sleep Deprivation Problems using ZZZoo Pillows13Shunsuke Yanaka Motoki Ishida13

どのようなものか 近年不眠症の人が多い rarr誰かと接していると安心し睡眠に導入しやすくなる rarrまるで添い寝をしているようなリアルな抱きまくらを使う 技術や手法のキモ breathing sensation 風船を使って人の呼吸を再現肺の形の風船弱く長い呼吸をする

heating お湯を使って人の体温を再現45 有効性の確認 84人の人が実験 呼吸が睡眠を誘ったかrarr61 体温が睡眠を誘ったかrarr85 関連論文 The Impact of Sleep Disorders on Social Life[Komada et al 2007]

20150522 橋爪智 2 鬼

まとめ13超音波 モーター 風

20150522 橋爪智 2 鬼

コイル 電気刺激 Electrovibration

振動 音 お湯

なかの

Temporally Consistent Disparity and Optical Flow via Efficient Spatio-temporal Filtering1

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示した

議論論はあるか

時間的に一定の視差を算出する手法静止画ステレオよりも精度度が良良いことを示す従来よりも推定精度度が良良いオプティカルフローも算出する

一枚の静止画に対するフィルタリング[1]をステレオ動画に拡張している

ケンブリッジのステレオ動画のデータセットを利利用 実写動画に対する比較も行行うノイズ耐性も検証する

フィルタベースとエネルギーベースの関係性を良良り理理解することで推定精度度を上げる

実装が簡単でリアルタイム視差推定が可能

Fast Cost-Volume Filtering for Visual Correspondence and Beyond [Rhemann C Hosni A Bleyer M Rother C Gelautz M CVPR2011] Real-time Spatiotemporal Stereo Matching Using the Dual-Cross-Bilateral Grid [Richardt C Orr D Davies I Criminisi A Dodgson NA ECCV2010] Secrets of optical flow estimation and their principles [Sun D Roth S Black MJ 2010] Motion estimation with non-local total variation regularization [Werlberger M Pock T Bischof H CVPR2010] Temporally Consistent Disparity Maps from Uncalibrated Stereo Videos [Bleyer M Gelatuz M ISPA2011]

なかの

SymStereo Matching using Induced Symmetry (2014)2

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示した

議論論はあるか

画像の対称性を用いてステレオマッチングを行行う 左右の画像を反転させて重ね合わせることで対称性を測る

絵的な類似の代わりに対称性を使う今まで対称性を用いる手法はなく新規性が大きい

三つのSymmetry-baseの手法で精度度を検証従来手法よりも精度度が向上しているMiddlebury Oxford Corridorfountain-P11のデータセット使用

ステレオの問題である不不連続な箇所オクルージョン部分は未解決である演算時間はやや増加

1-Dラインのコストを考える今までは撮像面に対して平行行な平面でデプスを考えていたが垂直な平面を考える

BT[Birchfield and Tomasi 1998] Census transform[Zabih and Woodfill 1994] Log N[Kovesi 1997] radio-metoric differences[Hirschmuller Scharstein 2009]

なかの

Camouflaging an Object from Many Viewpoints3

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

多くの視点から三次元の物体をカモフラージュするカモフラージュによってオクルージョン部分の不不連続がどの程度度生じるか他の視点ではどれほどになるかの検証

MRF（Markov Random Fields）ベース

新しい三次元物体のカモフラージュモデルを構築 37種類のデータセットを作る

箱形の物体に対してカモフラージュ処理理を施し 結果を評価する

オクルージョン不不連続テクスチャの歪みが問題 照明や画像の貼りつけに制限あり

なかの

Aliasing Detection and Reduction in Plenoptic Imaging4

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

カメラアレイ撮影の角度度のエイリアシングを除去するエイリアシングの探索索と打ち消しを行行う

周波数領領域ではなく空間領領域で探索索を行行う

先行行研究がフィルタデモザイキング再パラメータ調整などの前処理理でエイリアシング除去を行行うのに対しエイリアシング探索索後にリフォーカスの段階でエイリアシングを取り除く

8times8の平行行カメラアレイで検証するカメラ間の 基線長は70mm

今回は基線長が長いデータセットを使った 次はLytroなどのマイクロレンズアレイで検証する

Globally consistent multi-label assignment on the ray space of 4d light fields [S Wanner C Straehle B Goldluecke CVPR2013] Lineassisted light field triangulation and stereo matching [Z Yu X Guo H Lin A Lumsdaine J Yu ICCV 2013]

なかの

Globally Consistent Multi-Label Assignment on the Ray Space of 4D Light Fields5

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

四次元ライトフィールドの光線情報において マルチラベルの領領域分割を行行う

深度度情報光線情報を用いて領領域分割することで 二次元（空間）情報だけでは分割が難しかった 領領域を分割可能とする

The light field camera Extended depth of field aliasing and superresolution [T Bishop P Favaro IEEE Transactions on Pattern Analysis and Machine Intelligence 2012]

なかの

Line Assisted Light Field Triangulation and Stereo Matching6

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

光線情報を利利用してステレオマッチングの精度度を 向上させる手法三角測量量の誤差を減らす

Light Field Stereo Matchingとかいう手法 グラフ構造を作成

Variational light field analysis for disparity estimation and super-resolution [S Wanner and B Goldlumluecke 2013]

なかの

Adaptive stereo similarity fusion using confidence measures 20157

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

ステレオマッチングの新しい方式fusion weightsを提案複数の手法を組み合わせてコスト計算を行行う手法付録に既存手法のコスト関数一覧あり

パラメータに依存する手法を用いないことで高速化を図っている

一つのアルゴリズムでは異異なる特性を持つ領領域全てに対して適切切なマッチングはできない複数を組み合わせることでそれを補う13種と多い

middleburyとKITTIのデータセットで評価

一枚あたり03sと高速だが001sとより高速なアルゴリズムが存在する

Segment-based stereo matching using belief propagation and a self-adapting dissimilarity measure [A Klaus M Sormann K Karner ICPR2006] On building an accurate stereo matching system on graphics hardware [X Mei X Sun M Zhou S Jiao H Wang X Zhang ICCV2011] Similarity measures for depth estimation [K Wegner O Stankiewicz 3DTV-CON2009] On accurate dense stereo-matching using a local adaptive multi-cost approach [C Stentoumis L Grammatikopoulos I Kalisperakis G Karras ISPRS2014] A quantitative evaluation of confidence measures for stereo vision [X Hu P Mordohai PAMI2012]

なかの

SIMILARITY MEASURE FOR DEPTH ESTIMATIOM 20098

どんなもの

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

4種類の視差推定アルゴリズムを組み合わせている 類似度度の選択性の解析

Belief Propagationの枠組みを用いる

名古屋大学の多視点データベースを利利用

HHI Test Material for 3D Video [I Feldmann M Muller F Zilly R Tanger A SmolicP Kauff T Wiegand 2008] Multiview Video Test Sequence and Camera Parameters [Yo-Sung Ho Eun-Kyung Lee and Cheon Lee 2008] 1D Parallel Test Sequences for MPEG-FTV [M Tanimoto T Fujii N Fukushima 2008] Non-parametric Local Transforms for Computing Visual Correspondence [R Zabih J Woodfill 1994]

なかの

Spatiotemporal Stereo via Spatiotemporal Quadric Element (Stequel) Matching9

どんなもの

技術や手法のキモはどこ

新しいマッチング手法を提案動き考慮することなく時間情報を取り込むことができる 時間方向のエピ線を考える

オプティカルフロー推定は3D境界や低テクスチャで弱いが提案手法はロバストである

なかの

Depth Video Enhancement Based on Weighted Mode Filtering10

どんなもの

議論論はある

ノイズを含んだ低解像度度のデプスマップの質を高める手法（超解像度度とデノイズ）時間方向も使用簡単なオプティカルフローを計算し利利用する

非反復復アルゴリズムのためGPUに載せやすく高速化が考えられる

なかの

Fast Bilateral-Space Stereo for Synthetic Defocus11

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

議論論はある

次に読むべき論論文は

高速な自由焦点ぼけ画像の作成

Bilateral-spaceを提案

従来研究よりも10から100倍速くぼけ具合の精度度も良良い

ぼけを作成するというアプリケーションに利利用する距離離という面では提案手法が有益であるが実測的な距離離という面での精度度は悪い背景と前景が同じ色で近くにある場合同一ととらえてしまう

Efficient high-resolution stereo matching using local plane sweeps [S N Sinha D Scharstein and R SzeliskiCVPR2014] Bilateral filtering-based optical flow estimation with occlusion detection [J Xiao H Cheng H Sawhney C Rao and M IsnardiECCV2006] Efficient nonlocal regularization for optical flow [P Krumlahenbumluhl and V KoltunECCV2012] Real-time spatiotemporal stereo matching using the dual-cross-bilateral grid [C Richardt D Orr I Davies A Criminisi and N A DodgsonECCV2010]

どうやって有効性を示した視差推定の精度度はmiddleburyKITTI

なかの

Robust Spatiotemporal Stereo for Dynamic Scenes12

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

ステレオ動画のフレーム間情報を取り入れることでノイズ耐性を向上させるまた動きの大きなものも考える

時間を含めたウインドウの提案自動的にそのような変化に対応する画像領領域を検出する

従来の時空間ステレオと比べ大きな動きによる急激な視差の時間変化に対して頑健である

なかの

Spacetime Stereo A Unifying Framework for Depth from Triangulation13

どんなもの

先行行研究と比べてどこがすごい

space time stereoを提案ステレオカメラの視差推定でも構造光を用いた視差推定でも利利用可能 動的なシーンでの利利用も可能

フレームごとマッチングを取っていたが複数フレームでのマッチングを可能とした

なかの

Learning to Select and Order Vacation Photographs (Disney research)14

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示したあまりにもたくさん撮影した写真たちから自動的にフォトアルバムを作成する研究

複雑な視覚での区別を試みたのはこの論論文が初

５つの異異なるトピックから63の個人的な写真コレクションのデータセットを利利用し定量量的に評価する

写真間の差別かを定義する顔全体の絵何が写っているか写っていないかを評価する

Jointly aligning and segmenting multiple web photo streams for the inference of collective photo storylines [G Kim and E P Xing CVPR2013] Photo sequencing [T Basha Y Moses and S Avidan CVPR2012]

なかの

A Taxonomy and Evaluation of Dense Two-Frame Stereo Correspondence Algorithms15

どんなもの

どうやって有効性を示した

次に読むべき論論文は

ステレオマッチングに関する分類を行行う 新たなデータセットを作成する

というよりも他の手法が有効性を示すことができるようにデータセットを作成した 今ではmiddleburyのデータセットと言えばステレオ業界では超有名

High-resolution stereo datasets with subpixel-accurate ground truth

なかの

Discriminability Limits in Spatio-Temporal Stereo Block Matching1

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

spatio-temporal disparity estimationの根本的な前提の正当性を解析しマッチング処理理の際に動きが助けとなる程度度を決定する

時空間マッチングのエラーを分析し誤りの原因を確率率率で導出する（フレーム数動きの分散画像特徴ノイズの関数）

[34243334]は時空間マッチングの利利点を指摘していたが本論論文はマッチング精度度の向上のために動きを用いる手法の程度度や性質を研究する

6つのステレオビデオを用いて検証を行行った

Spacetime stereo Shape recovery for dynamic scenes [L Zhang B Curless and S Seitz CVPR2003] Spatiotemporal stereo and scene flow via stequel matching [M Sizintsev and R Wildes PAMI2012] Temporally consistent disparity and optical flow via efficient spatio-temporal filtering [A Hosni C Rhemann M Bleyer and M Gelautz PRCAIVT2012] Spacetime stereo A unifying framework for depth from triangulation [PAMI2005] Dynamic depth recovery from multiple synchronized video streams [H Tao H Sawhney and R Kumar CVPR2001] Spatiotemporal descriptor for wide-baseline stereo reconstruction of non-rigid and ambiguous scenes [ECCV2003]

なかの

Depth-Based Patch Scaling for Content-Aware Stereo Image Completion2

どんなもの

どうやって有効性を示した

ステレオでデプスを取り物体の三次元情報を使ってインペインティングを行行う

bookのデータセット背景が繰り返しパターンが多いものを使っている

なかの

Fast Semi-dense Surface Reconstruction from Stereoscopic Video in Laparoscopic Surgery3

どんなもの

手法の流流れ

次に読むべき論論文は

腹腔内手術の際にステレオビデオから高速に物体の三次元再構成を行行う研究

Evaluation of stereo matching costs on images with radiometric differences [Hirschmueller H Scharstein D PAMI2008]

スコープカメラから画像取得GPUで演算する 視差を算出しフィルタにかける距離離に変換 点群を再びフィルタにかけて三次元再構成

なかの

3D Reconstruction from Accidental Motion4

どんなもの

技術や手法のキモはどこ

議論論はある

数秒のビデオ（単眼）から三次元再構成を行行う 手ぶれなどの動きから再構成が可能で特定の動きや機材を必要としない

短い基線長でも再構成が可能（3mmの基線長）

基線長が短いため背景の精度度が低くなる リフォーカス画像作成には十分 練習では上手く動作したが検証がまだ必要

なかの

Panoramic Video from Unstructured Camera Arrays5

どんなもの

技術や手法のキモはどこ

議論論はある

複数のカメラを用いたパノラマ撮影を行行う その際に不不自然さがないような動画を作成する

不不自然さを感じる感覚特性を提示しそれにのっとって対策を講じている

一つのカメラの解像度度と品質を向上させるよりも複数台のカメラを組み合わせることがはるかに簡単で有益である専門家でなくてもGoProのカメラセットを組み合わせることは容易易

カメラの配置は厳密に決められていない完璧な時間同期やローリングシャッターの不不足のような実撮影での問題もクリアしている

先行行研究と比べてどこがすごい

どうやって有効性を示した左のシステムは14台のカメラを使用 右のシステムはGoProを5台使用

Disney 201558

なかの

Floating Scale Surface Reconstruction6

どんなもの

技術や手法のキモはどこ

流流動的にスケールを変えられる三次元再構成手法

サンプル規模に依存するパラメータがない rarrどのスケールのサンプルにも対応できる

siggraph2014

なかの

A Super Resolution Reconstruction Scheme for Mixed Spatio-Temporal Stereo Video7

どんなもの

技術や手法のキモはどこ

ビデオ超解像アルゴリズム

二台のカメラを使用 一台は低解像度度で高速一台は高解像度度で低速

HHI 3DV ftp siteのBookarrivalとbeergadenを使用どうやって有効性を示した

なかの

What Is a Good Day for Outdoor Photometric Stereo8

どんなもの

先行行研究と比べてどこがすごい

議論論はある

次に読むべき論論文は

屋外における照度度差があるステレオの研究 屋外でステレオを行行う際に有利利or不不利利な日照条件を明らかにする

点光源を用いた研究は行行われていたが屋外での研究はされていなかった

晴れより曇りの方が精度度が良良い雲があるから特徴量量を取りやすい雑音を白色ガウスモデルを想定 季節ごとのデータセットを利利用してみても良良い

Time-lapse photometric stereo and applications [F Shen K Sunkavalli N Bonneel S Rusinkiewicz H Pfisterand X Tong2014] Outdoor photometric stereo [L-F Yu S-K Yeung Y-W Tai D Terzopoulos and T FChan ICCP2013]

どうやって有効性を示した屋外の照明に関するHDR環境マップのデータベースを利利用

Disney 2015424

なかの

COLORBRUSH ANIMATED DIFFUSION FOR INTUITIVE COLORIZATION SIMULATING WATER PAINTING 9

どんなものアニメを水彩画で描いたように変換する 水彩画を描くには経験が必要であるがそれを作成するアルゴリズムを考案絵具が水によりどうにじむかシュミレーションしている

Disney 20141027 ICIP2014

次に読むべき論論文はGabor-space geodesic active contoursrdquo In Algebraic Frames for the Perception-Action Cycle [C Sagiv NA Sochen and YY Zeevi 2000] Practical temporal consistency for image-based graphics applications [M Lang O Wang T Aydin A Smolic and M Gross SIGGRAPH2012] Computer-Generated Watercolor [CJ Curtis SE Anderson JE Seims KW Fleischer and DH Salesin SIGGRAPH1997]

なかの

From Sound to Sight Using Audio Processing to enable Visible Light Communication 10

どんなもの光に情報を載せる技術プロジェクトページがあって光関係の研究が8個載っている

httpwwwdisneyresearchcomprojectvisible-light-communication

ビデオのURL httpwwwdisneyresearchcomwpcontentuploadsPub_InvisibleLightCommunication_Siggraph14_videomp4

• 201211106_KeisukeKawahara
• 201311421_KeitaKanai_02
• 201313095_AkiraIshii_02
• 201413109_YuukiKubo_02
• 201513110_SatoshiHashizume_02
• 鬼輪講マラソン③_1
• 鬼輪講マラソン③_2

FugaciousFilm13 Exploring13 Aen4ve13 Interac4on13 with13 Ephemeral13 Material13 (CHIrsquo15)Hyosun13 Kwon13 Shashank13 Jaiswal13 Steve13 Benford13 Sue13 Ann13 Seah13

13 Peter13 BenneC13 Boriana13 Koleva13 Holger13 Schnaumldelbach

201413109　久保勇貴 2（鬼コース）13

どんなもの13

膜を押す引く飛び出ることができる新しい石鹸膜インタフェースの提案13

先行研究と比べてどこがすごい13

徐々に消えるインタフェースは高い注意を有するインタラクションを提供するという点を示したこと13

技術や手法のキモはどこ13

水グリセリンを201の対比で混ぜることでldquopoprdquoがきれいになるようにしかつ膜の耐久性を向上させた13

どうやって有効だと検証した13

３目並べを用いた被験者実験を実施13 ユーザは膜を割ると負け膜を自分のマスにするにはタッチ押す引くの書かれた通りの操作を行う13

議論はある13

ユーザに精密な動作を要求することはとりわけ注意を払うことを誘発する13

次に読むべき論文は13

Wetzstein13 et13 al13 201213

Tensor13 Displays13 Compressive13 Light13 Field13 Synthesis13 using13 Mul4layer13 Displays13 with13 Direc4onal13 Backligh4ng(SIGGRAPHrsquo12)

Gordon13 Wetzstein13 Douglas13 Lanman13 MaChew13 Hirsch13 Ramesh13 Raskar

201413109　久保勇貴 2（鬼コース）13

どんなもの13

視点によって異なる立体映像を見ることができる複数の層からなるディスプレイ13

先行研究と比べてどこがすごい13

既存の手法を合成したcomputa(onal13 displaysというディスプレイの新しいフレームワークを提案した13

技術や手法のキモはどこ13

時分割で視差マスクを表示することでユーザの視線ごとに立体像を表現する13

どうやって有効だと検証した13

通常のディスプレイ３層LCDLCD及び指向性バックライトの例による比較13 13

議論はある13

波紋を含むこと色チャンネルが悪影響を与える相互反射不均一などの問題が見られた13

次に読むべき論文は13

Matoba13 et13 al13 1213

SplashDisplay(VRICrsquo12)Yasuo Matoba Taro Tokui Ryo Sato Tochiki Sato Hideki Koike

201413109　久保勇貴 2（鬼コース）13

どんなもの13

パーティクルにCGを投射しパーティクルがテーブル上に投げられると爆発しパーティクルが噴きあがる13

先行研究と比べてどこがすごい13

ビーズがミリメートルからメートル単位までZ軸方向について空中で奥行きを表現する13

技術や手法のキモはどこ13

スピーカによって風力が発生させビーズを舞い上げる点13

どうやって有効だと検証した13

ビーズを投げると花火が打ちあがっているかのようなアプリケーション例を示した13

議論はある13

高いレベルの表現及び幅広い入力範囲を提供できた13

次に読むべき論文は13

Kim13 et13 al13 1413

MARIO13 Mid-shy‐air13 Augmented13 Reality13 Interac4on13 with13 Objects13 (ECrsquo14)Hanyuool13 Kim13 13 Issei13 Takahashi13 Hiroki13 Yamamoto13 Satoshi13 Maekawa13 Takeshi13 Naemura

201413109　久保勇貴 2（鬼コース）13

どんなもの13

350times300times250のテーブル上のスペースにおいて自由に動かせる空中像を造りだすことができる13

先行研究と比べてどこがすごい13

凹面鏡や凹レンズのように曲面でないため画像の歪曲が発生しない13

技術や手法のキモはどこ13

Aerial13 Imaging13 Plate(AIP)を用いた空中像の生成及びそのためのディスプレイ移動装置13

どうやって有効だと検証した13

左右からの視差の考慮及び奥行き表現時の画像提示視野角の検証などを行った13 13

議論はある13

投影しているひよこを叩いたり払いのけたりするような動作がデモ中見られた13

次に読むべき論文は13

Tactile Feedback on Flat Surfaces for the Visually Impaired13Ali Israr Olivier Bau Seung-Chan Kim Ivan Poupyrev13

どのようなものか 視覚障害者のための触覚を用いた視覚代用デバイス 先行研究と比べてどこがすごいか 道案内をしてくれる機械などはあるが日用品の場所を教えたり探すのを手伝ってくれるデバイスはない 技術や手法のキモ タッチパネルとカメラを搭載したデバイス 触覚を与える技術はTeslaTouchを利用 色を基準にオブジェクトの位置を認識 有用性の確認 視覚障害者二人に対して実験このデバイスを使

わなくても各自の方法で物を見つけられるが間違えることが多いこのデバイスを使用することで間違えることなく正確に物の位置を特定できた 課題 一つの色でしか判断できない 触感のあるなしでしか情報を伝えられない 関連論文 TeslaTouch [Bau et al 2010]

20150522 橋爪智 2鬼

Fingernail-Mounted Display of Attraction Force and Texture13Masataka Niwa Tomoko Nozaki Taro Maeda and Hideyuki And13

どのようなものか 指先に取り付けて触感と力を両方表現できるデバイス 先行研究と比べてどこがすごいか 触感と引力をそれぞれ表現するデバイスはあるが両方を一つのデバイスで表現した例は少ない 引力は自由な方向に付加することができる 技術や手法のキモ 偏心に重さを付けた円盤を4枚使用する 5-9Hz 引力　100-200Hz 触感 それぞれの円盤の位相や回転数を調整することで

触感と力 を表現する 4つのモータを使いそれぞれの円盤を独立して制御する 有用性の確認 4人の男性に対して実験80以上の精度で認識できた 関連論文 The nail-mounted attraction forcebump display [Nozaki et al 2008]

20150522 橋爪智 2 鬼

Gilded gait reshaping the urban experience with augmented footsteps13Yuichiro Takeuchi13

どのようなものか 靴に装着し地面の触感をコントロールするデバイス 先行研究と比べてどこがすごいか 単独で動作しなかったり特定の環境のみでしか動作しなかったりするrarr靴単体で動作環境に依存しない 技術や手法のキモ 6個の振動パネルを取り付けゲルでカバー app modulesを取り替えることができ様々な機能を付加できる（GPSsound) 4種類の地面を再現

bull  Hard Ground 振動させない bull  Soft Ground すべてのパネルを振動 bull  Bumpy Ground ジグザグに振動 bull  Godzilla 全てのパネルを振動何回か繰り返す 課題 モーターを使っているため波形をプログラミングできないrarr圧電素子を使用する 関連論文 Haptic Shoes [Fu et al 2010]

20150522 橋爪智 2鬼

ExoInterfaces novel exosceleton haptic interfaces for virtual reality augmented sport and rehabilitation

Dzmitry Tsetserukou Katsunari Sato Susumu Tachi13

どのようなものか 腕に装着し物理的なinteractionを可能にするデバイス 先行研究と比べてどこがすごいか Exoskeleton 力を増幅するためだが重たく危険なこともある String-based wireが視界をまたぐ動きに制限がある rarr腕の動きに制限を与えない安全 技術や手法のキモ 「FlexTorque」人間の筋肉の構造を再現するベルトとモーターを使用する肩の近くに装着することで

腕に負担がかかりにくい 触覚feedback弱いトルク 運動を支援強いトルク 課題 物理的な接触を表現するゲームやスポーツにより没頭させるリハビリのサポートをする視覚障害者の支援（ものの場所を教える） 関連論文 FlexTorque [Dzmitry et al 2010]

20150522 橋爪智 2 鬼

Perception of Ultrasonic Haptic Feedback on the Hand Localisation and Apparent Motion13

Graham Wilson Tom Carter Sriram Subramanian Stephen Brewster13

どのようなものか 超音波を用いた触覚フィードバック有効性の検討を行う 先行研究と比べてどこがすごいか 超音波触覚フィードバックは比較的新しく研究や操作方法に関する知識が少ない 腕を自由に動かすことができ小さいものは着用可能 技術や手法のキモ 88のアレイ状に超音波発生器を設置

有効性の確認 bull  局所的な触感 　　　25箇所に分割しそれぞれに超音波を当てる 　　　触感を感じた989 　　　場所の誤差85mm bull  手のひらを動く触感 上下左右に動く 　　　動いてると感じた629

20150522 橋爪智 2 鬼

Friction Measurements on a Large Area TPaD13Nicholas D Marchuk J Edward Colgate Michael A Peshkin13

どのようなものか 超音波の振動により触感を与える 先行研究と比べてどこがすごいか ガラス板を使うので透明後ろにディスプレイを配置可能 技術や手法のキモ 「Squeeze Film Effect（スクイズ膜効果）」 ガラス板に取り付けた圧電素子の円盤に高周波信号

をかける 実験 振動しない部分＝摩擦が発生しない部分が発生周波数により場所が変わる rarr摩擦を大きさをかける力の大きさから計測 rarr指の場所に合わせて複数の周波数を使い分ける 関連論文 T-PaD[Winfield et al 2007]

20150522 橋爪智 2 鬼

STIMTAC a Tactile Input Device with Programmable Friction13Michel Amberg Freacutedeacuteric Giraud Betty Semail Paolo Olivo Geacutery Casiez Nicolas Roussel13

どのようなものか 触感を与えられるタッチデバイス 先行研究と比べてどこがすごいか LATPaD サイズ大きいノイズが大きい TeslaTouch 高い電圧付加が必要GNDに接続しなければいけない

技術や手法のキモ 「Squeeze Film Effect」超音波を用いて振動を与える 圧電性セラミックを電極にコーディング 指トラッキングは力センサを用いる 活用法 マウスキーボード絵を描く 関連論文 LATPaD[Vincent et al 2011] TeslaTouch[Bau et al 2010]

20150522 橋爪智 2 鬼

Surround Haptics Tactile Feedback for Immersive Gaming Experiences Ali Israr Seung-Chan Kim Ivan Poupyrev Jan Stec13

どのようなものか ゲームに合わせて高解像度の触覚フィードバックをユーザーに与える椅子 先行研究と比べてどこがすごいか 荒く配置した安価な振動アクチュエータで高解像度の触覚フィードバックを行える 一点の振動連続した動き範囲の振動などを再現

技術や手法のキモ 仮想的な振動アクチュエータをいくつかの振動アクチュエータを使って作り出す physical-physicalphysical-virtualvirtual-virtual ゲームにHaptics Engineを導入しHaptics APIを用いてHaptic Displayを操作する 関連論文 Exploring Surround Haptics Displays[Israr et al 2010]

20150522 橋爪智 2 鬼

Audio-Haptic Feedback in Mobile Phones Angela Chang Conor OrsquoSullivan13

どのようなものか haptics機能のついてない携帯電話にオーディオ機能を利用した触覚フィードバックを追加する 先行研究と比べてどこがすごいか 簡単に作れてnon-haptic mobile devicesでも大丈夫 技術や手法のキモ 「MultiFunction Transducer(MFT)」 スピーカーから音と信号の両方を出力できる

bull  Haptic Inheritance 　　音を2つの周波数帯に分ける bull  Synthesis and Matching 　　低周波数帯(20-300Hz)を使い触感を伝える 有効性の検討 42人の人を対象に実験を行う83の人が触感を感じた

20150522 橋爪智 2 鬼

Resolution of Sleep Deprivation Problems using ZZZoo Pillows13Shunsuke Yanaka Motoki Ishida13

どのようなものか 近年不眠症の人が多い rarr誰かと接していると安心し睡眠に導入しやすくなる rarrまるで添い寝をしているようなリアルな抱きまくらを使う 技術や手法のキモ breathing sensation 風船を使って人の呼吸を再現肺の形の風船弱く長い呼吸をする

heating お湯を使って人の体温を再現45 有効性の確認 84人の人が実験 呼吸が睡眠を誘ったかrarr61 体温が睡眠を誘ったかrarr85 関連論文 The Impact of Sleep Disorders on Social Life[Komada et al 2007]

20150522 橋爪智 2 鬼

まとめ13超音波 モーター 風

20150522 橋爪智 2 鬼

コイル 電気刺激 Electrovibration

振動 音 お湯

なかの

Temporally Consistent Disparity and Optical Flow via Efficient Spatio-temporal Filtering1

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示した

議論論はあるか

時間的に一定の視差を算出する手法静止画ステレオよりも精度度が良良いことを示す従来よりも推定精度度が良良いオプティカルフローも算出する

一枚の静止画に対するフィルタリング[1]をステレオ動画に拡張している

ケンブリッジのステレオ動画のデータセットを利利用 実写動画に対する比較も行行うノイズ耐性も検証する

フィルタベースとエネルギーベースの関係性を良良り理理解することで推定精度度を上げる

実装が簡単でリアルタイム視差推定が可能

Fast Cost-Volume Filtering for Visual Correspondence and Beyond [Rhemann C Hosni A Bleyer M Rother C Gelautz M CVPR2011] Real-time Spatiotemporal Stereo Matching Using the Dual-Cross-Bilateral Grid [Richardt C Orr D Davies I Criminisi A Dodgson NA ECCV2010] Secrets of optical flow estimation and their principles [Sun D Roth S Black MJ 2010] Motion estimation with non-local total variation regularization [Werlberger M Pock T Bischof H CVPR2010] Temporally Consistent Disparity Maps from Uncalibrated Stereo Videos [Bleyer M Gelatuz M ISPA2011]

なかの

SymStereo Matching using Induced Symmetry (2014)2

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示した

議論論はあるか

画像の対称性を用いてステレオマッチングを行行う 左右の画像を反転させて重ね合わせることで対称性を測る

絵的な類似の代わりに対称性を使う今まで対称性を用いる手法はなく新規性が大きい

三つのSymmetry-baseの手法で精度度を検証従来手法よりも精度度が向上しているMiddlebury Oxford Corridorfountain-P11のデータセット使用

ステレオの問題である不不連続な箇所オクルージョン部分は未解決である演算時間はやや増加

1-Dラインのコストを考える今までは撮像面に対して平行行な平面でデプスを考えていたが垂直な平面を考える

BT[Birchfield and Tomasi 1998] Census transform[Zabih and Woodfill 1994] Log N[Kovesi 1997] radio-metoric differences[Hirschmuller Scharstein 2009]

なかの

Camouflaging an Object from Many Viewpoints3

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

多くの視点から三次元の物体をカモフラージュするカモフラージュによってオクルージョン部分の不不連続がどの程度度生じるか他の視点ではどれほどになるかの検証

MRF（Markov Random Fields）ベース

新しい三次元物体のカモフラージュモデルを構築 37種類のデータセットを作る

箱形の物体に対してカモフラージュ処理理を施し 結果を評価する

オクルージョン不不連続テクスチャの歪みが問題 照明や画像の貼りつけに制限あり

なかの

Aliasing Detection and Reduction in Plenoptic Imaging4

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

カメラアレイ撮影の角度度のエイリアシングを除去するエイリアシングの探索索と打ち消しを行行う

周波数領領域ではなく空間領領域で探索索を行行う

先行行研究がフィルタデモザイキング再パラメータ調整などの前処理理でエイリアシング除去を行行うのに対しエイリアシング探索索後にリフォーカスの段階でエイリアシングを取り除く

8times8の平行行カメラアレイで検証するカメラ間の 基線長は70mm

今回は基線長が長いデータセットを使った 次はLytroなどのマイクロレンズアレイで検証する

Globally consistent multi-label assignment on the ray space of 4d light fields [S Wanner C Straehle B Goldluecke CVPR2013] Lineassisted light field triangulation and stereo matching [Z Yu X Guo H Lin A Lumsdaine J Yu ICCV 2013]

なかの

Globally Consistent Multi-Label Assignment on the Ray Space of 4D Light Fields5

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

四次元ライトフィールドの光線情報において マルチラベルの領領域分割を行行う

深度度情報光線情報を用いて領領域分割することで 二次元（空間）情報だけでは分割が難しかった 領領域を分割可能とする

The light field camera Extended depth of field aliasing and superresolution [T Bishop P Favaro IEEE Transactions on Pattern Analysis and Machine Intelligence 2012]

なかの

Line Assisted Light Field Triangulation and Stereo Matching6

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

光線情報を利利用してステレオマッチングの精度度を 向上させる手法三角測量量の誤差を減らす

Light Field Stereo Matchingとかいう手法 グラフ構造を作成

Variational light field analysis for disparity estimation and super-resolution [S Wanner and B Goldlumluecke 2013]

なかの

Adaptive stereo similarity fusion using confidence measures 20157

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

ステレオマッチングの新しい方式fusion weightsを提案複数の手法を組み合わせてコスト計算を行行う手法付録に既存手法のコスト関数一覧あり

パラメータに依存する手法を用いないことで高速化を図っている

一つのアルゴリズムでは異異なる特性を持つ領領域全てに対して適切切なマッチングはできない複数を組み合わせることでそれを補う13種と多い

middleburyとKITTIのデータセットで評価

一枚あたり03sと高速だが001sとより高速なアルゴリズムが存在する

Segment-based stereo matching using belief propagation and a self-adapting dissimilarity measure [A Klaus M Sormann K Karner ICPR2006] On building an accurate stereo matching system on graphics hardware [X Mei X Sun M Zhou S Jiao H Wang X Zhang ICCV2011] Similarity measures for depth estimation [K Wegner O Stankiewicz 3DTV-CON2009] On accurate dense stereo-matching using a local adaptive multi-cost approach [C Stentoumis L Grammatikopoulos I Kalisperakis G Karras ISPRS2014] A quantitative evaluation of confidence measures for stereo vision [X Hu P Mordohai PAMI2012]

なかの

SIMILARITY MEASURE FOR DEPTH ESTIMATIOM 20098

どんなもの

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

4種類の視差推定アルゴリズムを組み合わせている 類似度度の選択性の解析

Belief Propagationの枠組みを用いる

名古屋大学の多視点データベースを利利用

HHI Test Material for 3D Video [I Feldmann M Muller F Zilly R Tanger A SmolicP Kauff T Wiegand 2008] Multiview Video Test Sequence and Camera Parameters [Yo-Sung Ho Eun-Kyung Lee and Cheon Lee 2008] 1D Parallel Test Sequences for MPEG-FTV [M Tanimoto T Fujii N Fukushima 2008] Non-parametric Local Transforms for Computing Visual Correspondence [R Zabih J Woodfill 1994]

なかの

Spatiotemporal Stereo via Spatiotemporal Quadric Element (Stequel) Matching9

どんなもの

技術や手法のキモはどこ

新しいマッチング手法を提案動き考慮することなく時間情報を取り込むことができる 時間方向のエピ線を考える

オプティカルフロー推定は3D境界や低テクスチャで弱いが提案手法はロバストである

なかの

Depth Video Enhancement Based on Weighted Mode Filtering10

どんなもの

議論論はある

ノイズを含んだ低解像度度のデプスマップの質を高める手法（超解像度度とデノイズ）時間方向も使用簡単なオプティカルフローを計算し利利用する

非反復復アルゴリズムのためGPUに載せやすく高速化が考えられる

なかの

Fast Bilateral-Space Stereo for Synthetic Defocus11

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

議論論はある

次に読むべき論論文は

高速な自由焦点ぼけ画像の作成

Bilateral-spaceを提案

従来研究よりも10から100倍速くぼけ具合の精度度も良良い

ぼけを作成するというアプリケーションに利利用する距離離という面では提案手法が有益であるが実測的な距離離という面での精度度は悪い背景と前景が同じ色で近くにある場合同一ととらえてしまう

Efficient high-resolution stereo matching using local plane sweeps [S N Sinha D Scharstein and R SzeliskiCVPR2014] Bilateral filtering-based optical flow estimation with occlusion detection [J Xiao H Cheng H Sawhney C Rao and M IsnardiECCV2006] Efficient nonlocal regularization for optical flow [P Krumlahenbumluhl and V KoltunECCV2012] Real-time spatiotemporal stereo matching using the dual-cross-bilateral grid [C Richardt D Orr I Davies A Criminisi and N A DodgsonECCV2010]

どうやって有効性を示した視差推定の精度度はmiddleburyKITTI

なかの

Robust Spatiotemporal Stereo for Dynamic Scenes12

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

ステレオ動画のフレーム間情報を取り入れることでノイズ耐性を向上させるまた動きの大きなものも考える

時間を含めたウインドウの提案自動的にそのような変化に対応する画像領領域を検出する

従来の時空間ステレオと比べ大きな動きによる急激な視差の時間変化に対して頑健である

なかの

Spacetime Stereo A Unifying Framework for Depth from Triangulation13

どんなもの

先行行研究と比べてどこがすごい

space time stereoを提案ステレオカメラの視差推定でも構造光を用いた視差推定でも利利用可能 動的なシーンでの利利用も可能

フレームごとマッチングを取っていたが複数フレームでのマッチングを可能とした

なかの

Learning to Select and Order Vacation Photographs (Disney research)14

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示したあまりにもたくさん撮影した写真たちから自動的にフォトアルバムを作成する研究

複雑な視覚での区別を試みたのはこの論論文が初

５つの異異なるトピックから63の個人的な写真コレクションのデータセットを利利用し定量量的に評価する

写真間の差別かを定義する顔全体の絵何が写っているか写っていないかを評価する

Jointly aligning and segmenting multiple web photo streams for the inference of collective photo storylines [G Kim and E P Xing CVPR2013] Photo sequencing [T Basha Y Moses and S Avidan CVPR2012]

なかの

A Taxonomy and Evaluation of Dense Two-Frame Stereo Correspondence Algorithms15

どんなもの

どうやって有効性を示した

次に読むべき論論文は

ステレオマッチングに関する分類を行行う 新たなデータセットを作成する

というよりも他の手法が有効性を示すことができるようにデータセットを作成した 今ではmiddleburyのデータセットと言えばステレオ業界では超有名

High-resolution stereo datasets with subpixel-accurate ground truth

なかの

Discriminability Limits in Spatio-Temporal Stereo Block Matching1

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

spatio-temporal disparity estimationの根本的な前提の正当性を解析しマッチング処理理の際に動きが助けとなる程度度を決定する

時空間マッチングのエラーを分析し誤りの原因を確率率率で導出する（フレーム数動きの分散画像特徴ノイズの関数）

[34243334]は時空間マッチングの利利点を指摘していたが本論論文はマッチング精度度の向上のために動きを用いる手法の程度度や性質を研究する

6つのステレオビデオを用いて検証を行行った

Spacetime stereo Shape recovery for dynamic scenes [L Zhang B Curless and S Seitz CVPR2003] Spatiotemporal stereo and scene flow via stequel matching [M Sizintsev and R Wildes PAMI2012] Temporally consistent disparity and optical flow via efficient spatio-temporal filtering [A Hosni C Rhemann M Bleyer and M Gelautz PRCAIVT2012] Spacetime stereo A unifying framework for depth from triangulation [PAMI2005] Dynamic depth recovery from multiple synchronized video streams [H Tao H Sawhney and R Kumar CVPR2001] Spatiotemporal descriptor for wide-baseline stereo reconstruction of non-rigid and ambiguous scenes [ECCV2003]

なかの

Depth-Based Patch Scaling for Content-Aware Stereo Image Completion2

どんなもの

どうやって有効性を示した

ステレオでデプスを取り物体の三次元情報を使ってインペインティングを行行う

bookのデータセット背景が繰り返しパターンが多いものを使っている

なかの

Fast Semi-dense Surface Reconstruction from Stereoscopic Video in Laparoscopic Surgery3

どんなもの

手法の流流れ

次に読むべき論論文は

腹腔内手術の際にステレオビデオから高速に物体の三次元再構成を行行う研究

Evaluation of stereo matching costs on images with radiometric differences [Hirschmueller H Scharstein D PAMI2008]

スコープカメラから画像取得GPUで演算する 視差を算出しフィルタにかける距離離に変換 点群を再びフィルタにかけて三次元再構成

なかの

3D Reconstruction from Accidental Motion4

どんなもの

技術や手法のキモはどこ

議論論はある

数秒のビデオ（単眼）から三次元再構成を行行う 手ぶれなどの動きから再構成が可能で特定の動きや機材を必要としない

短い基線長でも再構成が可能（3mmの基線長）

基線長が短いため背景の精度度が低くなる リフォーカス画像作成には十分 練習では上手く動作したが検証がまだ必要

なかの

Panoramic Video from Unstructured Camera Arrays5

どんなもの

技術や手法のキモはどこ

議論論はある

複数のカメラを用いたパノラマ撮影を行行う その際に不不自然さがないような動画を作成する

不不自然さを感じる感覚特性を提示しそれにのっとって対策を講じている

一つのカメラの解像度度と品質を向上させるよりも複数台のカメラを組み合わせることがはるかに簡単で有益である専門家でなくてもGoProのカメラセットを組み合わせることは容易易

カメラの配置は厳密に決められていない完璧な時間同期やローリングシャッターの不不足のような実撮影での問題もクリアしている

先行行研究と比べてどこがすごい

どうやって有効性を示した左のシステムは14台のカメラを使用 右のシステムはGoProを5台使用

Disney 201558

なかの

Floating Scale Surface Reconstruction6

どんなもの

技術や手法のキモはどこ

流流動的にスケールを変えられる三次元再構成手法

サンプル規模に依存するパラメータがない rarrどのスケールのサンプルにも対応できる

siggraph2014

なかの

A Super Resolution Reconstruction Scheme for Mixed Spatio-Temporal Stereo Video7

どんなもの

技術や手法のキモはどこ

ビデオ超解像アルゴリズム

二台のカメラを使用 一台は低解像度度で高速一台は高解像度度で低速

HHI 3DV ftp siteのBookarrivalとbeergadenを使用どうやって有効性を示した

なかの

What Is a Good Day for Outdoor Photometric Stereo8

どんなもの

先行行研究と比べてどこがすごい

議論論はある

次に読むべき論論文は

屋外における照度度差があるステレオの研究 屋外でステレオを行行う際に有利利or不不利利な日照条件を明らかにする

点光源を用いた研究は行行われていたが屋外での研究はされていなかった

晴れより曇りの方が精度度が良良い雲があるから特徴量量を取りやすい雑音を白色ガウスモデルを想定 季節ごとのデータセットを利利用してみても良良い

Time-lapse photometric stereo and applications [F Shen K Sunkavalli N Bonneel S Rusinkiewicz H Pfisterand X Tong2014] Outdoor photometric stereo [L-F Yu S-K Yeung Y-W Tai D Terzopoulos and T FChan ICCP2013]

どうやって有効性を示した屋外の照明に関するHDR環境マップのデータベースを利利用

Disney 2015424

なかの

COLORBRUSH ANIMATED DIFFUSION FOR INTUITIVE COLORIZATION SIMULATING WATER PAINTING 9

どんなものアニメを水彩画で描いたように変換する 水彩画を描くには経験が必要であるがそれを作成するアルゴリズムを考案絵具が水によりどうにじむかシュミレーションしている

Disney 20141027 ICIP2014

次に読むべき論論文はGabor-space geodesic active contoursrdquo In Algebraic Frames for the Perception-Action Cycle [C Sagiv NA Sochen and YY Zeevi 2000] Practical temporal consistency for image-based graphics applications [M Lang O Wang T Aydin A Smolic and M Gross SIGGRAPH2012] Computer-Generated Watercolor [CJ Curtis SE Anderson JE Seims KW Fleischer and DH Salesin SIGGRAPH1997]

なかの

From Sound to Sight Using Audio Processing to enable Visible Light Communication 10

どんなもの光に情報を載せる技術プロジェクトページがあって光関係の研究が8個載っている

httpwwwdisneyresearchcomprojectvisible-light-communication

ビデオのURL httpwwwdisneyresearchcomwpcontentuploadsPub_InvisibleLightCommunication_Siggraph14_videomp4

• 201211106_KeisukeKawahara
• 201311421_KeitaKanai_02
• 201313095_AkiraIshii_02
• 201413109_YuukiKubo_02
• 201513110_SatoshiHashizume_02
• 鬼輪講マラソン③_1
• 鬼輪講マラソン③_2

Tensor13 Displays13 Compressive13 Light13 Field13 Synthesis13 using13 Mul4layer13 Displays13 with13 Direc4onal13 Backligh4ng(SIGGRAPHrsquo12)

Gordon13 Wetzstein13 Douglas13 Lanman13 MaChew13 Hirsch13 Ramesh13 Raskar

201413109　久保勇貴 2（鬼コース）13

どんなもの13

視点によって異なる立体映像を見ることができる複数の層からなるディスプレイ13

先行研究と比べてどこがすごい13

既存の手法を合成したcomputa(onal13 displaysというディスプレイの新しいフレームワークを提案した13

技術や手法のキモはどこ13

時分割で視差マスクを表示することでユーザの視線ごとに立体像を表現する13

どうやって有効だと検証した13

通常のディスプレイ３層LCDLCD及び指向性バックライトの例による比較13 13

議論はある13

波紋を含むこと色チャンネルが悪影響を与える相互反射不均一などの問題が見られた13

次に読むべき論文は13

Matoba13 et13 al13 1213

SplashDisplay(VRICrsquo12)Yasuo Matoba Taro Tokui Ryo Sato Tochiki Sato Hideki Koike

201413109　久保勇貴 2（鬼コース）13

どんなもの13

パーティクルにCGを投射しパーティクルがテーブル上に投げられると爆発しパーティクルが噴きあがる13

先行研究と比べてどこがすごい13

ビーズがミリメートルからメートル単位までZ軸方向について空中で奥行きを表現する13

技術や手法のキモはどこ13

スピーカによって風力が発生させビーズを舞い上げる点13

どうやって有効だと検証した13

ビーズを投げると花火が打ちあがっているかのようなアプリケーション例を示した13

議論はある13

高いレベルの表現及び幅広い入力範囲を提供できた13

次に読むべき論文は13

Kim13 et13 al13 1413

MARIO13 Mid-shy‐air13 Augmented13 Reality13 Interac4on13 with13 Objects13 (ECrsquo14)Hanyuool13 Kim13 13 Issei13 Takahashi13 Hiroki13 Yamamoto13 Satoshi13 Maekawa13 Takeshi13 Naemura

201413109　久保勇貴 2（鬼コース）13

どんなもの13

350times300times250のテーブル上のスペースにおいて自由に動かせる空中像を造りだすことができる13

先行研究と比べてどこがすごい13

凹面鏡や凹レンズのように曲面でないため画像の歪曲が発生しない13

技術や手法のキモはどこ13

Aerial13 Imaging13 Plate(AIP)を用いた空中像の生成及びそのためのディスプレイ移動装置13

どうやって有効だと検証した13

左右からの視差の考慮及び奥行き表現時の画像提示視野角の検証などを行った13 13

議論はある13

投影しているひよこを叩いたり払いのけたりするような動作がデモ中見られた13

次に読むべき論文は13

Tactile Feedback on Flat Surfaces for the Visually Impaired13Ali Israr Olivier Bau Seung-Chan Kim Ivan Poupyrev13

どのようなものか 視覚障害者のための触覚を用いた視覚代用デバイス 先行研究と比べてどこがすごいか 道案内をしてくれる機械などはあるが日用品の場所を教えたり探すのを手伝ってくれるデバイスはない 技術や手法のキモ タッチパネルとカメラを搭載したデバイス 触覚を与える技術はTeslaTouchを利用 色を基準にオブジェクトの位置を認識 有用性の確認 視覚障害者二人に対して実験このデバイスを使

わなくても各自の方法で物を見つけられるが間違えることが多いこのデバイスを使用することで間違えることなく正確に物の位置を特定できた 課題 一つの色でしか判断できない 触感のあるなしでしか情報を伝えられない 関連論文 TeslaTouch [Bau et al 2010]

20150522 橋爪智 2鬼

Fingernail-Mounted Display of Attraction Force and Texture13Masataka Niwa Tomoko Nozaki Taro Maeda and Hideyuki And13

どのようなものか 指先に取り付けて触感と力を両方表現できるデバイス 先行研究と比べてどこがすごいか 触感と引力をそれぞれ表現するデバイスはあるが両方を一つのデバイスで表現した例は少ない 引力は自由な方向に付加することができる 技術や手法のキモ 偏心に重さを付けた円盤を4枚使用する 5-9Hz 引力　100-200Hz 触感 それぞれの円盤の位相や回転数を調整することで

触感と力 を表現する 4つのモータを使いそれぞれの円盤を独立して制御する 有用性の確認 4人の男性に対して実験80以上の精度で認識できた 関連論文 The nail-mounted attraction forcebump display [Nozaki et al 2008]

20150522 橋爪智 2 鬼

Gilded gait reshaping the urban experience with augmented footsteps13Yuichiro Takeuchi13

どのようなものか 靴に装着し地面の触感をコントロールするデバイス 先行研究と比べてどこがすごいか 単独で動作しなかったり特定の環境のみでしか動作しなかったりするrarr靴単体で動作環境に依存しない 技術や手法のキモ 6個の振動パネルを取り付けゲルでカバー app modulesを取り替えることができ様々な機能を付加できる（GPSsound) 4種類の地面を再現

bull  Hard Ground 振動させない bull  Soft Ground すべてのパネルを振動 bull  Bumpy Ground ジグザグに振動 bull  Godzilla 全てのパネルを振動何回か繰り返す 課題 モーターを使っているため波形をプログラミングできないrarr圧電素子を使用する 関連論文 Haptic Shoes [Fu et al 2010]

20150522 橋爪智 2鬼

ExoInterfaces novel exosceleton haptic interfaces for virtual reality augmented sport and rehabilitation

Dzmitry Tsetserukou Katsunari Sato Susumu Tachi13

どのようなものか 腕に装着し物理的なinteractionを可能にするデバイス 先行研究と比べてどこがすごいか Exoskeleton 力を増幅するためだが重たく危険なこともある String-based wireが視界をまたぐ動きに制限がある rarr腕の動きに制限を与えない安全 技術や手法のキモ 「FlexTorque」人間の筋肉の構造を再現するベルトとモーターを使用する肩の近くに装着することで

腕に負担がかかりにくい 触覚feedback弱いトルク 運動を支援強いトルク 課題 物理的な接触を表現するゲームやスポーツにより没頭させるリハビリのサポートをする視覚障害者の支援（ものの場所を教える） 関連論文 FlexTorque [Dzmitry et al 2010]

20150522 橋爪智 2 鬼

Perception of Ultrasonic Haptic Feedback on the Hand Localisation and Apparent Motion13

Graham Wilson Tom Carter Sriram Subramanian Stephen Brewster13

どのようなものか 超音波を用いた触覚フィードバック有効性の検討を行う 先行研究と比べてどこがすごいか 超音波触覚フィードバックは比較的新しく研究や操作方法に関する知識が少ない 腕を自由に動かすことができ小さいものは着用可能 技術や手法のキモ 88のアレイ状に超音波発生器を設置

有効性の確認 bull  局所的な触感 　　　25箇所に分割しそれぞれに超音波を当てる 　　　触感を感じた989 　　　場所の誤差85mm bull  手のひらを動く触感 上下左右に動く 　　　動いてると感じた629

20150522 橋爪智 2 鬼

Friction Measurements on a Large Area TPaD13Nicholas D Marchuk J Edward Colgate Michael A Peshkin13

どのようなものか 超音波の振動により触感を与える 先行研究と比べてどこがすごいか ガラス板を使うので透明後ろにディスプレイを配置可能 技術や手法のキモ 「Squeeze Film Effect（スクイズ膜効果）」 ガラス板に取り付けた圧電素子の円盤に高周波信号

をかける 実験 振動しない部分＝摩擦が発生しない部分が発生周波数により場所が変わる rarr摩擦を大きさをかける力の大きさから計測 rarr指の場所に合わせて複数の周波数を使い分ける 関連論文 T-PaD[Winfield et al 2007]

20150522 橋爪智 2 鬼

STIMTAC a Tactile Input Device with Programmable Friction13Michel Amberg Freacutedeacuteric Giraud Betty Semail Paolo Olivo Geacutery Casiez Nicolas Roussel13

どのようなものか 触感を与えられるタッチデバイス 先行研究と比べてどこがすごいか LATPaD サイズ大きいノイズが大きい TeslaTouch 高い電圧付加が必要GNDに接続しなければいけない

技術や手法のキモ 「Squeeze Film Effect」超音波を用いて振動を与える 圧電性セラミックを電極にコーディング 指トラッキングは力センサを用いる 活用法 マウスキーボード絵を描く 関連論文 LATPaD[Vincent et al 2011] TeslaTouch[Bau et al 2010]

20150522 橋爪智 2 鬼

Surround Haptics Tactile Feedback for Immersive Gaming Experiences Ali Israr Seung-Chan Kim Ivan Poupyrev Jan Stec13

どのようなものか ゲームに合わせて高解像度の触覚フィードバックをユーザーに与える椅子 先行研究と比べてどこがすごいか 荒く配置した安価な振動アクチュエータで高解像度の触覚フィードバックを行える 一点の振動連続した動き範囲の振動などを再現

技術や手法のキモ 仮想的な振動アクチュエータをいくつかの振動アクチュエータを使って作り出す physical-physicalphysical-virtualvirtual-virtual ゲームにHaptics Engineを導入しHaptics APIを用いてHaptic Displayを操作する 関連論文 Exploring Surround Haptics Displays[Israr et al 2010]

20150522 橋爪智 2 鬼

Audio-Haptic Feedback in Mobile Phones Angela Chang Conor OrsquoSullivan13

どのようなものか haptics機能のついてない携帯電話にオーディオ機能を利用した触覚フィードバックを追加する 先行研究と比べてどこがすごいか 簡単に作れてnon-haptic mobile devicesでも大丈夫 技術や手法のキモ 「MultiFunction Transducer(MFT)」 スピーカーから音と信号の両方を出力できる

bull  Haptic Inheritance 　　音を2つの周波数帯に分ける bull  Synthesis and Matching 　　低周波数帯(20-300Hz)を使い触感を伝える 有効性の検討 42人の人を対象に実験を行う83の人が触感を感じた

20150522 橋爪智 2 鬼

Resolution of Sleep Deprivation Problems using ZZZoo Pillows13Shunsuke Yanaka Motoki Ishida13

どのようなものか 近年不眠症の人が多い rarr誰かと接していると安心し睡眠に導入しやすくなる rarrまるで添い寝をしているようなリアルな抱きまくらを使う 技術や手法のキモ breathing sensation 風船を使って人の呼吸を再現肺の形の風船弱く長い呼吸をする

heating お湯を使って人の体温を再現45 有効性の確認 84人の人が実験 呼吸が睡眠を誘ったかrarr61 体温が睡眠を誘ったかrarr85 関連論文 The Impact of Sleep Disorders on Social Life[Komada et al 2007]

20150522 橋爪智 2 鬼

まとめ13超音波 モーター 風

20150522 橋爪智 2 鬼

コイル 電気刺激 Electrovibration

振動 音 お湯

なかの

Temporally Consistent Disparity and Optical Flow via Efficient Spatio-temporal Filtering1

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示した

議論論はあるか

時間的に一定の視差を算出する手法静止画ステレオよりも精度度が良良いことを示す従来よりも推定精度度が良良いオプティカルフローも算出する

一枚の静止画に対するフィルタリング[1]をステレオ動画に拡張している

ケンブリッジのステレオ動画のデータセットを利利用 実写動画に対する比較も行行うノイズ耐性も検証する

フィルタベースとエネルギーベースの関係性を良良り理理解することで推定精度度を上げる

実装が簡単でリアルタイム視差推定が可能

Fast Cost-Volume Filtering for Visual Correspondence and Beyond [Rhemann C Hosni A Bleyer M Rother C Gelautz M CVPR2011] Real-time Spatiotemporal Stereo Matching Using the Dual-Cross-Bilateral Grid [Richardt C Orr D Davies I Criminisi A Dodgson NA ECCV2010] Secrets of optical flow estimation and their principles [Sun D Roth S Black MJ 2010] Motion estimation with non-local total variation regularization [Werlberger M Pock T Bischof H CVPR2010] Temporally Consistent Disparity Maps from Uncalibrated Stereo Videos [Bleyer M Gelatuz M ISPA2011]

なかの

SymStereo Matching using Induced Symmetry (2014)2

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示した

議論論はあるか

画像の対称性を用いてステレオマッチングを行行う 左右の画像を反転させて重ね合わせることで対称性を測る

絵的な類似の代わりに対称性を使う今まで対称性を用いる手法はなく新規性が大きい

三つのSymmetry-baseの手法で精度度を検証従来手法よりも精度度が向上しているMiddlebury Oxford Corridorfountain-P11のデータセット使用

ステレオの問題である不不連続な箇所オクルージョン部分は未解決である演算時間はやや増加

1-Dラインのコストを考える今までは撮像面に対して平行行な平面でデプスを考えていたが垂直な平面を考える

BT[Birchfield and Tomasi 1998] Census transform[Zabih and Woodfill 1994] Log N[Kovesi 1997] radio-metoric differences[Hirschmuller Scharstein 2009]

なかの

Camouflaging an Object from Many Viewpoints3

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

多くの視点から三次元の物体をカモフラージュするカモフラージュによってオクルージョン部分の不不連続がどの程度度生じるか他の視点ではどれほどになるかの検証

MRF（Markov Random Fields）ベース

新しい三次元物体のカモフラージュモデルを構築 37種類のデータセットを作る

箱形の物体に対してカモフラージュ処理理を施し 結果を評価する

オクルージョン不不連続テクスチャの歪みが問題 照明や画像の貼りつけに制限あり

なかの

Aliasing Detection and Reduction in Plenoptic Imaging4

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

カメラアレイ撮影の角度度のエイリアシングを除去するエイリアシングの探索索と打ち消しを行行う

周波数領領域ではなく空間領領域で探索索を行行う

先行行研究がフィルタデモザイキング再パラメータ調整などの前処理理でエイリアシング除去を行行うのに対しエイリアシング探索索後にリフォーカスの段階でエイリアシングを取り除く

8times8の平行行カメラアレイで検証するカメラ間の 基線長は70mm

今回は基線長が長いデータセットを使った 次はLytroなどのマイクロレンズアレイで検証する

Globally consistent multi-label assignment on the ray space of 4d light fields [S Wanner C Straehle B Goldluecke CVPR2013] Lineassisted light field triangulation and stereo matching [Z Yu X Guo H Lin A Lumsdaine J Yu ICCV 2013]

なかの

Globally Consistent Multi-Label Assignment on the Ray Space of 4D Light Fields5

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

四次元ライトフィールドの光線情報において マルチラベルの領領域分割を行行う

深度度情報光線情報を用いて領領域分割することで 二次元（空間）情報だけでは分割が難しかった 領領域を分割可能とする

The light field camera Extended depth of field aliasing and superresolution [T Bishop P Favaro IEEE Transactions on Pattern Analysis and Machine Intelligence 2012]

なかの

Line Assisted Light Field Triangulation and Stereo Matching6

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

光線情報を利利用してステレオマッチングの精度度を 向上させる手法三角測量量の誤差を減らす

Light Field Stereo Matchingとかいう手法 グラフ構造を作成

Variational light field analysis for disparity estimation and super-resolution [S Wanner and B Goldlumluecke 2013]

なかの

Adaptive stereo similarity fusion using confidence measures 20157

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

ステレオマッチングの新しい方式fusion weightsを提案複数の手法を組み合わせてコスト計算を行行う手法付録に既存手法のコスト関数一覧あり

パラメータに依存する手法を用いないことで高速化を図っている

一つのアルゴリズムでは異異なる特性を持つ領領域全てに対して適切切なマッチングはできない複数を組み合わせることでそれを補う13種と多い

middleburyとKITTIのデータセットで評価

一枚あたり03sと高速だが001sとより高速なアルゴリズムが存在する

Segment-based stereo matching using belief propagation and a self-adapting dissimilarity measure [A Klaus M Sormann K Karner ICPR2006] On building an accurate stereo matching system on graphics hardware [X Mei X Sun M Zhou S Jiao H Wang X Zhang ICCV2011] Similarity measures for depth estimation [K Wegner O Stankiewicz 3DTV-CON2009] On accurate dense stereo-matching using a local adaptive multi-cost approach [C Stentoumis L Grammatikopoulos I Kalisperakis G Karras ISPRS2014] A quantitative evaluation of confidence measures for stereo vision [X Hu P Mordohai PAMI2012]

なかの

SIMILARITY MEASURE FOR DEPTH ESTIMATIOM 20098

どんなもの

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

4種類の視差推定アルゴリズムを組み合わせている 類似度度の選択性の解析

Belief Propagationの枠組みを用いる

名古屋大学の多視点データベースを利利用

HHI Test Material for 3D Video [I Feldmann M Muller F Zilly R Tanger A SmolicP Kauff T Wiegand 2008] Multiview Video Test Sequence and Camera Parameters [Yo-Sung Ho Eun-Kyung Lee and Cheon Lee 2008] 1D Parallel Test Sequences for MPEG-FTV [M Tanimoto T Fujii N Fukushima 2008] Non-parametric Local Transforms for Computing Visual Correspondence [R Zabih J Woodfill 1994]

なかの

Spatiotemporal Stereo via Spatiotemporal Quadric Element (Stequel) Matching9

どんなもの

技術や手法のキモはどこ

新しいマッチング手法を提案動き考慮することなく時間情報を取り込むことができる 時間方向のエピ線を考える

オプティカルフロー推定は3D境界や低テクスチャで弱いが提案手法はロバストである

なかの

Depth Video Enhancement Based on Weighted Mode Filtering10

どんなもの

議論論はある

ノイズを含んだ低解像度度のデプスマップの質を高める手法（超解像度度とデノイズ）時間方向も使用簡単なオプティカルフローを計算し利利用する

非反復復アルゴリズムのためGPUに載せやすく高速化が考えられる

なかの

Fast Bilateral-Space Stereo for Synthetic Defocus11

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

議論論はある

次に読むべき論論文は

高速な自由焦点ぼけ画像の作成

Bilateral-spaceを提案

従来研究よりも10から100倍速くぼけ具合の精度度も良良い

ぼけを作成するというアプリケーションに利利用する距離離という面では提案手法が有益であるが実測的な距離離という面での精度度は悪い背景と前景が同じ色で近くにある場合同一ととらえてしまう

Efficient high-resolution stereo matching using local plane sweeps [S N Sinha D Scharstein and R SzeliskiCVPR2014] Bilateral filtering-based optical flow estimation with occlusion detection [J Xiao H Cheng H Sawhney C Rao and M IsnardiECCV2006] Efficient nonlocal regularization for optical flow [P Krumlahenbumluhl and V KoltunECCV2012] Real-time spatiotemporal stereo matching using the dual-cross-bilateral grid [C Richardt D Orr I Davies A Criminisi and N A DodgsonECCV2010]

どうやって有効性を示した視差推定の精度度はmiddleburyKITTI

なかの

Robust Spatiotemporal Stereo for Dynamic Scenes12

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

ステレオ動画のフレーム間情報を取り入れることでノイズ耐性を向上させるまた動きの大きなものも考える

時間を含めたウインドウの提案自動的にそのような変化に対応する画像領領域を検出する

従来の時空間ステレオと比べ大きな動きによる急激な視差の時間変化に対して頑健である

なかの

Spacetime Stereo A Unifying Framework for Depth from Triangulation13

どんなもの

先行行研究と比べてどこがすごい

space time stereoを提案ステレオカメラの視差推定でも構造光を用いた視差推定でも利利用可能 動的なシーンでの利利用も可能

フレームごとマッチングを取っていたが複数フレームでのマッチングを可能とした

なかの

Learning to Select and Order Vacation Photographs (Disney research)14

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示したあまりにもたくさん撮影した写真たちから自動的にフォトアルバムを作成する研究

複雑な視覚での区別を試みたのはこの論論文が初

５つの異異なるトピックから63の個人的な写真コレクションのデータセットを利利用し定量量的に評価する

写真間の差別かを定義する顔全体の絵何が写っているか写っていないかを評価する

Jointly aligning and segmenting multiple web photo streams for the inference of collective photo storylines [G Kim and E P Xing CVPR2013] Photo sequencing [T Basha Y Moses and S Avidan CVPR2012]

なかの

A Taxonomy and Evaluation of Dense Two-Frame Stereo Correspondence Algorithms15

どんなもの

どうやって有効性を示した

次に読むべき論論文は

ステレオマッチングに関する分類を行行う 新たなデータセットを作成する

というよりも他の手法が有効性を示すことができるようにデータセットを作成した 今ではmiddleburyのデータセットと言えばステレオ業界では超有名

High-resolution stereo datasets with subpixel-accurate ground truth

なかの

Discriminability Limits in Spatio-Temporal Stereo Block Matching1

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

spatio-temporal disparity estimationの根本的な前提の正当性を解析しマッチング処理理の際に動きが助けとなる程度度を決定する

時空間マッチングのエラーを分析し誤りの原因を確率率率で導出する（フレーム数動きの分散画像特徴ノイズの関数）

[34243334]は時空間マッチングの利利点を指摘していたが本論論文はマッチング精度度の向上のために動きを用いる手法の程度度や性質を研究する

6つのステレオビデオを用いて検証を行行った

Spacetime stereo Shape recovery for dynamic scenes [L Zhang B Curless and S Seitz CVPR2003] Spatiotemporal stereo and scene flow via stequel matching [M Sizintsev and R Wildes PAMI2012] Temporally consistent disparity and optical flow via efficient spatio-temporal filtering [A Hosni C Rhemann M Bleyer and M Gelautz PRCAIVT2012] Spacetime stereo A unifying framework for depth from triangulation [PAMI2005] Dynamic depth recovery from multiple synchronized video streams [H Tao H Sawhney and R Kumar CVPR2001] Spatiotemporal descriptor for wide-baseline stereo reconstruction of non-rigid and ambiguous scenes [ECCV2003]

なかの

Depth-Based Patch Scaling for Content-Aware Stereo Image Completion2

どんなもの

どうやって有効性を示した

ステレオでデプスを取り物体の三次元情報を使ってインペインティングを行行う

bookのデータセット背景が繰り返しパターンが多いものを使っている

なかの

Fast Semi-dense Surface Reconstruction from Stereoscopic Video in Laparoscopic Surgery3

どんなもの

手法の流流れ

次に読むべき論論文は

腹腔内手術の際にステレオビデオから高速に物体の三次元再構成を行行う研究

Evaluation of stereo matching costs on images with radiometric differences [Hirschmueller H Scharstein D PAMI2008]

スコープカメラから画像取得GPUで演算する 視差を算出しフィルタにかける距離離に変換 点群を再びフィルタにかけて三次元再構成

なかの

3D Reconstruction from Accidental Motion4

どんなもの

技術や手法のキモはどこ

議論論はある

数秒のビデオ（単眼）から三次元再構成を行行う 手ぶれなどの動きから再構成が可能で特定の動きや機材を必要としない

短い基線長でも再構成が可能（3mmの基線長）

基線長が短いため背景の精度度が低くなる リフォーカス画像作成には十分 練習では上手く動作したが検証がまだ必要

なかの

Panoramic Video from Unstructured Camera Arrays5

どんなもの

技術や手法のキモはどこ

議論論はある

複数のカメラを用いたパノラマ撮影を行行う その際に不不自然さがないような動画を作成する

不不自然さを感じる感覚特性を提示しそれにのっとって対策を講じている

一つのカメラの解像度度と品質を向上させるよりも複数台のカメラを組み合わせることがはるかに簡単で有益である専門家でなくてもGoProのカメラセットを組み合わせることは容易易

カメラの配置は厳密に決められていない完璧な時間同期やローリングシャッターの不不足のような実撮影での問題もクリアしている

先行行研究と比べてどこがすごい

どうやって有効性を示した左のシステムは14台のカメラを使用 右のシステムはGoProを5台使用

Disney 201558

なかの

Floating Scale Surface Reconstruction6

どんなもの

技術や手法のキモはどこ

流流動的にスケールを変えられる三次元再構成手法

サンプル規模に依存するパラメータがない rarrどのスケールのサンプルにも対応できる

siggraph2014

なかの

A Super Resolution Reconstruction Scheme for Mixed Spatio-Temporal Stereo Video7

どんなもの

技術や手法のキモはどこ

ビデオ超解像アルゴリズム

二台のカメラを使用 一台は低解像度度で高速一台は高解像度度で低速

HHI 3DV ftp siteのBookarrivalとbeergadenを使用どうやって有効性を示した

なかの

What Is a Good Day for Outdoor Photometric Stereo8

どんなもの

先行行研究と比べてどこがすごい

議論論はある

次に読むべき論論文は

屋外における照度度差があるステレオの研究 屋外でステレオを行行う際に有利利or不不利利な日照条件を明らかにする

点光源を用いた研究は行行われていたが屋外での研究はされていなかった

晴れより曇りの方が精度度が良良い雲があるから特徴量量を取りやすい雑音を白色ガウスモデルを想定 季節ごとのデータセットを利利用してみても良良い

Time-lapse photometric stereo and applications [F Shen K Sunkavalli N Bonneel S Rusinkiewicz H Pfisterand X Tong2014] Outdoor photometric stereo [L-F Yu S-K Yeung Y-W Tai D Terzopoulos and T FChan ICCP2013]

どうやって有効性を示した屋外の照明に関するHDR環境マップのデータベースを利利用

Disney 2015424

なかの

COLORBRUSH ANIMATED DIFFUSION FOR INTUITIVE COLORIZATION SIMULATING WATER PAINTING 9

どんなものアニメを水彩画で描いたように変換する 水彩画を描くには経験が必要であるがそれを作成するアルゴリズムを考案絵具が水によりどうにじむかシュミレーションしている

Disney 20141027 ICIP2014

次に読むべき論論文はGabor-space geodesic active contoursrdquo In Algebraic Frames for the Perception-Action Cycle [C Sagiv NA Sochen and YY Zeevi 2000] Practical temporal consistency for image-based graphics applications [M Lang O Wang T Aydin A Smolic and M Gross SIGGRAPH2012] Computer-Generated Watercolor [CJ Curtis SE Anderson JE Seims KW Fleischer and DH Salesin SIGGRAPH1997]

なかの

From Sound to Sight Using Audio Processing to enable Visible Light Communication 10

どんなもの光に情報を載せる技術プロジェクトページがあって光関係の研究が8個載っている

httpwwwdisneyresearchcomprojectvisible-light-communication

ビデオのURL httpwwwdisneyresearchcomwpcontentuploadsPub_InvisibleLightCommunication_Siggraph14_videomp4

• 201211106_KeisukeKawahara
• 201311421_KeitaKanai_02
• 201313095_AkiraIshii_02
• 201413109_YuukiKubo_02
• 201513110_SatoshiHashizume_02
• 鬼輪講マラソン③_1
• 鬼輪講マラソン③_2

SplashDisplay(VRICrsquo12)Yasuo Matoba Taro Tokui Ryo Sato Tochiki Sato Hideki Koike

201413109　久保勇貴 2（鬼コース）13

どんなもの13

パーティクルにCGを投射しパーティクルがテーブル上に投げられると爆発しパーティクルが噴きあがる13

先行研究と比べてどこがすごい13

ビーズがミリメートルからメートル単位までZ軸方向について空中で奥行きを表現する13

技術や手法のキモはどこ13

スピーカによって風力が発生させビーズを舞い上げる点13

どうやって有効だと検証した13

ビーズを投げると花火が打ちあがっているかのようなアプリケーション例を示した13

議論はある13

高いレベルの表現及び幅広い入力範囲を提供できた13

次に読むべき論文は13

Kim13 et13 al13 1413

MARIO13 Mid-shy‐air13 Augmented13 Reality13 Interac4on13 with13 Objects13 (ECrsquo14)Hanyuool13 Kim13 13 Issei13 Takahashi13 Hiroki13 Yamamoto13 Satoshi13 Maekawa13 Takeshi13 Naemura

201413109　久保勇貴 2（鬼コース）13

どんなもの13

350times300times250のテーブル上のスペースにおいて自由に動かせる空中像を造りだすことができる13

先行研究と比べてどこがすごい13

凹面鏡や凹レンズのように曲面でないため画像の歪曲が発生しない13

技術や手法のキモはどこ13

Aerial13 Imaging13 Plate(AIP)を用いた空中像の生成及びそのためのディスプレイ移動装置13

どうやって有効だと検証した13

左右からの視差の考慮及び奥行き表現時の画像提示視野角の検証などを行った13 13

議論はある13

投影しているひよこを叩いたり払いのけたりするような動作がデモ中見られた13

次に読むべき論文は13

Tactile Feedback on Flat Surfaces for the Visually Impaired13Ali Israr Olivier Bau Seung-Chan Kim Ivan Poupyrev13

どのようなものか 視覚障害者のための触覚を用いた視覚代用デバイス 先行研究と比べてどこがすごいか 道案内をしてくれる機械などはあるが日用品の場所を教えたり探すのを手伝ってくれるデバイスはない 技術や手法のキモ タッチパネルとカメラを搭載したデバイス 触覚を与える技術はTeslaTouchを利用 色を基準にオブジェクトの位置を認識 有用性の確認 視覚障害者二人に対して実験このデバイスを使

わなくても各自の方法で物を見つけられるが間違えることが多いこのデバイスを使用することで間違えることなく正確に物の位置を特定できた 課題 一つの色でしか判断できない 触感のあるなしでしか情報を伝えられない 関連論文 TeslaTouch [Bau et al 2010]

20150522 橋爪智 2鬼

Fingernail-Mounted Display of Attraction Force and Texture13Masataka Niwa Tomoko Nozaki Taro Maeda and Hideyuki And13

どのようなものか 指先に取り付けて触感と力を両方表現できるデバイス 先行研究と比べてどこがすごいか 触感と引力をそれぞれ表現するデバイスはあるが両方を一つのデバイスで表現した例は少ない 引力は自由な方向に付加することができる 技術や手法のキモ 偏心に重さを付けた円盤を4枚使用する 5-9Hz 引力　100-200Hz 触感 それぞれの円盤の位相や回転数を調整することで

触感と力 を表現する 4つのモータを使いそれぞれの円盤を独立して制御する 有用性の確認 4人の男性に対して実験80以上の精度で認識できた 関連論文 The nail-mounted attraction forcebump display [Nozaki et al 2008]

20150522 橋爪智 2 鬼

Gilded gait reshaping the urban experience with augmented footsteps13Yuichiro Takeuchi13

どのようなものか 靴に装着し地面の触感をコントロールするデバイス 先行研究と比べてどこがすごいか 単独で動作しなかったり特定の環境のみでしか動作しなかったりするrarr靴単体で動作環境に依存しない 技術や手法のキモ 6個の振動パネルを取り付けゲルでカバー app modulesを取り替えることができ様々な機能を付加できる（GPSsound) 4種類の地面を再現

bull  Hard Ground 振動させない bull  Soft Ground すべてのパネルを振動 bull  Bumpy Ground ジグザグに振動 bull  Godzilla 全てのパネルを振動何回か繰り返す 課題 モーターを使っているため波形をプログラミングできないrarr圧電素子を使用する 関連論文 Haptic Shoes [Fu et al 2010]

20150522 橋爪智 2鬼

ExoInterfaces novel exosceleton haptic interfaces for virtual reality augmented sport and rehabilitation

Dzmitry Tsetserukou Katsunari Sato Susumu Tachi13

どのようなものか 腕に装着し物理的なinteractionを可能にするデバイス 先行研究と比べてどこがすごいか Exoskeleton 力を増幅するためだが重たく危険なこともある String-based wireが視界をまたぐ動きに制限がある rarr腕の動きに制限を与えない安全 技術や手法のキモ 「FlexTorque」人間の筋肉の構造を再現するベルトとモーターを使用する肩の近くに装着することで

腕に負担がかかりにくい 触覚feedback弱いトルク 運動を支援強いトルク 課題 物理的な接触を表現するゲームやスポーツにより没頭させるリハビリのサポートをする視覚障害者の支援（ものの場所を教える） 関連論文 FlexTorque [Dzmitry et al 2010]

20150522 橋爪智 2 鬼

Perception of Ultrasonic Haptic Feedback on the Hand Localisation and Apparent Motion13

Graham Wilson Tom Carter Sriram Subramanian Stephen Brewster13

どのようなものか 超音波を用いた触覚フィードバック有効性の検討を行う 先行研究と比べてどこがすごいか 超音波触覚フィードバックは比較的新しく研究や操作方法に関する知識が少ない 腕を自由に動かすことができ小さいものは着用可能 技術や手法のキモ 88のアレイ状に超音波発生器を設置

有効性の確認 bull  局所的な触感 　　　25箇所に分割しそれぞれに超音波を当てる 　　　触感を感じた989 　　　場所の誤差85mm bull  手のひらを動く触感 上下左右に動く 　　　動いてると感じた629

20150522 橋爪智 2 鬼

Friction Measurements on a Large Area TPaD13Nicholas D Marchuk J Edward Colgate Michael A Peshkin13

どのようなものか 超音波の振動により触感を与える 先行研究と比べてどこがすごいか ガラス板を使うので透明後ろにディスプレイを配置可能 技術や手法のキモ 「Squeeze Film Effect（スクイズ膜効果）」 ガラス板に取り付けた圧電素子の円盤に高周波信号

をかける 実験 振動しない部分＝摩擦が発生しない部分が発生周波数により場所が変わる rarr摩擦を大きさをかける力の大きさから計測 rarr指の場所に合わせて複数の周波数を使い分ける 関連論文 T-PaD[Winfield et al 2007]

20150522 橋爪智 2 鬼

STIMTAC a Tactile Input Device with Programmable Friction13Michel Amberg Freacutedeacuteric Giraud Betty Semail Paolo Olivo Geacutery Casiez Nicolas Roussel13

どのようなものか 触感を与えられるタッチデバイス 先行研究と比べてどこがすごいか LATPaD サイズ大きいノイズが大きい TeslaTouch 高い電圧付加が必要GNDに接続しなければいけない

技術や手法のキモ 「Squeeze Film Effect」超音波を用いて振動を与える 圧電性セラミックを電極にコーディング 指トラッキングは力センサを用いる 活用法 マウスキーボード絵を描く 関連論文 LATPaD[Vincent et al 2011] TeslaTouch[Bau et al 2010]

20150522 橋爪智 2 鬼

Surround Haptics Tactile Feedback for Immersive Gaming Experiences Ali Israr Seung-Chan Kim Ivan Poupyrev Jan Stec13

どのようなものか ゲームに合わせて高解像度の触覚フィードバックをユーザーに与える椅子 先行研究と比べてどこがすごいか 荒く配置した安価な振動アクチュエータで高解像度の触覚フィードバックを行える 一点の振動連続した動き範囲の振動などを再現

技術や手法のキモ 仮想的な振動アクチュエータをいくつかの振動アクチュエータを使って作り出す physical-physicalphysical-virtualvirtual-virtual ゲームにHaptics Engineを導入しHaptics APIを用いてHaptic Displayを操作する 関連論文 Exploring Surround Haptics Displays[Israr et al 2010]

20150522 橋爪智 2 鬼

Audio-Haptic Feedback in Mobile Phones Angela Chang Conor OrsquoSullivan13

どのようなものか haptics機能のついてない携帯電話にオーディオ機能を利用した触覚フィードバックを追加する 先行研究と比べてどこがすごいか 簡単に作れてnon-haptic mobile devicesでも大丈夫 技術や手法のキモ 「MultiFunction Transducer(MFT)」 スピーカーから音と信号の両方を出力できる

bull  Haptic Inheritance 　　音を2つの周波数帯に分ける bull  Synthesis and Matching 　　低周波数帯(20-300Hz)を使い触感を伝える 有効性の検討 42人の人を対象に実験を行う83の人が触感を感じた

20150522 橋爪智 2 鬼

Resolution of Sleep Deprivation Problems using ZZZoo Pillows13Shunsuke Yanaka Motoki Ishida13

どのようなものか 近年不眠症の人が多い rarr誰かと接していると安心し睡眠に導入しやすくなる rarrまるで添い寝をしているようなリアルな抱きまくらを使う 技術や手法のキモ breathing sensation 風船を使って人の呼吸を再現肺の形の風船弱く長い呼吸をする

heating お湯を使って人の体温を再現45 有効性の確認 84人の人が実験 呼吸が睡眠を誘ったかrarr61 体温が睡眠を誘ったかrarr85 関連論文 The Impact of Sleep Disorders on Social Life[Komada et al 2007]

20150522 橋爪智 2 鬼

まとめ13超音波 モーター 風

20150522 橋爪智 2 鬼

コイル 電気刺激 Electrovibration

振動 音 お湯

なかの

Temporally Consistent Disparity and Optical Flow via Efficient Spatio-temporal Filtering1

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示した

議論論はあるか

時間的に一定の視差を算出する手法静止画ステレオよりも精度度が良良いことを示す従来よりも推定精度度が良良いオプティカルフローも算出する

一枚の静止画に対するフィルタリング[1]をステレオ動画に拡張している

ケンブリッジのステレオ動画のデータセットを利利用 実写動画に対する比較も行行うノイズ耐性も検証する

フィルタベースとエネルギーベースの関係性を良良り理理解することで推定精度度を上げる

実装が簡単でリアルタイム視差推定が可能

Fast Cost-Volume Filtering for Visual Correspondence and Beyond [Rhemann C Hosni A Bleyer M Rother C Gelautz M CVPR2011] Real-time Spatiotemporal Stereo Matching Using the Dual-Cross-Bilateral Grid [Richardt C Orr D Davies I Criminisi A Dodgson NA ECCV2010] Secrets of optical flow estimation and their principles [Sun D Roth S Black MJ 2010] Motion estimation with non-local total variation regularization [Werlberger M Pock T Bischof H CVPR2010] Temporally Consistent Disparity Maps from Uncalibrated Stereo Videos [Bleyer M Gelatuz M ISPA2011]

なかの

SymStereo Matching using Induced Symmetry (2014)2

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示した

議論論はあるか

画像の対称性を用いてステレオマッチングを行行う 左右の画像を反転させて重ね合わせることで対称性を測る

絵的な類似の代わりに対称性を使う今まで対称性を用いる手法はなく新規性が大きい

三つのSymmetry-baseの手法で精度度を検証従来手法よりも精度度が向上しているMiddlebury Oxford Corridorfountain-P11のデータセット使用

ステレオの問題である不不連続な箇所オクルージョン部分は未解決である演算時間はやや増加

1-Dラインのコストを考える今までは撮像面に対して平行行な平面でデプスを考えていたが垂直な平面を考える

BT[Birchfield and Tomasi 1998] Census transform[Zabih and Woodfill 1994] Log N[Kovesi 1997] radio-metoric differences[Hirschmuller Scharstein 2009]

なかの

Camouflaging an Object from Many Viewpoints3

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

多くの視点から三次元の物体をカモフラージュするカモフラージュによってオクルージョン部分の不不連続がどの程度度生じるか他の視点ではどれほどになるかの検証

MRF（Markov Random Fields）ベース

新しい三次元物体のカモフラージュモデルを構築 37種類のデータセットを作る

箱形の物体に対してカモフラージュ処理理を施し 結果を評価する

オクルージョン不不連続テクスチャの歪みが問題 照明や画像の貼りつけに制限あり

なかの

Aliasing Detection and Reduction in Plenoptic Imaging4

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

カメラアレイ撮影の角度度のエイリアシングを除去するエイリアシングの探索索と打ち消しを行行う

周波数領領域ではなく空間領領域で探索索を行行う

先行行研究がフィルタデモザイキング再パラメータ調整などの前処理理でエイリアシング除去を行行うのに対しエイリアシング探索索後にリフォーカスの段階でエイリアシングを取り除く

8times8の平行行カメラアレイで検証するカメラ間の 基線長は70mm

今回は基線長が長いデータセットを使った 次はLytroなどのマイクロレンズアレイで検証する

Globally consistent multi-label assignment on the ray space of 4d light fields [S Wanner C Straehle B Goldluecke CVPR2013] Lineassisted light field triangulation and stereo matching [Z Yu X Guo H Lin A Lumsdaine J Yu ICCV 2013]

なかの

Globally Consistent Multi-Label Assignment on the Ray Space of 4D Light Fields5

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

四次元ライトフィールドの光線情報において マルチラベルの領領域分割を行行う

深度度情報光線情報を用いて領領域分割することで 二次元（空間）情報だけでは分割が難しかった 領領域を分割可能とする

The light field camera Extended depth of field aliasing and superresolution [T Bishop P Favaro IEEE Transactions on Pattern Analysis and Machine Intelligence 2012]

なかの

Line Assisted Light Field Triangulation and Stereo Matching6

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

光線情報を利利用してステレオマッチングの精度度を 向上させる手法三角測量量の誤差を減らす

Light Field Stereo Matchingとかいう手法 グラフ構造を作成

Variational light field analysis for disparity estimation and super-resolution [S Wanner and B Goldlumluecke 2013]

なかの

Adaptive stereo similarity fusion using confidence measures 20157

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

ステレオマッチングの新しい方式fusion weightsを提案複数の手法を組み合わせてコスト計算を行行う手法付録に既存手法のコスト関数一覧あり

パラメータに依存する手法を用いないことで高速化を図っている

一つのアルゴリズムでは異異なる特性を持つ領領域全てに対して適切切なマッチングはできない複数を組み合わせることでそれを補う13種と多い

middleburyとKITTIのデータセットで評価

一枚あたり03sと高速だが001sとより高速なアルゴリズムが存在する

Segment-based stereo matching using belief propagation and a self-adapting dissimilarity measure [A Klaus M Sormann K Karner ICPR2006] On building an accurate stereo matching system on graphics hardware [X Mei X Sun M Zhou S Jiao H Wang X Zhang ICCV2011] Similarity measures for depth estimation [K Wegner O Stankiewicz 3DTV-CON2009] On accurate dense stereo-matching using a local adaptive multi-cost approach [C Stentoumis L Grammatikopoulos I Kalisperakis G Karras ISPRS2014] A quantitative evaluation of confidence measures for stereo vision [X Hu P Mordohai PAMI2012]

なかの

SIMILARITY MEASURE FOR DEPTH ESTIMATIOM 20098

どんなもの

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

4種類の視差推定アルゴリズムを組み合わせている 類似度度の選択性の解析

Belief Propagationの枠組みを用いる

名古屋大学の多視点データベースを利利用

HHI Test Material for 3D Video [I Feldmann M Muller F Zilly R Tanger A SmolicP Kauff T Wiegand 2008] Multiview Video Test Sequence and Camera Parameters [Yo-Sung Ho Eun-Kyung Lee and Cheon Lee 2008] 1D Parallel Test Sequences for MPEG-FTV [M Tanimoto T Fujii N Fukushima 2008] Non-parametric Local Transforms for Computing Visual Correspondence [R Zabih J Woodfill 1994]

なかの

Spatiotemporal Stereo via Spatiotemporal Quadric Element (Stequel) Matching9

どんなもの

技術や手法のキモはどこ

新しいマッチング手法を提案動き考慮することなく時間情報を取り込むことができる 時間方向のエピ線を考える

オプティカルフロー推定は3D境界や低テクスチャで弱いが提案手法はロバストである

なかの

Depth Video Enhancement Based on Weighted Mode Filtering10

どんなもの

議論論はある

ノイズを含んだ低解像度度のデプスマップの質を高める手法（超解像度度とデノイズ）時間方向も使用簡単なオプティカルフローを計算し利利用する

非反復復アルゴリズムのためGPUに載せやすく高速化が考えられる

なかの

Fast Bilateral-Space Stereo for Synthetic Defocus11

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

議論論はある

次に読むべき論論文は

高速な自由焦点ぼけ画像の作成

Bilateral-spaceを提案

従来研究よりも10から100倍速くぼけ具合の精度度も良良い

ぼけを作成するというアプリケーションに利利用する距離離という面では提案手法が有益であるが実測的な距離離という面での精度度は悪い背景と前景が同じ色で近くにある場合同一ととらえてしまう

Efficient high-resolution stereo matching using local plane sweeps [S N Sinha D Scharstein and R SzeliskiCVPR2014] Bilateral filtering-based optical flow estimation with occlusion detection [J Xiao H Cheng H Sawhney C Rao and M IsnardiECCV2006] Efficient nonlocal regularization for optical flow [P Krumlahenbumluhl and V KoltunECCV2012] Real-time spatiotemporal stereo matching using the dual-cross-bilateral grid [C Richardt D Orr I Davies A Criminisi and N A DodgsonECCV2010]

どうやって有効性を示した視差推定の精度度はmiddleburyKITTI

なかの

Robust Spatiotemporal Stereo for Dynamic Scenes12

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

ステレオ動画のフレーム間情報を取り入れることでノイズ耐性を向上させるまた動きの大きなものも考える

時間を含めたウインドウの提案自動的にそのような変化に対応する画像領領域を検出する

従来の時空間ステレオと比べ大きな動きによる急激な視差の時間変化に対して頑健である

なかの

Spacetime Stereo A Unifying Framework for Depth from Triangulation13

どんなもの

先行行研究と比べてどこがすごい

space time stereoを提案ステレオカメラの視差推定でも構造光を用いた視差推定でも利利用可能 動的なシーンでの利利用も可能

フレームごとマッチングを取っていたが複数フレームでのマッチングを可能とした

なかの

Learning to Select and Order Vacation Photographs (Disney research)14

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示したあまりにもたくさん撮影した写真たちから自動的にフォトアルバムを作成する研究

複雑な視覚での区別を試みたのはこの論論文が初

５つの異異なるトピックから63の個人的な写真コレクションのデータセットを利利用し定量量的に評価する

写真間の差別かを定義する顔全体の絵何が写っているか写っていないかを評価する

Jointly aligning and segmenting multiple web photo streams for the inference of collective photo storylines [G Kim and E P Xing CVPR2013] Photo sequencing [T Basha Y Moses and S Avidan CVPR2012]

なかの

A Taxonomy and Evaluation of Dense Two-Frame Stereo Correspondence Algorithms15

どんなもの

どうやって有効性を示した

次に読むべき論論文は

ステレオマッチングに関する分類を行行う 新たなデータセットを作成する

というよりも他の手法が有効性を示すことができるようにデータセットを作成した 今ではmiddleburyのデータセットと言えばステレオ業界では超有名

High-resolution stereo datasets with subpixel-accurate ground truth

なかの

Discriminability Limits in Spatio-Temporal Stereo Block Matching1

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

spatio-temporal disparity estimationの根本的な前提の正当性を解析しマッチング処理理の際に動きが助けとなる程度度を決定する

時空間マッチングのエラーを分析し誤りの原因を確率率率で導出する（フレーム数動きの分散画像特徴ノイズの関数）

[34243334]は時空間マッチングの利利点を指摘していたが本論論文はマッチング精度度の向上のために動きを用いる手法の程度度や性質を研究する

6つのステレオビデオを用いて検証を行行った

Spacetime stereo Shape recovery for dynamic scenes [L Zhang B Curless and S Seitz CVPR2003] Spatiotemporal stereo and scene flow via stequel matching [M Sizintsev and R Wildes PAMI2012] Temporally consistent disparity and optical flow via efficient spatio-temporal filtering [A Hosni C Rhemann M Bleyer and M Gelautz PRCAIVT2012] Spacetime stereo A unifying framework for depth from triangulation [PAMI2005] Dynamic depth recovery from multiple synchronized video streams [H Tao H Sawhney and R Kumar CVPR2001] Spatiotemporal descriptor for wide-baseline stereo reconstruction of non-rigid and ambiguous scenes [ECCV2003]

なかの

Depth-Based Patch Scaling for Content-Aware Stereo Image Completion2

どんなもの

どうやって有効性を示した

ステレオでデプスを取り物体の三次元情報を使ってインペインティングを行行う

bookのデータセット背景が繰り返しパターンが多いものを使っている

なかの

Fast Semi-dense Surface Reconstruction from Stereoscopic Video in Laparoscopic Surgery3

どんなもの

手法の流流れ

次に読むべき論論文は

腹腔内手術の際にステレオビデオから高速に物体の三次元再構成を行行う研究

Evaluation of stereo matching costs on images with radiometric differences [Hirschmueller H Scharstein D PAMI2008]

スコープカメラから画像取得GPUで演算する 視差を算出しフィルタにかける距離離に変換 点群を再びフィルタにかけて三次元再構成

なかの

3D Reconstruction from Accidental Motion4

どんなもの

技術や手法のキモはどこ

議論論はある

数秒のビデオ（単眼）から三次元再構成を行行う 手ぶれなどの動きから再構成が可能で特定の動きや機材を必要としない

短い基線長でも再構成が可能（3mmの基線長）

基線長が短いため背景の精度度が低くなる リフォーカス画像作成には十分 練習では上手く動作したが検証がまだ必要

なかの

Panoramic Video from Unstructured Camera Arrays5

どんなもの

技術や手法のキモはどこ

議論論はある

複数のカメラを用いたパノラマ撮影を行行う その際に不不自然さがないような動画を作成する

不不自然さを感じる感覚特性を提示しそれにのっとって対策を講じている

一つのカメラの解像度度と品質を向上させるよりも複数台のカメラを組み合わせることがはるかに簡単で有益である専門家でなくてもGoProのカメラセットを組み合わせることは容易易

カメラの配置は厳密に決められていない完璧な時間同期やローリングシャッターの不不足のような実撮影での問題もクリアしている

先行行研究と比べてどこがすごい

どうやって有効性を示した左のシステムは14台のカメラを使用 右のシステムはGoProを5台使用

Disney 201558

なかの

Floating Scale Surface Reconstruction6

どんなもの

技術や手法のキモはどこ

流流動的にスケールを変えられる三次元再構成手法

サンプル規模に依存するパラメータがない rarrどのスケールのサンプルにも対応できる

siggraph2014

なかの

A Super Resolution Reconstruction Scheme for Mixed Spatio-Temporal Stereo Video7

どんなもの

技術や手法のキモはどこ

ビデオ超解像アルゴリズム

二台のカメラを使用 一台は低解像度度で高速一台は高解像度度で低速

HHI 3DV ftp siteのBookarrivalとbeergadenを使用どうやって有効性を示した

なかの

What Is a Good Day for Outdoor Photometric Stereo8

どんなもの

先行行研究と比べてどこがすごい

議論論はある

次に読むべき論論文は

屋外における照度度差があるステレオの研究 屋外でステレオを行行う際に有利利or不不利利な日照条件を明らかにする

点光源を用いた研究は行行われていたが屋外での研究はされていなかった

晴れより曇りの方が精度度が良良い雲があるから特徴量量を取りやすい雑音を白色ガウスモデルを想定 季節ごとのデータセットを利利用してみても良良い

Time-lapse photometric stereo and applications [F Shen K Sunkavalli N Bonneel S Rusinkiewicz H Pfisterand X Tong2014] Outdoor photometric stereo [L-F Yu S-K Yeung Y-W Tai D Terzopoulos and T FChan ICCP2013]

どうやって有効性を示した屋外の照明に関するHDR環境マップのデータベースを利利用

Disney 2015424

なかの

COLORBRUSH ANIMATED DIFFUSION FOR INTUITIVE COLORIZATION SIMULATING WATER PAINTING 9

どんなものアニメを水彩画で描いたように変換する 水彩画を描くには経験が必要であるがそれを作成するアルゴリズムを考案絵具が水によりどうにじむかシュミレーションしている

Disney 20141027 ICIP2014

次に読むべき論論文はGabor-space geodesic active contoursrdquo In Algebraic Frames for the Perception-Action Cycle [C Sagiv NA Sochen and YY Zeevi 2000] Practical temporal consistency for image-based graphics applications [M Lang O Wang T Aydin A Smolic and M Gross SIGGRAPH2012] Computer-Generated Watercolor [CJ Curtis SE Anderson JE Seims KW Fleischer and DH Salesin SIGGRAPH1997]

なかの

From Sound to Sight Using Audio Processing to enable Visible Light Communication 10

どんなもの光に情報を載せる技術プロジェクトページがあって光関係の研究が8個載っている

httpwwwdisneyresearchcomprojectvisible-light-communication

ビデオのURL httpwwwdisneyresearchcomwpcontentuploadsPub_InvisibleLightCommunication_Siggraph14_videomp4

• 201211106_KeisukeKawahara
• 201311421_KeitaKanai_02
• 201313095_AkiraIshii_02
• 201413109_YuukiKubo_02
• 201513110_SatoshiHashizume_02
• 鬼輪講マラソン③_1
• 鬼輪講マラソン③_2

MARIO13 Mid-shy‐air13 Augmented13 Reality13 Interac4on13 with13 Objects13 (ECrsquo14)Hanyuool13 Kim13 13 Issei13 Takahashi13 Hiroki13 Yamamoto13 Satoshi13 Maekawa13 Takeshi13 Naemura

201413109　久保勇貴 2（鬼コース）13

どんなもの13

350times300times250のテーブル上のスペースにおいて自由に動かせる空中像を造りだすことができる13

先行研究と比べてどこがすごい13

凹面鏡や凹レンズのように曲面でないため画像の歪曲が発生しない13

技術や手法のキモはどこ13

Aerial13 Imaging13 Plate(AIP)を用いた空中像の生成及びそのためのディスプレイ移動装置13

どうやって有効だと検証した13

左右からの視差の考慮及び奥行き表現時の画像提示視野角の検証などを行った13 13

議論はある13

投影しているひよこを叩いたり払いのけたりするような動作がデモ中見られた13

次に読むべき論文は13

Tactile Feedback on Flat Surfaces for the Visually Impaired13Ali Israr Olivier Bau Seung-Chan Kim Ivan Poupyrev13

どのようなものか 視覚障害者のための触覚を用いた視覚代用デバイス 先行研究と比べてどこがすごいか 道案内をしてくれる機械などはあるが日用品の場所を教えたり探すのを手伝ってくれるデバイスはない 技術や手法のキモ タッチパネルとカメラを搭載したデバイス 触覚を与える技術はTeslaTouchを利用 色を基準にオブジェクトの位置を認識 有用性の確認 視覚障害者二人に対して実験このデバイスを使

わなくても各自の方法で物を見つけられるが間違えることが多いこのデバイスを使用することで間違えることなく正確に物の位置を特定できた 課題 一つの色でしか判断できない 触感のあるなしでしか情報を伝えられない 関連論文 TeslaTouch [Bau et al 2010]

20150522 橋爪智 2鬼

Fingernail-Mounted Display of Attraction Force and Texture13Masataka Niwa Tomoko Nozaki Taro Maeda and Hideyuki And13

どのようなものか 指先に取り付けて触感と力を両方表現できるデバイス 先行研究と比べてどこがすごいか 触感と引力をそれぞれ表現するデバイスはあるが両方を一つのデバイスで表現した例は少ない 引力は自由な方向に付加することができる 技術や手法のキモ 偏心に重さを付けた円盤を4枚使用する 5-9Hz 引力　100-200Hz 触感 それぞれの円盤の位相や回転数を調整することで

触感と力 を表現する 4つのモータを使いそれぞれの円盤を独立して制御する 有用性の確認 4人の男性に対して実験80以上の精度で認識できた 関連論文 The nail-mounted attraction forcebump display [Nozaki et al 2008]

20150522 橋爪智 2 鬼

Gilded gait reshaping the urban experience with augmented footsteps13Yuichiro Takeuchi13

どのようなものか 靴に装着し地面の触感をコントロールするデバイス 先行研究と比べてどこがすごいか 単独で動作しなかったり特定の環境のみでしか動作しなかったりするrarr靴単体で動作環境に依存しない 技術や手法のキモ 6個の振動パネルを取り付けゲルでカバー app modulesを取り替えることができ様々な機能を付加できる（GPSsound) 4種類の地面を再現

bull  Hard Ground 振動させない bull  Soft Ground すべてのパネルを振動 bull  Bumpy Ground ジグザグに振動 bull  Godzilla 全てのパネルを振動何回か繰り返す 課題 モーターを使っているため波形をプログラミングできないrarr圧電素子を使用する 関連論文 Haptic Shoes [Fu et al 2010]

20150522 橋爪智 2鬼

ExoInterfaces novel exosceleton haptic interfaces for virtual reality augmented sport and rehabilitation

Dzmitry Tsetserukou Katsunari Sato Susumu Tachi13

どのようなものか 腕に装着し物理的なinteractionを可能にするデバイス 先行研究と比べてどこがすごいか Exoskeleton 力を増幅するためだが重たく危険なこともある String-based wireが視界をまたぐ動きに制限がある rarr腕の動きに制限を与えない安全 技術や手法のキモ 「FlexTorque」人間の筋肉の構造を再現するベルトとモーターを使用する肩の近くに装着することで

腕に負担がかかりにくい 触覚feedback弱いトルク 運動を支援強いトルク 課題 物理的な接触を表現するゲームやスポーツにより没頭させるリハビリのサポートをする視覚障害者の支援（ものの場所を教える） 関連論文 FlexTorque [Dzmitry et al 2010]

20150522 橋爪智 2 鬼

Perception of Ultrasonic Haptic Feedback on the Hand Localisation and Apparent Motion13

Graham Wilson Tom Carter Sriram Subramanian Stephen Brewster13

どのようなものか 超音波を用いた触覚フィードバック有効性の検討を行う 先行研究と比べてどこがすごいか 超音波触覚フィードバックは比較的新しく研究や操作方法に関する知識が少ない 腕を自由に動かすことができ小さいものは着用可能 技術や手法のキモ 88のアレイ状に超音波発生器を設置

有効性の確認 bull  局所的な触感 　　　25箇所に分割しそれぞれに超音波を当てる 　　　触感を感じた989 　　　場所の誤差85mm bull  手のひらを動く触感 上下左右に動く 　　　動いてると感じた629

20150522 橋爪智 2 鬼

Friction Measurements on a Large Area TPaD13Nicholas D Marchuk J Edward Colgate Michael A Peshkin13

どのようなものか 超音波の振動により触感を与える 先行研究と比べてどこがすごいか ガラス板を使うので透明後ろにディスプレイを配置可能 技術や手法のキモ 「Squeeze Film Effect（スクイズ膜効果）」 ガラス板に取り付けた圧電素子の円盤に高周波信号

をかける 実験 振動しない部分＝摩擦が発生しない部分が発生周波数により場所が変わる rarr摩擦を大きさをかける力の大きさから計測 rarr指の場所に合わせて複数の周波数を使い分ける 関連論文 T-PaD[Winfield et al 2007]

20150522 橋爪智 2 鬼

STIMTAC a Tactile Input Device with Programmable Friction13Michel Amberg Freacutedeacuteric Giraud Betty Semail Paolo Olivo Geacutery Casiez Nicolas Roussel13

どのようなものか 触感を与えられるタッチデバイス 先行研究と比べてどこがすごいか LATPaD サイズ大きいノイズが大きい TeslaTouch 高い電圧付加が必要GNDに接続しなければいけない

技術や手法のキモ 「Squeeze Film Effect」超音波を用いて振動を与える 圧電性セラミックを電極にコーディング 指トラッキングは力センサを用いる 活用法 マウスキーボード絵を描く 関連論文 LATPaD[Vincent et al 2011] TeslaTouch[Bau et al 2010]

20150522 橋爪智 2 鬼

Surround Haptics Tactile Feedback for Immersive Gaming Experiences Ali Israr Seung-Chan Kim Ivan Poupyrev Jan Stec13

どのようなものか ゲームに合わせて高解像度の触覚フィードバックをユーザーに与える椅子 先行研究と比べてどこがすごいか 荒く配置した安価な振動アクチュエータで高解像度の触覚フィードバックを行える 一点の振動連続した動き範囲の振動などを再現

技術や手法のキモ 仮想的な振動アクチュエータをいくつかの振動アクチュエータを使って作り出す physical-physicalphysical-virtualvirtual-virtual ゲームにHaptics Engineを導入しHaptics APIを用いてHaptic Displayを操作する 関連論文 Exploring Surround Haptics Displays[Israr et al 2010]

20150522 橋爪智 2 鬼

Audio-Haptic Feedback in Mobile Phones Angela Chang Conor OrsquoSullivan13

どのようなものか haptics機能のついてない携帯電話にオーディオ機能を利用した触覚フィードバックを追加する 先行研究と比べてどこがすごいか 簡単に作れてnon-haptic mobile devicesでも大丈夫 技術や手法のキモ 「MultiFunction Transducer(MFT)」 スピーカーから音と信号の両方を出力できる

bull  Haptic Inheritance 　　音を2つの周波数帯に分ける bull  Synthesis and Matching 　　低周波数帯(20-300Hz)を使い触感を伝える 有効性の検討 42人の人を対象に実験を行う83の人が触感を感じた

20150522 橋爪智 2 鬼

Resolution of Sleep Deprivation Problems using ZZZoo Pillows13Shunsuke Yanaka Motoki Ishida13

どのようなものか 近年不眠症の人が多い rarr誰かと接していると安心し睡眠に導入しやすくなる rarrまるで添い寝をしているようなリアルな抱きまくらを使う 技術や手法のキモ breathing sensation 風船を使って人の呼吸を再現肺の形の風船弱く長い呼吸をする

heating お湯を使って人の体温を再現45 有効性の確認 84人の人が実験 呼吸が睡眠を誘ったかrarr61 体温が睡眠を誘ったかrarr85 関連論文 The Impact of Sleep Disorders on Social Life[Komada et al 2007]

20150522 橋爪智 2 鬼

まとめ13超音波 モーター 風

20150522 橋爪智 2 鬼

コイル 電気刺激 Electrovibration

振動 音 お湯

なかの

Temporally Consistent Disparity and Optical Flow via Efficient Spatio-temporal Filtering1

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示した

議論論はあるか

時間的に一定の視差を算出する手法静止画ステレオよりも精度度が良良いことを示す従来よりも推定精度度が良良いオプティカルフローも算出する

一枚の静止画に対するフィルタリング[1]をステレオ動画に拡張している

ケンブリッジのステレオ動画のデータセットを利利用 実写動画に対する比較も行行うノイズ耐性も検証する

フィルタベースとエネルギーベースの関係性を良良り理理解することで推定精度度を上げる

実装が簡単でリアルタイム視差推定が可能

Fast Cost-Volume Filtering for Visual Correspondence and Beyond [Rhemann C Hosni A Bleyer M Rother C Gelautz M CVPR2011] Real-time Spatiotemporal Stereo Matching Using the Dual-Cross-Bilateral Grid [Richardt C Orr D Davies I Criminisi A Dodgson NA ECCV2010] Secrets of optical flow estimation and their principles [Sun D Roth S Black MJ 2010] Motion estimation with non-local total variation regularization [Werlberger M Pock T Bischof H CVPR2010] Temporally Consistent Disparity Maps from Uncalibrated Stereo Videos [Bleyer M Gelatuz M ISPA2011]

なかの

SymStereo Matching using Induced Symmetry (2014)2

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示した

議論論はあるか

画像の対称性を用いてステレオマッチングを行行う 左右の画像を反転させて重ね合わせることで対称性を測る

絵的な類似の代わりに対称性を使う今まで対称性を用いる手法はなく新規性が大きい

三つのSymmetry-baseの手法で精度度を検証従来手法よりも精度度が向上しているMiddlebury Oxford Corridorfountain-P11のデータセット使用

ステレオの問題である不不連続な箇所オクルージョン部分は未解決である演算時間はやや増加

1-Dラインのコストを考える今までは撮像面に対して平行行な平面でデプスを考えていたが垂直な平面を考える

BT[Birchfield and Tomasi 1998] Census transform[Zabih and Woodfill 1994] Log N[Kovesi 1997] radio-metoric differences[Hirschmuller Scharstein 2009]

なかの

Camouflaging an Object from Many Viewpoints3

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

多くの視点から三次元の物体をカモフラージュするカモフラージュによってオクルージョン部分の不不連続がどの程度度生じるか他の視点ではどれほどになるかの検証

MRF（Markov Random Fields）ベース

新しい三次元物体のカモフラージュモデルを構築 37種類のデータセットを作る

箱形の物体に対してカモフラージュ処理理を施し 結果を評価する

オクルージョン不不連続テクスチャの歪みが問題 照明や画像の貼りつけに制限あり

なかの

Aliasing Detection and Reduction in Plenoptic Imaging4

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

カメラアレイ撮影の角度度のエイリアシングを除去するエイリアシングの探索索と打ち消しを行行う

周波数領領域ではなく空間領領域で探索索を行行う

先行行研究がフィルタデモザイキング再パラメータ調整などの前処理理でエイリアシング除去を行行うのに対しエイリアシング探索索後にリフォーカスの段階でエイリアシングを取り除く

8times8の平行行カメラアレイで検証するカメラ間の 基線長は70mm

今回は基線長が長いデータセットを使った 次はLytroなどのマイクロレンズアレイで検証する

Globally consistent multi-label assignment on the ray space of 4d light fields [S Wanner C Straehle B Goldluecke CVPR2013] Lineassisted light field triangulation and stereo matching [Z Yu X Guo H Lin A Lumsdaine J Yu ICCV 2013]

なかの

Globally Consistent Multi-Label Assignment on the Ray Space of 4D Light Fields5

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

四次元ライトフィールドの光線情報において マルチラベルの領領域分割を行行う

深度度情報光線情報を用いて領領域分割することで 二次元（空間）情報だけでは分割が難しかった 領領域を分割可能とする

The light field camera Extended depth of field aliasing and superresolution [T Bishop P Favaro IEEE Transactions on Pattern Analysis and Machine Intelligence 2012]

なかの

Line Assisted Light Field Triangulation and Stereo Matching6

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

光線情報を利利用してステレオマッチングの精度度を 向上させる手法三角測量量の誤差を減らす

Light Field Stereo Matchingとかいう手法 グラフ構造を作成

Variational light field analysis for disparity estimation and super-resolution [S Wanner and B Goldlumluecke 2013]

なかの

Adaptive stereo similarity fusion using confidence measures 20157

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

ステレオマッチングの新しい方式fusion weightsを提案複数の手法を組み合わせてコスト計算を行行う手法付録に既存手法のコスト関数一覧あり

パラメータに依存する手法を用いないことで高速化を図っている

一つのアルゴリズムでは異異なる特性を持つ領領域全てに対して適切切なマッチングはできない複数を組み合わせることでそれを補う13種と多い

middleburyとKITTIのデータセットで評価

一枚あたり03sと高速だが001sとより高速なアルゴリズムが存在する

Segment-based stereo matching using belief propagation and a self-adapting dissimilarity measure [A Klaus M Sormann K Karner ICPR2006] On building an accurate stereo matching system on graphics hardware [X Mei X Sun M Zhou S Jiao H Wang X Zhang ICCV2011] Similarity measures for depth estimation [K Wegner O Stankiewicz 3DTV-CON2009] On accurate dense stereo-matching using a local adaptive multi-cost approach [C Stentoumis L Grammatikopoulos I Kalisperakis G Karras ISPRS2014] A quantitative evaluation of confidence measures for stereo vision [X Hu P Mordohai PAMI2012]

なかの

SIMILARITY MEASURE FOR DEPTH ESTIMATIOM 20098

どんなもの

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

4種類の視差推定アルゴリズムを組み合わせている 類似度度の選択性の解析

Belief Propagationの枠組みを用いる

名古屋大学の多視点データベースを利利用

HHI Test Material for 3D Video [I Feldmann M Muller F Zilly R Tanger A SmolicP Kauff T Wiegand 2008] Multiview Video Test Sequence and Camera Parameters [Yo-Sung Ho Eun-Kyung Lee and Cheon Lee 2008] 1D Parallel Test Sequences for MPEG-FTV [M Tanimoto T Fujii N Fukushima 2008] Non-parametric Local Transforms for Computing Visual Correspondence [R Zabih J Woodfill 1994]

なかの

Spatiotemporal Stereo via Spatiotemporal Quadric Element (Stequel) Matching9

どんなもの

技術や手法のキモはどこ

新しいマッチング手法を提案動き考慮することなく時間情報を取り込むことができる 時間方向のエピ線を考える

オプティカルフロー推定は3D境界や低テクスチャで弱いが提案手法はロバストである

なかの

Depth Video Enhancement Based on Weighted Mode Filtering10

どんなもの

議論論はある

ノイズを含んだ低解像度度のデプスマップの質を高める手法（超解像度度とデノイズ）時間方向も使用簡単なオプティカルフローを計算し利利用する

非反復復アルゴリズムのためGPUに載せやすく高速化が考えられる

なかの

Fast Bilateral-Space Stereo for Synthetic Defocus11

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

議論論はある

次に読むべき論論文は

高速な自由焦点ぼけ画像の作成

Bilateral-spaceを提案

従来研究よりも10から100倍速くぼけ具合の精度度も良良い

ぼけを作成するというアプリケーションに利利用する距離離という面では提案手法が有益であるが実測的な距離離という面での精度度は悪い背景と前景が同じ色で近くにある場合同一ととらえてしまう

Efficient high-resolution stereo matching using local plane sweeps [S N Sinha D Scharstein and R SzeliskiCVPR2014] Bilateral filtering-based optical flow estimation with occlusion detection [J Xiao H Cheng H Sawhney C Rao and M IsnardiECCV2006] Efficient nonlocal regularization for optical flow [P Krumlahenbumluhl and V KoltunECCV2012] Real-time spatiotemporal stereo matching using the dual-cross-bilateral grid [C Richardt D Orr I Davies A Criminisi and N A DodgsonECCV2010]

どうやって有効性を示した視差推定の精度度はmiddleburyKITTI

なかの

Robust Spatiotemporal Stereo for Dynamic Scenes12

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

ステレオ動画のフレーム間情報を取り入れることでノイズ耐性を向上させるまた動きの大きなものも考える

時間を含めたウインドウの提案自動的にそのような変化に対応する画像領領域を検出する

従来の時空間ステレオと比べ大きな動きによる急激な視差の時間変化に対して頑健である

なかの

Spacetime Stereo A Unifying Framework for Depth from Triangulation13

どんなもの

先行行研究と比べてどこがすごい

space time stereoを提案ステレオカメラの視差推定でも構造光を用いた視差推定でも利利用可能 動的なシーンでの利利用も可能

フレームごとマッチングを取っていたが複数フレームでのマッチングを可能とした

なかの

Learning to Select and Order Vacation Photographs (Disney research)14

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示したあまりにもたくさん撮影した写真たちから自動的にフォトアルバムを作成する研究

複雑な視覚での区別を試みたのはこの論論文が初

５つの異異なるトピックから63の個人的な写真コレクションのデータセットを利利用し定量量的に評価する

写真間の差別かを定義する顔全体の絵何が写っているか写っていないかを評価する

Jointly aligning and segmenting multiple web photo streams for the inference of collective photo storylines [G Kim and E P Xing CVPR2013] Photo sequencing [T Basha Y Moses and S Avidan CVPR2012]

なかの

A Taxonomy and Evaluation of Dense Two-Frame Stereo Correspondence Algorithms15

どんなもの

どうやって有効性を示した

次に読むべき論論文は

ステレオマッチングに関する分類を行行う 新たなデータセットを作成する

というよりも他の手法が有効性を示すことができるようにデータセットを作成した 今ではmiddleburyのデータセットと言えばステレオ業界では超有名

High-resolution stereo datasets with subpixel-accurate ground truth

なかの

Discriminability Limits in Spatio-Temporal Stereo Block Matching1

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

spatio-temporal disparity estimationの根本的な前提の正当性を解析しマッチング処理理の際に動きが助けとなる程度度を決定する

時空間マッチングのエラーを分析し誤りの原因を確率率率で導出する（フレーム数動きの分散画像特徴ノイズの関数）

[34243334]は時空間マッチングの利利点を指摘していたが本論論文はマッチング精度度の向上のために動きを用いる手法の程度度や性質を研究する

6つのステレオビデオを用いて検証を行行った

Spacetime stereo Shape recovery for dynamic scenes [L Zhang B Curless and S Seitz CVPR2003] Spatiotemporal stereo and scene flow via stequel matching [M Sizintsev and R Wildes PAMI2012] Temporally consistent disparity and optical flow via efficient spatio-temporal filtering [A Hosni C Rhemann M Bleyer and M Gelautz PRCAIVT2012] Spacetime stereo A unifying framework for depth from triangulation [PAMI2005] Dynamic depth recovery from multiple synchronized video streams [H Tao H Sawhney and R Kumar CVPR2001] Spatiotemporal descriptor for wide-baseline stereo reconstruction of non-rigid and ambiguous scenes [ECCV2003]

なかの

Depth-Based Patch Scaling for Content-Aware Stereo Image Completion2

どんなもの

どうやって有効性を示した

ステレオでデプスを取り物体の三次元情報を使ってインペインティングを行行う

bookのデータセット背景が繰り返しパターンが多いものを使っている

なかの

Fast Semi-dense Surface Reconstruction from Stereoscopic Video in Laparoscopic Surgery3

どんなもの

手法の流流れ

次に読むべき論論文は

腹腔内手術の際にステレオビデオから高速に物体の三次元再構成を行行う研究

Evaluation of stereo matching costs on images with radiometric differences [Hirschmueller H Scharstein D PAMI2008]

スコープカメラから画像取得GPUで演算する 視差を算出しフィルタにかける距離離に変換 点群を再びフィルタにかけて三次元再構成

なかの

3D Reconstruction from Accidental Motion4

どんなもの

技術や手法のキモはどこ

議論論はある

数秒のビデオ（単眼）から三次元再構成を行行う 手ぶれなどの動きから再構成が可能で特定の動きや機材を必要としない

短い基線長でも再構成が可能（3mmの基線長）

基線長が短いため背景の精度度が低くなる リフォーカス画像作成には十分 練習では上手く動作したが検証がまだ必要

なかの

Panoramic Video from Unstructured Camera Arrays5

どんなもの

技術や手法のキモはどこ

議論論はある

複数のカメラを用いたパノラマ撮影を行行う その際に不不自然さがないような動画を作成する

不不自然さを感じる感覚特性を提示しそれにのっとって対策を講じている

一つのカメラの解像度度と品質を向上させるよりも複数台のカメラを組み合わせることがはるかに簡単で有益である専門家でなくてもGoProのカメラセットを組み合わせることは容易易

カメラの配置は厳密に決められていない完璧な時間同期やローリングシャッターの不不足のような実撮影での問題もクリアしている

先行行研究と比べてどこがすごい

どうやって有効性を示した左のシステムは14台のカメラを使用 右のシステムはGoProを5台使用

Disney 201558

なかの

Floating Scale Surface Reconstruction6

どんなもの

技術や手法のキモはどこ

流流動的にスケールを変えられる三次元再構成手法

サンプル規模に依存するパラメータがない rarrどのスケールのサンプルにも対応できる

siggraph2014

なかの

A Super Resolution Reconstruction Scheme for Mixed Spatio-Temporal Stereo Video7

どんなもの

技術や手法のキモはどこ

ビデオ超解像アルゴリズム

二台のカメラを使用 一台は低解像度度で高速一台は高解像度度で低速

HHI 3DV ftp siteのBookarrivalとbeergadenを使用どうやって有効性を示した

なかの

What Is a Good Day for Outdoor Photometric Stereo8

どんなもの

先行行研究と比べてどこがすごい

議論論はある

次に読むべき論論文は

屋外における照度度差があるステレオの研究 屋外でステレオを行行う際に有利利or不不利利な日照条件を明らかにする

点光源を用いた研究は行行われていたが屋外での研究はされていなかった

晴れより曇りの方が精度度が良良い雲があるから特徴量量を取りやすい雑音を白色ガウスモデルを想定 季節ごとのデータセットを利利用してみても良良い

Time-lapse photometric stereo and applications [F Shen K Sunkavalli N Bonneel S Rusinkiewicz H Pfisterand X Tong2014] Outdoor photometric stereo [L-F Yu S-K Yeung Y-W Tai D Terzopoulos and T FChan ICCP2013]

どうやって有効性を示した屋外の照明に関するHDR環境マップのデータベースを利利用

Disney 2015424

なかの

COLORBRUSH ANIMATED DIFFUSION FOR INTUITIVE COLORIZATION SIMULATING WATER PAINTING 9

どんなものアニメを水彩画で描いたように変換する 水彩画を描くには経験が必要であるがそれを作成するアルゴリズムを考案絵具が水によりどうにじむかシュミレーションしている

Disney 20141027 ICIP2014

次に読むべき論論文はGabor-space geodesic active contoursrdquo In Algebraic Frames for the Perception-Action Cycle [C Sagiv NA Sochen and YY Zeevi 2000] Practical temporal consistency for image-based graphics applications [M Lang O Wang T Aydin A Smolic and M Gross SIGGRAPH2012] Computer-Generated Watercolor [CJ Curtis SE Anderson JE Seims KW Fleischer and DH Salesin SIGGRAPH1997]

なかの

From Sound to Sight Using Audio Processing to enable Visible Light Communication 10

どんなもの光に情報を載せる技術プロジェクトページがあって光関係の研究が8個載っている

httpwwwdisneyresearchcomprojectvisible-light-communication

ビデオのURL httpwwwdisneyresearchcomwpcontentuploadsPub_InvisibleLightCommunication_Siggraph14_videomp4

• 201211106_KeisukeKawahara
• 201311421_KeitaKanai_02
• 201313095_AkiraIshii_02
• 201413109_YuukiKubo_02
• 201513110_SatoshiHashizume_02
• 鬼輪講マラソン③_1
• 鬼輪講マラソン③_2

Tactile Feedback on Flat Surfaces for the Visually Impaired13Ali Israr Olivier Bau Seung-Chan Kim Ivan Poupyrev13

どのようなものか 視覚障害者のための触覚を用いた視覚代用デバイス 先行研究と比べてどこがすごいか 道案内をしてくれる機械などはあるが日用品の場所を教えたり探すのを手伝ってくれるデバイスはない 技術や手法のキモ タッチパネルとカメラを搭載したデバイス 触覚を与える技術はTeslaTouchを利用 色を基準にオブジェクトの位置を認識 有用性の確認 視覚障害者二人に対して実験このデバイスを使

わなくても各自の方法で物を見つけられるが間違えることが多いこのデバイスを使用することで間違えることなく正確に物の位置を特定できた 課題 一つの色でしか判断できない 触感のあるなしでしか情報を伝えられない 関連論文 TeslaTouch [Bau et al 2010]

20150522 橋爪智 2鬼

Fingernail-Mounted Display of Attraction Force and Texture13Masataka Niwa Tomoko Nozaki Taro Maeda and Hideyuki And13

どのようなものか 指先に取り付けて触感と力を両方表現できるデバイス 先行研究と比べてどこがすごいか 触感と引力をそれぞれ表現するデバイスはあるが両方を一つのデバイスで表現した例は少ない 引力は自由な方向に付加することができる 技術や手法のキモ 偏心に重さを付けた円盤を4枚使用する 5-9Hz 引力　100-200Hz 触感 それぞれの円盤の位相や回転数を調整することで

触感と力 を表現する 4つのモータを使いそれぞれの円盤を独立して制御する 有用性の確認 4人の男性に対して実験80以上の精度で認識できた 関連論文 The nail-mounted attraction forcebump display [Nozaki et al 2008]

20150522 橋爪智 2 鬼

Gilded gait reshaping the urban experience with augmented footsteps13Yuichiro Takeuchi13

どのようなものか 靴に装着し地面の触感をコントロールするデバイス 先行研究と比べてどこがすごいか 単独で動作しなかったり特定の環境のみでしか動作しなかったりするrarr靴単体で動作環境に依存しない 技術や手法のキモ 6個の振動パネルを取り付けゲルでカバー app modulesを取り替えることができ様々な機能を付加できる（GPSsound) 4種類の地面を再現

bull  Hard Ground 振動させない bull  Soft Ground すべてのパネルを振動 bull  Bumpy Ground ジグザグに振動 bull  Godzilla 全てのパネルを振動何回か繰り返す 課題 モーターを使っているため波形をプログラミングできないrarr圧電素子を使用する 関連論文 Haptic Shoes [Fu et al 2010]

20150522 橋爪智 2鬼

ExoInterfaces novel exosceleton haptic interfaces for virtual reality augmented sport and rehabilitation

Dzmitry Tsetserukou Katsunari Sato Susumu Tachi13

どのようなものか 腕に装着し物理的なinteractionを可能にするデバイス 先行研究と比べてどこがすごいか Exoskeleton 力を増幅するためだが重たく危険なこともある String-based wireが視界をまたぐ動きに制限がある rarr腕の動きに制限を与えない安全 技術や手法のキモ 「FlexTorque」人間の筋肉の構造を再現するベルトとモーターを使用する肩の近くに装着することで

腕に負担がかかりにくい 触覚feedback弱いトルク 運動を支援強いトルク 課題 物理的な接触を表現するゲームやスポーツにより没頭させるリハビリのサポートをする視覚障害者の支援（ものの場所を教える） 関連論文 FlexTorque [Dzmitry et al 2010]

20150522 橋爪智 2 鬼

Perception of Ultrasonic Haptic Feedback on the Hand Localisation and Apparent Motion13

Graham Wilson Tom Carter Sriram Subramanian Stephen Brewster13

どのようなものか 超音波を用いた触覚フィードバック有効性の検討を行う 先行研究と比べてどこがすごいか 超音波触覚フィードバックは比較的新しく研究や操作方法に関する知識が少ない 腕を自由に動かすことができ小さいものは着用可能 技術や手法のキモ 88のアレイ状に超音波発生器を設置

有効性の確認 bull  局所的な触感 　　　25箇所に分割しそれぞれに超音波を当てる 　　　触感を感じた989 　　　場所の誤差85mm bull  手のひらを動く触感 上下左右に動く 　　　動いてると感じた629

20150522 橋爪智 2 鬼

Friction Measurements on a Large Area TPaD13Nicholas D Marchuk J Edward Colgate Michael A Peshkin13

どのようなものか 超音波の振動により触感を与える 先行研究と比べてどこがすごいか ガラス板を使うので透明後ろにディスプレイを配置可能 技術や手法のキモ 「Squeeze Film Effect（スクイズ膜効果）」 ガラス板に取り付けた圧電素子の円盤に高周波信号

をかける 実験 振動しない部分＝摩擦が発生しない部分が発生周波数により場所が変わる rarr摩擦を大きさをかける力の大きさから計測 rarr指の場所に合わせて複数の周波数を使い分ける 関連論文 T-PaD[Winfield et al 2007]

20150522 橋爪智 2 鬼

STIMTAC a Tactile Input Device with Programmable Friction13Michel Amberg Freacutedeacuteric Giraud Betty Semail Paolo Olivo Geacutery Casiez Nicolas Roussel13

どのようなものか 触感を与えられるタッチデバイス 先行研究と比べてどこがすごいか LATPaD サイズ大きいノイズが大きい TeslaTouch 高い電圧付加が必要GNDに接続しなければいけない

技術や手法のキモ 「Squeeze Film Effect」超音波を用いて振動を与える 圧電性セラミックを電極にコーディング 指トラッキングは力センサを用いる 活用法 マウスキーボード絵を描く 関連論文 LATPaD[Vincent et al 2011] TeslaTouch[Bau et al 2010]

20150522 橋爪智 2 鬼

Surround Haptics Tactile Feedback for Immersive Gaming Experiences Ali Israr Seung-Chan Kim Ivan Poupyrev Jan Stec13

どのようなものか ゲームに合わせて高解像度の触覚フィードバックをユーザーに与える椅子 先行研究と比べてどこがすごいか 荒く配置した安価な振動アクチュエータで高解像度の触覚フィードバックを行える 一点の振動連続した動き範囲の振動などを再現

技術や手法のキモ 仮想的な振動アクチュエータをいくつかの振動アクチュエータを使って作り出す physical-physicalphysical-virtualvirtual-virtual ゲームにHaptics Engineを導入しHaptics APIを用いてHaptic Displayを操作する 関連論文 Exploring Surround Haptics Displays[Israr et al 2010]

20150522 橋爪智 2 鬼

Audio-Haptic Feedback in Mobile Phones Angela Chang Conor OrsquoSullivan13

どのようなものか haptics機能のついてない携帯電話にオーディオ機能を利用した触覚フィードバックを追加する 先行研究と比べてどこがすごいか 簡単に作れてnon-haptic mobile devicesでも大丈夫 技術や手法のキモ 「MultiFunction Transducer(MFT)」 スピーカーから音と信号の両方を出力できる

bull  Haptic Inheritance 　　音を2つの周波数帯に分ける bull  Synthesis and Matching 　　低周波数帯(20-300Hz)を使い触感を伝える 有効性の検討 42人の人を対象に実験を行う83の人が触感を感じた

20150522 橋爪智 2 鬼

Resolution of Sleep Deprivation Problems using ZZZoo Pillows13Shunsuke Yanaka Motoki Ishida13

どのようなものか 近年不眠症の人が多い rarr誰かと接していると安心し睡眠に導入しやすくなる rarrまるで添い寝をしているようなリアルな抱きまくらを使う 技術や手法のキモ breathing sensation 風船を使って人の呼吸を再現肺の形の風船弱く長い呼吸をする

heating お湯を使って人の体温を再現45 有効性の確認 84人の人が実験 呼吸が睡眠を誘ったかrarr61 体温が睡眠を誘ったかrarr85 関連論文 The Impact of Sleep Disorders on Social Life[Komada et al 2007]

20150522 橋爪智 2 鬼

まとめ13超音波 モーター 風

20150522 橋爪智 2 鬼

コイル 電気刺激 Electrovibration

振動 音 お湯

なかの

Temporally Consistent Disparity and Optical Flow via Efficient Spatio-temporal Filtering1

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示した

議論論はあるか

時間的に一定の視差を算出する手法静止画ステレオよりも精度度が良良いことを示す従来よりも推定精度度が良良いオプティカルフローも算出する

一枚の静止画に対するフィルタリング[1]をステレオ動画に拡張している

ケンブリッジのステレオ動画のデータセットを利利用 実写動画に対する比較も行行うノイズ耐性も検証する

フィルタベースとエネルギーベースの関係性を良良り理理解することで推定精度度を上げる

実装が簡単でリアルタイム視差推定が可能

Fast Cost-Volume Filtering for Visual Correspondence and Beyond [Rhemann C Hosni A Bleyer M Rother C Gelautz M CVPR2011] Real-time Spatiotemporal Stereo Matching Using the Dual-Cross-Bilateral Grid [Richardt C Orr D Davies I Criminisi A Dodgson NA ECCV2010] Secrets of optical flow estimation and their principles [Sun D Roth S Black MJ 2010] Motion estimation with non-local total variation regularization [Werlberger M Pock T Bischof H CVPR2010] Temporally Consistent Disparity Maps from Uncalibrated Stereo Videos [Bleyer M Gelatuz M ISPA2011]

なかの

SymStereo Matching using Induced Symmetry (2014)2

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示した

議論論はあるか

画像の対称性を用いてステレオマッチングを行行う 左右の画像を反転させて重ね合わせることで対称性を測る

絵的な類似の代わりに対称性を使う今まで対称性を用いる手法はなく新規性が大きい

三つのSymmetry-baseの手法で精度度を検証従来手法よりも精度度が向上しているMiddlebury Oxford Corridorfountain-P11のデータセット使用

ステレオの問題である不不連続な箇所オクルージョン部分は未解決である演算時間はやや増加

1-Dラインのコストを考える今までは撮像面に対して平行行な平面でデプスを考えていたが垂直な平面を考える

BT[Birchfield and Tomasi 1998] Census transform[Zabih and Woodfill 1994] Log N[Kovesi 1997] radio-metoric differences[Hirschmuller Scharstein 2009]

なかの

Camouflaging an Object from Many Viewpoints3

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

多くの視点から三次元の物体をカモフラージュするカモフラージュによってオクルージョン部分の不不連続がどの程度度生じるか他の視点ではどれほどになるかの検証

MRF（Markov Random Fields）ベース

新しい三次元物体のカモフラージュモデルを構築 37種類のデータセットを作る

箱形の物体に対してカモフラージュ処理理を施し 結果を評価する

オクルージョン不不連続テクスチャの歪みが問題 照明や画像の貼りつけに制限あり

なかの

Aliasing Detection and Reduction in Plenoptic Imaging4

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

カメラアレイ撮影の角度度のエイリアシングを除去するエイリアシングの探索索と打ち消しを行行う

周波数領領域ではなく空間領領域で探索索を行行う

先行行研究がフィルタデモザイキング再パラメータ調整などの前処理理でエイリアシング除去を行行うのに対しエイリアシング探索索後にリフォーカスの段階でエイリアシングを取り除く

8times8の平行行カメラアレイで検証するカメラ間の 基線長は70mm

今回は基線長が長いデータセットを使った 次はLytroなどのマイクロレンズアレイで検証する

Globally consistent multi-label assignment on the ray space of 4d light fields [S Wanner C Straehle B Goldluecke CVPR2013] Lineassisted light field triangulation and stereo matching [Z Yu X Guo H Lin A Lumsdaine J Yu ICCV 2013]

なかの

Globally Consistent Multi-Label Assignment on the Ray Space of 4D Light Fields5

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

四次元ライトフィールドの光線情報において マルチラベルの領領域分割を行行う

深度度情報光線情報を用いて領領域分割することで 二次元（空間）情報だけでは分割が難しかった 領領域を分割可能とする

The light field camera Extended depth of field aliasing and superresolution [T Bishop P Favaro IEEE Transactions on Pattern Analysis and Machine Intelligence 2012]

なかの

Line Assisted Light Field Triangulation and Stereo Matching6

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

光線情報を利利用してステレオマッチングの精度度を 向上させる手法三角測量量の誤差を減らす

Light Field Stereo Matchingとかいう手法 グラフ構造を作成

Variational light field analysis for disparity estimation and super-resolution [S Wanner and B Goldlumluecke 2013]

なかの

Adaptive stereo similarity fusion using confidence measures 20157

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

ステレオマッチングの新しい方式fusion weightsを提案複数の手法を組み合わせてコスト計算を行行う手法付録に既存手法のコスト関数一覧あり

パラメータに依存する手法を用いないことで高速化を図っている

一つのアルゴリズムでは異異なる特性を持つ領領域全てに対して適切切なマッチングはできない複数を組み合わせることでそれを補う13種と多い

middleburyとKITTIのデータセットで評価

一枚あたり03sと高速だが001sとより高速なアルゴリズムが存在する

Segment-based stereo matching using belief propagation and a self-adapting dissimilarity measure [A Klaus M Sormann K Karner ICPR2006] On building an accurate stereo matching system on graphics hardware [X Mei X Sun M Zhou S Jiao H Wang X Zhang ICCV2011] Similarity measures for depth estimation [K Wegner O Stankiewicz 3DTV-CON2009] On accurate dense stereo-matching using a local adaptive multi-cost approach [C Stentoumis L Grammatikopoulos I Kalisperakis G Karras ISPRS2014] A quantitative evaluation of confidence measures for stereo vision [X Hu P Mordohai PAMI2012]

なかの

SIMILARITY MEASURE FOR DEPTH ESTIMATIOM 20098

どんなもの

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

4種類の視差推定アルゴリズムを組み合わせている 類似度度の選択性の解析

Belief Propagationの枠組みを用いる

名古屋大学の多視点データベースを利利用

HHI Test Material for 3D Video [I Feldmann M Muller F Zilly R Tanger A SmolicP Kauff T Wiegand 2008] Multiview Video Test Sequence and Camera Parameters [Yo-Sung Ho Eun-Kyung Lee and Cheon Lee 2008] 1D Parallel Test Sequences for MPEG-FTV [M Tanimoto T Fujii N Fukushima 2008] Non-parametric Local Transforms for Computing Visual Correspondence [R Zabih J Woodfill 1994]

なかの

Spatiotemporal Stereo via Spatiotemporal Quadric Element (Stequel) Matching9

どんなもの

技術や手法のキモはどこ

新しいマッチング手法を提案動き考慮することなく時間情報を取り込むことができる 時間方向のエピ線を考える

オプティカルフロー推定は3D境界や低テクスチャで弱いが提案手法はロバストである

なかの

Depth Video Enhancement Based on Weighted Mode Filtering10

どんなもの

議論論はある

ノイズを含んだ低解像度度のデプスマップの質を高める手法（超解像度度とデノイズ）時間方向も使用簡単なオプティカルフローを計算し利利用する

非反復復アルゴリズムのためGPUに載せやすく高速化が考えられる

なかの

Fast Bilateral-Space Stereo for Synthetic Defocus11

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

議論論はある

次に読むべき論論文は

高速な自由焦点ぼけ画像の作成

Bilateral-spaceを提案

従来研究よりも10から100倍速くぼけ具合の精度度も良良い

ぼけを作成するというアプリケーションに利利用する距離離という面では提案手法が有益であるが実測的な距離離という面での精度度は悪い背景と前景が同じ色で近くにある場合同一ととらえてしまう

Efficient high-resolution stereo matching using local plane sweeps [S N Sinha D Scharstein and R SzeliskiCVPR2014] Bilateral filtering-based optical flow estimation with occlusion detection [J Xiao H Cheng H Sawhney C Rao and M IsnardiECCV2006] Efficient nonlocal regularization for optical flow [P Krumlahenbumluhl and V KoltunECCV2012] Real-time spatiotemporal stereo matching using the dual-cross-bilateral grid [C Richardt D Orr I Davies A Criminisi and N A DodgsonECCV2010]

どうやって有効性を示した視差推定の精度度はmiddleburyKITTI

なかの

Robust Spatiotemporal Stereo for Dynamic Scenes12

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

ステレオ動画のフレーム間情報を取り入れることでノイズ耐性を向上させるまた動きの大きなものも考える

時間を含めたウインドウの提案自動的にそのような変化に対応する画像領領域を検出する

従来の時空間ステレオと比べ大きな動きによる急激な視差の時間変化に対して頑健である

なかの

Spacetime Stereo A Unifying Framework for Depth from Triangulation13

どんなもの

先行行研究と比べてどこがすごい

space time stereoを提案ステレオカメラの視差推定でも構造光を用いた視差推定でも利利用可能 動的なシーンでの利利用も可能

フレームごとマッチングを取っていたが複数フレームでのマッチングを可能とした

なかの

Learning to Select and Order Vacation Photographs (Disney research)14

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示したあまりにもたくさん撮影した写真たちから自動的にフォトアルバムを作成する研究

複雑な視覚での区別を試みたのはこの論論文が初

５つの異異なるトピックから63の個人的な写真コレクションのデータセットを利利用し定量量的に評価する

写真間の差別かを定義する顔全体の絵何が写っているか写っていないかを評価する

Jointly aligning and segmenting multiple web photo streams for the inference of collective photo storylines [G Kim and E P Xing CVPR2013] Photo sequencing [T Basha Y Moses and S Avidan CVPR2012]

なかの

A Taxonomy and Evaluation of Dense Two-Frame Stereo Correspondence Algorithms15

どんなもの

どうやって有効性を示した

次に読むべき論論文は

ステレオマッチングに関する分類を行行う 新たなデータセットを作成する

というよりも他の手法が有効性を示すことができるようにデータセットを作成した 今ではmiddleburyのデータセットと言えばステレオ業界では超有名

High-resolution stereo datasets with subpixel-accurate ground truth

なかの

Discriminability Limits in Spatio-Temporal Stereo Block Matching1

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

spatio-temporal disparity estimationの根本的な前提の正当性を解析しマッチング処理理の際に動きが助けとなる程度度を決定する

時空間マッチングのエラーを分析し誤りの原因を確率率率で導出する（フレーム数動きの分散画像特徴ノイズの関数）

[34243334]は時空間マッチングの利利点を指摘していたが本論論文はマッチング精度度の向上のために動きを用いる手法の程度度や性質を研究する

6つのステレオビデオを用いて検証を行行った

Spacetime stereo Shape recovery for dynamic scenes [L Zhang B Curless and S Seitz CVPR2003] Spatiotemporal stereo and scene flow via stequel matching [M Sizintsev and R Wildes PAMI2012] Temporally consistent disparity and optical flow via efficient spatio-temporal filtering [A Hosni C Rhemann M Bleyer and M Gelautz PRCAIVT2012] Spacetime stereo A unifying framework for depth from triangulation [PAMI2005] Dynamic depth recovery from multiple synchronized video streams [H Tao H Sawhney and R Kumar CVPR2001] Spatiotemporal descriptor for wide-baseline stereo reconstruction of non-rigid and ambiguous scenes [ECCV2003]

なかの

Depth-Based Patch Scaling for Content-Aware Stereo Image Completion2

どんなもの

どうやって有効性を示した

ステレオでデプスを取り物体の三次元情報を使ってインペインティングを行行う

bookのデータセット背景が繰り返しパターンが多いものを使っている

なかの

Fast Semi-dense Surface Reconstruction from Stereoscopic Video in Laparoscopic Surgery3

どんなもの

手法の流流れ

次に読むべき論論文は

腹腔内手術の際にステレオビデオから高速に物体の三次元再構成を行行う研究

Evaluation of stereo matching costs on images with radiometric differences [Hirschmueller H Scharstein D PAMI2008]

スコープカメラから画像取得GPUで演算する 視差を算出しフィルタにかける距離離に変換 点群を再びフィルタにかけて三次元再構成

なかの

3D Reconstruction from Accidental Motion4

どんなもの

技術や手法のキモはどこ

議論論はある

数秒のビデオ（単眼）から三次元再構成を行行う 手ぶれなどの動きから再構成が可能で特定の動きや機材を必要としない

短い基線長でも再構成が可能（3mmの基線長）

基線長が短いため背景の精度度が低くなる リフォーカス画像作成には十分 練習では上手く動作したが検証がまだ必要

なかの

Panoramic Video from Unstructured Camera Arrays5

どんなもの

技術や手法のキモはどこ

議論論はある

複数のカメラを用いたパノラマ撮影を行行う その際に不不自然さがないような動画を作成する

不不自然さを感じる感覚特性を提示しそれにのっとって対策を講じている

一つのカメラの解像度度と品質を向上させるよりも複数台のカメラを組み合わせることがはるかに簡単で有益である専門家でなくてもGoProのカメラセットを組み合わせることは容易易

カメラの配置は厳密に決められていない完璧な時間同期やローリングシャッターの不不足のような実撮影での問題もクリアしている

先行行研究と比べてどこがすごい

どうやって有効性を示した左のシステムは14台のカメラを使用 右のシステムはGoProを5台使用

Disney 201558

なかの

Floating Scale Surface Reconstruction6

どんなもの

技術や手法のキモはどこ

流流動的にスケールを変えられる三次元再構成手法

サンプル規模に依存するパラメータがない rarrどのスケールのサンプルにも対応できる

siggraph2014

なかの

A Super Resolution Reconstruction Scheme for Mixed Spatio-Temporal Stereo Video7

どんなもの

技術や手法のキモはどこ

ビデオ超解像アルゴリズム

二台のカメラを使用 一台は低解像度度で高速一台は高解像度度で低速

HHI 3DV ftp siteのBookarrivalとbeergadenを使用どうやって有効性を示した

なかの

What Is a Good Day for Outdoor Photometric Stereo8

どんなもの

先行行研究と比べてどこがすごい

議論論はある

次に読むべき論論文は

屋外における照度度差があるステレオの研究 屋外でステレオを行行う際に有利利or不不利利な日照条件を明らかにする

点光源を用いた研究は行行われていたが屋外での研究はされていなかった

晴れより曇りの方が精度度が良良い雲があるから特徴量量を取りやすい雑音を白色ガウスモデルを想定 季節ごとのデータセットを利利用してみても良良い

Time-lapse photometric stereo and applications [F Shen K Sunkavalli N Bonneel S Rusinkiewicz H Pfisterand X Tong2014] Outdoor photometric stereo [L-F Yu S-K Yeung Y-W Tai D Terzopoulos and T FChan ICCP2013]

どうやって有効性を示した屋外の照明に関するHDR環境マップのデータベースを利利用

Disney 2015424

なかの

COLORBRUSH ANIMATED DIFFUSION FOR INTUITIVE COLORIZATION SIMULATING WATER PAINTING 9

どんなものアニメを水彩画で描いたように変換する 水彩画を描くには経験が必要であるがそれを作成するアルゴリズムを考案絵具が水によりどうにじむかシュミレーションしている

Disney 20141027 ICIP2014

次に読むべき論論文はGabor-space geodesic active contoursrdquo In Algebraic Frames for the Perception-Action Cycle [C Sagiv NA Sochen and YY Zeevi 2000] Practical temporal consistency for image-based graphics applications [M Lang O Wang T Aydin A Smolic and M Gross SIGGRAPH2012] Computer-Generated Watercolor [CJ Curtis SE Anderson JE Seims KW Fleischer and DH Salesin SIGGRAPH1997]

なかの

From Sound to Sight Using Audio Processing to enable Visible Light Communication 10

どんなもの光に情報を載せる技術プロジェクトページがあって光関係の研究が8個載っている

httpwwwdisneyresearchcomprojectvisible-light-communication

ビデオのURL httpwwwdisneyresearchcomwpcontentuploadsPub_InvisibleLightCommunication_Siggraph14_videomp4

• 201211106_KeisukeKawahara
• 201311421_KeitaKanai_02
• 201313095_AkiraIshii_02
• 201413109_YuukiKubo_02
• 201513110_SatoshiHashizume_02
• 鬼輪講マラソン③_1
• 鬼輪講マラソン③_2

Fingernail-Mounted Display of Attraction Force and Texture13Masataka Niwa Tomoko Nozaki Taro Maeda and Hideyuki And13

どのようなものか 指先に取り付けて触感と力を両方表現できるデバイス 先行研究と比べてどこがすごいか 触感と引力をそれぞれ表現するデバイスはあるが両方を一つのデバイスで表現した例は少ない 引力は自由な方向に付加することができる 技術や手法のキモ 偏心に重さを付けた円盤を4枚使用する 5-9Hz 引力　100-200Hz 触感 それぞれの円盤の位相や回転数を調整することで

触感と力 を表現する 4つのモータを使いそれぞれの円盤を独立して制御する 有用性の確認 4人の男性に対して実験80以上の精度で認識できた 関連論文 The nail-mounted attraction forcebump display [Nozaki et al 2008]

20150522 橋爪智 2 鬼

Gilded gait reshaping the urban experience with augmented footsteps13Yuichiro Takeuchi13

どのようなものか 靴に装着し地面の触感をコントロールするデバイス 先行研究と比べてどこがすごいか 単独で動作しなかったり特定の環境のみでしか動作しなかったりするrarr靴単体で動作環境に依存しない 技術や手法のキモ 6個の振動パネルを取り付けゲルでカバー app modulesを取り替えることができ様々な機能を付加できる（GPSsound) 4種類の地面を再現

bull  Hard Ground 振動させない bull  Soft Ground すべてのパネルを振動 bull  Bumpy Ground ジグザグに振動 bull  Godzilla 全てのパネルを振動何回か繰り返す 課題 モーターを使っているため波形をプログラミングできないrarr圧電素子を使用する 関連論文 Haptic Shoes [Fu et al 2010]

20150522 橋爪智 2鬼

ExoInterfaces novel exosceleton haptic interfaces for virtual reality augmented sport and rehabilitation

Dzmitry Tsetserukou Katsunari Sato Susumu Tachi13

どのようなものか 腕に装着し物理的なinteractionを可能にするデバイス 先行研究と比べてどこがすごいか Exoskeleton 力を増幅するためだが重たく危険なこともある String-based wireが視界をまたぐ動きに制限がある rarr腕の動きに制限を与えない安全 技術や手法のキモ 「FlexTorque」人間の筋肉の構造を再現するベルトとモーターを使用する肩の近くに装着することで

腕に負担がかかりにくい 触覚feedback弱いトルク 運動を支援強いトルク 課題 物理的な接触を表現するゲームやスポーツにより没頭させるリハビリのサポートをする視覚障害者の支援（ものの場所を教える） 関連論文 FlexTorque [Dzmitry et al 2010]

20150522 橋爪智 2 鬼

Perception of Ultrasonic Haptic Feedback on the Hand Localisation and Apparent Motion13

Graham Wilson Tom Carter Sriram Subramanian Stephen Brewster13

どのようなものか 超音波を用いた触覚フィードバック有効性の検討を行う 先行研究と比べてどこがすごいか 超音波触覚フィードバックは比較的新しく研究や操作方法に関する知識が少ない 腕を自由に動かすことができ小さいものは着用可能 技術や手法のキモ 88のアレイ状に超音波発生器を設置

有効性の確認 bull  局所的な触感 　　　25箇所に分割しそれぞれに超音波を当てる 　　　触感を感じた989 　　　場所の誤差85mm bull  手のひらを動く触感 上下左右に動く 　　　動いてると感じた629

20150522 橋爪智 2 鬼

Friction Measurements on a Large Area TPaD13Nicholas D Marchuk J Edward Colgate Michael A Peshkin13

どのようなものか 超音波の振動により触感を与える 先行研究と比べてどこがすごいか ガラス板を使うので透明後ろにディスプレイを配置可能 技術や手法のキモ 「Squeeze Film Effect（スクイズ膜効果）」 ガラス板に取り付けた圧電素子の円盤に高周波信号

をかける 実験 振動しない部分＝摩擦が発生しない部分が発生周波数により場所が変わる rarr摩擦を大きさをかける力の大きさから計測 rarr指の場所に合わせて複数の周波数を使い分ける 関連論文 T-PaD[Winfield et al 2007]

20150522 橋爪智 2 鬼

STIMTAC a Tactile Input Device with Programmable Friction13Michel Amberg Freacutedeacuteric Giraud Betty Semail Paolo Olivo Geacutery Casiez Nicolas Roussel13

どのようなものか 触感を与えられるタッチデバイス 先行研究と比べてどこがすごいか LATPaD サイズ大きいノイズが大きい TeslaTouch 高い電圧付加が必要GNDに接続しなければいけない

技術や手法のキモ 「Squeeze Film Effect」超音波を用いて振動を与える 圧電性セラミックを電極にコーディング 指トラッキングは力センサを用いる 活用法 マウスキーボード絵を描く 関連論文 LATPaD[Vincent et al 2011] TeslaTouch[Bau et al 2010]

20150522 橋爪智 2 鬼

Surround Haptics Tactile Feedback for Immersive Gaming Experiences Ali Israr Seung-Chan Kim Ivan Poupyrev Jan Stec13

どのようなものか ゲームに合わせて高解像度の触覚フィードバックをユーザーに与える椅子 先行研究と比べてどこがすごいか 荒く配置した安価な振動アクチュエータで高解像度の触覚フィードバックを行える 一点の振動連続した動き範囲の振動などを再現

技術や手法のキモ 仮想的な振動アクチュエータをいくつかの振動アクチュエータを使って作り出す physical-physicalphysical-virtualvirtual-virtual ゲームにHaptics Engineを導入しHaptics APIを用いてHaptic Displayを操作する 関連論文 Exploring Surround Haptics Displays[Israr et al 2010]

20150522 橋爪智 2 鬼

Audio-Haptic Feedback in Mobile Phones Angela Chang Conor OrsquoSullivan13

どのようなものか haptics機能のついてない携帯電話にオーディオ機能を利用した触覚フィードバックを追加する 先行研究と比べてどこがすごいか 簡単に作れてnon-haptic mobile devicesでも大丈夫 技術や手法のキモ 「MultiFunction Transducer(MFT)」 スピーカーから音と信号の両方を出力できる

bull  Haptic Inheritance 　　音を2つの周波数帯に分ける bull  Synthesis and Matching 　　低周波数帯(20-300Hz)を使い触感を伝える 有効性の検討 42人の人を対象に実験を行う83の人が触感を感じた

20150522 橋爪智 2 鬼

Resolution of Sleep Deprivation Problems using ZZZoo Pillows13Shunsuke Yanaka Motoki Ishida13

どのようなものか 近年不眠症の人が多い rarr誰かと接していると安心し睡眠に導入しやすくなる rarrまるで添い寝をしているようなリアルな抱きまくらを使う 技術や手法のキモ breathing sensation 風船を使って人の呼吸を再現肺の形の風船弱く長い呼吸をする

heating お湯を使って人の体温を再現45 有効性の確認 84人の人が実験 呼吸が睡眠を誘ったかrarr61 体温が睡眠を誘ったかrarr85 関連論文 The Impact of Sleep Disorders on Social Life[Komada et al 2007]

20150522 橋爪智 2 鬼

まとめ13超音波 モーター 風

20150522 橋爪智 2 鬼

コイル 電気刺激 Electrovibration

振動 音 お湯

なかの

Temporally Consistent Disparity and Optical Flow via Efficient Spatio-temporal Filtering1

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示した

議論論はあるか

時間的に一定の視差を算出する手法静止画ステレオよりも精度度が良良いことを示す従来よりも推定精度度が良良いオプティカルフローも算出する

一枚の静止画に対するフィルタリング[1]をステレオ動画に拡張している

ケンブリッジのステレオ動画のデータセットを利利用 実写動画に対する比較も行行うノイズ耐性も検証する

フィルタベースとエネルギーベースの関係性を良良り理理解することで推定精度度を上げる

実装が簡単でリアルタイム視差推定が可能

Fast Cost-Volume Filtering for Visual Correspondence and Beyond [Rhemann C Hosni A Bleyer M Rother C Gelautz M CVPR2011] Real-time Spatiotemporal Stereo Matching Using the Dual-Cross-Bilateral Grid [Richardt C Orr D Davies I Criminisi A Dodgson NA ECCV2010] Secrets of optical flow estimation and their principles [Sun D Roth S Black MJ 2010] Motion estimation with non-local total variation regularization [Werlberger M Pock T Bischof H CVPR2010] Temporally Consistent Disparity Maps from Uncalibrated Stereo Videos [Bleyer M Gelatuz M ISPA2011]

なかの

SymStereo Matching using Induced Symmetry (2014)2

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示した

議論論はあるか

画像の対称性を用いてステレオマッチングを行行う 左右の画像を反転させて重ね合わせることで対称性を測る

絵的な類似の代わりに対称性を使う今まで対称性を用いる手法はなく新規性が大きい

三つのSymmetry-baseの手法で精度度を検証従来手法よりも精度度が向上しているMiddlebury Oxford Corridorfountain-P11のデータセット使用

ステレオの問題である不不連続な箇所オクルージョン部分は未解決である演算時間はやや増加

1-Dラインのコストを考える今までは撮像面に対して平行行な平面でデプスを考えていたが垂直な平面を考える

BT[Birchfield and Tomasi 1998] Census transform[Zabih and Woodfill 1994] Log N[Kovesi 1997] radio-metoric differences[Hirschmuller Scharstein 2009]

なかの

Camouflaging an Object from Many Viewpoints3

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

多くの視点から三次元の物体をカモフラージュするカモフラージュによってオクルージョン部分の不不連続がどの程度度生じるか他の視点ではどれほどになるかの検証

MRF（Markov Random Fields）ベース

新しい三次元物体のカモフラージュモデルを構築 37種類のデータセットを作る

箱形の物体に対してカモフラージュ処理理を施し 結果を評価する

オクルージョン不不連続テクスチャの歪みが問題 照明や画像の貼りつけに制限あり

なかの

Aliasing Detection and Reduction in Plenoptic Imaging4

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

カメラアレイ撮影の角度度のエイリアシングを除去するエイリアシングの探索索と打ち消しを行行う

周波数領領域ではなく空間領領域で探索索を行行う

先行行研究がフィルタデモザイキング再パラメータ調整などの前処理理でエイリアシング除去を行行うのに対しエイリアシング探索索後にリフォーカスの段階でエイリアシングを取り除く

8times8の平行行カメラアレイで検証するカメラ間の 基線長は70mm

今回は基線長が長いデータセットを使った 次はLytroなどのマイクロレンズアレイで検証する

Globally consistent multi-label assignment on the ray space of 4d light fields [S Wanner C Straehle B Goldluecke CVPR2013] Lineassisted light field triangulation and stereo matching [Z Yu X Guo H Lin A Lumsdaine J Yu ICCV 2013]

なかの

Globally Consistent Multi-Label Assignment on the Ray Space of 4D Light Fields5

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

四次元ライトフィールドの光線情報において マルチラベルの領領域分割を行行う

深度度情報光線情報を用いて領領域分割することで 二次元（空間）情報だけでは分割が難しかった 領領域を分割可能とする

The light field camera Extended depth of field aliasing and superresolution [T Bishop P Favaro IEEE Transactions on Pattern Analysis and Machine Intelligence 2012]

なかの

Line Assisted Light Field Triangulation and Stereo Matching6

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

光線情報を利利用してステレオマッチングの精度度を 向上させる手法三角測量量の誤差を減らす

Light Field Stereo Matchingとかいう手法 グラフ構造を作成

Variational light field analysis for disparity estimation and super-resolution [S Wanner and B Goldlumluecke 2013]

なかの

Adaptive stereo similarity fusion using confidence measures 20157

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

ステレオマッチングの新しい方式fusion weightsを提案複数の手法を組み合わせてコスト計算を行行う手法付録に既存手法のコスト関数一覧あり

パラメータに依存する手法を用いないことで高速化を図っている

一つのアルゴリズムでは異異なる特性を持つ領領域全てに対して適切切なマッチングはできない複数を組み合わせることでそれを補う13種と多い

middleburyとKITTIのデータセットで評価

一枚あたり03sと高速だが001sとより高速なアルゴリズムが存在する

Segment-based stereo matching using belief propagation and a self-adapting dissimilarity measure [A Klaus M Sormann K Karner ICPR2006] On building an accurate stereo matching system on graphics hardware [X Mei X Sun M Zhou S Jiao H Wang X Zhang ICCV2011] Similarity measures for depth estimation [K Wegner O Stankiewicz 3DTV-CON2009] On accurate dense stereo-matching using a local adaptive multi-cost approach [C Stentoumis L Grammatikopoulos I Kalisperakis G Karras ISPRS2014] A quantitative evaluation of confidence measures for stereo vision [X Hu P Mordohai PAMI2012]

なかの

SIMILARITY MEASURE FOR DEPTH ESTIMATIOM 20098

どんなもの

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

4種類の視差推定アルゴリズムを組み合わせている 類似度度の選択性の解析

Belief Propagationの枠組みを用いる

名古屋大学の多視点データベースを利利用

HHI Test Material for 3D Video [I Feldmann M Muller F Zilly R Tanger A SmolicP Kauff T Wiegand 2008] Multiview Video Test Sequence and Camera Parameters [Yo-Sung Ho Eun-Kyung Lee and Cheon Lee 2008] 1D Parallel Test Sequences for MPEG-FTV [M Tanimoto T Fujii N Fukushima 2008] Non-parametric Local Transforms for Computing Visual Correspondence [R Zabih J Woodfill 1994]

なかの

Spatiotemporal Stereo via Spatiotemporal Quadric Element (Stequel) Matching9

どんなもの

技術や手法のキモはどこ

新しいマッチング手法を提案動き考慮することなく時間情報を取り込むことができる 時間方向のエピ線を考える

オプティカルフロー推定は3D境界や低テクスチャで弱いが提案手法はロバストである

なかの

Depth Video Enhancement Based on Weighted Mode Filtering10

どんなもの

議論論はある

ノイズを含んだ低解像度度のデプスマップの質を高める手法（超解像度度とデノイズ）時間方向も使用簡単なオプティカルフローを計算し利利用する

非反復復アルゴリズムのためGPUに載せやすく高速化が考えられる

なかの

Fast Bilateral-Space Stereo for Synthetic Defocus11

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

議論論はある

次に読むべき論論文は

高速な自由焦点ぼけ画像の作成

Bilateral-spaceを提案

従来研究よりも10から100倍速くぼけ具合の精度度も良良い

ぼけを作成するというアプリケーションに利利用する距離離という面では提案手法が有益であるが実測的な距離離という面での精度度は悪い背景と前景が同じ色で近くにある場合同一ととらえてしまう

Efficient high-resolution stereo matching using local plane sweeps [S N Sinha D Scharstein and R SzeliskiCVPR2014] Bilateral filtering-based optical flow estimation with occlusion detection [J Xiao H Cheng H Sawhney C Rao and M IsnardiECCV2006] Efficient nonlocal regularization for optical flow [P Krumlahenbumluhl and V KoltunECCV2012] Real-time spatiotemporal stereo matching using the dual-cross-bilateral grid [C Richardt D Orr I Davies A Criminisi and N A DodgsonECCV2010]

どうやって有効性を示した視差推定の精度度はmiddleburyKITTI

なかの

Robust Spatiotemporal Stereo for Dynamic Scenes12

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

ステレオ動画のフレーム間情報を取り入れることでノイズ耐性を向上させるまた動きの大きなものも考える

時間を含めたウインドウの提案自動的にそのような変化に対応する画像領領域を検出する

従来の時空間ステレオと比べ大きな動きによる急激な視差の時間変化に対して頑健である

なかの

Spacetime Stereo A Unifying Framework for Depth from Triangulation13

どんなもの

先行行研究と比べてどこがすごい

space time stereoを提案ステレオカメラの視差推定でも構造光を用いた視差推定でも利利用可能 動的なシーンでの利利用も可能

フレームごとマッチングを取っていたが複数フレームでのマッチングを可能とした

なかの

Learning to Select and Order Vacation Photographs (Disney research)14

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示したあまりにもたくさん撮影した写真たちから自動的にフォトアルバムを作成する研究

複雑な視覚での区別を試みたのはこの論論文が初

５つの異異なるトピックから63の個人的な写真コレクションのデータセットを利利用し定量量的に評価する

写真間の差別かを定義する顔全体の絵何が写っているか写っていないかを評価する

Jointly aligning and segmenting multiple web photo streams for the inference of collective photo storylines [G Kim and E P Xing CVPR2013] Photo sequencing [T Basha Y Moses and S Avidan CVPR2012]

なかの

A Taxonomy and Evaluation of Dense Two-Frame Stereo Correspondence Algorithms15

どんなもの

どうやって有効性を示した

次に読むべき論論文は

ステレオマッチングに関する分類を行行う 新たなデータセットを作成する

というよりも他の手法が有効性を示すことができるようにデータセットを作成した 今ではmiddleburyのデータセットと言えばステレオ業界では超有名

High-resolution stereo datasets with subpixel-accurate ground truth

なかの

Discriminability Limits in Spatio-Temporal Stereo Block Matching1

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

spatio-temporal disparity estimationの根本的な前提の正当性を解析しマッチング処理理の際に動きが助けとなる程度度を決定する

時空間マッチングのエラーを分析し誤りの原因を確率率率で導出する（フレーム数動きの分散画像特徴ノイズの関数）

[34243334]は時空間マッチングの利利点を指摘していたが本論論文はマッチング精度度の向上のために動きを用いる手法の程度度や性質を研究する

6つのステレオビデオを用いて検証を行行った

Spacetime stereo Shape recovery for dynamic scenes [L Zhang B Curless and S Seitz CVPR2003] Spatiotemporal stereo and scene flow via stequel matching [M Sizintsev and R Wildes PAMI2012] Temporally consistent disparity and optical flow via efficient spatio-temporal filtering [A Hosni C Rhemann M Bleyer and M Gelautz PRCAIVT2012] Spacetime stereo A unifying framework for depth from triangulation [PAMI2005] Dynamic depth recovery from multiple synchronized video streams [H Tao H Sawhney and R Kumar CVPR2001] Spatiotemporal descriptor for wide-baseline stereo reconstruction of non-rigid and ambiguous scenes [ECCV2003]

なかの

Depth-Based Patch Scaling for Content-Aware Stereo Image Completion2

どんなもの

どうやって有効性を示した

ステレオでデプスを取り物体の三次元情報を使ってインペインティングを行行う

bookのデータセット背景が繰り返しパターンが多いものを使っている

なかの

Fast Semi-dense Surface Reconstruction from Stereoscopic Video in Laparoscopic Surgery3

どんなもの

手法の流流れ

次に読むべき論論文は

腹腔内手術の際にステレオビデオから高速に物体の三次元再構成を行行う研究

Evaluation of stereo matching costs on images with radiometric differences [Hirschmueller H Scharstein D PAMI2008]

スコープカメラから画像取得GPUで演算する 視差を算出しフィルタにかける距離離に変換 点群を再びフィルタにかけて三次元再構成

なかの

3D Reconstruction from Accidental Motion4

どんなもの

技術や手法のキモはどこ

議論論はある

数秒のビデオ（単眼）から三次元再構成を行行う 手ぶれなどの動きから再構成が可能で特定の動きや機材を必要としない

短い基線長でも再構成が可能（3mmの基線長）

基線長が短いため背景の精度度が低くなる リフォーカス画像作成には十分 練習では上手く動作したが検証がまだ必要

なかの

Panoramic Video from Unstructured Camera Arrays5

どんなもの

技術や手法のキモはどこ

議論論はある

複数のカメラを用いたパノラマ撮影を行行う その際に不不自然さがないような動画を作成する

不不自然さを感じる感覚特性を提示しそれにのっとって対策を講じている

一つのカメラの解像度度と品質を向上させるよりも複数台のカメラを組み合わせることがはるかに簡単で有益である専門家でなくてもGoProのカメラセットを組み合わせることは容易易

カメラの配置は厳密に決められていない完璧な時間同期やローリングシャッターの不不足のような実撮影での問題もクリアしている

先行行研究と比べてどこがすごい

どうやって有効性を示した左のシステムは14台のカメラを使用 右のシステムはGoProを5台使用

Disney 201558

なかの

Floating Scale Surface Reconstruction6

どんなもの

技術や手法のキモはどこ

流流動的にスケールを変えられる三次元再構成手法

サンプル規模に依存するパラメータがない rarrどのスケールのサンプルにも対応できる

siggraph2014

なかの

A Super Resolution Reconstruction Scheme for Mixed Spatio-Temporal Stereo Video7

どんなもの

技術や手法のキモはどこ

ビデオ超解像アルゴリズム

二台のカメラを使用 一台は低解像度度で高速一台は高解像度度で低速

HHI 3DV ftp siteのBookarrivalとbeergadenを使用どうやって有効性を示した

なかの

What Is a Good Day for Outdoor Photometric Stereo8

どんなもの

先行行研究と比べてどこがすごい

議論論はある

次に読むべき論論文は

屋外における照度度差があるステレオの研究 屋外でステレオを行行う際に有利利or不不利利な日照条件を明らかにする

点光源を用いた研究は行行われていたが屋外での研究はされていなかった

晴れより曇りの方が精度度が良良い雲があるから特徴量量を取りやすい雑音を白色ガウスモデルを想定 季節ごとのデータセットを利利用してみても良良い

Time-lapse photometric stereo and applications [F Shen K Sunkavalli N Bonneel S Rusinkiewicz H Pfisterand X Tong2014] Outdoor photometric stereo [L-F Yu S-K Yeung Y-W Tai D Terzopoulos and T FChan ICCP2013]

どうやって有効性を示した屋外の照明に関するHDR環境マップのデータベースを利利用

Disney 2015424

なかの

COLORBRUSH ANIMATED DIFFUSION FOR INTUITIVE COLORIZATION SIMULATING WATER PAINTING 9

どんなものアニメを水彩画で描いたように変換する 水彩画を描くには経験が必要であるがそれを作成するアルゴリズムを考案絵具が水によりどうにじむかシュミレーションしている

Disney 20141027 ICIP2014

次に読むべき論論文はGabor-space geodesic active contoursrdquo In Algebraic Frames for the Perception-Action Cycle [C Sagiv NA Sochen and YY Zeevi 2000] Practical temporal consistency for image-based graphics applications [M Lang O Wang T Aydin A Smolic and M Gross SIGGRAPH2012] Computer-Generated Watercolor [CJ Curtis SE Anderson JE Seims KW Fleischer and DH Salesin SIGGRAPH1997]

なかの

From Sound to Sight Using Audio Processing to enable Visible Light Communication 10

どんなもの光に情報を載せる技術プロジェクトページがあって光関係の研究が8個載っている

httpwwwdisneyresearchcomprojectvisible-light-communication

ビデオのURL httpwwwdisneyresearchcomwpcontentuploadsPub_InvisibleLightCommunication_Siggraph14_videomp4

• 201211106_KeisukeKawahara
• 201311421_KeitaKanai_02
• 201313095_AkiraIshii_02
• 201413109_YuukiKubo_02
• 201513110_SatoshiHashizume_02
• 鬼輪講マラソン③_1
• 鬼輪講マラソン③_2

Gilded gait reshaping the urban experience with augmented footsteps13Yuichiro Takeuchi13

どのようなものか 靴に装着し地面の触感をコントロールするデバイス 先行研究と比べてどこがすごいか 単独で動作しなかったり特定の環境のみでしか動作しなかったりするrarr靴単体で動作環境に依存しない 技術や手法のキモ 6個の振動パネルを取り付けゲルでカバー app modulesを取り替えることができ様々な機能を付加できる（GPSsound) 4種類の地面を再現

bull  Hard Ground 振動させない bull  Soft Ground すべてのパネルを振動 bull  Bumpy Ground ジグザグに振動 bull  Godzilla 全てのパネルを振動何回か繰り返す 課題 モーターを使っているため波形をプログラミングできないrarr圧電素子を使用する 関連論文 Haptic Shoes [Fu et al 2010]

20150522 橋爪智 2鬼

ExoInterfaces novel exosceleton haptic interfaces for virtual reality augmented sport and rehabilitation

Dzmitry Tsetserukou Katsunari Sato Susumu Tachi13

どのようなものか 腕に装着し物理的なinteractionを可能にするデバイス 先行研究と比べてどこがすごいか Exoskeleton 力を増幅するためだが重たく危険なこともある String-based wireが視界をまたぐ動きに制限がある rarr腕の動きに制限を与えない安全 技術や手法のキモ 「FlexTorque」人間の筋肉の構造を再現するベルトとモーターを使用する肩の近くに装着することで

腕に負担がかかりにくい 触覚feedback弱いトルク 運動を支援強いトルク 課題 物理的な接触を表現するゲームやスポーツにより没頭させるリハビリのサポートをする視覚障害者の支援（ものの場所を教える） 関連論文 FlexTorque [Dzmitry et al 2010]

20150522 橋爪智 2 鬼

Perception of Ultrasonic Haptic Feedback on the Hand Localisation and Apparent Motion13

Graham Wilson Tom Carter Sriram Subramanian Stephen Brewster13

どのようなものか 超音波を用いた触覚フィードバック有効性の検討を行う 先行研究と比べてどこがすごいか 超音波触覚フィードバックは比較的新しく研究や操作方法に関する知識が少ない 腕を自由に動かすことができ小さいものは着用可能 技術や手法のキモ 88のアレイ状に超音波発生器を設置

有効性の確認 bull  局所的な触感 　　　25箇所に分割しそれぞれに超音波を当てる 　　　触感を感じた989 　　　場所の誤差85mm bull  手のひらを動く触感 上下左右に動く 　　　動いてると感じた629

20150522 橋爪智 2 鬼

Friction Measurements on a Large Area TPaD13Nicholas D Marchuk J Edward Colgate Michael A Peshkin13

どのようなものか 超音波の振動により触感を与える 先行研究と比べてどこがすごいか ガラス板を使うので透明後ろにディスプレイを配置可能 技術や手法のキモ 「Squeeze Film Effect（スクイズ膜効果）」 ガラス板に取り付けた圧電素子の円盤に高周波信号

をかける 実験 振動しない部分＝摩擦が発生しない部分が発生周波数により場所が変わる rarr摩擦を大きさをかける力の大きさから計測 rarr指の場所に合わせて複数の周波数を使い分ける 関連論文 T-PaD[Winfield et al 2007]

20150522 橋爪智 2 鬼

STIMTAC a Tactile Input Device with Programmable Friction13Michel Amberg Freacutedeacuteric Giraud Betty Semail Paolo Olivo Geacutery Casiez Nicolas Roussel13

どのようなものか 触感を与えられるタッチデバイス 先行研究と比べてどこがすごいか LATPaD サイズ大きいノイズが大きい TeslaTouch 高い電圧付加が必要GNDに接続しなければいけない

技術や手法のキモ 「Squeeze Film Effect」超音波を用いて振動を与える 圧電性セラミックを電極にコーディング 指トラッキングは力センサを用いる 活用法 マウスキーボード絵を描く 関連論文 LATPaD[Vincent et al 2011] TeslaTouch[Bau et al 2010]

20150522 橋爪智 2 鬼

Surround Haptics Tactile Feedback for Immersive Gaming Experiences Ali Israr Seung-Chan Kim Ivan Poupyrev Jan Stec13

どのようなものか ゲームに合わせて高解像度の触覚フィードバックをユーザーに与える椅子 先行研究と比べてどこがすごいか 荒く配置した安価な振動アクチュエータで高解像度の触覚フィードバックを行える 一点の振動連続した動き範囲の振動などを再現

技術や手法のキモ 仮想的な振動アクチュエータをいくつかの振動アクチュエータを使って作り出す physical-physicalphysical-virtualvirtual-virtual ゲームにHaptics Engineを導入しHaptics APIを用いてHaptic Displayを操作する 関連論文 Exploring Surround Haptics Displays[Israr et al 2010]

20150522 橋爪智 2 鬼

Audio-Haptic Feedback in Mobile Phones Angela Chang Conor OrsquoSullivan13

どのようなものか haptics機能のついてない携帯電話にオーディオ機能を利用した触覚フィードバックを追加する 先行研究と比べてどこがすごいか 簡単に作れてnon-haptic mobile devicesでも大丈夫 技術や手法のキモ 「MultiFunction Transducer(MFT)」 スピーカーから音と信号の両方を出力できる

bull  Haptic Inheritance 　　音を2つの周波数帯に分ける bull  Synthesis and Matching 　　低周波数帯(20-300Hz)を使い触感を伝える 有効性の検討 42人の人を対象に実験を行う83の人が触感を感じた

20150522 橋爪智 2 鬼

Resolution of Sleep Deprivation Problems using ZZZoo Pillows13Shunsuke Yanaka Motoki Ishida13

どのようなものか 近年不眠症の人が多い rarr誰かと接していると安心し睡眠に導入しやすくなる rarrまるで添い寝をしているようなリアルな抱きまくらを使う 技術や手法のキモ breathing sensation 風船を使って人の呼吸を再現肺の形の風船弱く長い呼吸をする

heating お湯を使って人の体温を再現45 有効性の確認 84人の人が実験 呼吸が睡眠を誘ったかrarr61 体温が睡眠を誘ったかrarr85 関連論文 The Impact of Sleep Disorders on Social Life[Komada et al 2007]

20150522 橋爪智 2 鬼

まとめ13超音波 モーター 風

20150522 橋爪智 2 鬼

コイル 電気刺激 Electrovibration

振動 音 お湯

なかの

Temporally Consistent Disparity and Optical Flow via Efficient Spatio-temporal Filtering1

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示した

議論論はあるか

時間的に一定の視差を算出する手法静止画ステレオよりも精度度が良良いことを示す従来よりも推定精度度が良良いオプティカルフローも算出する

一枚の静止画に対するフィルタリング[1]をステレオ動画に拡張している

ケンブリッジのステレオ動画のデータセットを利利用 実写動画に対する比較も行行うノイズ耐性も検証する

フィルタベースとエネルギーベースの関係性を良良り理理解することで推定精度度を上げる

実装が簡単でリアルタイム視差推定が可能

Fast Cost-Volume Filtering for Visual Correspondence and Beyond [Rhemann C Hosni A Bleyer M Rother C Gelautz M CVPR2011] Real-time Spatiotemporal Stereo Matching Using the Dual-Cross-Bilateral Grid [Richardt C Orr D Davies I Criminisi A Dodgson NA ECCV2010] Secrets of optical flow estimation and their principles [Sun D Roth S Black MJ 2010] Motion estimation with non-local total variation regularization [Werlberger M Pock T Bischof H CVPR2010] Temporally Consistent Disparity Maps from Uncalibrated Stereo Videos [Bleyer M Gelatuz M ISPA2011]

なかの

SymStereo Matching using Induced Symmetry (2014)2

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示した

議論論はあるか

画像の対称性を用いてステレオマッチングを行行う 左右の画像を反転させて重ね合わせることで対称性を測る

絵的な類似の代わりに対称性を使う今まで対称性を用いる手法はなく新規性が大きい

三つのSymmetry-baseの手法で精度度を検証従来手法よりも精度度が向上しているMiddlebury Oxford Corridorfountain-P11のデータセット使用

ステレオの問題である不不連続な箇所オクルージョン部分は未解決である演算時間はやや増加

1-Dラインのコストを考える今までは撮像面に対して平行行な平面でデプスを考えていたが垂直な平面を考える

BT[Birchfield and Tomasi 1998] Census transform[Zabih and Woodfill 1994] Log N[Kovesi 1997] radio-metoric differences[Hirschmuller Scharstein 2009]

なかの

Camouflaging an Object from Many Viewpoints3

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

多くの視点から三次元の物体をカモフラージュするカモフラージュによってオクルージョン部分の不不連続がどの程度度生じるか他の視点ではどれほどになるかの検証

MRF（Markov Random Fields）ベース

新しい三次元物体のカモフラージュモデルを構築 37種類のデータセットを作る

箱形の物体に対してカモフラージュ処理理を施し 結果を評価する

オクルージョン不不連続テクスチャの歪みが問題 照明や画像の貼りつけに制限あり

なかの

Aliasing Detection and Reduction in Plenoptic Imaging4

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

カメラアレイ撮影の角度度のエイリアシングを除去するエイリアシングの探索索と打ち消しを行行う

周波数領領域ではなく空間領領域で探索索を行行う

先行行研究がフィルタデモザイキング再パラメータ調整などの前処理理でエイリアシング除去を行行うのに対しエイリアシング探索索後にリフォーカスの段階でエイリアシングを取り除く

8times8の平行行カメラアレイで検証するカメラ間の 基線長は70mm

今回は基線長が長いデータセットを使った 次はLytroなどのマイクロレンズアレイで検証する

Globally consistent multi-label assignment on the ray space of 4d light fields [S Wanner C Straehle B Goldluecke CVPR2013] Lineassisted light field triangulation and stereo matching [Z Yu X Guo H Lin A Lumsdaine J Yu ICCV 2013]

なかの

Globally Consistent Multi-Label Assignment on the Ray Space of 4D Light Fields5

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

四次元ライトフィールドの光線情報において マルチラベルの領領域分割を行行う

深度度情報光線情報を用いて領領域分割することで 二次元（空間）情報だけでは分割が難しかった 領領域を分割可能とする

The light field camera Extended depth of field aliasing and superresolution [T Bishop P Favaro IEEE Transactions on Pattern Analysis and Machine Intelligence 2012]

なかの

Line Assisted Light Field Triangulation and Stereo Matching6

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

光線情報を利利用してステレオマッチングの精度度を 向上させる手法三角測量量の誤差を減らす

Light Field Stereo Matchingとかいう手法 グラフ構造を作成

Variational light field analysis for disparity estimation and super-resolution [S Wanner and B Goldlumluecke 2013]

なかの

Adaptive stereo similarity fusion using confidence measures 20157

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

ステレオマッチングの新しい方式fusion weightsを提案複数の手法を組み合わせてコスト計算を行行う手法付録に既存手法のコスト関数一覧あり

パラメータに依存する手法を用いないことで高速化を図っている

一つのアルゴリズムでは異異なる特性を持つ領領域全てに対して適切切なマッチングはできない複数を組み合わせることでそれを補う13種と多い

middleburyとKITTIのデータセットで評価

一枚あたり03sと高速だが001sとより高速なアルゴリズムが存在する

Segment-based stereo matching using belief propagation and a self-adapting dissimilarity measure [A Klaus M Sormann K Karner ICPR2006] On building an accurate stereo matching system on graphics hardware [X Mei X Sun M Zhou S Jiao H Wang X Zhang ICCV2011] Similarity measures for depth estimation [K Wegner O Stankiewicz 3DTV-CON2009] On accurate dense stereo-matching using a local adaptive multi-cost approach [C Stentoumis L Grammatikopoulos I Kalisperakis G Karras ISPRS2014] A quantitative evaluation of confidence measures for stereo vision [X Hu P Mordohai PAMI2012]

なかの

SIMILARITY MEASURE FOR DEPTH ESTIMATIOM 20098

どんなもの

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

4種類の視差推定アルゴリズムを組み合わせている 類似度度の選択性の解析

Belief Propagationの枠組みを用いる

名古屋大学の多視点データベースを利利用

HHI Test Material for 3D Video [I Feldmann M Muller F Zilly R Tanger A SmolicP Kauff T Wiegand 2008] Multiview Video Test Sequence and Camera Parameters [Yo-Sung Ho Eun-Kyung Lee and Cheon Lee 2008] 1D Parallel Test Sequences for MPEG-FTV [M Tanimoto T Fujii N Fukushima 2008] Non-parametric Local Transforms for Computing Visual Correspondence [R Zabih J Woodfill 1994]

なかの

Spatiotemporal Stereo via Spatiotemporal Quadric Element (Stequel) Matching9

どんなもの

技術や手法のキモはどこ

新しいマッチング手法を提案動き考慮することなく時間情報を取り込むことができる 時間方向のエピ線を考える

オプティカルフロー推定は3D境界や低テクスチャで弱いが提案手法はロバストである

なかの

Depth Video Enhancement Based on Weighted Mode Filtering10

どんなもの

議論論はある

ノイズを含んだ低解像度度のデプスマップの質を高める手法（超解像度度とデノイズ）時間方向も使用簡単なオプティカルフローを計算し利利用する

非反復復アルゴリズムのためGPUに載せやすく高速化が考えられる

なかの

Fast Bilateral-Space Stereo for Synthetic Defocus11

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

議論論はある

次に読むべき論論文は

高速な自由焦点ぼけ画像の作成

Bilateral-spaceを提案

従来研究よりも10から100倍速くぼけ具合の精度度も良良い

ぼけを作成するというアプリケーションに利利用する距離離という面では提案手法が有益であるが実測的な距離離という面での精度度は悪い背景と前景が同じ色で近くにある場合同一ととらえてしまう

Efficient high-resolution stereo matching using local plane sweeps [S N Sinha D Scharstein and R SzeliskiCVPR2014] Bilateral filtering-based optical flow estimation with occlusion detection [J Xiao H Cheng H Sawhney C Rao and M IsnardiECCV2006] Efficient nonlocal regularization for optical flow [P Krumlahenbumluhl and V KoltunECCV2012] Real-time spatiotemporal stereo matching using the dual-cross-bilateral grid [C Richardt D Orr I Davies A Criminisi and N A DodgsonECCV2010]

どうやって有効性を示した視差推定の精度度はmiddleburyKITTI

なかの

Robust Spatiotemporal Stereo for Dynamic Scenes12

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

ステレオ動画のフレーム間情報を取り入れることでノイズ耐性を向上させるまた動きの大きなものも考える

時間を含めたウインドウの提案自動的にそのような変化に対応する画像領領域を検出する

従来の時空間ステレオと比べ大きな動きによる急激な視差の時間変化に対して頑健である

なかの

Spacetime Stereo A Unifying Framework for Depth from Triangulation13

どんなもの

先行行研究と比べてどこがすごい

space time stereoを提案ステレオカメラの視差推定でも構造光を用いた視差推定でも利利用可能 動的なシーンでの利利用も可能

フレームごとマッチングを取っていたが複数フレームでのマッチングを可能とした

なかの

Learning to Select and Order Vacation Photographs (Disney research)14

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示したあまりにもたくさん撮影した写真たちから自動的にフォトアルバムを作成する研究

複雑な視覚での区別を試みたのはこの論論文が初

５つの異異なるトピックから63の個人的な写真コレクションのデータセットを利利用し定量量的に評価する

写真間の差別かを定義する顔全体の絵何が写っているか写っていないかを評価する

Jointly aligning and segmenting multiple web photo streams for the inference of collective photo storylines [G Kim and E P Xing CVPR2013] Photo sequencing [T Basha Y Moses and S Avidan CVPR2012]

なかの

A Taxonomy and Evaluation of Dense Two-Frame Stereo Correspondence Algorithms15

どんなもの

どうやって有効性を示した

次に読むべき論論文は

ステレオマッチングに関する分類を行行う 新たなデータセットを作成する

というよりも他の手法が有効性を示すことができるようにデータセットを作成した 今ではmiddleburyのデータセットと言えばステレオ業界では超有名

High-resolution stereo datasets with subpixel-accurate ground truth

なかの

Discriminability Limits in Spatio-Temporal Stereo Block Matching1

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

spatio-temporal disparity estimationの根本的な前提の正当性を解析しマッチング処理理の際に動きが助けとなる程度度を決定する

時空間マッチングのエラーを分析し誤りの原因を確率率率で導出する（フレーム数動きの分散画像特徴ノイズの関数）

[34243334]は時空間マッチングの利利点を指摘していたが本論論文はマッチング精度度の向上のために動きを用いる手法の程度度や性質を研究する

6つのステレオビデオを用いて検証を行行った

Spacetime stereo Shape recovery for dynamic scenes [L Zhang B Curless and S Seitz CVPR2003] Spatiotemporal stereo and scene flow via stequel matching [M Sizintsev and R Wildes PAMI2012] Temporally consistent disparity and optical flow via efficient spatio-temporal filtering [A Hosni C Rhemann M Bleyer and M Gelautz PRCAIVT2012] Spacetime stereo A unifying framework for depth from triangulation [PAMI2005] Dynamic depth recovery from multiple synchronized video streams [H Tao H Sawhney and R Kumar CVPR2001] Spatiotemporal descriptor for wide-baseline stereo reconstruction of non-rigid and ambiguous scenes [ECCV2003]

なかの

Depth-Based Patch Scaling for Content-Aware Stereo Image Completion2

どんなもの

どうやって有効性を示した

ステレオでデプスを取り物体の三次元情報を使ってインペインティングを行行う

bookのデータセット背景が繰り返しパターンが多いものを使っている

なかの

Fast Semi-dense Surface Reconstruction from Stereoscopic Video in Laparoscopic Surgery3

どんなもの

手法の流流れ

次に読むべき論論文は

腹腔内手術の際にステレオビデオから高速に物体の三次元再構成を行行う研究

Evaluation of stereo matching costs on images with radiometric differences [Hirschmueller H Scharstein D PAMI2008]

スコープカメラから画像取得GPUで演算する 視差を算出しフィルタにかける距離離に変換 点群を再びフィルタにかけて三次元再構成

なかの

3D Reconstruction from Accidental Motion4

どんなもの

技術や手法のキモはどこ

議論論はある

数秒のビデオ（単眼）から三次元再構成を行行う 手ぶれなどの動きから再構成が可能で特定の動きや機材を必要としない

短い基線長でも再構成が可能（3mmの基線長）

基線長が短いため背景の精度度が低くなる リフォーカス画像作成には十分 練習では上手く動作したが検証がまだ必要

なかの

Panoramic Video from Unstructured Camera Arrays5

どんなもの

技術や手法のキモはどこ

議論論はある

複数のカメラを用いたパノラマ撮影を行行う その際に不不自然さがないような動画を作成する

不不自然さを感じる感覚特性を提示しそれにのっとって対策を講じている

一つのカメラの解像度度と品質を向上させるよりも複数台のカメラを組み合わせることがはるかに簡単で有益である専門家でなくてもGoProのカメラセットを組み合わせることは容易易

カメラの配置は厳密に決められていない完璧な時間同期やローリングシャッターの不不足のような実撮影での問題もクリアしている

先行行研究と比べてどこがすごい

どうやって有効性を示した左のシステムは14台のカメラを使用 右のシステムはGoProを5台使用

Disney 201558

なかの

Floating Scale Surface Reconstruction6

どんなもの

技術や手法のキモはどこ

流流動的にスケールを変えられる三次元再構成手法

サンプル規模に依存するパラメータがない rarrどのスケールのサンプルにも対応できる

siggraph2014

なかの

A Super Resolution Reconstruction Scheme for Mixed Spatio-Temporal Stereo Video7

どんなもの

技術や手法のキモはどこ

ビデオ超解像アルゴリズム

二台のカメラを使用 一台は低解像度度で高速一台は高解像度度で低速

HHI 3DV ftp siteのBookarrivalとbeergadenを使用どうやって有効性を示した

なかの

What Is a Good Day for Outdoor Photometric Stereo8

どんなもの

先行行研究と比べてどこがすごい

議論論はある

次に読むべき論論文は

屋外における照度度差があるステレオの研究 屋外でステレオを行行う際に有利利or不不利利な日照条件を明らかにする

点光源を用いた研究は行行われていたが屋外での研究はされていなかった

晴れより曇りの方が精度度が良良い雲があるから特徴量量を取りやすい雑音を白色ガウスモデルを想定 季節ごとのデータセットを利利用してみても良良い

Time-lapse photometric stereo and applications [F Shen K Sunkavalli N Bonneel S Rusinkiewicz H Pfisterand X Tong2014] Outdoor photometric stereo [L-F Yu S-K Yeung Y-W Tai D Terzopoulos and T FChan ICCP2013]

どうやって有効性を示した屋外の照明に関するHDR環境マップのデータベースを利利用

Disney 2015424

なかの

COLORBRUSH ANIMATED DIFFUSION FOR INTUITIVE COLORIZATION SIMULATING WATER PAINTING 9

どんなものアニメを水彩画で描いたように変換する 水彩画を描くには経験が必要であるがそれを作成するアルゴリズムを考案絵具が水によりどうにじむかシュミレーションしている

Disney 20141027 ICIP2014

次に読むべき論論文はGabor-space geodesic active contoursrdquo In Algebraic Frames for the Perception-Action Cycle [C Sagiv NA Sochen and YY Zeevi 2000] Practical temporal consistency for image-based graphics applications [M Lang O Wang T Aydin A Smolic and M Gross SIGGRAPH2012] Computer-Generated Watercolor [CJ Curtis SE Anderson JE Seims KW Fleischer and DH Salesin SIGGRAPH1997]

なかの

From Sound to Sight Using Audio Processing to enable Visible Light Communication 10

どんなもの光に情報を載せる技術プロジェクトページがあって光関係の研究が8個載っている

httpwwwdisneyresearchcomprojectvisible-light-communication

ビデオのURL httpwwwdisneyresearchcomwpcontentuploadsPub_InvisibleLightCommunication_Siggraph14_videomp4

• 201211106_KeisukeKawahara
• 201311421_KeitaKanai_02
• 201313095_AkiraIshii_02
• 201413109_YuukiKubo_02
• 201513110_SatoshiHashizume_02
• 鬼輪講マラソン③_1
• 鬼輪講マラソン③_2

ExoInterfaces novel exosceleton haptic interfaces for virtual reality augmented sport and rehabilitation

Dzmitry Tsetserukou Katsunari Sato Susumu Tachi13

どのようなものか 腕に装着し物理的なinteractionを可能にするデバイス 先行研究と比べてどこがすごいか Exoskeleton 力を増幅するためだが重たく危険なこともある String-based wireが視界をまたぐ動きに制限がある rarr腕の動きに制限を与えない安全 技術や手法のキモ 「FlexTorque」人間の筋肉の構造を再現するベルトとモーターを使用する肩の近くに装着することで

腕に負担がかかりにくい 触覚feedback弱いトルク 運動を支援強いトルク 課題 物理的な接触を表現するゲームやスポーツにより没頭させるリハビリのサポートをする視覚障害者の支援（ものの場所を教える） 関連論文 FlexTorque [Dzmitry et al 2010]

20150522 橋爪智 2 鬼

Perception of Ultrasonic Haptic Feedback on the Hand Localisation and Apparent Motion13

Graham Wilson Tom Carter Sriram Subramanian Stephen Brewster13

どのようなものか 超音波を用いた触覚フィードバック有効性の検討を行う 先行研究と比べてどこがすごいか 超音波触覚フィードバックは比較的新しく研究や操作方法に関する知識が少ない 腕を自由に動かすことができ小さいものは着用可能 技術や手法のキモ 88のアレイ状に超音波発生器を設置

有効性の確認 bull  局所的な触感 　　　25箇所に分割しそれぞれに超音波を当てる 　　　触感を感じた989 　　　場所の誤差85mm bull  手のひらを動く触感 上下左右に動く 　　　動いてると感じた629

20150522 橋爪智 2 鬼

Friction Measurements on a Large Area TPaD13Nicholas D Marchuk J Edward Colgate Michael A Peshkin13

どのようなものか 超音波の振動により触感を与える 先行研究と比べてどこがすごいか ガラス板を使うので透明後ろにディスプレイを配置可能 技術や手法のキモ 「Squeeze Film Effect（スクイズ膜効果）」 ガラス板に取り付けた圧電素子の円盤に高周波信号

をかける 実験 振動しない部分＝摩擦が発生しない部分が発生周波数により場所が変わる rarr摩擦を大きさをかける力の大きさから計測 rarr指の場所に合わせて複数の周波数を使い分ける 関連論文 T-PaD[Winfield et al 2007]

20150522 橋爪智 2 鬼

STIMTAC a Tactile Input Device with Programmable Friction13Michel Amberg Freacutedeacuteric Giraud Betty Semail Paolo Olivo Geacutery Casiez Nicolas Roussel13

どのようなものか 触感を与えられるタッチデバイス 先行研究と比べてどこがすごいか LATPaD サイズ大きいノイズが大きい TeslaTouch 高い電圧付加が必要GNDに接続しなければいけない

技術や手法のキモ 「Squeeze Film Effect」超音波を用いて振動を与える 圧電性セラミックを電極にコーディング 指トラッキングは力センサを用いる 活用法 マウスキーボード絵を描く 関連論文 LATPaD[Vincent et al 2011] TeslaTouch[Bau et al 2010]

20150522 橋爪智 2 鬼

Surround Haptics Tactile Feedback for Immersive Gaming Experiences Ali Israr Seung-Chan Kim Ivan Poupyrev Jan Stec13

どのようなものか ゲームに合わせて高解像度の触覚フィードバックをユーザーに与える椅子 先行研究と比べてどこがすごいか 荒く配置した安価な振動アクチュエータで高解像度の触覚フィードバックを行える 一点の振動連続した動き範囲の振動などを再現

技術や手法のキモ 仮想的な振動アクチュエータをいくつかの振動アクチュエータを使って作り出す physical-physicalphysical-virtualvirtual-virtual ゲームにHaptics Engineを導入しHaptics APIを用いてHaptic Displayを操作する 関連論文 Exploring Surround Haptics Displays[Israr et al 2010]

20150522 橋爪智 2 鬼

Audio-Haptic Feedback in Mobile Phones Angela Chang Conor OrsquoSullivan13

どのようなものか haptics機能のついてない携帯電話にオーディオ機能を利用した触覚フィードバックを追加する 先行研究と比べてどこがすごいか 簡単に作れてnon-haptic mobile devicesでも大丈夫 技術や手法のキモ 「MultiFunction Transducer(MFT)」 スピーカーから音と信号の両方を出力できる

bull  Haptic Inheritance 　　音を2つの周波数帯に分ける bull  Synthesis and Matching 　　低周波数帯(20-300Hz)を使い触感を伝える 有効性の検討 42人の人を対象に実験を行う83の人が触感を感じた

20150522 橋爪智 2 鬼

Resolution of Sleep Deprivation Problems using ZZZoo Pillows13Shunsuke Yanaka Motoki Ishida13

どのようなものか 近年不眠症の人が多い rarr誰かと接していると安心し睡眠に導入しやすくなる rarrまるで添い寝をしているようなリアルな抱きまくらを使う 技術や手法のキモ breathing sensation 風船を使って人の呼吸を再現肺の形の風船弱く長い呼吸をする

heating お湯を使って人の体温を再現45 有効性の確認 84人の人が実験 呼吸が睡眠を誘ったかrarr61 体温が睡眠を誘ったかrarr85 関連論文 The Impact of Sleep Disorders on Social Life[Komada et al 2007]

20150522 橋爪智 2 鬼

まとめ13超音波 モーター 風

20150522 橋爪智 2 鬼

コイル 電気刺激 Electrovibration

振動 音 お湯

なかの

Temporally Consistent Disparity and Optical Flow via Efficient Spatio-temporal Filtering1

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示した

議論論はあるか

時間的に一定の視差を算出する手法静止画ステレオよりも精度度が良良いことを示す従来よりも推定精度度が良良いオプティカルフローも算出する

一枚の静止画に対するフィルタリング[1]をステレオ動画に拡張している

ケンブリッジのステレオ動画のデータセットを利利用 実写動画に対する比較も行行うノイズ耐性も検証する

フィルタベースとエネルギーベースの関係性を良良り理理解することで推定精度度を上げる

実装が簡単でリアルタイム視差推定が可能

Fast Cost-Volume Filtering for Visual Correspondence and Beyond [Rhemann C Hosni A Bleyer M Rother C Gelautz M CVPR2011] Real-time Spatiotemporal Stereo Matching Using the Dual-Cross-Bilateral Grid [Richardt C Orr D Davies I Criminisi A Dodgson NA ECCV2010] Secrets of optical flow estimation and their principles [Sun D Roth S Black MJ 2010] Motion estimation with non-local total variation regularization [Werlberger M Pock T Bischof H CVPR2010] Temporally Consistent Disparity Maps from Uncalibrated Stereo Videos [Bleyer M Gelatuz M ISPA2011]

なかの

SymStereo Matching using Induced Symmetry (2014)2

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示した

議論論はあるか

画像の対称性を用いてステレオマッチングを行行う 左右の画像を反転させて重ね合わせることで対称性を測る

絵的な類似の代わりに対称性を使う今まで対称性を用いる手法はなく新規性が大きい

三つのSymmetry-baseの手法で精度度を検証従来手法よりも精度度が向上しているMiddlebury Oxford Corridorfountain-P11のデータセット使用

ステレオの問題である不不連続な箇所オクルージョン部分は未解決である演算時間はやや増加

1-Dラインのコストを考える今までは撮像面に対して平行行な平面でデプスを考えていたが垂直な平面を考える

BT[Birchfield and Tomasi 1998] Census transform[Zabih and Woodfill 1994] Log N[Kovesi 1997] radio-metoric differences[Hirschmuller Scharstein 2009]

なかの

Camouflaging an Object from Many Viewpoints3

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

多くの視点から三次元の物体をカモフラージュするカモフラージュによってオクルージョン部分の不不連続がどの程度度生じるか他の視点ではどれほどになるかの検証

MRF（Markov Random Fields）ベース

新しい三次元物体のカモフラージュモデルを構築 37種類のデータセットを作る

箱形の物体に対してカモフラージュ処理理を施し 結果を評価する

オクルージョン不不連続テクスチャの歪みが問題 照明や画像の貼りつけに制限あり

なかの

Aliasing Detection and Reduction in Plenoptic Imaging4

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

カメラアレイ撮影の角度度のエイリアシングを除去するエイリアシングの探索索と打ち消しを行行う

周波数領領域ではなく空間領領域で探索索を行行う

先行行研究がフィルタデモザイキング再パラメータ調整などの前処理理でエイリアシング除去を行行うのに対しエイリアシング探索索後にリフォーカスの段階でエイリアシングを取り除く

8times8の平行行カメラアレイで検証するカメラ間の 基線長は70mm

今回は基線長が長いデータセットを使った 次はLytroなどのマイクロレンズアレイで検証する

Globally consistent multi-label assignment on the ray space of 4d light fields [S Wanner C Straehle B Goldluecke CVPR2013] Lineassisted light field triangulation and stereo matching [Z Yu X Guo H Lin A Lumsdaine J Yu ICCV 2013]

なかの

Globally Consistent Multi-Label Assignment on the Ray Space of 4D Light Fields5

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

四次元ライトフィールドの光線情報において マルチラベルの領領域分割を行行う

深度度情報光線情報を用いて領領域分割することで 二次元（空間）情報だけでは分割が難しかった 領領域を分割可能とする

The light field camera Extended depth of field aliasing and superresolution [T Bishop P Favaro IEEE Transactions on Pattern Analysis and Machine Intelligence 2012]

なかの

Line Assisted Light Field Triangulation and Stereo Matching6

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

光線情報を利利用してステレオマッチングの精度度を 向上させる手法三角測量量の誤差を減らす

Light Field Stereo Matchingとかいう手法 グラフ構造を作成

Variational light field analysis for disparity estimation and super-resolution [S Wanner and B Goldlumluecke 2013]

なかの

Adaptive stereo similarity fusion using confidence measures 20157

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

ステレオマッチングの新しい方式fusion weightsを提案複数の手法を組み合わせてコスト計算を行行う手法付録に既存手法のコスト関数一覧あり

パラメータに依存する手法を用いないことで高速化を図っている

一つのアルゴリズムでは異異なる特性を持つ領領域全てに対して適切切なマッチングはできない複数を組み合わせることでそれを補う13種と多い

middleburyとKITTIのデータセットで評価

一枚あたり03sと高速だが001sとより高速なアルゴリズムが存在する

Segment-based stereo matching using belief propagation and a self-adapting dissimilarity measure [A Klaus M Sormann K Karner ICPR2006] On building an accurate stereo matching system on graphics hardware [X Mei X Sun M Zhou S Jiao H Wang X Zhang ICCV2011] Similarity measures for depth estimation [K Wegner O Stankiewicz 3DTV-CON2009] On accurate dense stereo-matching using a local adaptive multi-cost approach [C Stentoumis L Grammatikopoulos I Kalisperakis G Karras ISPRS2014] A quantitative evaluation of confidence measures for stereo vision [X Hu P Mordohai PAMI2012]

なかの

SIMILARITY MEASURE FOR DEPTH ESTIMATIOM 20098

どんなもの

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

4種類の視差推定アルゴリズムを組み合わせている 類似度度の選択性の解析

Belief Propagationの枠組みを用いる

名古屋大学の多視点データベースを利利用

HHI Test Material for 3D Video [I Feldmann M Muller F Zilly R Tanger A SmolicP Kauff T Wiegand 2008] Multiview Video Test Sequence and Camera Parameters [Yo-Sung Ho Eun-Kyung Lee and Cheon Lee 2008] 1D Parallel Test Sequences for MPEG-FTV [M Tanimoto T Fujii N Fukushima 2008] Non-parametric Local Transforms for Computing Visual Correspondence [R Zabih J Woodfill 1994]

なかの

Spatiotemporal Stereo via Spatiotemporal Quadric Element (Stequel) Matching9

どんなもの

技術や手法のキモはどこ

新しいマッチング手法を提案動き考慮することなく時間情報を取り込むことができる 時間方向のエピ線を考える

オプティカルフロー推定は3D境界や低テクスチャで弱いが提案手法はロバストである

なかの

Depth Video Enhancement Based on Weighted Mode Filtering10

どんなもの

議論論はある

ノイズを含んだ低解像度度のデプスマップの質を高める手法（超解像度度とデノイズ）時間方向も使用簡単なオプティカルフローを計算し利利用する

非反復復アルゴリズムのためGPUに載せやすく高速化が考えられる

なかの

Fast Bilateral-Space Stereo for Synthetic Defocus11

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

議論論はある

次に読むべき論論文は

高速な自由焦点ぼけ画像の作成

Bilateral-spaceを提案

従来研究よりも10から100倍速くぼけ具合の精度度も良良い

ぼけを作成するというアプリケーションに利利用する距離離という面では提案手法が有益であるが実測的な距離離という面での精度度は悪い背景と前景が同じ色で近くにある場合同一ととらえてしまう

Efficient high-resolution stereo matching using local plane sweeps [S N Sinha D Scharstein and R SzeliskiCVPR2014] Bilateral filtering-based optical flow estimation with occlusion detection [J Xiao H Cheng H Sawhney C Rao and M IsnardiECCV2006] Efficient nonlocal regularization for optical flow [P Krumlahenbumluhl and V KoltunECCV2012] Real-time spatiotemporal stereo matching using the dual-cross-bilateral grid [C Richardt D Orr I Davies A Criminisi and N A DodgsonECCV2010]

どうやって有効性を示した視差推定の精度度はmiddleburyKITTI

なかの

Robust Spatiotemporal Stereo for Dynamic Scenes12

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

ステレオ動画のフレーム間情報を取り入れることでノイズ耐性を向上させるまた動きの大きなものも考える

時間を含めたウインドウの提案自動的にそのような変化に対応する画像領領域を検出する

従来の時空間ステレオと比べ大きな動きによる急激な視差の時間変化に対して頑健である

なかの

Spacetime Stereo A Unifying Framework for Depth from Triangulation13

どんなもの

先行行研究と比べてどこがすごい

space time stereoを提案ステレオカメラの視差推定でも構造光を用いた視差推定でも利利用可能 動的なシーンでの利利用も可能

フレームごとマッチングを取っていたが複数フレームでのマッチングを可能とした

なかの

Learning to Select and Order Vacation Photographs (Disney research)14

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示したあまりにもたくさん撮影した写真たちから自動的にフォトアルバムを作成する研究

複雑な視覚での区別を試みたのはこの論論文が初

５つの異異なるトピックから63の個人的な写真コレクションのデータセットを利利用し定量量的に評価する

写真間の差別かを定義する顔全体の絵何が写っているか写っていないかを評価する

Jointly aligning and segmenting multiple web photo streams for the inference of collective photo storylines [G Kim and E P Xing CVPR2013] Photo sequencing [T Basha Y Moses and S Avidan CVPR2012]

なかの

A Taxonomy and Evaluation of Dense Two-Frame Stereo Correspondence Algorithms15

どんなもの

どうやって有効性を示した

次に読むべき論論文は

ステレオマッチングに関する分類を行行う 新たなデータセットを作成する

というよりも他の手法が有効性を示すことができるようにデータセットを作成した 今ではmiddleburyのデータセットと言えばステレオ業界では超有名

High-resolution stereo datasets with subpixel-accurate ground truth

なかの

Discriminability Limits in Spatio-Temporal Stereo Block Matching1

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

spatio-temporal disparity estimationの根本的な前提の正当性を解析しマッチング処理理の際に動きが助けとなる程度度を決定する

時空間マッチングのエラーを分析し誤りの原因を確率率率で導出する（フレーム数動きの分散画像特徴ノイズの関数）

[34243334]は時空間マッチングの利利点を指摘していたが本論論文はマッチング精度度の向上のために動きを用いる手法の程度度や性質を研究する

6つのステレオビデオを用いて検証を行行った

Spacetime stereo Shape recovery for dynamic scenes [L Zhang B Curless and S Seitz CVPR2003] Spatiotemporal stereo and scene flow via stequel matching [M Sizintsev and R Wildes PAMI2012] Temporally consistent disparity and optical flow via efficient spatio-temporal filtering [A Hosni C Rhemann M Bleyer and M Gelautz PRCAIVT2012] Spacetime stereo A unifying framework for depth from triangulation [PAMI2005] Dynamic depth recovery from multiple synchronized video streams [H Tao H Sawhney and R Kumar CVPR2001] Spatiotemporal descriptor for wide-baseline stereo reconstruction of non-rigid and ambiguous scenes [ECCV2003]

なかの

Depth-Based Patch Scaling for Content-Aware Stereo Image Completion2

どんなもの

どうやって有効性を示した

ステレオでデプスを取り物体の三次元情報を使ってインペインティングを行行う

bookのデータセット背景が繰り返しパターンが多いものを使っている

なかの

Fast Semi-dense Surface Reconstruction from Stereoscopic Video in Laparoscopic Surgery3

どんなもの

手法の流流れ

次に読むべき論論文は

腹腔内手術の際にステレオビデオから高速に物体の三次元再構成を行行う研究

Evaluation of stereo matching costs on images with radiometric differences [Hirschmueller H Scharstein D PAMI2008]

スコープカメラから画像取得GPUで演算する 視差を算出しフィルタにかける距離離に変換 点群を再びフィルタにかけて三次元再構成

なかの

3D Reconstruction from Accidental Motion4

どんなもの

技術や手法のキモはどこ

議論論はある

数秒のビデオ（単眼）から三次元再構成を行行う 手ぶれなどの動きから再構成が可能で特定の動きや機材を必要としない

短い基線長でも再構成が可能（3mmの基線長）

基線長が短いため背景の精度度が低くなる リフォーカス画像作成には十分 練習では上手く動作したが検証がまだ必要

なかの

Panoramic Video from Unstructured Camera Arrays5

どんなもの

技術や手法のキモはどこ

議論論はある

複数のカメラを用いたパノラマ撮影を行行う その際に不不自然さがないような動画を作成する

不不自然さを感じる感覚特性を提示しそれにのっとって対策を講じている

一つのカメラの解像度度と品質を向上させるよりも複数台のカメラを組み合わせることがはるかに簡単で有益である専門家でなくてもGoProのカメラセットを組み合わせることは容易易

カメラの配置は厳密に決められていない完璧な時間同期やローリングシャッターの不不足のような実撮影での問題もクリアしている

先行行研究と比べてどこがすごい

どうやって有効性を示した左のシステムは14台のカメラを使用 右のシステムはGoProを5台使用

Disney 201558

なかの

Floating Scale Surface Reconstruction6

どんなもの

技術や手法のキモはどこ

流流動的にスケールを変えられる三次元再構成手法

サンプル規模に依存するパラメータがない rarrどのスケールのサンプルにも対応できる

siggraph2014

なかの

A Super Resolution Reconstruction Scheme for Mixed Spatio-Temporal Stereo Video7

どんなもの

技術や手法のキモはどこ

ビデオ超解像アルゴリズム

二台のカメラを使用 一台は低解像度度で高速一台は高解像度度で低速

HHI 3DV ftp siteのBookarrivalとbeergadenを使用どうやって有効性を示した

なかの

What Is a Good Day for Outdoor Photometric Stereo8

どんなもの

先行行研究と比べてどこがすごい

議論論はある

次に読むべき論論文は

屋外における照度度差があるステレオの研究 屋外でステレオを行行う際に有利利or不不利利な日照条件を明らかにする

点光源を用いた研究は行行われていたが屋外での研究はされていなかった

晴れより曇りの方が精度度が良良い雲があるから特徴量量を取りやすい雑音を白色ガウスモデルを想定 季節ごとのデータセットを利利用してみても良良い

Time-lapse photometric stereo and applications [F Shen K Sunkavalli N Bonneel S Rusinkiewicz H Pfisterand X Tong2014] Outdoor photometric stereo [L-F Yu S-K Yeung Y-W Tai D Terzopoulos and T FChan ICCP2013]

どうやって有効性を示した屋外の照明に関するHDR環境マップのデータベースを利利用

Disney 2015424

なかの

COLORBRUSH ANIMATED DIFFUSION FOR INTUITIVE COLORIZATION SIMULATING WATER PAINTING 9

どんなものアニメを水彩画で描いたように変換する 水彩画を描くには経験が必要であるがそれを作成するアルゴリズムを考案絵具が水によりどうにじむかシュミレーションしている

Disney 20141027 ICIP2014

次に読むべき論論文はGabor-space geodesic active contoursrdquo In Algebraic Frames for the Perception-Action Cycle [C Sagiv NA Sochen and YY Zeevi 2000] Practical temporal consistency for image-based graphics applications [M Lang O Wang T Aydin A Smolic and M Gross SIGGRAPH2012] Computer-Generated Watercolor [CJ Curtis SE Anderson JE Seims KW Fleischer and DH Salesin SIGGRAPH1997]

なかの

From Sound to Sight Using Audio Processing to enable Visible Light Communication 10

どんなもの光に情報を載せる技術プロジェクトページがあって光関係の研究が8個載っている

httpwwwdisneyresearchcomprojectvisible-light-communication

ビデオのURL httpwwwdisneyresearchcomwpcontentuploadsPub_InvisibleLightCommunication_Siggraph14_videomp4

• 201211106_KeisukeKawahara
• 201311421_KeitaKanai_02
• 201313095_AkiraIshii_02
• 201413109_YuukiKubo_02
• 201513110_SatoshiHashizume_02
• 鬼輪講マラソン③_1
• 鬼輪講マラソン③_2

Perception of Ultrasonic Haptic Feedback on the Hand Localisation and Apparent Motion13

Graham Wilson Tom Carter Sriram Subramanian Stephen Brewster13

どのようなものか 超音波を用いた触覚フィードバック有効性の検討を行う 先行研究と比べてどこがすごいか 超音波触覚フィードバックは比較的新しく研究や操作方法に関する知識が少ない 腕を自由に動かすことができ小さいものは着用可能 技術や手法のキモ 88のアレイ状に超音波発生器を設置

有効性の確認 bull  局所的な触感 　　　25箇所に分割しそれぞれに超音波を当てる 　　　触感を感じた989 　　　場所の誤差85mm bull  手のひらを動く触感 上下左右に動く 　　　動いてると感じた629

20150522 橋爪智 2 鬼

Friction Measurements on a Large Area TPaD13Nicholas D Marchuk J Edward Colgate Michael A Peshkin13

どのようなものか 超音波の振動により触感を与える 先行研究と比べてどこがすごいか ガラス板を使うので透明後ろにディスプレイを配置可能 技術や手法のキモ 「Squeeze Film Effect（スクイズ膜効果）」 ガラス板に取り付けた圧電素子の円盤に高周波信号

をかける 実験 振動しない部分＝摩擦が発生しない部分が発生周波数により場所が変わる rarr摩擦を大きさをかける力の大きさから計測 rarr指の場所に合わせて複数の周波数を使い分ける 関連論文 T-PaD[Winfield et al 2007]

20150522 橋爪智 2 鬼

STIMTAC a Tactile Input Device with Programmable Friction13Michel Amberg Freacutedeacuteric Giraud Betty Semail Paolo Olivo Geacutery Casiez Nicolas Roussel13

どのようなものか 触感を与えられるタッチデバイス 先行研究と比べてどこがすごいか LATPaD サイズ大きいノイズが大きい TeslaTouch 高い電圧付加が必要GNDに接続しなければいけない

技術や手法のキモ 「Squeeze Film Effect」超音波を用いて振動を与える 圧電性セラミックを電極にコーディング 指トラッキングは力センサを用いる 活用法 マウスキーボード絵を描く 関連論文 LATPaD[Vincent et al 2011] TeslaTouch[Bau et al 2010]

20150522 橋爪智 2 鬼

Surround Haptics Tactile Feedback for Immersive Gaming Experiences Ali Israr Seung-Chan Kim Ivan Poupyrev Jan Stec13

どのようなものか ゲームに合わせて高解像度の触覚フィードバックをユーザーに与える椅子 先行研究と比べてどこがすごいか 荒く配置した安価な振動アクチュエータで高解像度の触覚フィードバックを行える 一点の振動連続した動き範囲の振動などを再現

技術や手法のキモ 仮想的な振動アクチュエータをいくつかの振動アクチュエータを使って作り出す physical-physicalphysical-virtualvirtual-virtual ゲームにHaptics Engineを導入しHaptics APIを用いてHaptic Displayを操作する 関連論文 Exploring Surround Haptics Displays[Israr et al 2010]

20150522 橋爪智 2 鬼

Audio-Haptic Feedback in Mobile Phones Angela Chang Conor OrsquoSullivan13

どのようなものか haptics機能のついてない携帯電話にオーディオ機能を利用した触覚フィードバックを追加する 先行研究と比べてどこがすごいか 簡単に作れてnon-haptic mobile devicesでも大丈夫 技術や手法のキモ 「MultiFunction Transducer(MFT)」 スピーカーから音と信号の両方を出力できる

bull  Haptic Inheritance 　　音を2つの周波数帯に分ける bull  Synthesis and Matching 　　低周波数帯(20-300Hz)を使い触感を伝える 有効性の検討 42人の人を対象に実験を行う83の人が触感を感じた

20150522 橋爪智 2 鬼

Resolution of Sleep Deprivation Problems using ZZZoo Pillows13Shunsuke Yanaka Motoki Ishida13

どのようなものか 近年不眠症の人が多い rarr誰かと接していると安心し睡眠に導入しやすくなる rarrまるで添い寝をしているようなリアルな抱きまくらを使う 技術や手法のキモ breathing sensation 風船を使って人の呼吸を再現肺の形の風船弱く長い呼吸をする

heating お湯を使って人の体温を再現45 有効性の確認 84人の人が実験 呼吸が睡眠を誘ったかrarr61 体温が睡眠を誘ったかrarr85 関連論文 The Impact of Sleep Disorders on Social Life[Komada et al 2007]

20150522 橋爪智 2 鬼

まとめ13超音波 モーター 風

20150522 橋爪智 2 鬼

コイル 電気刺激 Electrovibration

振動 音 お湯

なかの

Temporally Consistent Disparity and Optical Flow via Efficient Spatio-temporal Filtering1

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示した

議論論はあるか

時間的に一定の視差を算出する手法静止画ステレオよりも精度度が良良いことを示す従来よりも推定精度度が良良いオプティカルフローも算出する

一枚の静止画に対するフィルタリング[1]をステレオ動画に拡張している

ケンブリッジのステレオ動画のデータセットを利利用 実写動画に対する比較も行行うノイズ耐性も検証する

フィルタベースとエネルギーベースの関係性を良良り理理解することで推定精度度を上げる

実装が簡単でリアルタイム視差推定が可能

Fast Cost-Volume Filtering for Visual Correspondence and Beyond [Rhemann C Hosni A Bleyer M Rother C Gelautz M CVPR2011] Real-time Spatiotemporal Stereo Matching Using the Dual-Cross-Bilateral Grid [Richardt C Orr D Davies I Criminisi A Dodgson NA ECCV2010] Secrets of optical flow estimation and their principles [Sun D Roth S Black MJ 2010] Motion estimation with non-local total variation regularization [Werlberger M Pock T Bischof H CVPR2010] Temporally Consistent Disparity Maps from Uncalibrated Stereo Videos [Bleyer M Gelatuz M ISPA2011]

なかの

SymStereo Matching using Induced Symmetry (2014)2

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示した

議論論はあるか

画像の対称性を用いてステレオマッチングを行行う 左右の画像を反転させて重ね合わせることで対称性を測る

絵的な類似の代わりに対称性を使う今まで対称性を用いる手法はなく新規性が大きい

三つのSymmetry-baseの手法で精度度を検証従来手法よりも精度度が向上しているMiddlebury Oxford Corridorfountain-P11のデータセット使用

ステレオの問題である不不連続な箇所オクルージョン部分は未解決である演算時間はやや増加

1-Dラインのコストを考える今までは撮像面に対して平行行な平面でデプスを考えていたが垂直な平面を考える

BT[Birchfield and Tomasi 1998] Census transform[Zabih and Woodfill 1994] Log N[Kovesi 1997] radio-metoric differences[Hirschmuller Scharstein 2009]

なかの

Camouflaging an Object from Many Viewpoints3

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

多くの視点から三次元の物体をカモフラージュするカモフラージュによってオクルージョン部分の不不連続がどの程度度生じるか他の視点ではどれほどになるかの検証

MRF（Markov Random Fields）ベース

新しい三次元物体のカモフラージュモデルを構築 37種類のデータセットを作る

箱形の物体に対してカモフラージュ処理理を施し 結果を評価する

オクルージョン不不連続テクスチャの歪みが問題 照明や画像の貼りつけに制限あり

なかの

Aliasing Detection and Reduction in Plenoptic Imaging4

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

カメラアレイ撮影の角度度のエイリアシングを除去するエイリアシングの探索索と打ち消しを行行う

周波数領領域ではなく空間領領域で探索索を行行う

先行行研究がフィルタデモザイキング再パラメータ調整などの前処理理でエイリアシング除去を行行うのに対しエイリアシング探索索後にリフォーカスの段階でエイリアシングを取り除く

8times8の平行行カメラアレイで検証するカメラ間の 基線長は70mm

今回は基線長が長いデータセットを使った 次はLytroなどのマイクロレンズアレイで検証する

Globally consistent multi-label assignment on the ray space of 4d light fields [S Wanner C Straehle B Goldluecke CVPR2013] Lineassisted light field triangulation and stereo matching [Z Yu X Guo H Lin A Lumsdaine J Yu ICCV 2013]

なかの

Globally Consistent Multi-Label Assignment on the Ray Space of 4D Light Fields5

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

四次元ライトフィールドの光線情報において マルチラベルの領領域分割を行行う

深度度情報光線情報を用いて領領域分割することで 二次元（空間）情報だけでは分割が難しかった 領領域を分割可能とする

The light field camera Extended depth of field aliasing and superresolution [T Bishop P Favaro IEEE Transactions on Pattern Analysis and Machine Intelligence 2012]

なかの

Line Assisted Light Field Triangulation and Stereo Matching6

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

光線情報を利利用してステレオマッチングの精度度を 向上させる手法三角測量量の誤差を減らす

Light Field Stereo Matchingとかいう手法 グラフ構造を作成

Variational light field analysis for disparity estimation and super-resolution [S Wanner and B Goldlumluecke 2013]

なかの

Adaptive stereo similarity fusion using confidence measures 20157

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

ステレオマッチングの新しい方式fusion weightsを提案複数の手法を組み合わせてコスト計算を行行う手法付録に既存手法のコスト関数一覧あり

パラメータに依存する手法を用いないことで高速化を図っている

一つのアルゴリズムでは異異なる特性を持つ領領域全てに対して適切切なマッチングはできない複数を組み合わせることでそれを補う13種と多い

middleburyとKITTIのデータセットで評価

一枚あたり03sと高速だが001sとより高速なアルゴリズムが存在する

Segment-based stereo matching using belief propagation and a self-adapting dissimilarity measure [A Klaus M Sormann K Karner ICPR2006] On building an accurate stereo matching system on graphics hardware [X Mei X Sun M Zhou S Jiao H Wang X Zhang ICCV2011] Similarity measures for depth estimation [K Wegner O Stankiewicz 3DTV-CON2009] On accurate dense stereo-matching using a local adaptive multi-cost approach [C Stentoumis L Grammatikopoulos I Kalisperakis G Karras ISPRS2014] A quantitative evaluation of confidence measures for stereo vision [X Hu P Mordohai PAMI2012]

なかの

SIMILARITY MEASURE FOR DEPTH ESTIMATIOM 20098

どんなもの

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

4種類の視差推定アルゴリズムを組み合わせている 類似度度の選択性の解析

Belief Propagationの枠組みを用いる

名古屋大学の多視点データベースを利利用

HHI Test Material for 3D Video [I Feldmann M Muller F Zilly R Tanger A SmolicP Kauff T Wiegand 2008] Multiview Video Test Sequence and Camera Parameters [Yo-Sung Ho Eun-Kyung Lee and Cheon Lee 2008] 1D Parallel Test Sequences for MPEG-FTV [M Tanimoto T Fujii N Fukushima 2008] Non-parametric Local Transforms for Computing Visual Correspondence [R Zabih J Woodfill 1994]

なかの

Spatiotemporal Stereo via Spatiotemporal Quadric Element (Stequel) Matching9

どんなもの

技術や手法のキモはどこ

新しいマッチング手法を提案動き考慮することなく時間情報を取り込むことができる 時間方向のエピ線を考える

オプティカルフロー推定は3D境界や低テクスチャで弱いが提案手法はロバストである

なかの

Depth Video Enhancement Based on Weighted Mode Filtering10

どんなもの

議論論はある

ノイズを含んだ低解像度度のデプスマップの質を高める手法（超解像度度とデノイズ）時間方向も使用簡単なオプティカルフローを計算し利利用する

非反復復アルゴリズムのためGPUに載せやすく高速化が考えられる

なかの

Fast Bilateral-Space Stereo for Synthetic Defocus11

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

議論論はある

次に読むべき論論文は

高速な自由焦点ぼけ画像の作成

Bilateral-spaceを提案

従来研究よりも10から100倍速くぼけ具合の精度度も良良い

ぼけを作成するというアプリケーションに利利用する距離離という面では提案手法が有益であるが実測的な距離離という面での精度度は悪い背景と前景が同じ色で近くにある場合同一ととらえてしまう

Efficient high-resolution stereo matching using local plane sweeps [S N Sinha D Scharstein and R SzeliskiCVPR2014] Bilateral filtering-based optical flow estimation with occlusion detection [J Xiao H Cheng H Sawhney C Rao and M IsnardiECCV2006] Efficient nonlocal regularization for optical flow [P Krumlahenbumluhl and V KoltunECCV2012] Real-time spatiotemporal stereo matching using the dual-cross-bilateral grid [C Richardt D Orr I Davies A Criminisi and N A DodgsonECCV2010]

どうやって有効性を示した視差推定の精度度はmiddleburyKITTI

なかの

Robust Spatiotemporal Stereo for Dynamic Scenes12

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

ステレオ動画のフレーム間情報を取り入れることでノイズ耐性を向上させるまた動きの大きなものも考える

時間を含めたウインドウの提案自動的にそのような変化に対応する画像領領域を検出する

従来の時空間ステレオと比べ大きな動きによる急激な視差の時間変化に対して頑健である

なかの

Spacetime Stereo A Unifying Framework for Depth from Triangulation13

どんなもの

先行行研究と比べてどこがすごい

space time stereoを提案ステレオカメラの視差推定でも構造光を用いた視差推定でも利利用可能 動的なシーンでの利利用も可能

フレームごとマッチングを取っていたが複数フレームでのマッチングを可能とした

なかの

Learning to Select and Order Vacation Photographs (Disney research)14

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示したあまりにもたくさん撮影した写真たちから自動的にフォトアルバムを作成する研究

複雑な視覚での区別を試みたのはこの論論文が初

５つの異異なるトピックから63の個人的な写真コレクションのデータセットを利利用し定量量的に評価する

写真間の差別かを定義する顔全体の絵何が写っているか写っていないかを評価する

Jointly aligning and segmenting multiple web photo streams for the inference of collective photo storylines [G Kim and E P Xing CVPR2013] Photo sequencing [T Basha Y Moses and S Avidan CVPR2012]

なかの

A Taxonomy and Evaluation of Dense Two-Frame Stereo Correspondence Algorithms15

どんなもの

どうやって有効性を示した

次に読むべき論論文は

ステレオマッチングに関する分類を行行う 新たなデータセットを作成する

というよりも他の手法が有効性を示すことができるようにデータセットを作成した 今ではmiddleburyのデータセットと言えばステレオ業界では超有名

High-resolution stereo datasets with subpixel-accurate ground truth

なかの

Discriminability Limits in Spatio-Temporal Stereo Block Matching1

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

spatio-temporal disparity estimationの根本的な前提の正当性を解析しマッチング処理理の際に動きが助けとなる程度度を決定する

時空間マッチングのエラーを分析し誤りの原因を確率率率で導出する（フレーム数動きの分散画像特徴ノイズの関数）

[34243334]は時空間マッチングの利利点を指摘していたが本論論文はマッチング精度度の向上のために動きを用いる手法の程度度や性質を研究する

6つのステレオビデオを用いて検証を行行った

Spacetime stereo Shape recovery for dynamic scenes [L Zhang B Curless and S Seitz CVPR2003] Spatiotemporal stereo and scene flow via stequel matching [M Sizintsev and R Wildes PAMI2012] Temporally consistent disparity and optical flow via efficient spatio-temporal filtering [A Hosni C Rhemann M Bleyer and M Gelautz PRCAIVT2012] Spacetime stereo A unifying framework for depth from triangulation [PAMI2005] Dynamic depth recovery from multiple synchronized video streams [H Tao H Sawhney and R Kumar CVPR2001] Spatiotemporal descriptor for wide-baseline stereo reconstruction of non-rigid and ambiguous scenes [ECCV2003]

なかの

Depth-Based Patch Scaling for Content-Aware Stereo Image Completion2

どんなもの

どうやって有効性を示した

ステレオでデプスを取り物体の三次元情報を使ってインペインティングを行行う

bookのデータセット背景が繰り返しパターンが多いものを使っている

なかの

Fast Semi-dense Surface Reconstruction from Stereoscopic Video in Laparoscopic Surgery3

どんなもの

手法の流流れ

次に読むべき論論文は

腹腔内手術の際にステレオビデオから高速に物体の三次元再構成を行行う研究

Evaluation of stereo matching costs on images with radiometric differences [Hirschmueller H Scharstein D PAMI2008]

スコープカメラから画像取得GPUで演算する 視差を算出しフィルタにかける距離離に変換 点群を再びフィルタにかけて三次元再構成

なかの

3D Reconstruction from Accidental Motion4

どんなもの

技術や手法のキモはどこ

議論論はある

数秒のビデオ（単眼）から三次元再構成を行行う 手ぶれなどの動きから再構成が可能で特定の動きや機材を必要としない

短い基線長でも再構成が可能（3mmの基線長）

基線長が短いため背景の精度度が低くなる リフォーカス画像作成には十分 練習では上手く動作したが検証がまだ必要

なかの

Panoramic Video from Unstructured Camera Arrays5

どんなもの

技術や手法のキモはどこ

議論論はある

複数のカメラを用いたパノラマ撮影を行行う その際に不不自然さがないような動画を作成する

不不自然さを感じる感覚特性を提示しそれにのっとって対策を講じている

一つのカメラの解像度度と品質を向上させるよりも複数台のカメラを組み合わせることがはるかに簡単で有益である専門家でなくてもGoProのカメラセットを組み合わせることは容易易

カメラの配置は厳密に決められていない完璧な時間同期やローリングシャッターの不不足のような実撮影での問題もクリアしている

先行行研究と比べてどこがすごい

どうやって有効性を示した左のシステムは14台のカメラを使用 右のシステムはGoProを5台使用

Disney 201558

なかの

Floating Scale Surface Reconstruction6

どんなもの

技術や手法のキモはどこ

流流動的にスケールを変えられる三次元再構成手法

サンプル規模に依存するパラメータがない rarrどのスケールのサンプルにも対応できる

siggraph2014

なかの

A Super Resolution Reconstruction Scheme for Mixed Spatio-Temporal Stereo Video7

どんなもの

技術や手法のキモはどこ

ビデオ超解像アルゴリズム

二台のカメラを使用 一台は低解像度度で高速一台は高解像度度で低速

HHI 3DV ftp siteのBookarrivalとbeergadenを使用どうやって有効性を示した

なかの

What Is a Good Day for Outdoor Photometric Stereo8

どんなもの

先行行研究と比べてどこがすごい

議論論はある

次に読むべき論論文は

屋外における照度度差があるステレオの研究 屋外でステレオを行行う際に有利利or不不利利な日照条件を明らかにする

点光源を用いた研究は行行われていたが屋外での研究はされていなかった

晴れより曇りの方が精度度が良良い雲があるから特徴量量を取りやすい雑音を白色ガウスモデルを想定 季節ごとのデータセットを利利用してみても良良い

Time-lapse photometric stereo and applications [F Shen K Sunkavalli N Bonneel S Rusinkiewicz H Pfisterand X Tong2014] Outdoor photometric stereo [L-F Yu S-K Yeung Y-W Tai D Terzopoulos and T FChan ICCP2013]

どうやって有効性を示した屋外の照明に関するHDR環境マップのデータベースを利利用

Disney 2015424

なかの

COLORBRUSH ANIMATED DIFFUSION FOR INTUITIVE COLORIZATION SIMULATING WATER PAINTING 9

どんなものアニメを水彩画で描いたように変換する 水彩画を描くには経験が必要であるがそれを作成するアルゴリズムを考案絵具が水によりどうにじむかシュミレーションしている

Disney 20141027 ICIP2014

次に読むべき論論文はGabor-space geodesic active contoursrdquo In Algebraic Frames for the Perception-Action Cycle [C Sagiv NA Sochen and YY Zeevi 2000] Practical temporal consistency for image-based graphics applications [M Lang O Wang T Aydin A Smolic and M Gross SIGGRAPH2012] Computer-Generated Watercolor [CJ Curtis SE Anderson JE Seims KW Fleischer and DH Salesin SIGGRAPH1997]

なかの

From Sound to Sight Using Audio Processing to enable Visible Light Communication 10

どんなもの光に情報を載せる技術プロジェクトページがあって光関係の研究が8個載っている

httpwwwdisneyresearchcomprojectvisible-light-communication

ビデオのURL httpwwwdisneyresearchcomwpcontentuploadsPub_InvisibleLightCommunication_Siggraph14_videomp4

• 201211106_KeisukeKawahara
• 201311421_KeitaKanai_02
• 201313095_AkiraIshii_02
• 201413109_YuukiKubo_02
• 201513110_SatoshiHashizume_02
• 鬼輪講マラソン③_1
• 鬼輪講マラソン③_2

Friction Measurements on a Large Area TPaD13Nicholas D Marchuk J Edward Colgate Michael A Peshkin13

どのようなものか 超音波の振動により触感を与える 先行研究と比べてどこがすごいか ガラス板を使うので透明後ろにディスプレイを配置可能 技術や手法のキモ 「Squeeze Film Effect（スクイズ膜効果）」 ガラス板に取り付けた圧電素子の円盤に高周波信号

をかける 実験 振動しない部分＝摩擦が発生しない部分が発生周波数により場所が変わる rarr摩擦を大きさをかける力の大きさから計測 rarr指の場所に合わせて複数の周波数を使い分ける 関連論文 T-PaD[Winfield et al 2007]

20150522 橋爪智 2 鬼

STIMTAC a Tactile Input Device with Programmable Friction13Michel Amberg Freacutedeacuteric Giraud Betty Semail Paolo Olivo Geacutery Casiez Nicolas Roussel13

どのようなものか 触感を与えられるタッチデバイス 先行研究と比べてどこがすごいか LATPaD サイズ大きいノイズが大きい TeslaTouch 高い電圧付加が必要GNDに接続しなければいけない

技術や手法のキモ 「Squeeze Film Effect」超音波を用いて振動を与える 圧電性セラミックを電極にコーディング 指トラッキングは力センサを用いる 活用法 マウスキーボード絵を描く 関連論文 LATPaD[Vincent et al 2011] TeslaTouch[Bau et al 2010]

20150522 橋爪智 2 鬼

Surround Haptics Tactile Feedback for Immersive Gaming Experiences Ali Israr Seung-Chan Kim Ivan Poupyrev Jan Stec13

どのようなものか ゲームに合わせて高解像度の触覚フィードバックをユーザーに与える椅子 先行研究と比べてどこがすごいか 荒く配置した安価な振動アクチュエータで高解像度の触覚フィードバックを行える 一点の振動連続した動き範囲の振動などを再現

技術や手法のキモ 仮想的な振動アクチュエータをいくつかの振動アクチュエータを使って作り出す physical-physicalphysical-virtualvirtual-virtual ゲームにHaptics Engineを導入しHaptics APIを用いてHaptic Displayを操作する 関連論文 Exploring Surround Haptics Displays[Israr et al 2010]

20150522 橋爪智 2 鬼

Audio-Haptic Feedback in Mobile Phones Angela Chang Conor OrsquoSullivan13

どのようなものか haptics機能のついてない携帯電話にオーディオ機能を利用した触覚フィードバックを追加する 先行研究と比べてどこがすごいか 簡単に作れてnon-haptic mobile devicesでも大丈夫 技術や手法のキモ 「MultiFunction Transducer(MFT)」 スピーカーから音と信号の両方を出力できる

bull  Haptic Inheritance 　　音を2つの周波数帯に分ける bull  Synthesis and Matching 　　低周波数帯(20-300Hz)を使い触感を伝える 有効性の検討 42人の人を対象に実験を行う83の人が触感を感じた

20150522 橋爪智 2 鬼

Resolution of Sleep Deprivation Problems using ZZZoo Pillows13Shunsuke Yanaka Motoki Ishida13

どのようなものか 近年不眠症の人が多い rarr誰かと接していると安心し睡眠に導入しやすくなる rarrまるで添い寝をしているようなリアルな抱きまくらを使う 技術や手法のキモ breathing sensation 風船を使って人の呼吸を再現肺の形の風船弱く長い呼吸をする

heating お湯を使って人の体温を再現45 有効性の確認 84人の人が実験 呼吸が睡眠を誘ったかrarr61 体温が睡眠を誘ったかrarr85 関連論文 The Impact of Sleep Disorders on Social Life[Komada et al 2007]

20150522 橋爪智 2 鬼

まとめ13超音波 モーター 風

20150522 橋爪智 2 鬼

コイル 電気刺激 Electrovibration

振動 音 お湯

なかの

Temporally Consistent Disparity and Optical Flow via Efficient Spatio-temporal Filtering1

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示した

議論論はあるか

時間的に一定の視差を算出する手法静止画ステレオよりも精度度が良良いことを示す従来よりも推定精度度が良良いオプティカルフローも算出する

一枚の静止画に対するフィルタリング[1]をステレオ動画に拡張している

ケンブリッジのステレオ動画のデータセットを利利用 実写動画に対する比較も行行うノイズ耐性も検証する

フィルタベースとエネルギーベースの関係性を良良り理理解することで推定精度度を上げる

実装が簡単でリアルタイム視差推定が可能

Fast Cost-Volume Filtering for Visual Correspondence and Beyond [Rhemann C Hosni A Bleyer M Rother C Gelautz M CVPR2011] Real-time Spatiotemporal Stereo Matching Using the Dual-Cross-Bilateral Grid [Richardt C Orr D Davies I Criminisi A Dodgson NA ECCV2010] Secrets of optical flow estimation and their principles [Sun D Roth S Black MJ 2010] Motion estimation with non-local total variation regularization [Werlberger M Pock T Bischof H CVPR2010] Temporally Consistent Disparity Maps from Uncalibrated Stereo Videos [Bleyer M Gelatuz M ISPA2011]

なかの

SymStereo Matching using Induced Symmetry (2014)2

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示した

議論論はあるか

画像の対称性を用いてステレオマッチングを行行う 左右の画像を反転させて重ね合わせることで対称性を測る

絵的な類似の代わりに対称性を使う今まで対称性を用いる手法はなく新規性が大きい

三つのSymmetry-baseの手法で精度度を検証従来手法よりも精度度が向上しているMiddlebury Oxford Corridorfountain-P11のデータセット使用

ステレオの問題である不不連続な箇所オクルージョン部分は未解決である演算時間はやや増加

1-Dラインのコストを考える今までは撮像面に対して平行行な平面でデプスを考えていたが垂直な平面を考える

BT[Birchfield and Tomasi 1998] Census transform[Zabih and Woodfill 1994] Log N[Kovesi 1997] radio-metoric differences[Hirschmuller Scharstein 2009]

なかの

Camouflaging an Object from Many Viewpoints3

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

多くの視点から三次元の物体をカモフラージュするカモフラージュによってオクルージョン部分の不不連続がどの程度度生じるか他の視点ではどれほどになるかの検証

MRF（Markov Random Fields）ベース

新しい三次元物体のカモフラージュモデルを構築 37種類のデータセットを作る

箱形の物体に対してカモフラージュ処理理を施し 結果を評価する

オクルージョン不不連続テクスチャの歪みが問題 照明や画像の貼りつけに制限あり

なかの

Aliasing Detection and Reduction in Plenoptic Imaging4

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

カメラアレイ撮影の角度度のエイリアシングを除去するエイリアシングの探索索と打ち消しを行行う

周波数領領域ではなく空間領領域で探索索を行行う

先行行研究がフィルタデモザイキング再パラメータ調整などの前処理理でエイリアシング除去を行行うのに対しエイリアシング探索索後にリフォーカスの段階でエイリアシングを取り除く

8times8の平行行カメラアレイで検証するカメラ間の 基線長は70mm

今回は基線長が長いデータセットを使った 次はLytroなどのマイクロレンズアレイで検証する

Globally consistent multi-label assignment on the ray space of 4d light fields [S Wanner C Straehle B Goldluecke CVPR2013] Lineassisted light field triangulation and stereo matching [Z Yu X Guo H Lin A Lumsdaine J Yu ICCV 2013]

なかの

Globally Consistent Multi-Label Assignment on the Ray Space of 4D Light Fields5

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

四次元ライトフィールドの光線情報において マルチラベルの領領域分割を行行う

深度度情報光線情報を用いて領領域分割することで 二次元（空間）情報だけでは分割が難しかった 領領域を分割可能とする

The light field camera Extended depth of field aliasing and superresolution [T Bishop P Favaro IEEE Transactions on Pattern Analysis and Machine Intelligence 2012]

なかの

Line Assisted Light Field Triangulation and Stereo Matching6

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

光線情報を利利用してステレオマッチングの精度度を 向上させる手法三角測量量の誤差を減らす

Light Field Stereo Matchingとかいう手法 グラフ構造を作成

Variational light field analysis for disparity estimation and super-resolution [S Wanner and B Goldlumluecke 2013]

なかの

Adaptive stereo similarity fusion using confidence measures 20157

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

ステレオマッチングの新しい方式fusion weightsを提案複数の手法を組み合わせてコスト計算を行行う手法付録に既存手法のコスト関数一覧あり

パラメータに依存する手法を用いないことで高速化を図っている

一つのアルゴリズムでは異異なる特性を持つ領領域全てに対して適切切なマッチングはできない複数を組み合わせることでそれを補う13種と多い

middleburyとKITTIのデータセットで評価

一枚あたり03sと高速だが001sとより高速なアルゴリズムが存在する

Segment-based stereo matching using belief propagation and a self-adapting dissimilarity measure [A Klaus M Sormann K Karner ICPR2006] On building an accurate stereo matching system on graphics hardware [X Mei X Sun M Zhou S Jiao H Wang X Zhang ICCV2011] Similarity measures for depth estimation [K Wegner O Stankiewicz 3DTV-CON2009] On accurate dense stereo-matching using a local adaptive multi-cost approach [C Stentoumis L Grammatikopoulos I Kalisperakis G Karras ISPRS2014] A quantitative evaluation of confidence measures for stereo vision [X Hu P Mordohai PAMI2012]

なかの

SIMILARITY MEASURE FOR DEPTH ESTIMATIOM 20098

どんなもの

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

4種類の視差推定アルゴリズムを組み合わせている 類似度度の選択性の解析

Belief Propagationの枠組みを用いる

名古屋大学の多視点データベースを利利用

HHI Test Material for 3D Video [I Feldmann M Muller F Zilly R Tanger A SmolicP Kauff T Wiegand 2008] Multiview Video Test Sequence and Camera Parameters [Yo-Sung Ho Eun-Kyung Lee and Cheon Lee 2008] 1D Parallel Test Sequences for MPEG-FTV [M Tanimoto T Fujii N Fukushima 2008] Non-parametric Local Transforms for Computing Visual Correspondence [R Zabih J Woodfill 1994]

なかの

Spatiotemporal Stereo via Spatiotemporal Quadric Element (Stequel) Matching9

どんなもの

技術や手法のキモはどこ

新しいマッチング手法を提案動き考慮することなく時間情報を取り込むことができる 時間方向のエピ線を考える

オプティカルフロー推定は3D境界や低テクスチャで弱いが提案手法はロバストである

なかの

Depth Video Enhancement Based on Weighted Mode Filtering10

どんなもの

議論論はある

ノイズを含んだ低解像度度のデプスマップの質を高める手法（超解像度度とデノイズ）時間方向も使用簡単なオプティカルフローを計算し利利用する

非反復復アルゴリズムのためGPUに載せやすく高速化が考えられる

なかの

Fast Bilateral-Space Stereo for Synthetic Defocus11

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

議論論はある

次に読むべき論論文は

高速な自由焦点ぼけ画像の作成

Bilateral-spaceを提案

従来研究よりも10から100倍速くぼけ具合の精度度も良良い

ぼけを作成するというアプリケーションに利利用する距離離という面では提案手法が有益であるが実測的な距離離という面での精度度は悪い背景と前景が同じ色で近くにある場合同一ととらえてしまう

Efficient high-resolution stereo matching using local plane sweeps [S N Sinha D Scharstein and R SzeliskiCVPR2014] Bilateral filtering-based optical flow estimation with occlusion detection [J Xiao H Cheng H Sawhney C Rao and M IsnardiECCV2006] Efficient nonlocal regularization for optical flow [P Krumlahenbumluhl and V KoltunECCV2012] Real-time spatiotemporal stereo matching using the dual-cross-bilateral grid [C Richardt D Orr I Davies A Criminisi and N A DodgsonECCV2010]

どうやって有効性を示した視差推定の精度度はmiddleburyKITTI

なかの

Robust Spatiotemporal Stereo for Dynamic Scenes12

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

ステレオ動画のフレーム間情報を取り入れることでノイズ耐性を向上させるまた動きの大きなものも考える

時間を含めたウインドウの提案自動的にそのような変化に対応する画像領領域を検出する

従来の時空間ステレオと比べ大きな動きによる急激な視差の時間変化に対して頑健である

なかの

Spacetime Stereo A Unifying Framework for Depth from Triangulation13

どんなもの

先行行研究と比べてどこがすごい

space time stereoを提案ステレオカメラの視差推定でも構造光を用いた視差推定でも利利用可能 動的なシーンでの利利用も可能

フレームごとマッチングを取っていたが複数フレームでのマッチングを可能とした

なかの

Learning to Select and Order Vacation Photographs (Disney research)14

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示したあまりにもたくさん撮影した写真たちから自動的にフォトアルバムを作成する研究

複雑な視覚での区別を試みたのはこの論論文が初

５つの異異なるトピックから63の個人的な写真コレクションのデータセットを利利用し定量量的に評価する

写真間の差別かを定義する顔全体の絵何が写っているか写っていないかを評価する

Jointly aligning and segmenting multiple web photo streams for the inference of collective photo storylines [G Kim and E P Xing CVPR2013] Photo sequencing [T Basha Y Moses and S Avidan CVPR2012]

なかの

A Taxonomy and Evaluation of Dense Two-Frame Stereo Correspondence Algorithms15

どんなもの

どうやって有効性を示した

次に読むべき論論文は

ステレオマッチングに関する分類を行行う 新たなデータセットを作成する

というよりも他の手法が有効性を示すことができるようにデータセットを作成した 今ではmiddleburyのデータセットと言えばステレオ業界では超有名

High-resolution stereo datasets with subpixel-accurate ground truth

なかの

Discriminability Limits in Spatio-Temporal Stereo Block Matching1

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

spatio-temporal disparity estimationの根本的な前提の正当性を解析しマッチング処理理の際に動きが助けとなる程度度を決定する

時空間マッチングのエラーを分析し誤りの原因を確率率率で導出する（フレーム数動きの分散画像特徴ノイズの関数）

[34243334]は時空間マッチングの利利点を指摘していたが本論論文はマッチング精度度の向上のために動きを用いる手法の程度度や性質を研究する

6つのステレオビデオを用いて検証を行行った

Spacetime stereo Shape recovery for dynamic scenes [L Zhang B Curless and S Seitz CVPR2003] Spatiotemporal stereo and scene flow via stequel matching [M Sizintsev and R Wildes PAMI2012] Temporally consistent disparity and optical flow via efficient spatio-temporal filtering [A Hosni C Rhemann M Bleyer and M Gelautz PRCAIVT2012] Spacetime stereo A unifying framework for depth from triangulation [PAMI2005] Dynamic depth recovery from multiple synchronized video streams [H Tao H Sawhney and R Kumar CVPR2001] Spatiotemporal descriptor for wide-baseline stereo reconstruction of non-rigid and ambiguous scenes [ECCV2003]

なかの

Depth-Based Patch Scaling for Content-Aware Stereo Image Completion2

どんなもの

どうやって有効性を示した

ステレオでデプスを取り物体の三次元情報を使ってインペインティングを行行う

bookのデータセット背景が繰り返しパターンが多いものを使っている

なかの

Fast Semi-dense Surface Reconstruction from Stereoscopic Video in Laparoscopic Surgery3

どんなもの

手法の流流れ

次に読むべき論論文は

腹腔内手術の際にステレオビデオから高速に物体の三次元再構成を行行う研究

Evaluation of stereo matching costs on images with radiometric differences [Hirschmueller H Scharstein D PAMI2008]

スコープカメラから画像取得GPUで演算する 視差を算出しフィルタにかける距離離に変換 点群を再びフィルタにかけて三次元再構成

なかの

3D Reconstruction from Accidental Motion4

どんなもの

技術や手法のキモはどこ

議論論はある

数秒のビデオ（単眼）から三次元再構成を行行う 手ぶれなどの動きから再構成が可能で特定の動きや機材を必要としない

短い基線長でも再構成が可能（3mmの基線長）

基線長が短いため背景の精度度が低くなる リフォーカス画像作成には十分 練習では上手く動作したが検証がまだ必要

なかの

Panoramic Video from Unstructured Camera Arrays5

どんなもの

技術や手法のキモはどこ

議論論はある

複数のカメラを用いたパノラマ撮影を行行う その際に不不自然さがないような動画を作成する

不不自然さを感じる感覚特性を提示しそれにのっとって対策を講じている

一つのカメラの解像度度と品質を向上させるよりも複数台のカメラを組み合わせることがはるかに簡単で有益である専門家でなくてもGoProのカメラセットを組み合わせることは容易易

カメラの配置は厳密に決められていない完璧な時間同期やローリングシャッターの不不足のような実撮影での問題もクリアしている

先行行研究と比べてどこがすごい

どうやって有効性を示した左のシステムは14台のカメラを使用 右のシステムはGoProを5台使用

Disney 201558

なかの

Floating Scale Surface Reconstruction6

どんなもの

技術や手法のキモはどこ

流流動的にスケールを変えられる三次元再構成手法

サンプル規模に依存するパラメータがない rarrどのスケールのサンプルにも対応できる

siggraph2014

なかの

A Super Resolution Reconstruction Scheme for Mixed Spatio-Temporal Stereo Video7

どんなもの

技術や手法のキモはどこ

ビデオ超解像アルゴリズム

二台のカメラを使用 一台は低解像度度で高速一台は高解像度度で低速

HHI 3DV ftp siteのBookarrivalとbeergadenを使用どうやって有効性を示した

なかの

What Is a Good Day for Outdoor Photometric Stereo8

どんなもの

先行行研究と比べてどこがすごい

議論論はある

次に読むべき論論文は

屋外における照度度差があるステレオの研究 屋外でステレオを行行う際に有利利or不不利利な日照条件を明らかにする

点光源を用いた研究は行行われていたが屋外での研究はされていなかった

晴れより曇りの方が精度度が良良い雲があるから特徴量量を取りやすい雑音を白色ガウスモデルを想定 季節ごとのデータセットを利利用してみても良良い

Time-lapse photometric stereo and applications [F Shen K Sunkavalli N Bonneel S Rusinkiewicz H Pfisterand X Tong2014] Outdoor photometric stereo [L-F Yu S-K Yeung Y-W Tai D Terzopoulos and T FChan ICCP2013]

どうやって有効性を示した屋外の照明に関するHDR環境マップのデータベースを利利用

Disney 2015424

なかの

COLORBRUSH ANIMATED DIFFUSION FOR INTUITIVE COLORIZATION SIMULATING WATER PAINTING 9

どんなものアニメを水彩画で描いたように変換する 水彩画を描くには経験が必要であるがそれを作成するアルゴリズムを考案絵具が水によりどうにじむかシュミレーションしている

Disney 20141027 ICIP2014

次に読むべき論論文はGabor-space geodesic active contoursrdquo In Algebraic Frames for the Perception-Action Cycle [C Sagiv NA Sochen and YY Zeevi 2000] Practical temporal consistency for image-based graphics applications [M Lang O Wang T Aydin A Smolic and M Gross SIGGRAPH2012] Computer-Generated Watercolor [CJ Curtis SE Anderson JE Seims KW Fleischer and DH Salesin SIGGRAPH1997]

なかの

From Sound to Sight Using Audio Processing to enable Visible Light Communication 10

どんなもの光に情報を載せる技術プロジェクトページがあって光関係の研究が8個載っている

httpwwwdisneyresearchcomprojectvisible-light-communication

ビデオのURL httpwwwdisneyresearchcomwpcontentuploadsPub_InvisibleLightCommunication_Siggraph14_videomp4

• 201211106_KeisukeKawahara
• 201311421_KeitaKanai_02
• 201313095_AkiraIshii_02
• 201413109_YuukiKubo_02
• 201513110_SatoshiHashizume_02
• 鬼輪講マラソン③_1
• 鬼輪講マラソン③_2

STIMTAC a Tactile Input Device with Programmable Friction13Michel Amberg Freacutedeacuteric Giraud Betty Semail Paolo Olivo Geacutery Casiez Nicolas Roussel13

どのようなものか 触感を与えられるタッチデバイス 先行研究と比べてどこがすごいか LATPaD サイズ大きいノイズが大きい TeslaTouch 高い電圧付加が必要GNDに接続しなければいけない

技術や手法のキモ 「Squeeze Film Effect」超音波を用いて振動を与える 圧電性セラミックを電極にコーディング 指トラッキングは力センサを用いる 活用法 マウスキーボード絵を描く 関連論文 LATPaD[Vincent et al 2011] TeslaTouch[Bau et al 2010]

20150522 橋爪智 2 鬼

Surround Haptics Tactile Feedback for Immersive Gaming Experiences Ali Israr Seung-Chan Kim Ivan Poupyrev Jan Stec13

どのようなものか ゲームに合わせて高解像度の触覚フィードバックをユーザーに与える椅子 先行研究と比べてどこがすごいか 荒く配置した安価な振動アクチュエータで高解像度の触覚フィードバックを行える 一点の振動連続した動き範囲の振動などを再現

技術や手法のキモ 仮想的な振動アクチュエータをいくつかの振動アクチュエータを使って作り出す physical-physicalphysical-virtualvirtual-virtual ゲームにHaptics Engineを導入しHaptics APIを用いてHaptic Displayを操作する 関連論文 Exploring Surround Haptics Displays[Israr et al 2010]

20150522 橋爪智 2 鬼

Audio-Haptic Feedback in Mobile Phones Angela Chang Conor OrsquoSullivan13

どのようなものか haptics機能のついてない携帯電話にオーディオ機能を利用した触覚フィードバックを追加する 先行研究と比べてどこがすごいか 簡単に作れてnon-haptic mobile devicesでも大丈夫 技術や手法のキモ 「MultiFunction Transducer(MFT)」 スピーカーから音と信号の両方を出力できる

bull  Haptic Inheritance 　　音を2つの周波数帯に分ける bull  Synthesis and Matching 　　低周波数帯(20-300Hz)を使い触感を伝える 有効性の検討 42人の人を対象に実験を行う83の人が触感を感じた

20150522 橋爪智 2 鬼

Resolution of Sleep Deprivation Problems using ZZZoo Pillows13Shunsuke Yanaka Motoki Ishida13

どのようなものか 近年不眠症の人が多い rarr誰かと接していると安心し睡眠に導入しやすくなる rarrまるで添い寝をしているようなリアルな抱きまくらを使う 技術や手法のキモ breathing sensation 風船を使って人の呼吸を再現肺の形の風船弱く長い呼吸をする

heating お湯を使って人の体温を再現45 有効性の確認 84人の人が実験 呼吸が睡眠を誘ったかrarr61 体温が睡眠を誘ったかrarr85 関連論文 The Impact of Sleep Disorders on Social Life[Komada et al 2007]

20150522 橋爪智 2 鬼

まとめ13超音波 モーター 風

20150522 橋爪智 2 鬼

コイル 電気刺激 Electrovibration

振動 音 お湯

なかの

Temporally Consistent Disparity and Optical Flow via Efficient Spatio-temporal Filtering1

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示した

議論論はあるか

時間的に一定の視差を算出する手法静止画ステレオよりも精度度が良良いことを示す従来よりも推定精度度が良良いオプティカルフローも算出する

一枚の静止画に対するフィルタリング[1]をステレオ動画に拡張している

ケンブリッジのステレオ動画のデータセットを利利用 実写動画に対する比較も行行うノイズ耐性も検証する

フィルタベースとエネルギーベースの関係性を良良り理理解することで推定精度度を上げる

実装が簡単でリアルタイム視差推定が可能

Fast Cost-Volume Filtering for Visual Correspondence and Beyond [Rhemann C Hosni A Bleyer M Rother C Gelautz M CVPR2011] Real-time Spatiotemporal Stereo Matching Using the Dual-Cross-Bilateral Grid [Richardt C Orr D Davies I Criminisi A Dodgson NA ECCV2010] Secrets of optical flow estimation and their principles [Sun D Roth S Black MJ 2010] Motion estimation with non-local total variation regularization [Werlberger M Pock T Bischof H CVPR2010] Temporally Consistent Disparity Maps from Uncalibrated Stereo Videos [Bleyer M Gelatuz M ISPA2011]

なかの

SymStereo Matching using Induced Symmetry (2014)2

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示した

議論論はあるか

画像の対称性を用いてステレオマッチングを行行う 左右の画像を反転させて重ね合わせることで対称性を測る

絵的な類似の代わりに対称性を使う今まで対称性を用いる手法はなく新規性が大きい

三つのSymmetry-baseの手法で精度度を検証従来手法よりも精度度が向上しているMiddlebury Oxford Corridorfountain-P11のデータセット使用

ステレオの問題である不不連続な箇所オクルージョン部分は未解決である演算時間はやや増加

1-Dラインのコストを考える今までは撮像面に対して平行行な平面でデプスを考えていたが垂直な平面を考える

BT[Birchfield and Tomasi 1998] Census transform[Zabih and Woodfill 1994] Log N[Kovesi 1997] radio-metoric differences[Hirschmuller Scharstein 2009]

なかの

Camouflaging an Object from Many Viewpoints3

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

多くの視点から三次元の物体をカモフラージュするカモフラージュによってオクルージョン部分の不不連続がどの程度度生じるか他の視点ではどれほどになるかの検証

MRF（Markov Random Fields）ベース

新しい三次元物体のカモフラージュモデルを構築 37種類のデータセットを作る

箱形の物体に対してカモフラージュ処理理を施し 結果を評価する

オクルージョン不不連続テクスチャの歪みが問題 照明や画像の貼りつけに制限あり

なかの

Aliasing Detection and Reduction in Plenoptic Imaging4

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

カメラアレイ撮影の角度度のエイリアシングを除去するエイリアシングの探索索と打ち消しを行行う

周波数領領域ではなく空間領領域で探索索を行行う

先行行研究がフィルタデモザイキング再パラメータ調整などの前処理理でエイリアシング除去を行行うのに対しエイリアシング探索索後にリフォーカスの段階でエイリアシングを取り除く

8times8の平行行カメラアレイで検証するカメラ間の 基線長は70mm

今回は基線長が長いデータセットを使った 次はLytroなどのマイクロレンズアレイで検証する

Globally consistent multi-label assignment on the ray space of 4d light fields [S Wanner C Straehle B Goldluecke CVPR2013] Lineassisted light field triangulation and stereo matching [Z Yu X Guo H Lin A Lumsdaine J Yu ICCV 2013]

なかの

Globally Consistent Multi-Label Assignment on the Ray Space of 4D Light Fields5

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

四次元ライトフィールドの光線情報において マルチラベルの領領域分割を行行う

深度度情報光線情報を用いて領領域分割することで 二次元（空間）情報だけでは分割が難しかった 領領域を分割可能とする

The light field camera Extended depth of field aliasing and superresolution [T Bishop P Favaro IEEE Transactions on Pattern Analysis and Machine Intelligence 2012]

なかの

Line Assisted Light Field Triangulation and Stereo Matching6

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

光線情報を利利用してステレオマッチングの精度度を 向上させる手法三角測量量の誤差を減らす

Light Field Stereo Matchingとかいう手法 グラフ構造を作成

Variational light field analysis for disparity estimation and super-resolution [S Wanner and B Goldlumluecke 2013]

なかの

Adaptive stereo similarity fusion using confidence measures 20157

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

ステレオマッチングの新しい方式fusion weightsを提案複数の手法を組み合わせてコスト計算を行行う手法付録に既存手法のコスト関数一覧あり

パラメータに依存する手法を用いないことで高速化を図っている

一つのアルゴリズムでは異異なる特性を持つ領領域全てに対して適切切なマッチングはできない複数を組み合わせることでそれを補う13種と多い

middleburyとKITTIのデータセットで評価

一枚あたり03sと高速だが001sとより高速なアルゴリズムが存在する

Segment-based stereo matching using belief propagation and a self-adapting dissimilarity measure [A Klaus M Sormann K Karner ICPR2006] On building an accurate stereo matching system on graphics hardware [X Mei X Sun M Zhou S Jiao H Wang X Zhang ICCV2011] Similarity measures for depth estimation [K Wegner O Stankiewicz 3DTV-CON2009] On accurate dense stereo-matching using a local adaptive multi-cost approach [C Stentoumis L Grammatikopoulos I Kalisperakis G Karras ISPRS2014] A quantitative evaluation of confidence measures for stereo vision [X Hu P Mordohai PAMI2012]

なかの

SIMILARITY MEASURE FOR DEPTH ESTIMATIOM 20098

どんなもの

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

4種類の視差推定アルゴリズムを組み合わせている 類似度度の選択性の解析

Belief Propagationの枠組みを用いる

名古屋大学の多視点データベースを利利用

HHI Test Material for 3D Video [I Feldmann M Muller F Zilly R Tanger A SmolicP Kauff T Wiegand 2008] Multiview Video Test Sequence and Camera Parameters [Yo-Sung Ho Eun-Kyung Lee and Cheon Lee 2008] 1D Parallel Test Sequences for MPEG-FTV [M Tanimoto T Fujii N Fukushima 2008] Non-parametric Local Transforms for Computing Visual Correspondence [R Zabih J Woodfill 1994]

なかの

Spatiotemporal Stereo via Spatiotemporal Quadric Element (Stequel) Matching9

どんなもの

技術や手法のキモはどこ

新しいマッチング手法を提案動き考慮することなく時間情報を取り込むことができる 時間方向のエピ線を考える

オプティカルフロー推定は3D境界や低テクスチャで弱いが提案手法はロバストである

なかの

Depth Video Enhancement Based on Weighted Mode Filtering10

どんなもの

議論論はある

ノイズを含んだ低解像度度のデプスマップの質を高める手法（超解像度度とデノイズ）時間方向も使用簡単なオプティカルフローを計算し利利用する

非反復復アルゴリズムのためGPUに載せやすく高速化が考えられる

なかの

Fast Bilateral-Space Stereo for Synthetic Defocus11

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

議論論はある

次に読むべき論論文は

高速な自由焦点ぼけ画像の作成

Bilateral-spaceを提案

従来研究よりも10から100倍速くぼけ具合の精度度も良良い

ぼけを作成するというアプリケーションに利利用する距離離という面では提案手法が有益であるが実測的な距離離という面での精度度は悪い背景と前景が同じ色で近くにある場合同一ととらえてしまう

Efficient high-resolution stereo matching using local plane sweeps [S N Sinha D Scharstein and R SzeliskiCVPR2014] Bilateral filtering-based optical flow estimation with occlusion detection [J Xiao H Cheng H Sawhney C Rao and M IsnardiECCV2006] Efficient nonlocal regularization for optical flow [P Krumlahenbumluhl and V KoltunECCV2012] Real-time spatiotemporal stereo matching using the dual-cross-bilateral grid [C Richardt D Orr I Davies A Criminisi and N A DodgsonECCV2010]

どうやって有効性を示した視差推定の精度度はmiddleburyKITTI

なかの

Robust Spatiotemporal Stereo for Dynamic Scenes12

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

ステレオ動画のフレーム間情報を取り入れることでノイズ耐性を向上させるまた動きの大きなものも考える

時間を含めたウインドウの提案自動的にそのような変化に対応する画像領領域を検出する

従来の時空間ステレオと比べ大きな動きによる急激な視差の時間変化に対して頑健である

なかの

Spacetime Stereo A Unifying Framework for Depth from Triangulation13

どんなもの

先行行研究と比べてどこがすごい

space time stereoを提案ステレオカメラの視差推定でも構造光を用いた視差推定でも利利用可能 動的なシーンでの利利用も可能

フレームごとマッチングを取っていたが複数フレームでのマッチングを可能とした

なかの

Learning to Select and Order Vacation Photographs (Disney research)14

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示したあまりにもたくさん撮影した写真たちから自動的にフォトアルバムを作成する研究

複雑な視覚での区別を試みたのはこの論論文が初

５つの異異なるトピックから63の個人的な写真コレクションのデータセットを利利用し定量量的に評価する

写真間の差別かを定義する顔全体の絵何が写っているか写っていないかを評価する

Jointly aligning and segmenting multiple web photo streams for the inference of collective photo storylines [G Kim and E P Xing CVPR2013] Photo sequencing [T Basha Y Moses and S Avidan CVPR2012]

なかの

A Taxonomy and Evaluation of Dense Two-Frame Stereo Correspondence Algorithms15

どんなもの

どうやって有効性を示した

次に読むべき論論文は

ステレオマッチングに関する分類を行行う 新たなデータセットを作成する

というよりも他の手法が有効性を示すことができるようにデータセットを作成した 今ではmiddleburyのデータセットと言えばステレオ業界では超有名

High-resolution stereo datasets with subpixel-accurate ground truth

なかの

Discriminability Limits in Spatio-Temporal Stereo Block Matching1

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

spatio-temporal disparity estimationの根本的な前提の正当性を解析しマッチング処理理の際に動きが助けとなる程度度を決定する

時空間マッチングのエラーを分析し誤りの原因を確率率率で導出する（フレーム数動きの分散画像特徴ノイズの関数）

[34243334]は時空間マッチングの利利点を指摘していたが本論論文はマッチング精度度の向上のために動きを用いる手法の程度度や性質を研究する

6つのステレオビデオを用いて検証を行行った

Spacetime stereo Shape recovery for dynamic scenes [L Zhang B Curless and S Seitz CVPR2003] Spatiotemporal stereo and scene flow via stequel matching [M Sizintsev and R Wildes PAMI2012] Temporally consistent disparity and optical flow via efficient spatio-temporal filtering [A Hosni C Rhemann M Bleyer and M Gelautz PRCAIVT2012] Spacetime stereo A unifying framework for depth from triangulation [PAMI2005] Dynamic depth recovery from multiple synchronized video streams [H Tao H Sawhney and R Kumar CVPR2001] Spatiotemporal descriptor for wide-baseline stereo reconstruction of non-rigid and ambiguous scenes [ECCV2003]

なかの

Depth-Based Patch Scaling for Content-Aware Stereo Image Completion2

どんなもの

どうやって有効性を示した

ステレオでデプスを取り物体の三次元情報を使ってインペインティングを行行う

bookのデータセット背景が繰り返しパターンが多いものを使っている

なかの

Fast Semi-dense Surface Reconstruction from Stereoscopic Video in Laparoscopic Surgery3

どんなもの

手法の流流れ

次に読むべき論論文は

腹腔内手術の際にステレオビデオから高速に物体の三次元再構成を行行う研究

Evaluation of stereo matching costs on images with radiometric differences [Hirschmueller H Scharstein D PAMI2008]

スコープカメラから画像取得GPUで演算する 視差を算出しフィルタにかける距離離に変換 点群を再びフィルタにかけて三次元再構成

なかの

3D Reconstruction from Accidental Motion4

どんなもの

技術や手法のキモはどこ

議論論はある

数秒のビデオ（単眼）から三次元再構成を行行う 手ぶれなどの動きから再構成が可能で特定の動きや機材を必要としない

短い基線長でも再構成が可能（3mmの基線長）

基線長が短いため背景の精度度が低くなる リフォーカス画像作成には十分 練習では上手く動作したが検証がまだ必要

なかの

Panoramic Video from Unstructured Camera Arrays5

どんなもの

技術や手法のキモはどこ

議論論はある

複数のカメラを用いたパノラマ撮影を行行う その際に不不自然さがないような動画を作成する

不不自然さを感じる感覚特性を提示しそれにのっとって対策を講じている

一つのカメラの解像度度と品質を向上させるよりも複数台のカメラを組み合わせることがはるかに簡単で有益である専門家でなくてもGoProのカメラセットを組み合わせることは容易易

カメラの配置は厳密に決められていない完璧な時間同期やローリングシャッターの不不足のような実撮影での問題もクリアしている

先行行研究と比べてどこがすごい

どうやって有効性を示した左のシステムは14台のカメラを使用 右のシステムはGoProを5台使用

Disney 201558

なかの

Floating Scale Surface Reconstruction6

どんなもの

技術や手法のキモはどこ

流流動的にスケールを変えられる三次元再構成手法

サンプル規模に依存するパラメータがない rarrどのスケールのサンプルにも対応できる

siggraph2014

なかの

A Super Resolution Reconstruction Scheme for Mixed Spatio-Temporal Stereo Video7

どんなもの

技術や手法のキモはどこ

ビデオ超解像アルゴリズム

二台のカメラを使用 一台は低解像度度で高速一台は高解像度度で低速

HHI 3DV ftp siteのBookarrivalとbeergadenを使用どうやって有効性を示した

なかの

What Is a Good Day for Outdoor Photometric Stereo8

どんなもの

先行行研究と比べてどこがすごい

議論論はある

次に読むべき論論文は

屋外における照度度差があるステレオの研究 屋外でステレオを行行う際に有利利or不不利利な日照条件を明らかにする

点光源を用いた研究は行行われていたが屋外での研究はされていなかった

晴れより曇りの方が精度度が良良い雲があるから特徴量量を取りやすい雑音を白色ガウスモデルを想定 季節ごとのデータセットを利利用してみても良良い

Time-lapse photometric stereo and applications [F Shen K Sunkavalli N Bonneel S Rusinkiewicz H Pfisterand X Tong2014] Outdoor photometric stereo [L-F Yu S-K Yeung Y-W Tai D Terzopoulos and T FChan ICCP2013]

どうやって有効性を示した屋外の照明に関するHDR環境マップのデータベースを利利用

Disney 2015424

なかの

COLORBRUSH ANIMATED DIFFUSION FOR INTUITIVE COLORIZATION SIMULATING WATER PAINTING 9

どんなものアニメを水彩画で描いたように変換する 水彩画を描くには経験が必要であるがそれを作成するアルゴリズムを考案絵具が水によりどうにじむかシュミレーションしている

Disney 20141027 ICIP2014

次に読むべき論論文はGabor-space geodesic active contoursrdquo In Algebraic Frames for the Perception-Action Cycle [C Sagiv NA Sochen and YY Zeevi 2000] Practical temporal consistency for image-based graphics applications [M Lang O Wang T Aydin A Smolic and M Gross SIGGRAPH2012] Computer-Generated Watercolor [CJ Curtis SE Anderson JE Seims KW Fleischer and DH Salesin SIGGRAPH1997]

なかの

From Sound to Sight Using Audio Processing to enable Visible Light Communication 10

どんなもの光に情報を載せる技術プロジェクトページがあって光関係の研究が8個載っている

httpwwwdisneyresearchcomprojectvisible-light-communication

ビデオのURL httpwwwdisneyresearchcomwpcontentuploadsPub_InvisibleLightCommunication_Siggraph14_videomp4

• 201211106_KeisukeKawahara
• 201311421_KeitaKanai_02
• 201313095_AkiraIshii_02
• 201413109_YuukiKubo_02
• 201513110_SatoshiHashizume_02
• 鬼輪講マラソン③_1
• 鬼輪講マラソン③_2

Surround Haptics Tactile Feedback for Immersive Gaming Experiences Ali Israr Seung-Chan Kim Ivan Poupyrev Jan Stec13

どのようなものか ゲームに合わせて高解像度の触覚フィードバックをユーザーに与える椅子 先行研究と比べてどこがすごいか 荒く配置した安価な振動アクチュエータで高解像度の触覚フィードバックを行える 一点の振動連続した動き範囲の振動などを再現

技術や手法のキモ 仮想的な振動アクチュエータをいくつかの振動アクチュエータを使って作り出す physical-physicalphysical-virtualvirtual-virtual ゲームにHaptics Engineを導入しHaptics APIを用いてHaptic Displayを操作する 関連論文 Exploring Surround Haptics Displays[Israr et al 2010]

20150522 橋爪智 2 鬼

Audio-Haptic Feedback in Mobile Phones Angela Chang Conor OrsquoSullivan13

どのようなものか haptics機能のついてない携帯電話にオーディオ機能を利用した触覚フィードバックを追加する 先行研究と比べてどこがすごいか 簡単に作れてnon-haptic mobile devicesでも大丈夫 技術や手法のキモ 「MultiFunction Transducer(MFT)」 スピーカーから音と信号の両方を出力できる

bull  Haptic Inheritance 　　音を2つの周波数帯に分ける bull  Synthesis and Matching 　　低周波数帯(20-300Hz)を使い触感を伝える 有効性の検討 42人の人を対象に実験を行う83の人が触感を感じた

20150522 橋爪智 2 鬼

Resolution of Sleep Deprivation Problems using ZZZoo Pillows13Shunsuke Yanaka Motoki Ishida13

どのようなものか 近年不眠症の人が多い rarr誰かと接していると安心し睡眠に導入しやすくなる rarrまるで添い寝をしているようなリアルな抱きまくらを使う 技術や手法のキモ breathing sensation 風船を使って人の呼吸を再現肺の形の風船弱く長い呼吸をする

heating お湯を使って人の体温を再現45 有効性の確認 84人の人が実験 呼吸が睡眠を誘ったかrarr61 体温が睡眠を誘ったかrarr85 関連論文 The Impact of Sleep Disorders on Social Life[Komada et al 2007]

20150522 橋爪智 2 鬼

まとめ13超音波 モーター 風

20150522 橋爪智 2 鬼

コイル 電気刺激 Electrovibration

振動 音 お湯

なかの

Temporally Consistent Disparity and Optical Flow via Efficient Spatio-temporal Filtering1

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示した

議論論はあるか

時間的に一定の視差を算出する手法静止画ステレオよりも精度度が良良いことを示す従来よりも推定精度度が良良いオプティカルフローも算出する

一枚の静止画に対するフィルタリング[1]をステレオ動画に拡張している

ケンブリッジのステレオ動画のデータセットを利利用 実写動画に対する比較も行行うノイズ耐性も検証する

フィルタベースとエネルギーベースの関係性を良良り理理解することで推定精度度を上げる

実装が簡単でリアルタイム視差推定が可能

Fast Cost-Volume Filtering for Visual Correspondence and Beyond [Rhemann C Hosni A Bleyer M Rother C Gelautz M CVPR2011] Real-time Spatiotemporal Stereo Matching Using the Dual-Cross-Bilateral Grid [Richardt C Orr D Davies I Criminisi A Dodgson NA ECCV2010] Secrets of optical flow estimation and their principles [Sun D Roth S Black MJ 2010] Motion estimation with non-local total variation regularization [Werlberger M Pock T Bischof H CVPR2010] Temporally Consistent Disparity Maps from Uncalibrated Stereo Videos [Bleyer M Gelatuz M ISPA2011]

なかの

SymStereo Matching using Induced Symmetry (2014)2

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示した

議論論はあるか

画像の対称性を用いてステレオマッチングを行行う 左右の画像を反転させて重ね合わせることで対称性を測る

絵的な類似の代わりに対称性を使う今まで対称性を用いる手法はなく新規性が大きい

三つのSymmetry-baseの手法で精度度を検証従来手法よりも精度度が向上しているMiddlebury Oxford Corridorfountain-P11のデータセット使用

ステレオの問題である不不連続な箇所オクルージョン部分は未解決である演算時間はやや増加

1-Dラインのコストを考える今までは撮像面に対して平行行な平面でデプスを考えていたが垂直な平面を考える

BT[Birchfield and Tomasi 1998] Census transform[Zabih and Woodfill 1994] Log N[Kovesi 1997] radio-metoric differences[Hirschmuller Scharstein 2009]

なかの

Camouflaging an Object from Many Viewpoints3

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

多くの視点から三次元の物体をカモフラージュするカモフラージュによってオクルージョン部分の不不連続がどの程度度生じるか他の視点ではどれほどになるかの検証

MRF（Markov Random Fields）ベース

新しい三次元物体のカモフラージュモデルを構築 37種類のデータセットを作る

箱形の物体に対してカモフラージュ処理理を施し 結果を評価する

オクルージョン不不連続テクスチャの歪みが問題 照明や画像の貼りつけに制限あり

なかの

Aliasing Detection and Reduction in Plenoptic Imaging4

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

カメラアレイ撮影の角度度のエイリアシングを除去するエイリアシングの探索索と打ち消しを行行う

周波数領領域ではなく空間領領域で探索索を行行う

先行行研究がフィルタデモザイキング再パラメータ調整などの前処理理でエイリアシング除去を行行うのに対しエイリアシング探索索後にリフォーカスの段階でエイリアシングを取り除く

8times8の平行行カメラアレイで検証するカメラ間の 基線長は70mm

今回は基線長が長いデータセットを使った 次はLytroなどのマイクロレンズアレイで検証する

Globally consistent multi-label assignment on the ray space of 4d light fields [S Wanner C Straehle B Goldluecke CVPR2013] Lineassisted light field triangulation and stereo matching [Z Yu X Guo H Lin A Lumsdaine J Yu ICCV 2013]

なかの

Globally Consistent Multi-Label Assignment on the Ray Space of 4D Light Fields5

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

四次元ライトフィールドの光線情報において マルチラベルの領領域分割を行行う

深度度情報光線情報を用いて領領域分割することで 二次元（空間）情報だけでは分割が難しかった 領領域を分割可能とする

The light field camera Extended depth of field aliasing and superresolution [T Bishop P Favaro IEEE Transactions on Pattern Analysis and Machine Intelligence 2012]

なかの

Line Assisted Light Field Triangulation and Stereo Matching6

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

光線情報を利利用してステレオマッチングの精度度を 向上させる手法三角測量量の誤差を減らす

Light Field Stereo Matchingとかいう手法 グラフ構造を作成

Variational light field analysis for disparity estimation and super-resolution [S Wanner and B Goldlumluecke 2013]

なかの

Adaptive stereo similarity fusion using confidence measures 20157

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

ステレオマッチングの新しい方式fusion weightsを提案複数の手法を組み合わせてコスト計算を行行う手法付録に既存手法のコスト関数一覧あり

パラメータに依存する手法を用いないことで高速化を図っている

一つのアルゴリズムでは異異なる特性を持つ領領域全てに対して適切切なマッチングはできない複数を組み合わせることでそれを補う13種と多い

middleburyとKITTIのデータセットで評価

一枚あたり03sと高速だが001sとより高速なアルゴリズムが存在する

Segment-based stereo matching using belief propagation and a self-adapting dissimilarity measure [A Klaus M Sormann K Karner ICPR2006] On building an accurate stereo matching system on graphics hardware [X Mei X Sun M Zhou S Jiao H Wang X Zhang ICCV2011] Similarity measures for depth estimation [K Wegner O Stankiewicz 3DTV-CON2009] On accurate dense stereo-matching using a local adaptive multi-cost approach [C Stentoumis L Grammatikopoulos I Kalisperakis G Karras ISPRS2014] A quantitative evaluation of confidence measures for stereo vision [X Hu P Mordohai PAMI2012]

なかの

SIMILARITY MEASURE FOR DEPTH ESTIMATIOM 20098

どんなもの

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

4種類の視差推定アルゴリズムを組み合わせている 類似度度の選択性の解析

Belief Propagationの枠組みを用いる

名古屋大学の多視点データベースを利利用

HHI Test Material for 3D Video [I Feldmann M Muller F Zilly R Tanger A SmolicP Kauff T Wiegand 2008] Multiview Video Test Sequence and Camera Parameters [Yo-Sung Ho Eun-Kyung Lee and Cheon Lee 2008] 1D Parallel Test Sequences for MPEG-FTV [M Tanimoto T Fujii N Fukushima 2008] Non-parametric Local Transforms for Computing Visual Correspondence [R Zabih J Woodfill 1994]

なかの

Spatiotemporal Stereo via Spatiotemporal Quadric Element (Stequel) Matching9

どんなもの

技術や手法のキモはどこ

新しいマッチング手法を提案動き考慮することなく時間情報を取り込むことができる 時間方向のエピ線を考える

オプティカルフロー推定は3D境界や低テクスチャで弱いが提案手法はロバストである

なかの

Depth Video Enhancement Based on Weighted Mode Filtering10

どんなもの

議論論はある

ノイズを含んだ低解像度度のデプスマップの質を高める手法（超解像度度とデノイズ）時間方向も使用簡単なオプティカルフローを計算し利利用する

非反復復アルゴリズムのためGPUに載せやすく高速化が考えられる

なかの

Fast Bilateral-Space Stereo for Synthetic Defocus11

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

議論論はある

次に読むべき論論文は

高速な自由焦点ぼけ画像の作成

Bilateral-spaceを提案

従来研究よりも10から100倍速くぼけ具合の精度度も良良い

ぼけを作成するというアプリケーションに利利用する距離離という面では提案手法が有益であるが実測的な距離離という面での精度度は悪い背景と前景が同じ色で近くにある場合同一ととらえてしまう

Efficient high-resolution stereo matching using local plane sweeps [S N Sinha D Scharstein and R SzeliskiCVPR2014] Bilateral filtering-based optical flow estimation with occlusion detection [J Xiao H Cheng H Sawhney C Rao and M IsnardiECCV2006] Efficient nonlocal regularization for optical flow [P Krumlahenbumluhl and V KoltunECCV2012] Real-time spatiotemporal stereo matching using the dual-cross-bilateral grid [C Richardt D Orr I Davies A Criminisi and N A DodgsonECCV2010]

どうやって有効性を示した視差推定の精度度はmiddleburyKITTI

なかの

Robust Spatiotemporal Stereo for Dynamic Scenes12

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

ステレオ動画のフレーム間情報を取り入れることでノイズ耐性を向上させるまた動きの大きなものも考える

時間を含めたウインドウの提案自動的にそのような変化に対応する画像領領域を検出する

従来の時空間ステレオと比べ大きな動きによる急激な視差の時間変化に対して頑健である

なかの

Spacetime Stereo A Unifying Framework for Depth from Triangulation13

どんなもの

先行行研究と比べてどこがすごい

space time stereoを提案ステレオカメラの視差推定でも構造光を用いた視差推定でも利利用可能 動的なシーンでの利利用も可能

フレームごとマッチングを取っていたが複数フレームでのマッチングを可能とした

なかの

Learning to Select and Order Vacation Photographs (Disney research)14

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示したあまりにもたくさん撮影した写真たちから自動的にフォトアルバムを作成する研究

複雑な視覚での区別を試みたのはこの論論文が初

５つの異異なるトピックから63の個人的な写真コレクションのデータセットを利利用し定量量的に評価する

写真間の差別かを定義する顔全体の絵何が写っているか写っていないかを評価する

Jointly aligning and segmenting multiple web photo streams for the inference of collective photo storylines [G Kim and E P Xing CVPR2013] Photo sequencing [T Basha Y Moses and S Avidan CVPR2012]

なかの

A Taxonomy and Evaluation of Dense Two-Frame Stereo Correspondence Algorithms15

どんなもの

どうやって有効性を示した

次に読むべき論論文は

ステレオマッチングに関する分類を行行う 新たなデータセットを作成する

というよりも他の手法が有効性を示すことができるようにデータセットを作成した 今ではmiddleburyのデータセットと言えばステレオ業界では超有名

High-resolution stereo datasets with subpixel-accurate ground truth

なかの

Discriminability Limits in Spatio-Temporal Stereo Block Matching1

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

spatio-temporal disparity estimationの根本的な前提の正当性を解析しマッチング処理理の際に動きが助けとなる程度度を決定する

時空間マッチングのエラーを分析し誤りの原因を確率率率で導出する（フレーム数動きの分散画像特徴ノイズの関数）

[34243334]は時空間マッチングの利利点を指摘していたが本論論文はマッチング精度度の向上のために動きを用いる手法の程度度や性質を研究する

6つのステレオビデオを用いて検証を行行った

Spacetime stereo Shape recovery for dynamic scenes [L Zhang B Curless and S Seitz CVPR2003] Spatiotemporal stereo and scene flow via stequel matching [M Sizintsev and R Wildes PAMI2012] Temporally consistent disparity and optical flow via efficient spatio-temporal filtering [A Hosni C Rhemann M Bleyer and M Gelautz PRCAIVT2012] Spacetime stereo A unifying framework for depth from triangulation [PAMI2005] Dynamic depth recovery from multiple synchronized video streams [H Tao H Sawhney and R Kumar CVPR2001] Spatiotemporal descriptor for wide-baseline stereo reconstruction of non-rigid and ambiguous scenes [ECCV2003]

なかの

Depth-Based Patch Scaling for Content-Aware Stereo Image Completion2

どんなもの

どうやって有効性を示した

ステレオでデプスを取り物体の三次元情報を使ってインペインティングを行行う

bookのデータセット背景が繰り返しパターンが多いものを使っている

なかの

Fast Semi-dense Surface Reconstruction from Stereoscopic Video in Laparoscopic Surgery3

どんなもの

手法の流流れ

次に読むべき論論文は

腹腔内手術の際にステレオビデオから高速に物体の三次元再構成を行行う研究

Evaluation of stereo matching costs on images with radiometric differences [Hirschmueller H Scharstein D PAMI2008]

スコープカメラから画像取得GPUで演算する 視差を算出しフィルタにかける距離離に変換 点群を再びフィルタにかけて三次元再構成

なかの

3D Reconstruction from Accidental Motion4

どんなもの

技術や手法のキモはどこ

議論論はある

数秒のビデオ（単眼）から三次元再構成を行行う 手ぶれなどの動きから再構成が可能で特定の動きや機材を必要としない

短い基線長でも再構成が可能（3mmの基線長）

基線長が短いため背景の精度度が低くなる リフォーカス画像作成には十分 練習では上手く動作したが検証がまだ必要

なかの

Panoramic Video from Unstructured Camera Arrays5

どんなもの

技術や手法のキモはどこ

議論論はある

複数のカメラを用いたパノラマ撮影を行行う その際に不不自然さがないような動画を作成する

不不自然さを感じる感覚特性を提示しそれにのっとって対策を講じている

一つのカメラの解像度度と品質を向上させるよりも複数台のカメラを組み合わせることがはるかに簡単で有益である専門家でなくてもGoProのカメラセットを組み合わせることは容易易

カメラの配置は厳密に決められていない完璧な時間同期やローリングシャッターの不不足のような実撮影での問題もクリアしている

先行行研究と比べてどこがすごい

どうやって有効性を示した左のシステムは14台のカメラを使用 右のシステムはGoProを5台使用

Disney 201558

なかの

Floating Scale Surface Reconstruction6

どんなもの

技術や手法のキモはどこ

流流動的にスケールを変えられる三次元再構成手法

サンプル規模に依存するパラメータがない rarrどのスケールのサンプルにも対応できる

siggraph2014

なかの

A Super Resolution Reconstruction Scheme for Mixed Spatio-Temporal Stereo Video7

どんなもの

技術や手法のキモはどこ

ビデオ超解像アルゴリズム

二台のカメラを使用 一台は低解像度度で高速一台は高解像度度で低速

HHI 3DV ftp siteのBookarrivalとbeergadenを使用どうやって有効性を示した

なかの

What Is a Good Day for Outdoor Photometric Stereo8

どんなもの

先行行研究と比べてどこがすごい

議論論はある

次に読むべき論論文は

屋外における照度度差があるステレオの研究 屋外でステレオを行行う際に有利利or不不利利な日照条件を明らかにする

点光源を用いた研究は行行われていたが屋外での研究はされていなかった

晴れより曇りの方が精度度が良良い雲があるから特徴量量を取りやすい雑音を白色ガウスモデルを想定 季節ごとのデータセットを利利用してみても良良い

Time-lapse photometric stereo and applications [F Shen K Sunkavalli N Bonneel S Rusinkiewicz H Pfisterand X Tong2014] Outdoor photometric stereo [L-F Yu S-K Yeung Y-W Tai D Terzopoulos and T FChan ICCP2013]

どうやって有効性を示した屋外の照明に関するHDR環境マップのデータベースを利利用

Disney 2015424

なかの

COLORBRUSH ANIMATED DIFFUSION FOR INTUITIVE COLORIZATION SIMULATING WATER PAINTING 9

どんなものアニメを水彩画で描いたように変換する 水彩画を描くには経験が必要であるがそれを作成するアルゴリズムを考案絵具が水によりどうにじむかシュミレーションしている

Disney 20141027 ICIP2014

次に読むべき論論文はGabor-space geodesic active contoursrdquo In Algebraic Frames for the Perception-Action Cycle [C Sagiv NA Sochen and YY Zeevi 2000] Practical temporal consistency for image-based graphics applications [M Lang O Wang T Aydin A Smolic and M Gross SIGGRAPH2012] Computer-Generated Watercolor [CJ Curtis SE Anderson JE Seims KW Fleischer and DH Salesin SIGGRAPH1997]

なかの

From Sound to Sight Using Audio Processing to enable Visible Light Communication 10

どんなもの光に情報を載せる技術プロジェクトページがあって光関係の研究が8個載っている

httpwwwdisneyresearchcomprojectvisible-light-communication

ビデオのURL httpwwwdisneyresearchcomwpcontentuploadsPub_InvisibleLightCommunication_Siggraph14_videomp4

• 201211106_KeisukeKawahara
• 201311421_KeitaKanai_02
• 201313095_AkiraIshii_02
• 201413109_YuukiKubo_02
• 201513110_SatoshiHashizume_02
• 鬼輪講マラソン③_1
• 鬼輪講マラソン③_2

Audio-Haptic Feedback in Mobile Phones Angela Chang Conor OrsquoSullivan13

どのようなものか haptics機能のついてない携帯電話にオーディオ機能を利用した触覚フィードバックを追加する 先行研究と比べてどこがすごいか 簡単に作れてnon-haptic mobile devicesでも大丈夫 技術や手法のキモ 「MultiFunction Transducer(MFT)」 スピーカーから音と信号の両方を出力できる

bull  Haptic Inheritance 　　音を2つの周波数帯に分ける bull  Synthesis and Matching 　　低周波数帯(20-300Hz)を使い触感を伝える 有効性の検討 42人の人を対象に実験を行う83の人が触感を感じた

20150522 橋爪智 2 鬼

Resolution of Sleep Deprivation Problems using ZZZoo Pillows13Shunsuke Yanaka Motoki Ishida13

どのようなものか 近年不眠症の人が多い rarr誰かと接していると安心し睡眠に導入しやすくなる rarrまるで添い寝をしているようなリアルな抱きまくらを使う 技術や手法のキモ breathing sensation 風船を使って人の呼吸を再現肺の形の風船弱く長い呼吸をする

heating お湯を使って人の体温を再現45 有効性の確認 84人の人が実験 呼吸が睡眠を誘ったかrarr61 体温が睡眠を誘ったかrarr85 関連論文 The Impact of Sleep Disorders on Social Life[Komada et al 2007]

20150522 橋爪智 2 鬼

まとめ13超音波 モーター 風

20150522 橋爪智 2 鬼

コイル 電気刺激 Electrovibration

振動 音 お湯

なかの

Temporally Consistent Disparity and Optical Flow via Efficient Spatio-temporal Filtering1

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示した

議論論はあるか

時間的に一定の視差を算出する手法静止画ステレオよりも精度度が良良いことを示す従来よりも推定精度度が良良いオプティカルフローも算出する

一枚の静止画に対するフィルタリング[1]をステレオ動画に拡張している

ケンブリッジのステレオ動画のデータセットを利利用 実写動画に対する比較も行行うノイズ耐性も検証する

フィルタベースとエネルギーベースの関係性を良良り理理解することで推定精度度を上げる

実装が簡単でリアルタイム視差推定が可能

Fast Cost-Volume Filtering for Visual Correspondence and Beyond [Rhemann C Hosni A Bleyer M Rother C Gelautz M CVPR2011] Real-time Spatiotemporal Stereo Matching Using the Dual-Cross-Bilateral Grid [Richardt C Orr D Davies I Criminisi A Dodgson NA ECCV2010] Secrets of optical flow estimation and their principles [Sun D Roth S Black MJ 2010] Motion estimation with non-local total variation regularization [Werlberger M Pock T Bischof H CVPR2010] Temporally Consistent Disparity Maps from Uncalibrated Stereo Videos [Bleyer M Gelatuz M ISPA2011]

なかの

SymStereo Matching using Induced Symmetry (2014)2

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示した

議論論はあるか

画像の対称性を用いてステレオマッチングを行行う 左右の画像を反転させて重ね合わせることで対称性を測る

絵的な類似の代わりに対称性を使う今まで対称性を用いる手法はなく新規性が大きい

三つのSymmetry-baseの手法で精度度を検証従来手法よりも精度度が向上しているMiddlebury Oxford Corridorfountain-P11のデータセット使用

ステレオの問題である不不連続な箇所オクルージョン部分は未解決である演算時間はやや増加

1-Dラインのコストを考える今までは撮像面に対して平行行な平面でデプスを考えていたが垂直な平面を考える

BT[Birchfield and Tomasi 1998] Census transform[Zabih and Woodfill 1994] Log N[Kovesi 1997] radio-metoric differences[Hirschmuller Scharstein 2009]

なかの

Camouflaging an Object from Many Viewpoints3

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

多くの視点から三次元の物体をカモフラージュするカモフラージュによってオクルージョン部分の不不連続がどの程度度生じるか他の視点ではどれほどになるかの検証

MRF（Markov Random Fields）ベース

新しい三次元物体のカモフラージュモデルを構築 37種類のデータセットを作る

箱形の物体に対してカモフラージュ処理理を施し 結果を評価する

オクルージョン不不連続テクスチャの歪みが問題 照明や画像の貼りつけに制限あり

なかの

Aliasing Detection and Reduction in Plenoptic Imaging4

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

カメラアレイ撮影の角度度のエイリアシングを除去するエイリアシングの探索索と打ち消しを行行う

周波数領領域ではなく空間領領域で探索索を行行う

先行行研究がフィルタデモザイキング再パラメータ調整などの前処理理でエイリアシング除去を行行うのに対しエイリアシング探索索後にリフォーカスの段階でエイリアシングを取り除く

8times8の平行行カメラアレイで検証するカメラ間の 基線長は70mm

今回は基線長が長いデータセットを使った 次はLytroなどのマイクロレンズアレイで検証する

Globally consistent multi-label assignment on the ray space of 4d light fields [S Wanner C Straehle B Goldluecke CVPR2013] Lineassisted light field triangulation and stereo matching [Z Yu X Guo H Lin A Lumsdaine J Yu ICCV 2013]

なかの

Globally Consistent Multi-Label Assignment on the Ray Space of 4D Light Fields5

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

四次元ライトフィールドの光線情報において マルチラベルの領領域分割を行行う

深度度情報光線情報を用いて領領域分割することで 二次元（空間）情報だけでは分割が難しかった 領領域を分割可能とする

The light field camera Extended depth of field aliasing and superresolution [T Bishop P Favaro IEEE Transactions on Pattern Analysis and Machine Intelligence 2012]

なかの

Line Assisted Light Field Triangulation and Stereo Matching6

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

光線情報を利利用してステレオマッチングの精度度を 向上させる手法三角測量量の誤差を減らす

Light Field Stereo Matchingとかいう手法 グラフ構造を作成

Variational light field analysis for disparity estimation and super-resolution [S Wanner and B Goldlumluecke 2013]

なかの

Adaptive stereo similarity fusion using confidence measures 20157

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

ステレオマッチングの新しい方式fusion weightsを提案複数の手法を組み合わせてコスト計算を行行う手法付録に既存手法のコスト関数一覧あり

パラメータに依存する手法を用いないことで高速化を図っている

一つのアルゴリズムでは異異なる特性を持つ領領域全てに対して適切切なマッチングはできない複数を組み合わせることでそれを補う13種と多い

middleburyとKITTIのデータセットで評価

一枚あたり03sと高速だが001sとより高速なアルゴリズムが存在する

Segment-based stereo matching using belief propagation and a self-adapting dissimilarity measure [A Klaus M Sormann K Karner ICPR2006] On building an accurate stereo matching system on graphics hardware [X Mei X Sun M Zhou S Jiao H Wang X Zhang ICCV2011] Similarity measures for depth estimation [K Wegner O Stankiewicz 3DTV-CON2009] On accurate dense stereo-matching using a local adaptive multi-cost approach [C Stentoumis L Grammatikopoulos I Kalisperakis G Karras ISPRS2014] A quantitative evaluation of confidence measures for stereo vision [X Hu P Mordohai PAMI2012]

なかの

SIMILARITY MEASURE FOR DEPTH ESTIMATIOM 20098

どんなもの

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

4種類の視差推定アルゴリズムを組み合わせている 類似度度の選択性の解析

Belief Propagationの枠組みを用いる

名古屋大学の多視点データベースを利利用

HHI Test Material for 3D Video [I Feldmann M Muller F Zilly R Tanger A SmolicP Kauff T Wiegand 2008] Multiview Video Test Sequence and Camera Parameters [Yo-Sung Ho Eun-Kyung Lee and Cheon Lee 2008] 1D Parallel Test Sequences for MPEG-FTV [M Tanimoto T Fujii N Fukushima 2008] Non-parametric Local Transforms for Computing Visual Correspondence [R Zabih J Woodfill 1994]

なかの

Spatiotemporal Stereo via Spatiotemporal Quadric Element (Stequel) Matching9

どんなもの

技術や手法のキモはどこ

新しいマッチング手法を提案動き考慮することなく時間情報を取り込むことができる 時間方向のエピ線を考える

オプティカルフロー推定は3D境界や低テクスチャで弱いが提案手法はロバストである

なかの

Depth Video Enhancement Based on Weighted Mode Filtering10

どんなもの

議論論はある

ノイズを含んだ低解像度度のデプスマップの質を高める手法（超解像度度とデノイズ）時間方向も使用簡単なオプティカルフローを計算し利利用する

非反復復アルゴリズムのためGPUに載せやすく高速化が考えられる

なかの

Fast Bilateral-Space Stereo for Synthetic Defocus11

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

議論論はある

次に読むべき論論文は

高速な自由焦点ぼけ画像の作成

Bilateral-spaceを提案

従来研究よりも10から100倍速くぼけ具合の精度度も良良い

ぼけを作成するというアプリケーションに利利用する距離離という面では提案手法が有益であるが実測的な距離離という面での精度度は悪い背景と前景が同じ色で近くにある場合同一ととらえてしまう

Efficient high-resolution stereo matching using local plane sweeps [S N Sinha D Scharstein and R SzeliskiCVPR2014] Bilateral filtering-based optical flow estimation with occlusion detection [J Xiao H Cheng H Sawhney C Rao and M IsnardiECCV2006] Efficient nonlocal regularization for optical flow [P Krumlahenbumluhl and V KoltunECCV2012] Real-time spatiotemporal stereo matching using the dual-cross-bilateral grid [C Richardt D Orr I Davies A Criminisi and N A DodgsonECCV2010]

どうやって有効性を示した視差推定の精度度はmiddleburyKITTI

なかの

Robust Spatiotemporal Stereo for Dynamic Scenes12

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

ステレオ動画のフレーム間情報を取り入れることでノイズ耐性を向上させるまた動きの大きなものも考える

時間を含めたウインドウの提案自動的にそのような変化に対応する画像領領域を検出する

従来の時空間ステレオと比べ大きな動きによる急激な視差の時間変化に対して頑健である

なかの

Spacetime Stereo A Unifying Framework for Depth from Triangulation13

どんなもの

先行行研究と比べてどこがすごい

space time stereoを提案ステレオカメラの視差推定でも構造光を用いた視差推定でも利利用可能 動的なシーンでの利利用も可能

フレームごとマッチングを取っていたが複数フレームでのマッチングを可能とした

なかの

Learning to Select and Order Vacation Photographs (Disney research)14

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示したあまりにもたくさん撮影した写真たちから自動的にフォトアルバムを作成する研究

複雑な視覚での区別を試みたのはこの論論文が初

５つの異異なるトピックから63の個人的な写真コレクションのデータセットを利利用し定量量的に評価する

写真間の差別かを定義する顔全体の絵何が写っているか写っていないかを評価する

Jointly aligning and segmenting multiple web photo streams for the inference of collective photo storylines [G Kim and E P Xing CVPR2013] Photo sequencing [T Basha Y Moses and S Avidan CVPR2012]

なかの

A Taxonomy and Evaluation of Dense Two-Frame Stereo Correspondence Algorithms15

どんなもの

どうやって有効性を示した

次に読むべき論論文は

ステレオマッチングに関する分類を行行う 新たなデータセットを作成する

というよりも他の手法が有効性を示すことができるようにデータセットを作成した 今ではmiddleburyのデータセットと言えばステレオ業界では超有名

High-resolution stereo datasets with subpixel-accurate ground truth

なかの

Discriminability Limits in Spatio-Temporal Stereo Block Matching1

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

spatio-temporal disparity estimationの根本的な前提の正当性を解析しマッチング処理理の際に動きが助けとなる程度度を決定する

時空間マッチングのエラーを分析し誤りの原因を確率率率で導出する（フレーム数動きの分散画像特徴ノイズの関数）

[34243334]は時空間マッチングの利利点を指摘していたが本論論文はマッチング精度度の向上のために動きを用いる手法の程度度や性質を研究する

6つのステレオビデオを用いて検証を行行った

Spacetime stereo Shape recovery for dynamic scenes [L Zhang B Curless and S Seitz CVPR2003] Spatiotemporal stereo and scene flow via stequel matching [M Sizintsev and R Wildes PAMI2012] Temporally consistent disparity and optical flow via efficient spatio-temporal filtering [A Hosni C Rhemann M Bleyer and M Gelautz PRCAIVT2012] Spacetime stereo A unifying framework for depth from triangulation [PAMI2005] Dynamic depth recovery from multiple synchronized video streams [H Tao H Sawhney and R Kumar CVPR2001] Spatiotemporal descriptor for wide-baseline stereo reconstruction of non-rigid and ambiguous scenes [ECCV2003]

なかの

Depth-Based Patch Scaling for Content-Aware Stereo Image Completion2

どんなもの

どうやって有効性を示した

ステレオでデプスを取り物体の三次元情報を使ってインペインティングを行行う

bookのデータセット背景が繰り返しパターンが多いものを使っている

なかの

Fast Semi-dense Surface Reconstruction from Stereoscopic Video in Laparoscopic Surgery3

どんなもの

手法の流流れ

次に読むべき論論文は

腹腔内手術の際にステレオビデオから高速に物体の三次元再構成を行行う研究

Evaluation of stereo matching costs on images with radiometric differences [Hirschmueller H Scharstein D PAMI2008]

スコープカメラから画像取得GPUで演算する 視差を算出しフィルタにかける距離離に変換 点群を再びフィルタにかけて三次元再構成

なかの

3D Reconstruction from Accidental Motion4

どんなもの

技術や手法のキモはどこ

議論論はある

数秒のビデオ（単眼）から三次元再構成を行行う 手ぶれなどの動きから再構成が可能で特定の動きや機材を必要としない

短い基線長でも再構成が可能（3mmの基線長）

基線長が短いため背景の精度度が低くなる リフォーカス画像作成には十分 練習では上手く動作したが検証がまだ必要

なかの

Panoramic Video from Unstructured Camera Arrays5

どんなもの

技術や手法のキモはどこ

議論論はある

複数のカメラを用いたパノラマ撮影を行行う その際に不不自然さがないような動画を作成する

不不自然さを感じる感覚特性を提示しそれにのっとって対策を講じている

一つのカメラの解像度度と品質を向上させるよりも複数台のカメラを組み合わせることがはるかに簡単で有益である専門家でなくてもGoProのカメラセットを組み合わせることは容易易

カメラの配置は厳密に決められていない完璧な時間同期やローリングシャッターの不不足のような実撮影での問題もクリアしている

先行行研究と比べてどこがすごい

どうやって有効性を示した左のシステムは14台のカメラを使用 右のシステムはGoProを5台使用

Disney 201558

なかの

Floating Scale Surface Reconstruction6

どんなもの

技術や手法のキモはどこ

流流動的にスケールを変えられる三次元再構成手法

サンプル規模に依存するパラメータがない rarrどのスケールのサンプルにも対応できる

siggraph2014

なかの

A Super Resolution Reconstruction Scheme for Mixed Spatio-Temporal Stereo Video7

どんなもの

技術や手法のキモはどこ

ビデオ超解像アルゴリズム

二台のカメラを使用 一台は低解像度度で高速一台は高解像度度で低速

HHI 3DV ftp siteのBookarrivalとbeergadenを使用どうやって有効性を示した

なかの

What Is a Good Day for Outdoor Photometric Stereo8

どんなもの

先行行研究と比べてどこがすごい

議論論はある

次に読むべき論論文は

屋外における照度度差があるステレオの研究 屋外でステレオを行行う際に有利利or不不利利な日照条件を明らかにする

点光源を用いた研究は行行われていたが屋外での研究はされていなかった

晴れより曇りの方が精度度が良良い雲があるから特徴量量を取りやすい雑音を白色ガウスモデルを想定 季節ごとのデータセットを利利用してみても良良い

Time-lapse photometric stereo and applications [F Shen K Sunkavalli N Bonneel S Rusinkiewicz H Pfisterand X Tong2014] Outdoor photometric stereo [L-F Yu S-K Yeung Y-W Tai D Terzopoulos and T FChan ICCP2013]

どうやって有効性を示した屋外の照明に関するHDR環境マップのデータベースを利利用

Disney 2015424

なかの

COLORBRUSH ANIMATED DIFFUSION FOR INTUITIVE COLORIZATION SIMULATING WATER PAINTING 9

どんなものアニメを水彩画で描いたように変換する 水彩画を描くには経験が必要であるがそれを作成するアルゴリズムを考案絵具が水によりどうにじむかシュミレーションしている

Disney 20141027 ICIP2014

次に読むべき論論文はGabor-space geodesic active contoursrdquo In Algebraic Frames for the Perception-Action Cycle [C Sagiv NA Sochen and YY Zeevi 2000] Practical temporal consistency for image-based graphics applications [M Lang O Wang T Aydin A Smolic and M Gross SIGGRAPH2012] Computer-Generated Watercolor [CJ Curtis SE Anderson JE Seims KW Fleischer and DH Salesin SIGGRAPH1997]

なかの

From Sound to Sight Using Audio Processing to enable Visible Light Communication 10

どんなもの光に情報を載せる技術プロジェクトページがあって光関係の研究が8個載っている

httpwwwdisneyresearchcomprojectvisible-light-communication

ビデオのURL httpwwwdisneyresearchcomwpcontentuploadsPub_InvisibleLightCommunication_Siggraph14_videomp4

• 201211106_KeisukeKawahara
• 201311421_KeitaKanai_02
• 201313095_AkiraIshii_02
• 201413109_YuukiKubo_02
• 201513110_SatoshiHashizume_02
• 鬼輪講マラソン③_1
• 鬼輪講マラソン③_2

Resolution of Sleep Deprivation Problems using ZZZoo Pillows13Shunsuke Yanaka Motoki Ishida13

どのようなものか 近年不眠症の人が多い rarr誰かと接していると安心し睡眠に導入しやすくなる rarrまるで添い寝をしているようなリアルな抱きまくらを使う 技術や手法のキモ breathing sensation 風船を使って人の呼吸を再現肺の形の風船弱く長い呼吸をする

heating お湯を使って人の体温を再現45 有効性の確認 84人の人が実験 呼吸が睡眠を誘ったかrarr61 体温が睡眠を誘ったかrarr85 関連論文 The Impact of Sleep Disorders on Social Life[Komada et al 2007]

20150522 橋爪智 2 鬼

まとめ13超音波 モーター 風

20150522 橋爪智 2 鬼

コイル 電気刺激 Electrovibration

振動 音 お湯

なかの

Temporally Consistent Disparity and Optical Flow via Efficient Spatio-temporal Filtering1

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示した

議論論はあるか

時間的に一定の視差を算出する手法静止画ステレオよりも精度度が良良いことを示す従来よりも推定精度度が良良いオプティカルフローも算出する

一枚の静止画に対するフィルタリング[1]をステレオ動画に拡張している

ケンブリッジのステレオ動画のデータセットを利利用 実写動画に対する比較も行行うノイズ耐性も検証する

フィルタベースとエネルギーベースの関係性を良良り理理解することで推定精度度を上げる

実装が簡単でリアルタイム視差推定が可能

Fast Cost-Volume Filtering for Visual Correspondence and Beyond [Rhemann C Hosni A Bleyer M Rother C Gelautz M CVPR2011] Real-time Spatiotemporal Stereo Matching Using the Dual-Cross-Bilateral Grid [Richardt C Orr D Davies I Criminisi A Dodgson NA ECCV2010] Secrets of optical flow estimation and their principles [Sun D Roth S Black MJ 2010] Motion estimation with non-local total variation regularization [Werlberger M Pock T Bischof H CVPR2010] Temporally Consistent Disparity Maps from Uncalibrated Stereo Videos [Bleyer M Gelatuz M ISPA2011]

なかの

SymStereo Matching using Induced Symmetry (2014)2

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示した

議論論はあるか

画像の対称性を用いてステレオマッチングを行行う 左右の画像を反転させて重ね合わせることで対称性を測る

絵的な類似の代わりに対称性を使う今まで対称性を用いる手法はなく新規性が大きい

三つのSymmetry-baseの手法で精度度を検証従来手法よりも精度度が向上しているMiddlebury Oxford Corridorfountain-P11のデータセット使用

ステレオの問題である不不連続な箇所オクルージョン部分は未解決である演算時間はやや増加

1-Dラインのコストを考える今までは撮像面に対して平行行な平面でデプスを考えていたが垂直な平面を考える

BT[Birchfield and Tomasi 1998] Census transform[Zabih and Woodfill 1994] Log N[Kovesi 1997] radio-metoric differences[Hirschmuller Scharstein 2009]

なかの

Camouflaging an Object from Many Viewpoints3

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

多くの視点から三次元の物体をカモフラージュするカモフラージュによってオクルージョン部分の不不連続がどの程度度生じるか他の視点ではどれほどになるかの検証

MRF（Markov Random Fields）ベース

新しい三次元物体のカモフラージュモデルを構築 37種類のデータセットを作る

箱形の物体に対してカモフラージュ処理理を施し 結果を評価する

オクルージョン不不連続テクスチャの歪みが問題 照明や画像の貼りつけに制限あり

なかの

Aliasing Detection and Reduction in Plenoptic Imaging4

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

カメラアレイ撮影の角度度のエイリアシングを除去するエイリアシングの探索索と打ち消しを行行う

周波数領領域ではなく空間領領域で探索索を行行う

先行行研究がフィルタデモザイキング再パラメータ調整などの前処理理でエイリアシング除去を行行うのに対しエイリアシング探索索後にリフォーカスの段階でエイリアシングを取り除く

8times8の平行行カメラアレイで検証するカメラ間の 基線長は70mm

今回は基線長が長いデータセットを使った 次はLytroなどのマイクロレンズアレイで検証する

Globally consistent multi-label assignment on the ray space of 4d light fields [S Wanner C Straehle B Goldluecke CVPR2013] Lineassisted light field triangulation and stereo matching [Z Yu X Guo H Lin A Lumsdaine J Yu ICCV 2013]

なかの

Globally Consistent Multi-Label Assignment on the Ray Space of 4D Light Fields5

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

四次元ライトフィールドの光線情報において マルチラベルの領領域分割を行行う

深度度情報光線情報を用いて領領域分割することで 二次元（空間）情報だけでは分割が難しかった 領領域を分割可能とする

The light field camera Extended depth of field aliasing and superresolution [T Bishop P Favaro IEEE Transactions on Pattern Analysis and Machine Intelligence 2012]

なかの

Line Assisted Light Field Triangulation and Stereo Matching6

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

光線情報を利利用してステレオマッチングの精度度を 向上させる手法三角測量量の誤差を減らす

Light Field Stereo Matchingとかいう手法 グラフ構造を作成

Variational light field analysis for disparity estimation and super-resolution [S Wanner and B Goldlumluecke 2013]

なかの

Adaptive stereo similarity fusion using confidence measures 20157

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

ステレオマッチングの新しい方式fusion weightsを提案複数の手法を組み合わせてコスト計算を行行う手法付録に既存手法のコスト関数一覧あり

パラメータに依存する手法を用いないことで高速化を図っている

一つのアルゴリズムでは異異なる特性を持つ領領域全てに対して適切切なマッチングはできない複数を組み合わせることでそれを補う13種と多い

middleburyとKITTIのデータセットで評価

一枚あたり03sと高速だが001sとより高速なアルゴリズムが存在する

Segment-based stereo matching using belief propagation and a self-adapting dissimilarity measure [A Klaus M Sormann K Karner ICPR2006] On building an accurate stereo matching system on graphics hardware [X Mei X Sun M Zhou S Jiao H Wang X Zhang ICCV2011] Similarity measures for depth estimation [K Wegner O Stankiewicz 3DTV-CON2009] On accurate dense stereo-matching using a local adaptive multi-cost approach [C Stentoumis L Grammatikopoulos I Kalisperakis G Karras ISPRS2014] A quantitative evaluation of confidence measures for stereo vision [X Hu P Mordohai PAMI2012]

なかの

SIMILARITY MEASURE FOR DEPTH ESTIMATIOM 20098

どんなもの

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

4種類の視差推定アルゴリズムを組み合わせている 類似度度の選択性の解析

Belief Propagationの枠組みを用いる

名古屋大学の多視点データベースを利利用

HHI Test Material for 3D Video [I Feldmann M Muller F Zilly R Tanger A SmolicP Kauff T Wiegand 2008] Multiview Video Test Sequence and Camera Parameters [Yo-Sung Ho Eun-Kyung Lee and Cheon Lee 2008] 1D Parallel Test Sequences for MPEG-FTV [M Tanimoto T Fujii N Fukushima 2008] Non-parametric Local Transforms for Computing Visual Correspondence [R Zabih J Woodfill 1994]

なかの

Spatiotemporal Stereo via Spatiotemporal Quadric Element (Stequel) Matching9

どんなもの

技術や手法のキモはどこ

新しいマッチング手法を提案動き考慮することなく時間情報を取り込むことができる 時間方向のエピ線を考える

オプティカルフロー推定は3D境界や低テクスチャで弱いが提案手法はロバストである

なかの

Depth Video Enhancement Based on Weighted Mode Filtering10

どんなもの

議論論はある

ノイズを含んだ低解像度度のデプスマップの質を高める手法（超解像度度とデノイズ）時間方向も使用簡単なオプティカルフローを計算し利利用する

非反復復アルゴリズムのためGPUに載せやすく高速化が考えられる

なかの

Fast Bilateral-Space Stereo for Synthetic Defocus11

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

議論論はある

次に読むべき論論文は

高速な自由焦点ぼけ画像の作成

Bilateral-spaceを提案

従来研究よりも10から100倍速くぼけ具合の精度度も良良い

ぼけを作成するというアプリケーションに利利用する距離離という面では提案手法が有益であるが実測的な距離離という面での精度度は悪い背景と前景が同じ色で近くにある場合同一ととらえてしまう

Efficient high-resolution stereo matching using local plane sweeps [S N Sinha D Scharstein and R SzeliskiCVPR2014] Bilateral filtering-based optical flow estimation with occlusion detection [J Xiao H Cheng H Sawhney C Rao and M IsnardiECCV2006] Efficient nonlocal regularization for optical flow [P Krumlahenbumluhl and V KoltunECCV2012] Real-time spatiotemporal stereo matching using the dual-cross-bilateral grid [C Richardt D Orr I Davies A Criminisi and N A DodgsonECCV2010]

どうやって有効性を示した視差推定の精度度はmiddleburyKITTI

なかの

Robust Spatiotemporal Stereo for Dynamic Scenes12

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

ステレオ動画のフレーム間情報を取り入れることでノイズ耐性を向上させるまた動きの大きなものも考える

時間を含めたウインドウの提案自動的にそのような変化に対応する画像領領域を検出する

従来の時空間ステレオと比べ大きな動きによる急激な視差の時間変化に対して頑健である

なかの

Spacetime Stereo A Unifying Framework for Depth from Triangulation13

どんなもの

先行行研究と比べてどこがすごい

space time stereoを提案ステレオカメラの視差推定でも構造光を用いた視差推定でも利利用可能 動的なシーンでの利利用も可能

フレームごとマッチングを取っていたが複数フレームでのマッチングを可能とした

なかの

Learning to Select and Order Vacation Photographs (Disney research)14

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示したあまりにもたくさん撮影した写真たちから自動的にフォトアルバムを作成する研究

複雑な視覚での区別を試みたのはこの論論文が初

５つの異異なるトピックから63の個人的な写真コレクションのデータセットを利利用し定量量的に評価する

写真間の差別かを定義する顔全体の絵何が写っているか写っていないかを評価する

Jointly aligning and segmenting multiple web photo streams for the inference of collective photo storylines [G Kim and E P Xing CVPR2013] Photo sequencing [T Basha Y Moses and S Avidan CVPR2012]

なかの

A Taxonomy and Evaluation of Dense Two-Frame Stereo Correspondence Algorithms15

どんなもの

どうやって有効性を示した

次に読むべき論論文は

ステレオマッチングに関する分類を行行う 新たなデータセットを作成する

というよりも他の手法が有効性を示すことができるようにデータセットを作成した 今ではmiddleburyのデータセットと言えばステレオ業界では超有名

High-resolution stereo datasets with subpixel-accurate ground truth

なかの

Discriminability Limits in Spatio-Temporal Stereo Block Matching1

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

spatio-temporal disparity estimationの根本的な前提の正当性を解析しマッチング処理理の際に動きが助けとなる程度度を決定する

時空間マッチングのエラーを分析し誤りの原因を確率率率で導出する（フレーム数動きの分散画像特徴ノイズの関数）

[34243334]は時空間マッチングの利利点を指摘していたが本論論文はマッチング精度度の向上のために動きを用いる手法の程度度や性質を研究する

6つのステレオビデオを用いて検証を行行った

Spacetime stereo Shape recovery for dynamic scenes [L Zhang B Curless and S Seitz CVPR2003] Spatiotemporal stereo and scene flow via stequel matching [M Sizintsev and R Wildes PAMI2012] Temporally consistent disparity and optical flow via efficient spatio-temporal filtering [A Hosni C Rhemann M Bleyer and M Gelautz PRCAIVT2012] Spacetime stereo A unifying framework for depth from triangulation [PAMI2005] Dynamic depth recovery from multiple synchronized video streams [H Tao H Sawhney and R Kumar CVPR2001] Spatiotemporal descriptor for wide-baseline stereo reconstruction of non-rigid and ambiguous scenes [ECCV2003]

なかの

Depth-Based Patch Scaling for Content-Aware Stereo Image Completion2

どんなもの

どうやって有効性を示した

ステレオでデプスを取り物体の三次元情報を使ってインペインティングを行行う

bookのデータセット背景が繰り返しパターンが多いものを使っている

なかの

Fast Semi-dense Surface Reconstruction from Stereoscopic Video in Laparoscopic Surgery3

どんなもの

手法の流流れ

次に読むべき論論文は

腹腔内手術の際にステレオビデオから高速に物体の三次元再構成を行行う研究

Evaluation of stereo matching costs on images with radiometric differences [Hirschmueller H Scharstein D PAMI2008]

スコープカメラから画像取得GPUで演算する 視差を算出しフィルタにかける距離離に変換 点群を再びフィルタにかけて三次元再構成

なかの

3D Reconstruction from Accidental Motion4

どんなもの

技術や手法のキモはどこ

議論論はある

数秒のビデオ（単眼）から三次元再構成を行行う 手ぶれなどの動きから再構成が可能で特定の動きや機材を必要としない

短い基線長でも再構成が可能（3mmの基線長）

基線長が短いため背景の精度度が低くなる リフォーカス画像作成には十分 練習では上手く動作したが検証がまだ必要

なかの

Panoramic Video from Unstructured Camera Arrays5

どんなもの

技術や手法のキモはどこ

議論論はある

複数のカメラを用いたパノラマ撮影を行行う その際に不不自然さがないような動画を作成する

不不自然さを感じる感覚特性を提示しそれにのっとって対策を講じている

一つのカメラの解像度度と品質を向上させるよりも複数台のカメラを組み合わせることがはるかに簡単で有益である専門家でなくてもGoProのカメラセットを組み合わせることは容易易

カメラの配置は厳密に決められていない完璧な時間同期やローリングシャッターの不不足のような実撮影での問題もクリアしている

先行行研究と比べてどこがすごい

どうやって有効性を示した左のシステムは14台のカメラを使用 右のシステムはGoProを5台使用

Disney 201558

なかの

Floating Scale Surface Reconstruction6

どんなもの

技術や手法のキモはどこ

流流動的にスケールを変えられる三次元再構成手法

サンプル規模に依存するパラメータがない rarrどのスケールのサンプルにも対応できる

siggraph2014

なかの

A Super Resolution Reconstruction Scheme for Mixed Spatio-Temporal Stereo Video7

どんなもの

技術や手法のキモはどこ

ビデオ超解像アルゴリズム

二台のカメラを使用 一台は低解像度度で高速一台は高解像度度で低速

HHI 3DV ftp siteのBookarrivalとbeergadenを使用どうやって有効性を示した

なかの

What Is a Good Day for Outdoor Photometric Stereo8

どんなもの

先行行研究と比べてどこがすごい

議論論はある

次に読むべき論論文は

屋外における照度度差があるステレオの研究 屋外でステレオを行行う際に有利利or不不利利な日照条件を明らかにする

点光源を用いた研究は行行われていたが屋外での研究はされていなかった

晴れより曇りの方が精度度が良良い雲があるから特徴量量を取りやすい雑音を白色ガウスモデルを想定 季節ごとのデータセットを利利用してみても良良い

Time-lapse photometric stereo and applications [F Shen K Sunkavalli N Bonneel S Rusinkiewicz H Pfisterand X Tong2014] Outdoor photometric stereo [L-F Yu S-K Yeung Y-W Tai D Terzopoulos and T FChan ICCP2013]

どうやって有効性を示した屋外の照明に関するHDR環境マップのデータベースを利利用

Disney 2015424

なかの

COLORBRUSH ANIMATED DIFFUSION FOR INTUITIVE COLORIZATION SIMULATING WATER PAINTING 9

どんなものアニメを水彩画で描いたように変換する 水彩画を描くには経験が必要であるがそれを作成するアルゴリズムを考案絵具が水によりどうにじむかシュミレーションしている

Disney 20141027 ICIP2014

次に読むべき論論文はGabor-space geodesic active contoursrdquo In Algebraic Frames for the Perception-Action Cycle [C Sagiv NA Sochen and YY Zeevi 2000] Practical temporal consistency for image-based graphics applications [M Lang O Wang T Aydin A Smolic and M Gross SIGGRAPH2012] Computer-Generated Watercolor [CJ Curtis SE Anderson JE Seims KW Fleischer and DH Salesin SIGGRAPH1997]

なかの

From Sound to Sight Using Audio Processing to enable Visible Light Communication 10

どんなもの光に情報を載せる技術プロジェクトページがあって光関係の研究が8個載っている

httpwwwdisneyresearchcomprojectvisible-light-communication

ビデオのURL httpwwwdisneyresearchcomwpcontentuploadsPub_InvisibleLightCommunication_Siggraph14_videomp4

• 201211106_KeisukeKawahara
• 201311421_KeitaKanai_02
• 201313095_AkiraIshii_02
• 201413109_YuukiKubo_02
• 201513110_SatoshiHashizume_02
• 鬼輪講マラソン③_1
• 鬼輪講マラソン③_2

まとめ13超音波 モーター 風

20150522 橋爪智 2 鬼

コイル 電気刺激 Electrovibration

振動 音 お湯

なかの

Temporally Consistent Disparity and Optical Flow via Efficient Spatio-temporal Filtering1

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示した

議論論はあるか

時間的に一定の視差を算出する手法静止画ステレオよりも精度度が良良いことを示す従来よりも推定精度度が良良いオプティカルフローも算出する

一枚の静止画に対するフィルタリング[1]をステレオ動画に拡張している

ケンブリッジのステレオ動画のデータセットを利利用 実写動画に対する比較も行行うノイズ耐性も検証する

フィルタベースとエネルギーベースの関係性を良良り理理解することで推定精度度を上げる

実装が簡単でリアルタイム視差推定が可能

Fast Cost-Volume Filtering for Visual Correspondence and Beyond [Rhemann C Hosni A Bleyer M Rother C Gelautz M CVPR2011] Real-time Spatiotemporal Stereo Matching Using the Dual-Cross-Bilateral Grid [Richardt C Orr D Davies I Criminisi A Dodgson NA ECCV2010] Secrets of optical flow estimation and their principles [Sun D Roth S Black MJ 2010] Motion estimation with non-local total variation regularization [Werlberger M Pock T Bischof H CVPR2010] Temporally Consistent Disparity Maps from Uncalibrated Stereo Videos [Bleyer M Gelatuz M ISPA2011]

なかの

SymStereo Matching using Induced Symmetry (2014)2

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示した

議論論はあるか

画像の対称性を用いてステレオマッチングを行行う 左右の画像を反転させて重ね合わせることで対称性を測る

絵的な類似の代わりに対称性を使う今まで対称性を用いる手法はなく新規性が大きい

三つのSymmetry-baseの手法で精度度を検証従来手法よりも精度度が向上しているMiddlebury Oxford Corridorfountain-P11のデータセット使用

ステレオの問題である不不連続な箇所オクルージョン部分は未解決である演算時間はやや増加

1-Dラインのコストを考える今までは撮像面に対して平行行な平面でデプスを考えていたが垂直な平面を考える

BT[Birchfield and Tomasi 1998] Census transform[Zabih and Woodfill 1994] Log N[Kovesi 1997] radio-metoric differences[Hirschmuller Scharstein 2009]

なかの

Camouflaging an Object from Many Viewpoints3

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

多くの視点から三次元の物体をカモフラージュするカモフラージュによってオクルージョン部分の不不連続がどの程度度生じるか他の視点ではどれほどになるかの検証

MRF（Markov Random Fields）ベース

新しい三次元物体のカモフラージュモデルを構築 37種類のデータセットを作る

箱形の物体に対してカモフラージュ処理理を施し 結果を評価する

オクルージョン不不連続テクスチャの歪みが問題 照明や画像の貼りつけに制限あり

なかの

Aliasing Detection and Reduction in Plenoptic Imaging4

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

カメラアレイ撮影の角度度のエイリアシングを除去するエイリアシングの探索索と打ち消しを行行う

周波数領領域ではなく空間領領域で探索索を行行う

先行行研究がフィルタデモザイキング再パラメータ調整などの前処理理でエイリアシング除去を行行うのに対しエイリアシング探索索後にリフォーカスの段階でエイリアシングを取り除く

8times8の平行行カメラアレイで検証するカメラ間の 基線長は70mm

今回は基線長が長いデータセットを使った 次はLytroなどのマイクロレンズアレイで検証する

Globally consistent multi-label assignment on the ray space of 4d light fields [S Wanner C Straehle B Goldluecke CVPR2013] Lineassisted light field triangulation and stereo matching [Z Yu X Guo H Lin A Lumsdaine J Yu ICCV 2013]

なかの

Globally Consistent Multi-Label Assignment on the Ray Space of 4D Light Fields5

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

四次元ライトフィールドの光線情報において マルチラベルの領領域分割を行行う

深度度情報光線情報を用いて領領域分割することで 二次元（空間）情報だけでは分割が難しかった 領領域を分割可能とする

The light field camera Extended depth of field aliasing and superresolution [T Bishop P Favaro IEEE Transactions on Pattern Analysis and Machine Intelligence 2012]

なかの

Line Assisted Light Field Triangulation and Stereo Matching6

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

光線情報を利利用してステレオマッチングの精度度を 向上させる手法三角測量量の誤差を減らす

Light Field Stereo Matchingとかいう手法 グラフ構造を作成

Variational light field analysis for disparity estimation and super-resolution [S Wanner and B Goldlumluecke 2013]

なかの

Adaptive stereo similarity fusion using confidence measures 20157

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

ステレオマッチングの新しい方式fusion weightsを提案複数の手法を組み合わせてコスト計算を行行う手法付録に既存手法のコスト関数一覧あり

パラメータに依存する手法を用いないことで高速化を図っている

一つのアルゴリズムでは異異なる特性を持つ領領域全てに対して適切切なマッチングはできない複数を組み合わせることでそれを補う13種と多い

middleburyとKITTIのデータセットで評価

一枚あたり03sと高速だが001sとより高速なアルゴリズムが存在する

Segment-based stereo matching using belief propagation and a self-adapting dissimilarity measure [A Klaus M Sormann K Karner ICPR2006] On building an accurate stereo matching system on graphics hardware [X Mei X Sun M Zhou S Jiao H Wang X Zhang ICCV2011] Similarity measures for depth estimation [K Wegner O Stankiewicz 3DTV-CON2009] On accurate dense stereo-matching using a local adaptive multi-cost approach [C Stentoumis L Grammatikopoulos I Kalisperakis G Karras ISPRS2014] A quantitative evaluation of confidence measures for stereo vision [X Hu P Mordohai PAMI2012]

なかの

SIMILARITY MEASURE FOR DEPTH ESTIMATIOM 20098

どんなもの

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

4種類の視差推定アルゴリズムを組み合わせている 類似度度の選択性の解析

Belief Propagationの枠組みを用いる

名古屋大学の多視点データベースを利利用

HHI Test Material for 3D Video [I Feldmann M Muller F Zilly R Tanger A SmolicP Kauff T Wiegand 2008] Multiview Video Test Sequence and Camera Parameters [Yo-Sung Ho Eun-Kyung Lee and Cheon Lee 2008] 1D Parallel Test Sequences for MPEG-FTV [M Tanimoto T Fujii N Fukushima 2008] Non-parametric Local Transforms for Computing Visual Correspondence [R Zabih J Woodfill 1994]

なかの

Spatiotemporal Stereo via Spatiotemporal Quadric Element (Stequel) Matching9

どんなもの

技術や手法のキモはどこ

新しいマッチング手法を提案動き考慮することなく時間情報を取り込むことができる 時間方向のエピ線を考える

オプティカルフロー推定は3D境界や低テクスチャで弱いが提案手法はロバストである

なかの

Depth Video Enhancement Based on Weighted Mode Filtering10

どんなもの

議論論はある

ノイズを含んだ低解像度度のデプスマップの質を高める手法（超解像度度とデノイズ）時間方向も使用簡単なオプティカルフローを計算し利利用する

非反復復アルゴリズムのためGPUに載せやすく高速化が考えられる

なかの

Fast Bilateral-Space Stereo for Synthetic Defocus11

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

議論論はある

次に読むべき論論文は

高速な自由焦点ぼけ画像の作成

Bilateral-spaceを提案

従来研究よりも10から100倍速くぼけ具合の精度度も良良い

ぼけを作成するというアプリケーションに利利用する距離離という面では提案手法が有益であるが実測的な距離離という面での精度度は悪い背景と前景が同じ色で近くにある場合同一ととらえてしまう

Efficient high-resolution stereo matching using local plane sweeps [S N Sinha D Scharstein and R SzeliskiCVPR2014] Bilateral filtering-based optical flow estimation with occlusion detection [J Xiao H Cheng H Sawhney C Rao and M IsnardiECCV2006] Efficient nonlocal regularization for optical flow [P Krumlahenbumluhl and V KoltunECCV2012] Real-time spatiotemporal stereo matching using the dual-cross-bilateral grid [C Richardt D Orr I Davies A Criminisi and N A DodgsonECCV2010]

どうやって有効性を示した視差推定の精度度はmiddleburyKITTI

なかの

Robust Spatiotemporal Stereo for Dynamic Scenes12

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

ステレオ動画のフレーム間情報を取り入れることでノイズ耐性を向上させるまた動きの大きなものも考える

時間を含めたウインドウの提案自動的にそのような変化に対応する画像領領域を検出する

従来の時空間ステレオと比べ大きな動きによる急激な視差の時間変化に対して頑健である

なかの

Spacetime Stereo A Unifying Framework for Depth from Triangulation13

どんなもの

先行行研究と比べてどこがすごい

space time stereoを提案ステレオカメラの視差推定でも構造光を用いた視差推定でも利利用可能 動的なシーンでの利利用も可能

フレームごとマッチングを取っていたが複数フレームでのマッチングを可能とした

なかの

Learning to Select and Order Vacation Photographs (Disney research)14

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示したあまりにもたくさん撮影した写真たちから自動的にフォトアルバムを作成する研究

複雑な視覚での区別を試みたのはこの論論文が初

５つの異異なるトピックから63の個人的な写真コレクションのデータセットを利利用し定量量的に評価する

写真間の差別かを定義する顔全体の絵何が写っているか写っていないかを評価する

Jointly aligning and segmenting multiple web photo streams for the inference of collective photo storylines [G Kim and E P Xing CVPR2013] Photo sequencing [T Basha Y Moses and S Avidan CVPR2012]

なかの

A Taxonomy and Evaluation of Dense Two-Frame Stereo Correspondence Algorithms15

どんなもの

どうやって有効性を示した

次に読むべき論論文は

ステレオマッチングに関する分類を行行う 新たなデータセットを作成する

というよりも他の手法が有効性を示すことができるようにデータセットを作成した 今ではmiddleburyのデータセットと言えばステレオ業界では超有名

High-resolution stereo datasets with subpixel-accurate ground truth

なかの

Discriminability Limits in Spatio-Temporal Stereo Block Matching1

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

spatio-temporal disparity estimationの根本的な前提の正当性を解析しマッチング処理理の際に動きが助けとなる程度度を決定する

時空間マッチングのエラーを分析し誤りの原因を確率率率で導出する（フレーム数動きの分散画像特徴ノイズの関数）

[34243334]は時空間マッチングの利利点を指摘していたが本論論文はマッチング精度度の向上のために動きを用いる手法の程度度や性質を研究する

6つのステレオビデオを用いて検証を行行った

Spacetime stereo Shape recovery for dynamic scenes [L Zhang B Curless and S Seitz CVPR2003] Spatiotemporal stereo and scene flow via stequel matching [M Sizintsev and R Wildes PAMI2012] Temporally consistent disparity and optical flow via efficient spatio-temporal filtering [A Hosni C Rhemann M Bleyer and M Gelautz PRCAIVT2012] Spacetime stereo A unifying framework for depth from triangulation [PAMI2005] Dynamic depth recovery from multiple synchronized video streams [H Tao H Sawhney and R Kumar CVPR2001] Spatiotemporal descriptor for wide-baseline stereo reconstruction of non-rigid and ambiguous scenes [ECCV2003]

なかの

Depth-Based Patch Scaling for Content-Aware Stereo Image Completion2

どんなもの

どうやって有効性を示した

ステレオでデプスを取り物体の三次元情報を使ってインペインティングを行行う

bookのデータセット背景が繰り返しパターンが多いものを使っている

なかの

Fast Semi-dense Surface Reconstruction from Stereoscopic Video in Laparoscopic Surgery3

どんなもの

手法の流流れ

次に読むべき論論文は

腹腔内手術の際にステレオビデオから高速に物体の三次元再構成を行行う研究

Evaluation of stereo matching costs on images with radiometric differences [Hirschmueller H Scharstein D PAMI2008]

スコープカメラから画像取得GPUで演算する 視差を算出しフィルタにかける距離離に変換 点群を再びフィルタにかけて三次元再構成

なかの

3D Reconstruction from Accidental Motion4

どんなもの

技術や手法のキモはどこ

議論論はある

数秒のビデオ（単眼）から三次元再構成を行行う 手ぶれなどの動きから再構成が可能で特定の動きや機材を必要としない

短い基線長でも再構成が可能（3mmの基線長）

基線長が短いため背景の精度度が低くなる リフォーカス画像作成には十分 練習では上手く動作したが検証がまだ必要

なかの

Panoramic Video from Unstructured Camera Arrays5

どんなもの

技術や手法のキモはどこ

議論論はある

複数のカメラを用いたパノラマ撮影を行行う その際に不不自然さがないような動画を作成する

不不自然さを感じる感覚特性を提示しそれにのっとって対策を講じている

一つのカメラの解像度度と品質を向上させるよりも複数台のカメラを組み合わせることがはるかに簡単で有益である専門家でなくてもGoProのカメラセットを組み合わせることは容易易

カメラの配置は厳密に決められていない完璧な時間同期やローリングシャッターの不不足のような実撮影での問題もクリアしている

先行行研究と比べてどこがすごい

どうやって有効性を示した左のシステムは14台のカメラを使用 右のシステムはGoProを5台使用

Disney 201558

なかの

Floating Scale Surface Reconstruction6

どんなもの

技術や手法のキモはどこ

流流動的にスケールを変えられる三次元再構成手法

サンプル規模に依存するパラメータがない rarrどのスケールのサンプルにも対応できる

siggraph2014

なかの

A Super Resolution Reconstruction Scheme for Mixed Spatio-Temporal Stereo Video7

どんなもの

技術や手法のキモはどこ

ビデオ超解像アルゴリズム

二台のカメラを使用 一台は低解像度度で高速一台は高解像度度で低速

HHI 3DV ftp siteのBookarrivalとbeergadenを使用どうやって有効性を示した

なかの

What Is a Good Day for Outdoor Photometric Stereo8

どんなもの

先行行研究と比べてどこがすごい

議論論はある

次に読むべき論論文は

屋外における照度度差があるステレオの研究 屋外でステレオを行行う際に有利利or不不利利な日照条件を明らかにする

点光源を用いた研究は行行われていたが屋外での研究はされていなかった

晴れより曇りの方が精度度が良良い雲があるから特徴量量を取りやすい雑音を白色ガウスモデルを想定 季節ごとのデータセットを利利用してみても良良い

Time-lapse photometric stereo and applications [F Shen K Sunkavalli N Bonneel S Rusinkiewicz H Pfisterand X Tong2014] Outdoor photometric stereo [L-F Yu S-K Yeung Y-W Tai D Terzopoulos and T FChan ICCP2013]

どうやって有効性を示した屋外の照明に関するHDR環境マップのデータベースを利利用

Disney 2015424

なかの

COLORBRUSH ANIMATED DIFFUSION FOR INTUITIVE COLORIZATION SIMULATING WATER PAINTING 9

どんなものアニメを水彩画で描いたように変換する 水彩画を描くには経験が必要であるがそれを作成するアルゴリズムを考案絵具が水によりどうにじむかシュミレーションしている

Disney 20141027 ICIP2014

次に読むべき論論文はGabor-space geodesic active contoursrdquo In Algebraic Frames for the Perception-Action Cycle [C Sagiv NA Sochen and YY Zeevi 2000] Practical temporal consistency for image-based graphics applications [M Lang O Wang T Aydin A Smolic and M Gross SIGGRAPH2012] Computer-Generated Watercolor [CJ Curtis SE Anderson JE Seims KW Fleischer and DH Salesin SIGGRAPH1997]

なかの

From Sound to Sight Using Audio Processing to enable Visible Light Communication 10

どんなもの光に情報を載せる技術プロジェクトページがあって光関係の研究が8個載っている

httpwwwdisneyresearchcomprojectvisible-light-communication

ビデオのURL httpwwwdisneyresearchcomwpcontentuploadsPub_InvisibleLightCommunication_Siggraph14_videomp4

• 201211106_KeisukeKawahara
• 201311421_KeitaKanai_02
• 201313095_AkiraIshii_02
• 201413109_YuukiKubo_02
• 201513110_SatoshiHashizume_02
• 鬼輪講マラソン③_1
• 鬼輪講マラソン③_2

なかの

Temporally Consistent Disparity and Optical Flow via Efficient Spatio-temporal Filtering1

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示した

議論論はあるか

時間的に一定の視差を算出する手法静止画ステレオよりも精度度が良良いことを示す従来よりも推定精度度が良良いオプティカルフローも算出する

一枚の静止画に対するフィルタリング[1]をステレオ動画に拡張している

ケンブリッジのステレオ動画のデータセットを利利用 実写動画に対する比較も行行うノイズ耐性も検証する

フィルタベースとエネルギーベースの関係性を良良り理理解することで推定精度度を上げる

実装が簡単でリアルタイム視差推定が可能

Fast Cost-Volume Filtering for Visual Correspondence and Beyond [Rhemann C Hosni A Bleyer M Rother C Gelautz M CVPR2011] Real-time Spatiotemporal Stereo Matching Using the Dual-Cross-Bilateral Grid [Richardt C Orr D Davies I Criminisi A Dodgson NA ECCV2010] Secrets of optical flow estimation and their principles [Sun D Roth S Black MJ 2010] Motion estimation with non-local total variation regularization [Werlberger M Pock T Bischof H CVPR2010] Temporally Consistent Disparity Maps from Uncalibrated Stereo Videos [Bleyer M Gelatuz M ISPA2011]

なかの

SymStereo Matching using Induced Symmetry (2014)2

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示した

議論論はあるか

画像の対称性を用いてステレオマッチングを行行う 左右の画像を反転させて重ね合わせることで対称性を測る

絵的な類似の代わりに対称性を使う今まで対称性を用いる手法はなく新規性が大きい

三つのSymmetry-baseの手法で精度度を検証従来手法よりも精度度が向上しているMiddlebury Oxford Corridorfountain-P11のデータセット使用

ステレオの問題である不不連続な箇所オクルージョン部分は未解決である演算時間はやや増加

1-Dラインのコストを考える今までは撮像面に対して平行行な平面でデプスを考えていたが垂直な平面を考える

BT[Birchfield and Tomasi 1998] Census transform[Zabih and Woodfill 1994] Log N[Kovesi 1997] radio-metoric differences[Hirschmuller Scharstein 2009]

なかの

Camouflaging an Object from Many Viewpoints3

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

多くの視点から三次元の物体をカモフラージュするカモフラージュによってオクルージョン部分の不不連続がどの程度度生じるか他の視点ではどれほどになるかの検証

MRF（Markov Random Fields）ベース

新しい三次元物体のカモフラージュモデルを構築 37種類のデータセットを作る

箱形の物体に対してカモフラージュ処理理を施し 結果を評価する

オクルージョン不不連続テクスチャの歪みが問題 照明や画像の貼りつけに制限あり

なかの

Aliasing Detection and Reduction in Plenoptic Imaging4

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

カメラアレイ撮影の角度度のエイリアシングを除去するエイリアシングの探索索と打ち消しを行行う

周波数領領域ではなく空間領領域で探索索を行行う

先行行研究がフィルタデモザイキング再パラメータ調整などの前処理理でエイリアシング除去を行行うのに対しエイリアシング探索索後にリフォーカスの段階でエイリアシングを取り除く

8times8の平行行カメラアレイで検証するカメラ間の 基線長は70mm

今回は基線長が長いデータセットを使った 次はLytroなどのマイクロレンズアレイで検証する

Globally consistent multi-label assignment on the ray space of 4d light fields [S Wanner C Straehle B Goldluecke CVPR2013] Lineassisted light field triangulation and stereo matching [Z Yu X Guo H Lin A Lumsdaine J Yu ICCV 2013]

なかの

Globally Consistent Multi-Label Assignment on the Ray Space of 4D Light Fields5

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

四次元ライトフィールドの光線情報において マルチラベルの領領域分割を行行う

深度度情報光線情報を用いて領領域分割することで 二次元（空間）情報だけでは分割が難しかった 領領域を分割可能とする

The light field camera Extended depth of field aliasing and superresolution [T Bishop P Favaro IEEE Transactions on Pattern Analysis and Machine Intelligence 2012]

なかの

Line Assisted Light Field Triangulation and Stereo Matching6

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

光線情報を利利用してステレオマッチングの精度度を 向上させる手法三角測量量の誤差を減らす

Light Field Stereo Matchingとかいう手法 グラフ構造を作成

Variational light field analysis for disparity estimation and super-resolution [S Wanner and B Goldlumluecke 2013]

なかの

Adaptive stereo similarity fusion using confidence measures 20157

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

ステレオマッチングの新しい方式fusion weightsを提案複数の手法を組み合わせてコスト計算を行行う手法付録に既存手法のコスト関数一覧あり

パラメータに依存する手法を用いないことで高速化を図っている

一つのアルゴリズムでは異異なる特性を持つ領領域全てに対して適切切なマッチングはできない複数を組み合わせることでそれを補う13種と多い

middleburyとKITTIのデータセットで評価

一枚あたり03sと高速だが001sとより高速なアルゴリズムが存在する

Segment-based stereo matching using belief propagation and a self-adapting dissimilarity measure [A Klaus M Sormann K Karner ICPR2006] On building an accurate stereo matching system on graphics hardware [X Mei X Sun M Zhou S Jiao H Wang X Zhang ICCV2011] Similarity measures for depth estimation [K Wegner O Stankiewicz 3DTV-CON2009] On accurate dense stereo-matching using a local adaptive multi-cost approach [C Stentoumis L Grammatikopoulos I Kalisperakis G Karras ISPRS2014] A quantitative evaluation of confidence measures for stereo vision [X Hu P Mordohai PAMI2012]

なかの

SIMILARITY MEASURE FOR DEPTH ESTIMATIOM 20098

どんなもの

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

4種類の視差推定アルゴリズムを組み合わせている 類似度度の選択性の解析

Belief Propagationの枠組みを用いる

名古屋大学の多視点データベースを利利用

HHI Test Material for 3D Video [I Feldmann M Muller F Zilly R Tanger A SmolicP Kauff T Wiegand 2008] Multiview Video Test Sequence and Camera Parameters [Yo-Sung Ho Eun-Kyung Lee and Cheon Lee 2008] 1D Parallel Test Sequences for MPEG-FTV [M Tanimoto T Fujii N Fukushima 2008] Non-parametric Local Transforms for Computing Visual Correspondence [R Zabih J Woodfill 1994]

なかの

Spatiotemporal Stereo via Spatiotemporal Quadric Element (Stequel) Matching9

どんなもの

技術や手法のキモはどこ

新しいマッチング手法を提案動き考慮することなく時間情報を取り込むことができる 時間方向のエピ線を考える

オプティカルフロー推定は3D境界や低テクスチャで弱いが提案手法はロバストである

なかの

Depth Video Enhancement Based on Weighted Mode Filtering10

どんなもの

議論論はある

ノイズを含んだ低解像度度のデプスマップの質を高める手法（超解像度度とデノイズ）時間方向も使用簡単なオプティカルフローを計算し利利用する

非反復復アルゴリズムのためGPUに載せやすく高速化が考えられる

なかの

Fast Bilateral-Space Stereo for Synthetic Defocus11

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

議論論はある

次に読むべき論論文は

高速な自由焦点ぼけ画像の作成

Bilateral-spaceを提案

従来研究よりも10から100倍速くぼけ具合の精度度も良良い

ぼけを作成するというアプリケーションに利利用する距離離という面では提案手法が有益であるが実測的な距離離という面での精度度は悪い背景と前景が同じ色で近くにある場合同一ととらえてしまう

Efficient high-resolution stereo matching using local plane sweeps [S N Sinha D Scharstein and R SzeliskiCVPR2014] Bilateral filtering-based optical flow estimation with occlusion detection [J Xiao H Cheng H Sawhney C Rao and M IsnardiECCV2006] Efficient nonlocal regularization for optical flow [P Krumlahenbumluhl and V KoltunECCV2012] Real-time spatiotemporal stereo matching using the dual-cross-bilateral grid [C Richardt D Orr I Davies A Criminisi and N A DodgsonECCV2010]

どうやって有効性を示した視差推定の精度度はmiddleburyKITTI

なかの

Robust Spatiotemporal Stereo for Dynamic Scenes12

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

ステレオ動画のフレーム間情報を取り入れることでノイズ耐性を向上させるまた動きの大きなものも考える

時間を含めたウインドウの提案自動的にそのような変化に対応する画像領領域を検出する

従来の時空間ステレオと比べ大きな動きによる急激な視差の時間変化に対して頑健である

なかの

Spacetime Stereo A Unifying Framework for Depth from Triangulation13

どんなもの

先行行研究と比べてどこがすごい

space time stereoを提案ステレオカメラの視差推定でも構造光を用いた視差推定でも利利用可能 動的なシーンでの利利用も可能

フレームごとマッチングを取っていたが複数フレームでのマッチングを可能とした

なかの

Learning to Select and Order Vacation Photographs (Disney research)14

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示したあまりにもたくさん撮影した写真たちから自動的にフォトアルバムを作成する研究

複雑な視覚での区別を試みたのはこの論論文が初

５つの異異なるトピックから63の個人的な写真コレクションのデータセットを利利用し定量量的に評価する

写真間の差別かを定義する顔全体の絵何が写っているか写っていないかを評価する

Jointly aligning and segmenting multiple web photo streams for the inference of collective photo storylines [G Kim and E P Xing CVPR2013] Photo sequencing [T Basha Y Moses and S Avidan CVPR2012]

なかの

A Taxonomy and Evaluation of Dense Two-Frame Stereo Correspondence Algorithms15

どんなもの

どうやって有効性を示した

次に読むべき論論文は

ステレオマッチングに関する分類を行行う 新たなデータセットを作成する

というよりも他の手法が有効性を示すことができるようにデータセットを作成した 今ではmiddleburyのデータセットと言えばステレオ業界では超有名

High-resolution stereo datasets with subpixel-accurate ground truth

なかの

Discriminability Limits in Spatio-Temporal Stereo Block Matching1

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

spatio-temporal disparity estimationの根本的な前提の正当性を解析しマッチング処理理の際に動きが助けとなる程度度を決定する

時空間マッチングのエラーを分析し誤りの原因を確率率率で導出する（フレーム数動きの分散画像特徴ノイズの関数）

[34243334]は時空間マッチングの利利点を指摘していたが本論論文はマッチング精度度の向上のために動きを用いる手法の程度度や性質を研究する

6つのステレオビデオを用いて検証を行行った

Spacetime stereo Shape recovery for dynamic scenes [L Zhang B Curless and S Seitz CVPR2003] Spatiotemporal stereo and scene flow via stequel matching [M Sizintsev and R Wildes PAMI2012] Temporally consistent disparity and optical flow via efficient spatio-temporal filtering [A Hosni C Rhemann M Bleyer and M Gelautz PRCAIVT2012] Spacetime stereo A unifying framework for depth from triangulation [PAMI2005] Dynamic depth recovery from multiple synchronized video streams [H Tao H Sawhney and R Kumar CVPR2001] Spatiotemporal descriptor for wide-baseline stereo reconstruction of non-rigid and ambiguous scenes [ECCV2003]

なかの

Depth-Based Patch Scaling for Content-Aware Stereo Image Completion2

どんなもの

どうやって有効性を示した

ステレオでデプスを取り物体の三次元情報を使ってインペインティングを行行う

bookのデータセット背景が繰り返しパターンが多いものを使っている

なかの

Fast Semi-dense Surface Reconstruction from Stereoscopic Video in Laparoscopic Surgery3

どんなもの

手法の流流れ

次に読むべき論論文は

腹腔内手術の際にステレオビデオから高速に物体の三次元再構成を行行う研究

Evaluation of stereo matching costs on images with radiometric differences [Hirschmueller H Scharstein D PAMI2008]

スコープカメラから画像取得GPUで演算する 視差を算出しフィルタにかける距離離に変換 点群を再びフィルタにかけて三次元再構成

なかの

3D Reconstruction from Accidental Motion4

どんなもの

技術や手法のキモはどこ

議論論はある

数秒のビデオ（単眼）から三次元再構成を行行う 手ぶれなどの動きから再構成が可能で特定の動きや機材を必要としない

短い基線長でも再構成が可能（3mmの基線長）

基線長が短いため背景の精度度が低くなる リフォーカス画像作成には十分 練習では上手く動作したが検証がまだ必要

なかの

Panoramic Video from Unstructured Camera Arrays5

どんなもの

技術や手法のキモはどこ

議論論はある

複数のカメラを用いたパノラマ撮影を行行う その際に不不自然さがないような動画を作成する

不不自然さを感じる感覚特性を提示しそれにのっとって対策を講じている

一つのカメラの解像度度と品質を向上させるよりも複数台のカメラを組み合わせることがはるかに簡単で有益である専門家でなくてもGoProのカメラセットを組み合わせることは容易易

カメラの配置は厳密に決められていない完璧な時間同期やローリングシャッターの不不足のような実撮影での問題もクリアしている

先行行研究と比べてどこがすごい

どうやって有効性を示した左のシステムは14台のカメラを使用 右のシステムはGoProを5台使用

Disney 201558

なかの

Floating Scale Surface Reconstruction6

どんなもの

技術や手法のキモはどこ

流流動的にスケールを変えられる三次元再構成手法

サンプル規模に依存するパラメータがない rarrどのスケールのサンプルにも対応できる

siggraph2014

なかの

A Super Resolution Reconstruction Scheme for Mixed Spatio-Temporal Stereo Video7

どんなもの

技術や手法のキモはどこ

ビデオ超解像アルゴリズム

二台のカメラを使用 一台は低解像度度で高速一台は高解像度度で低速

HHI 3DV ftp siteのBookarrivalとbeergadenを使用どうやって有効性を示した

なかの

What Is a Good Day for Outdoor Photometric Stereo8

どんなもの

先行行研究と比べてどこがすごい

議論論はある

次に読むべき論論文は

屋外における照度度差があるステレオの研究 屋外でステレオを行行う際に有利利or不不利利な日照条件を明らかにする

点光源を用いた研究は行行われていたが屋外での研究はされていなかった

晴れより曇りの方が精度度が良良い雲があるから特徴量量を取りやすい雑音を白色ガウスモデルを想定 季節ごとのデータセットを利利用してみても良良い

Time-lapse photometric stereo and applications [F Shen K Sunkavalli N Bonneel S Rusinkiewicz H Pfisterand X Tong2014] Outdoor photometric stereo [L-F Yu S-K Yeung Y-W Tai D Terzopoulos and T FChan ICCP2013]

どうやって有効性を示した屋外の照明に関するHDR環境マップのデータベースを利利用

Disney 2015424

なかの

COLORBRUSH ANIMATED DIFFUSION FOR INTUITIVE COLORIZATION SIMULATING WATER PAINTING 9

どんなものアニメを水彩画で描いたように変換する 水彩画を描くには経験が必要であるがそれを作成するアルゴリズムを考案絵具が水によりどうにじむかシュミレーションしている

Disney 20141027 ICIP2014

次に読むべき論論文はGabor-space geodesic active contoursrdquo In Algebraic Frames for the Perception-Action Cycle [C Sagiv NA Sochen and YY Zeevi 2000] Practical temporal consistency for image-based graphics applications [M Lang O Wang T Aydin A Smolic and M Gross SIGGRAPH2012] Computer-Generated Watercolor [CJ Curtis SE Anderson JE Seims KW Fleischer and DH Salesin SIGGRAPH1997]

なかの

From Sound to Sight Using Audio Processing to enable Visible Light Communication 10

どんなもの光に情報を載せる技術プロジェクトページがあって光関係の研究が8個載っている

httpwwwdisneyresearchcomprojectvisible-light-communication

ビデオのURL httpwwwdisneyresearchcomwpcontentuploadsPub_InvisibleLightCommunication_Siggraph14_videomp4

• 201211106_KeisukeKawahara
• 201311421_KeitaKanai_02
• 201313095_AkiraIshii_02
• 201413109_YuukiKubo_02
• 201513110_SatoshiHashizume_02
• 鬼輪講マラソン③_1
• 鬼輪講マラソン③_2

なかの

SymStereo Matching using Induced Symmetry (2014)2

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示した

議論論はあるか

画像の対称性を用いてステレオマッチングを行行う 左右の画像を反転させて重ね合わせることで対称性を測る

絵的な類似の代わりに対称性を使う今まで対称性を用いる手法はなく新規性が大きい

三つのSymmetry-baseの手法で精度度を検証従来手法よりも精度度が向上しているMiddlebury Oxford Corridorfountain-P11のデータセット使用

ステレオの問題である不不連続な箇所オクルージョン部分は未解決である演算時間はやや増加

1-Dラインのコストを考える今までは撮像面に対して平行行な平面でデプスを考えていたが垂直な平面を考える

BT[Birchfield and Tomasi 1998] Census transform[Zabih and Woodfill 1994] Log N[Kovesi 1997] radio-metoric differences[Hirschmuller Scharstein 2009]

なかの

Camouflaging an Object from Many Viewpoints3

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

多くの視点から三次元の物体をカモフラージュするカモフラージュによってオクルージョン部分の不不連続がどの程度度生じるか他の視点ではどれほどになるかの検証

MRF（Markov Random Fields）ベース

新しい三次元物体のカモフラージュモデルを構築 37種類のデータセットを作る

箱形の物体に対してカモフラージュ処理理を施し 結果を評価する

オクルージョン不不連続テクスチャの歪みが問題 照明や画像の貼りつけに制限あり

なかの

Aliasing Detection and Reduction in Plenoptic Imaging4

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

カメラアレイ撮影の角度度のエイリアシングを除去するエイリアシングの探索索と打ち消しを行行う

周波数領領域ではなく空間領領域で探索索を行行う

先行行研究がフィルタデモザイキング再パラメータ調整などの前処理理でエイリアシング除去を行行うのに対しエイリアシング探索索後にリフォーカスの段階でエイリアシングを取り除く

8times8の平行行カメラアレイで検証するカメラ間の 基線長は70mm

今回は基線長が長いデータセットを使った 次はLytroなどのマイクロレンズアレイで検証する

Globally consistent multi-label assignment on the ray space of 4d light fields [S Wanner C Straehle B Goldluecke CVPR2013] Lineassisted light field triangulation and stereo matching [Z Yu X Guo H Lin A Lumsdaine J Yu ICCV 2013]

なかの

Globally Consistent Multi-Label Assignment on the Ray Space of 4D Light Fields5

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

四次元ライトフィールドの光線情報において マルチラベルの領領域分割を行行う

深度度情報光線情報を用いて領領域分割することで 二次元（空間）情報だけでは分割が難しかった 領領域を分割可能とする

The light field camera Extended depth of field aliasing and superresolution [T Bishop P Favaro IEEE Transactions on Pattern Analysis and Machine Intelligence 2012]

なかの

Line Assisted Light Field Triangulation and Stereo Matching6

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

光線情報を利利用してステレオマッチングの精度度を 向上させる手法三角測量量の誤差を減らす

Light Field Stereo Matchingとかいう手法 グラフ構造を作成

Variational light field analysis for disparity estimation and super-resolution [S Wanner and B Goldlumluecke 2013]

なかの

Adaptive stereo similarity fusion using confidence measures 20157

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

ステレオマッチングの新しい方式fusion weightsを提案複数の手法を組み合わせてコスト計算を行行う手法付録に既存手法のコスト関数一覧あり

パラメータに依存する手法を用いないことで高速化を図っている

一つのアルゴリズムでは異異なる特性を持つ領領域全てに対して適切切なマッチングはできない複数を組み合わせることでそれを補う13種と多い

middleburyとKITTIのデータセットで評価

一枚あたり03sと高速だが001sとより高速なアルゴリズムが存在する

Segment-based stereo matching using belief propagation and a self-adapting dissimilarity measure [A Klaus M Sormann K Karner ICPR2006] On building an accurate stereo matching system on graphics hardware [X Mei X Sun M Zhou S Jiao H Wang X Zhang ICCV2011] Similarity measures for depth estimation [K Wegner O Stankiewicz 3DTV-CON2009] On accurate dense stereo-matching using a local adaptive multi-cost approach [C Stentoumis L Grammatikopoulos I Kalisperakis G Karras ISPRS2014] A quantitative evaluation of confidence measures for stereo vision [X Hu P Mordohai PAMI2012]

なかの

SIMILARITY MEASURE FOR DEPTH ESTIMATIOM 20098

どんなもの

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

4種類の視差推定アルゴリズムを組み合わせている 類似度度の選択性の解析

Belief Propagationの枠組みを用いる

名古屋大学の多視点データベースを利利用

HHI Test Material for 3D Video [I Feldmann M Muller F Zilly R Tanger A SmolicP Kauff T Wiegand 2008] Multiview Video Test Sequence and Camera Parameters [Yo-Sung Ho Eun-Kyung Lee and Cheon Lee 2008] 1D Parallel Test Sequences for MPEG-FTV [M Tanimoto T Fujii N Fukushima 2008] Non-parametric Local Transforms for Computing Visual Correspondence [R Zabih J Woodfill 1994]

なかの

Spatiotemporal Stereo via Spatiotemporal Quadric Element (Stequel) Matching9

どんなもの

技術や手法のキモはどこ

新しいマッチング手法を提案動き考慮することなく時間情報を取り込むことができる 時間方向のエピ線を考える

オプティカルフロー推定は3D境界や低テクスチャで弱いが提案手法はロバストである

なかの

Depth Video Enhancement Based on Weighted Mode Filtering10

どんなもの

議論論はある

ノイズを含んだ低解像度度のデプスマップの質を高める手法（超解像度度とデノイズ）時間方向も使用簡単なオプティカルフローを計算し利利用する

非反復復アルゴリズムのためGPUに載せやすく高速化が考えられる

なかの

Fast Bilateral-Space Stereo for Synthetic Defocus11

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

議論論はある

次に読むべき論論文は

高速な自由焦点ぼけ画像の作成

Bilateral-spaceを提案

従来研究よりも10から100倍速くぼけ具合の精度度も良良い

ぼけを作成するというアプリケーションに利利用する距離離という面では提案手法が有益であるが実測的な距離離という面での精度度は悪い背景と前景が同じ色で近くにある場合同一ととらえてしまう

Efficient high-resolution stereo matching using local plane sweeps [S N Sinha D Scharstein and R SzeliskiCVPR2014] Bilateral filtering-based optical flow estimation with occlusion detection [J Xiao H Cheng H Sawhney C Rao and M IsnardiECCV2006] Efficient nonlocal regularization for optical flow [P Krumlahenbumluhl and V KoltunECCV2012] Real-time spatiotemporal stereo matching using the dual-cross-bilateral grid [C Richardt D Orr I Davies A Criminisi and N A DodgsonECCV2010]

どうやって有効性を示した視差推定の精度度はmiddleburyKITTI

なかの

Robust Spatiotemporal Stereo for Dynamic Scenes12

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

ステレオ動画のフレーム間情報を取り入れることでノイズ耐性を向上させるまた動きの大きなものも考える

時間を含めたウインドウの提案自動的にそのような変化に対応する画像領領域を検出する

従来の時空間ステレオと比べ大きな動きによる急激な視差の時間変化に対して頑健である

なかの

Spacetime Stereo A Unifying Framework for Depth from Triangulation13

どんなもの

先行行研究と比べてどこがすごい

space time stereoを提案ステレオカメラの視差推定でも構造光を用いた視差推定でも利利用可能 動的なシーンでの利利用も可能

フレームごとマッチングを取っていたが複数フレームでのマッチングを可能とした

なかの

Learning to Select and Order Vacation Photographs (Disney research)14

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示したあまりにもたくさん撮影した写真たちから自動的にフォトアルバムを作成する研究

複雑な視覚での区別を試みたのはこの論論文が初

５つの異異なるトピックから63の個人的な写真コレクションのデータセットを利利用し定量量的に評価する

写真間の差別かを定義する顔全体の絵何が写っているか写っていないかを評価する

Jointly aligning and segmenting multiple web photo streams for the inference of collective photo storylines [G Kim and E P Xing CVPR2013] Photo sequencing [T Basha Y Moses and S Avidan CVPR2012]

なかの

A Taxonomy and Evaluation of Dense Two-Frame Stereo Correspondence Algorithms15

どんなもの

どうやって有効性を示した

次に読むべき論論文は

ステレオマッチングに関する分類を行行う 新たなデータセットを作成する

というよりも他の手法が有効性を示すことができるようにデータセットを作成した 今ではmiddleburyのデータセットと言えばステレオ業界では超有名

High-resolution stereo datasets with subpixel-accurate ground truth

なかの

Discriminability Limits in Spatio-Temporal Stereo Block Matching1

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

spatio-temporal disparity estimationの根本的な前提の正当性を解析しマッチング処理理の際に動きが助けとなる程度度を決定する

時空間マッチングのエラーを分析し誤りの原因を確率率率で導出する（フレーム数動きの分散画像特徴ノイズの関数）

[34243334]は時空間マッチングの利利点を指摘していたが本論論文はマッチング精度度の向上のために動きを用いる手法の程度度や性質を研究する

6つのステレオビデオを用いて検証を行行った

Spacetime stereo Shape recovery for dynamic scenes [L Zhang B Curless and S Seitz CVPR2003] Spatiotemporal stereo and scene flow via stequel matching [M Sizintsev and R Wildes PAMI2012] Temporally consistent disparity and optical flow via efficient spatio-temporal filtering [A Hosni C Rhemann M Bleyer and M Gelautz PRCAIVT2012] Spacetime stereo A unifying framework for depth from triangulation [PAMI2005] Dynamic depth recovery from multiple synchronized video streams [H Tao H Sawhney and R Kumar CVPR2001] Spatiotemporal descriptor for wide-baseline stereo reconstruction of non-rigid and ambiguous scenes [ECCV2003]

なかの

Depth-Based Patch Scaling for Content-Aware Stereo Image Completion2

どんなもの

どうやって有効性を示した

ステレオでデプスを取り物体の三次元情報を使ってインペインティングを行行う

bookのデータセット背景が繰り返しパターンが多いものを使っている

なかの

Fast Semi-dense Surface Reconstruction from Stereoscopic Video in Laparoscopic Surgery3

どんなもの

手法の流流れ

次に読むべき論論文は

腹腔内手術の際にステレオビデオから高速に物体の三次元再構成を行行う研究

Evaluation of stereo matching costs on images with radiometric differences [Hirschmueller H Scharstein D PAMI2008]

スコープカメラから画像取得GPUで演算する 視差を算出しフィルタにかける距離離に変換 点群を再びフィルタにかけて三次元再構成

なかの

3D Reconstruction from Accidental Motion4

どんなもの

技術や手法のキモはどこ

議論論はある

数秒のビデオ（単眼）から三次元再構成を行行う 手ぶれなどの動きから再構成が可能で特定の動きや機材を必要としない

短い基線長でも再構成が可能（3mmの基線長）

基線長が短いため背景の精度度が低くなる リフォーカス画像作成には十分 練習では上手く動作したが検証がまだ必要

なかの

Panoramic Video from Unstructured Camera Arrays5

どんなもの

技術や手法のキモはどこ

議論論はある

複数のカメラを用いたパノラマ撮影を行行う その際に不不自然さがないような動画を作成する

不不自然さを感じる感覚特性を提示しそれにのっとって対策を講じている

一つのカメラの解像度度と品質を向上させるよりも複数台のカメラを組み合わせることがはるかに簡単で有益である専門家でなくてもGoProのカメラセットを組み合わせることは容易易

カメラの配置は厳密に決められていない完璧な時間同期やローリングシャッターの不不足のような実撮影での問題もクリアしている

先行行研究と比べてどこがすごい

どうやって有効性を示した左のシステムは14台のカメラを使用 右のシステムはGoProを5台使用

Disney 201558

なかの

Floating Scale Surface Reconstruction6

どんなもの

技術や手法のキモはどこ

流流動的にスケールを変えられる三次元再構成手法

サンプル規模に依存するパラメータがない rarrどのスケールのサンプルにも対応できる

siggraph2014

なかの

A Super Resolution Reconstruction Scheme for Mixed Spatio-Temporal Stereo Video7

どんなもの

技術や手法のキモはどこ

ビデオ超解像アルゴリズム

二台のカメラを使用 一台は低解像度度で高速一台は高解像度度で低速

HHI 3DV ftp siteのBookarrivalとbeergadenを使用どうやって有効性を示した

なかの

What Is a Good Day for Outdoor Photometric Stereo8

どんなもの

先行行研究と比べてどこがすごい

議論論はある

次に読むべき論論文は

屋外における照度度差があるステレオの研究 屋外でステレオを行行う際に有利利or不不利利な日照条件を明らかにする

点光源を用いた研究は行行われていたが屋外での研究はされていなかった

晴れより曇りの方が精度度が良良い雲があるから特徴量量を取りやすい雑音を白色ガウスモデルを想定 季節ごとのデータセットを利利用してみても良良い

Time-lapse photometric stereo and applications [F Shen K Sunkavalli N Bonneel S Rusinkiewicz H Pfisterand X Tong2014] Outdoor photometric stereo [L-F Yu S-K Yeung Y-W Tai D Terzopoulos and T FChan ICCP2013]

どうやって有効性を示した屋外の照明に関するHDR環境マップのデータベースを利利用

Disney 2015424

なかの

COLORBRUSH ANIMATED DIFFUSION FOR INTUITIVE COLORIZATION SIMULATING WATER PAINTING 9

どんなものアニメを水彩画で描いたように変換する 水彩画を描くには経験が必要であるがそれを作成するアルゴリズムを考案絵具が水によりどうにじむかシュミレーションしている

Disney 20141027 ICIP2014

次に読むべき論論文はGabor-space geodesic active contoursrdquo In Algebraic Frames for the Perception-Action Cycle [C Sagiv NA Sochen and YY Zeevi 2000] Practical temporal consistency for image-based graphics applications [M Lang O Wang T Aydin A Smolic and M Gross SIGGRAPH2012] Computer-Generated Watercolor [CJ Curtis SE Anderson JE Seims KW Fleischer and DH Salesin SIGGRAPH1997]

なかの

From Sound to Sight Using Audio Processing to enable Visible Light Communication 10

どんなもの光に情報を載せる技術プロジェクトページがあって光関係の研究が8個載っている

httpwwwdisneyresearchcomprojectvisible-light-communication

ビデオのURL httpwwwdisneyresearchcomwpcontentuploadsPub_InvisibleLightCommunication_Siggraph14_videomp4

• 201211106_KeisukeKawahara
• 201311421_KeitaKanai_02
• 201313095_AkiraIshii_02
• 201413109_YuukiKubo_02
• 201513110_SatoshiHashizume_02
• 鬼輪講マラソン③_1
• 鬼輪講マラソン③_2

なかの

Camouflaging an Object from Many Viewpoints3

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

多くの視点から三次元の物体をカモフラージュするカモフラージュによってオクルージョン部分の不不連続がどの程度度生じるか他の視点ではどれほどになるかの検証

MRF（Markov Random Fields）ベース

新しい三次元物体のカモフラージュモデルを構築 37種類のデータセットを作る

箱形の物体に対してカモフラージュ処理理を施し 結果を評価する

オクルージョン不不連続テクスチャの歪みが問題 照明や画像の貼りつけに制限あり

なかの

Aliasing Detection and Reduction in Plenoptic Imaging4

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

カメラアレイ撮影の角度度のエイリアシングを除去するエイリアシングの探索索と打ち消しを行行う

周波数領領域ではなく空間領領域で探索索を行行う

先行行研究がフィルタデモザイキング再パラメータ調整などの前処理理でエイリアシング除去を行行うのに対しエイリアシング探索索後にリフォーカスの段階でエイリアシングを取り除く

8times8の平行行カメラアレイで検証するカメラ間の 基線長は70mm

今回は基線長が長いデータセットを使った 次はLytroなどのマイクロレンズアレイで検証する

Globally consistent multi-label assignment on the ray space of 4d light fields [S Wanner C Straehle B Goldluecke CVPR2013] Lineassisted light field triangulation and stereo matching [Z Yu X Guo H Lin A Lumsdaine J Yu ICCV 2013]

なかの

Globally Consistent Multi-Label Assignment on the Ray Space of 4D Light Fields5

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

四次元ライトフィールドの光線情報において マルチラベルの領領域分割を行行う

深度度情報光線情報を用いて領領域分割することで 二次元（空間）情報だけでは分割が難しかった 領領域を分割可能とする

The light field camera Extended depth of field aliasing and superresolution [T Bishop P Favaro IEEE Transactions on Pattern Analysis and Machine Intelligence 2012]

なかの

Line Assisted Light Field Triangulation and Stereo Matching6

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

光線情報を利利用してステレオマッチングの精度度を 向上させる手法三角測量量の誤差を減らす

Light Field Stereo Matchingとかいう手法 グラフ構造を作成

Variational light field analysis for disparity estimation and super-resolution [S Wanner and B Goldlumluecke 2013]

なかの

Adaptive stereo similarity fusion using confidence measures 20157

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

ステレオマッチングの新しい方式fusion weightsを提案複数の手法を組み合わせてコスト計算を行行う手法付録に既存手法のコスト関数一覧あり

パラメータに依存する手法を用いないことで高速化を図っている

一つのアルゴリズムでは異異なる特性を持つ領領域全てに対して適切切なマッチングはできない複数を組み合わせることでそれを補う13種と多い

middleburyとKITTIのデータセットで評価

一枚あたり03sと高速だが001sとより高速なアルゴリズムが存在する

Segment-based stereo matching using belief propagation and a self-adapting dissimilarity measure [A Klaus M Sormann K Karner ICPR2006] On building an accurate stereo matching system on graphics hardware [X Mei X Sun M Zhou S Jiao H Wang X Zhang ICCV2011] Similarity measures for depth estimation [K Wegner O Stankiewicz 3DTV-CON2009] On accurate dense stereo-matching using a local adaptive multi-cost approach [C Stentoumis L Grammatikopoulos I Kalisperakis G Karras ISPRS2014] A quantitative evaluation of confidence measures for stereo vision [X Hu P Mordohai PAMI2012]

なかの

SIMILARITY MEASURE FOR DEPTH ESTIMATIOM 20098

どんなもの

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

4種類の視差推定アルゴリズムを組み合わせている 類似度度の選択性の解析

Belief Propagationの枠組みを用いる

名古屋大学の多視点データベースを利利用

HHI Test Material for 3D Video [I Feldmann M Muller F Zilly R Tanger A SmolicP Kauff T Wiegand 2008] Multiview Video Test Sequence and Camera Parameters [Yo-Sung Ho Eun-Kyung Lee and Cheon Lee 2008] 1D Parallel Test Sequences for MPEG-FTV [M Tanimoto T Fujii N Fukushima 2008] Non-parametric Local Transforms for Computing Visual Correspondence [R Zabih J Woodfill 1994]

なかの

Spatiotemporal Stereo via Spatiotemporal Quadric Element (Stequel) Matching9

どんなもの

技術や手法のキモはどこ

新しいマッチング手法を提案動き考慮することなく時間情報を取り込むことができる 時間方向のエピ線を考える

オプティカルフロー推定は3D境界や低テクスチャで弱いが提案手法はロバストである

なかの

Depth Video Enhancement Based on Weighted Mode Filtering10

どんなもの

議論論はある

ノイズを含んだ低解像度度のデプスマップの質を高める手法（超解像度度とデノイズ）時間方向も使用簡単なオプティカルフローを計算し利利用する

非反復復アルゴリズムのためGPUに載せやすく高速化が考えられる

なかの

Fast Bilateral-Space Stereo for Synthetic Defocus11

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

議論論はある

次に読むべき論論文は

高速な自由焦点ぼけ画像の作成

Bilateral-spaceを提案

従来研究よりも10から100倍速くぼけ具合の精度度も良良い

ぼけを作成するというアプリケーションに利利用する距離離という面では提案手法が有益であるが実測的な距離離という面での精度度は悪い背景と前景が同じ色で近くにある場合同一ととらえてしまう

Efficient high-resolution stereo matching using local plane sweeps [S N Sinha D Scharstein and R SzeliskiCVPR2014] Bilateral filtering-based optical flow estimation with occlusion detection [J Xiao H Cheng H Sawhney C Rao and M IsnardiECCV2006] Efficient nonlocal regularization for optical flow [P Krumlahenbumluhl and V KoltunECCV2012] Real-time spatiotemporal stereo matching using the dual-cross-bilateral grid [C Richardt D Orr I Davies A Criminisi and N A DodgsonECCV2010]

どうやって有効性を示した視差推定の精度度はmiddleburyKITTI

なかの

Robust Spatiotemporal Stereo for Dynamic Scenes12

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

ステレオ動画のフレーム間情報を取り入れることでノイズ耐性を向上させるまた動きの大きなものも考える

時間を含めたウインドウの提案自動的にそのような変化に対応する画像領領域を検出する

従来の時空間ステレオと比べ大きな動きによる急激な視差の時間変化に対して頑健である

なかの

Spacetime Stereo A Unifying Framework for Depth from Triangulation13

どんなもの

先行行研究と比べてどこがすごい

space time stereoを提案ステレオカメラの視差推定でも構造光を用いた視差推定でも利利用可能 動的なシーンでの利利用も可能

フレームごとマッチングを取っていたが複数フレームでのマッチングを可能とした

なかの

Learning to Select and Order Vacation Photographs (Disney research)14

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示したあまりにもたくさん撮影した写真たちから自動的にフォトアルバムを作成する研究

複雑な視覚での区別を試みたのはこの論論文が初

５つの異異なるトピックから63の個人的な写真コレクションのデータセットを利利用し定量量的に評価する

写真間の差別かを定義する顔全体の絵何が写っているか写っていないかを評価する

Jointly aligning and segmenting multiple web photo streams for the inference of collective photo storylines [G Kim and E P Xing CVPR2013] Photo sequencing [T Basha Y Moses and S Avidan CVPR2012]

なかの

A Taxonomy and Evaluation of Dense Two-Frame Stereo Correspondence Algorithms15

どんなもの

どうやって有効性を示した

次に読むべき論論文は

ステレオマッチングに関する分類を行行う 新たなデータセットを作成する

というよりも他の手法が有効性を示すことができるようにデータセットを作成した 今ではmiddleburyのデータセットと言えばステレオ業界では超有名

High-resolution stereo datasets with subpixel-accurate ground truth

なかの

Discriminability Limits in Spatio-Temporal Stereo Block Matching1

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

spatio-temporal disparity estimationの根本的な前提の正当性を解析しマッチング処理理の際に動きが助けとなる程度度を決定する

時空間マッチングのエラーを分析し誤りの原因を確率率率で導出する（フレーム数動きの分散画像特徴ノイズの関数）

[34243334]は時空間マッチングの利利点を指摘していたが本論論文はマッチング精度度の向上のために動きを用いる手法の程度度や性質を研究する

6つのステレオビデオを用いて検証を行行った

Spacetime stereo Shape recovery for dynamic scenes [L Zhang B Curless and S Seitz CVPR2003] Spatiotemporal stereo and scene flow via stequel matching [M Sizintsev and R Wildes PAMI2012] Temporally consistent disparity and optical flow via efficient spatio-temporal filtering [A Hosni C Rhemann M Bleyer and M Gelautz PRCAIVT2012] Spacetime stereo A unifying framework for depth from triangulation [PAMI2005] Dynamic depth recovery from multiple synchronized video streams [H Tao H Sawhney and R Kumar CVPR2001] Spatiotemporal descriptor for wide-baseline stereo reconstruction of non-rigid and ambiguous scenes [ECCV2003]

なかの

Depth-Based Patch Scaling for Content-Aware Stereo Image Completion2

どんなもの

どうやって有効性を示した

ステレオでデプスを取り物体の三次元情報を使ってインペインティングを行行う

bookのデータセット背景が繰り返しパターンが多いものを使っている

なかの

Fast Semi-dense Surface Reconstruction from Stereoscopic Video in Laparoscopic Surgery3

どんなもの

手法の流流れ

次に読むべき論論文は

腹腔内手術の際にステレオビデオから高速に物体の三次元再構成を行行う研究

Evaluation of stereo matching costs on images with radiometric differences [Hirschmueller H Scharstein D PAMI2008]

スコープカメラから画像取得GPUで演算する 視差を算出しフィルタにかける距離離に変換 点群を再びフィルタにかけて三次元再構成

なかの

3D Reconstruction from Accidental Motion4

どんなもの

技術や手法のキモはどこ

議論論はある

数秒のビデオ（単眼）から三次元再構成を行行う 手ぶれなどの動きから再構成が可能で特定の動きや機材を必要としない

短い基線長でも再構成が可能（3mmの基線長）

基線長が短いため背景の精度度が低くなる リフォーカス画像作成には十分 練習では上手く動作したが検証がまだ必要

なかの

Panoramic Video from Unstructured Camera Arrays5

どんなもの

技術や手法のキモはどこ

議論論はある

複数のカメラを用いたパノラマ撮影を行行う その際に不不自然さがないような動画を作成する

不不自然さを感じる感覚特性を提示しそれにのっとって対策を講じている

一つのカメラの解像度度と品質を向上させるよりも複数台のカメラを組み合わせることがはるかに簡単で有益である専門家でなくてもGoProのカメラセットを組み合わせることは容易易

カメラの配置は厳密に決められていない完璧な時間同期やローリングシャッターの不不足のような実撮影での問題もクリアしている

先行行研究と比べてどこがすごい

どうやって有効性を示した左のシステムは14台のカメラを使用 右のシステムはGoProを5台使用

Disney 201558

なかの

Floating Scale Surface Reconstruction6

どんなもの

技術や手法のキモはどこ

流流動的にスケールを変えられる三次元再構成手法

サンプル規模に依存するパラメータがない rarrどのスケールのサンプルにも対応できる

siggraph2014

なかの

A Super Resolution Reconstruction Scheme for Mixed Spatio-Temporal Stereo Video7

どんなもの

技術や手法のキモはどこ

ビデオ超解像アルゴリズム

二台のカメラを使用 一台は低解像度度で高速一台は高解像度度で低速

HHI 3DV ftp siteのBookarrivalとbeergadenを使用どうやって有効性を示した

なかの

What Is a Good Day for Outdoor Photometric Stereo8

どんなもの

先行行研究と比べてどこがすごい

議論論はある

次に読むべき論論文は

屋外における照度度差があるステレオの研究 屋外でステレオを行行う際に有利利or不不利利な日照条件を明らかにする

点光源を用いた研究は行行われていたが屋外での研究はされていなかった

晴れより曇りの方が精度度が良良い雲があるから特徴量量を取りやすい雑音を白色ガウスモデルを想定 季節ごとのデータセットを利利用してみても良良い

Time-lapse photometric stereo and applications [F Shen K Sunkavalli N Bonneel S Rusinkiewicz H Pfisterand X Tong2014] Outdoor photometric stereo [L-F Yu S-K Yeung Y-W Tai D Terzopoulos and T FChan ICCP2013]

どうやって有効性を示した屋外の照明に関するHDR環境マップのデータベースを利利用

Disney 2015424

なかの

COLORBRUSH ANIMATED DIFFUSION FOR INTUITIVE COLORIZATION SIMULATING WATER PAINTING 9

どんなものアニメを水彩画で描いたように変換する 水彩画を描くには経験が必要であるがそれを作成するアルゴリズムを考案絵具が水によりどうにじむかシュミレーションしている

Disney 20141027 ICIP2014

次に読むべき論論文はGabor-space geodesic active contoursrdquo In Algebraic Frames for the Perception-Action Cycle [C Sagiv NA Sochen and YY Zeevi 2000] Practical temporal consistency for image-based graphics applications [M Lang O Wang T Aydin A Smolic and M Gross SIGGRAPH2012] Computer-Generated Watercolor [CJ Curtis SE Anderson JE Seims KW Fleischer and DH Salesin SIGGRAPH1997]

なかの

From Sound to Sight Using Audio Processing to enable Visible Light Communication 10

どんなもの光に情報を載せる技術プロジェクトページがあって光関係の研究が8個載っている

httpwwwdisneyresearchcomprojectvisible-light-communication

ビデオのURL httpwwwdisneyresearchcomwpcontentuploadsPub_InvisibleLightCommunication_Siggraph14_videomp4

• 201211106_KeisukeKawahara
• 201311421_KeitaKanai_02
• 201313095_AkiraIshii_02
• 201413109_YuukiKubo_02
• 201513110_SatoshiHashizume_02
• 鬼輪講マラソン③_1
• 鬼輪講マラソン③_2

なかの

Aliasing Detection and Reduction in Plenoptic Imaging4

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

カメラアレイ撮影の角度度のエイリアシングを除去するエイリアシングの探索索と打ち消しを行行う

周波数領領域ではなく空間領領域で探索索を行行う

先行行研究がフィルタデモザイキング再パラメータ調整などの前処理理でエイリアシング除去を行行うのに対しエイリアシング探索索後にリフォーカスの段階でエイリアシングを取り除く

8times8の平行行カメラアレイで検証するカメラ間の 基線長は70mm

今回は基線長が長いデータセットを使った 次はLytroなどのマイクロレンズアレイで検証する

Globally consistent multi-label assignment on the ray space of 4d light fields [S Wanner C Straehle B Goldluecke CVPR2013] Lineassisted light field triangulation and stereo matching [Z Yu X Guo H Lin A Lumsdaine J Yu ICCV 2013]

なかの

Globally Consistent Multi-Label Assignment on the Ray Space of 4D Light Fields5

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

四次元ライトフィールドの光線情報において マルチラベルの領領域分割を行行う

深度度情報光線情報を用いて領領域分割することで 二次元（空間）情報だけでは分割が難しかった 領領域を分割可能とする

The light field camera Extended depth of field aliasing and superresolution [T Bishop P Favaro IEEE Transactions on Pattern Analysis and Machine Intelligence 2012]

なかの

Line Assisted Light Field Triangulation and Stereo Matching6

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

光線情報を利利用してステレオマッチングの精度度を 向上させる手法三角測量量の誤差を減らす

Light Field Stereo Matchingとかいう手法 グラフ構造を作成

Variational light field analysis for disparity estimation and super-resolution [S Wanner and B Goldlumluecke 2013]

なかの

Adaptive stereo similarity fusion using confidence measures 20157

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

ステレオマッチングの新しい方式fusion weightsを提案複数の手法を組み合わせてコスト計算を行行う手法付録に既存手法のコスト関数一覧あり

パラメータに依存する手法を用いないことで高速化を図っている

一つのアルゴリズムでは異異なる特性を持つ領領域全てに対して適切切なマッチングはできない複数を組み合わせることでそれを補う13種と多い

middleburyとKITTIのデータセットで評価

一枚あたり03sと高速だが001sとより高速なアルゴリズムが存在する

Segment-based stereo matching using belief propagation and a self-adapting dissimilarity measure [A Klaus M Sormann K Karner ICPR2006] On building an accurate stereo matching system on graphics hardware [X Mei X Sun M Zhou S Jiao H Wang X Zhang ICCV2011] Similarity measures for depth estimation [K Wegner O Stankiewicz 3DTV-CON2009] On accurate dense stereo-matching using a local adaptive multi-cost approach [C Stentoumis L Grammatikopoulos I Kalisperakis G Karras ISPRS2014] A quantitative evaluation of confidence measures for stereo vision [X Hu P Mordohai PAMI2012]

なかの

SIMILARITY MEASURE FOR DEPTH ESTIMATIOM 20098

どんなもの

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

4種類の視差推定アルゴリズムを組み合わせている 類似度度の選択性の解析

Belief Propagationの枠組みを用いる

名古屋大学の多視点データベースを利利用

HHI Test Material for 3D Video [I Feldmann M Muller F Zilly R Tanger A SmolicP Kauff T Wiegand 2008] Multiview Video Test Sequence and Camera Parameters [Yo-Sung Ho Eun-Kyung Lee and Cheon Lee 2008] 1D Parallel Test Sequences for MPEG-FTV [M Tanimoto T Fujii N Fukushima 2008] Non-parametric Local Transforms for Computing Visual Correspondence [R Zabih J Woodfill 1994]

なかの

Spatiotemporal Stereo via Spatiotemporal Quadric Element (Stequel) Matching9

どんなもの

技術や手法のキモはどこ

新しいマッチング手法を提案動き考慮することなく時間情報を取り込むことができる 時間方向のエピ線を考える

オプティカルフロー推定は3D境界や低テクスチャで弱いが提案手法はロバストである

なかの

Depth Video Enhancement Based on Weighted Mode Filtering10

どんなもの

議論論はある

ノイズを含んだ低解像度度のデプスマップの質を高める手法（超解像度度とデノイズ）時間方向も使用簡単なオプティカルフローを計算し利利用する

非反復復アルゴリズムのためGPUに載せやすく高速化が考えられる

なかの

Fast Bilateral-Space Stereo for Synthetic Defocus11

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

議論論はある

次に読むべき論論文は

高速な自由焦点ぼけ画像の作成

Bilateral-spaceを提案

従来研究よりも10から100倍速くぼけ具合の精度度も良良い

ぼけを作成するというアプリケーションに利利用する距離離という面では提案手法が有益であるが実測的な距離離という面での精度度は悪い背景と前景が同じ色で近くにある場合同一ととらえてしまう

Efficient high-resolution stereo matching using local plane sweeps [S N Sinha D Scharstein and R SzeliskiCVPR2014] Bilateral filtering-based optical flow estimation with occlusion detection [J Xiao H Cheng H Sawhney C Rao and M IsnardiECCV2006] Efficient nonlocal regularization for optical flow [P Krumlahenbumluhl and V KoltunECCV2012] Real-time spatiotemporal stereo matching using the dual-cross-bilateral grid [C Richardt D Orr I Davies A Criminisi and N A DodgsonECCV2010]

どうやって有効性を示した視差推定の精度度はmiddleburyKITTI

なかの

Robust Spatiotemporal Stereo for Dynamic Scenes12

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

ステレオ動画のフレーム間情報を取り入れることでノイズ耐性を向上させるまた動きの大きなものも考える

時間を含めたウインドウの提案自動的にそのような変化に対応する画像領領域を検出する

従来の時空間ステレオと比べ大きな動きによる急激な視差の時間変化に対して頑健である

なかの

Spacetime Stereo A Unifying Framework for Depth from Triangulation13

どんなもの

先行行研究と比べてどこがすごい

space time stereoを提案ステレオカメラの視差推定でも構造光を用いた視差推定でも利利用可能 動的なシーンでの利利用も可能

フレームごとマッチングを取っていたが複数フレームでのマッチングを可能とした

なかの

Learning to Select and Order Vacation Photographs (Disney research)14

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示したあまりにもたくさん撮影した写真たちから自動的にフォトアルバムを作成する研究

複雑な視覚での区別を試みたのはこの論論文が初

５つの異異なるトピックから63の個人的な写真コレクションのデータセットを利利用し定量量的に評価する

写真間の差別かを定義する顔全体の絵何が写っているか写っていないかを評価する

Jointly aligning and segmenting multiple web photo streams for the inference of collective photo storylines [G Kim and E P Xing CVPR2013] Photo sequencing [T Basha Y Moses and S Avidan CVPR2012]

なかの

A Taxonomy and Evaluation of Dense Two-Frame Stereo Correspondence Algorithms15

どんなもの

どうやって有効性を示した

次に読むべき論論文は

ステレオマッチングに関する分類を行行う 新たなデータセットを作成する

というよりも他の手法が有効性を示すことができるようにデータセットを作成した 今ではmiddleburyのデータセットと言えばステレオ業界では超有名

High-resolution stereo datasets with subpixel-accurate ground truth

なかの

Discriminability Limits in Spatio-Temporal Stereo Block Matching1

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

spatio-temporal disparity estimationの根本的な前提の正当性を解析しマッチング処理理の際に動きが助けとなる程度度を決定する

時空間マッチングのエラーを分析し誤りの原因を確率率率で導出する（フレーム数動きの分散画像特徴ノイズの関数）

[34243334]は時空間マッチングの利利点を指摘していたが本論論文はマッチング精度度の向上のために動きを用いる手法の程度度や性質を研究する

6つのステレオビデオを用いて検証を行行った

Spacetime stereo Shape recovery for dynamic scenes [L Zhang B Curless and S Seitz CVPR2003] Spatiotemporal stereo and scene flow via stequel matching [M Sizintsev and R Wildes PAMI2012] Temporally consistent disparity and optical flow via efficient spatio-temporal filtering [A Hosni C Rhemann M Bleyer and M Gelautz PRCAIVT2012] Spacetime stereo A unifying framework for depth from triangulation [PAMI2005] Dynamic depth recovery from multiple synchronized video streams [H Tao H Sawhney and R Kumar CVPR2001] Spatiotemporal descriptor for wide-baseline stereo reconstruction of non-rigid and ambiguous scenes [ECCV2003]

なかの

Depth-Based Patch Scaling for Content-Aware Stereo Image Completion2

どんなもの

どうやって有効性を示した

ステレオでデプスを取り物体の三次元情報を使ってインペインティングを行行う

bookのデータセット背景が繰り返しパターンが多いものを使っている

なかの

Fast Semi-dense Surface Reconstruction from Stereoscopic Video in Laparoscopic Surgery3

どんなもの

手法の流流れ

次に読むべき論論文は

腹腔内手術の際にステレオビデオから高速に物体の三次元再構成を行行う研究

Evaluation of stereo matching costs on images with radiometric differences [Hirschmueller H Scharstein D PAMI2008]

スコープカメラから画像取得GPUで演算する 視差を算出しフィルタにかける距離離に変換 点群を再びフィルタにかけて三次元再構成

なかの

3D Reconstruction from Accidental Motion4

どんなもの

技術や手法のキモはどこ

議論論はある

数秒のビデオ（単眼）から三次元再構成を行行う 手ぶれなどの動きから再構成が可能で特定の動きや機材を必要としない

短い基線長でも再構成が可能（3mmの基線長）

基線長が短いため背景の精度度が低くなる リフォーカス画像作成には十分 練習では上手く動作したが検証がまだ必要

なかの

Panoramic Video from Unstructured Camera Arrays5

どんなもの

技術や手法のキモはどこ

議論論はある

複数のカメラを用いたパノラマ撮影を行行う その際に不不自然さがないような動画を作成する

不不自然さを感じる感覚特性を提示しそれにのっとって対策を講じている

一つのカメラの解像度度と品質を向上させるよりも複数台のカメラを組み合わせることがはるかに簡単で有益である専門家でなくてもGoProのカメラセットを組み合わせることは容易易

カメラの配置は厳密に決められていない完璧な時間同期やローリングシャッターの不不足のような実撮影での問題もクリアしている

先行行研究と比べてどこがすごい

どうやって有効性を示した左のシステムは14台のカメラを使用 右のシステムはGoProを5台使用

Disney 201558

なかの

Floating Scale Surface Reconstruction6

どんなもの

技術や手法のキモはどこ

流流動的にスケールを変えられる三次元再構成手法

サンプル規模に依存するパラメータがない rarrどのスケールのサンプルにも対応できる

siggraph2014

なかの

A Super Resolution Reconstruction Scheme for Mixed Spatio-Temporal Stereo Video7

どんなもの

技術や手法のキモはどこ

ビデオ超解像アルゴリズム

二台のカメラを使用 一台は低解像度度で高速一台は高解像度度で低速

HHI 3DV ftp siteのBookarrivalとbeergadenを使用どうやって有効性を示した

なかの

What Is a Good Day for Outdoor Photometric Stereo8

どんなもの

先行行研究と比べてどこがすごい

議論論はある

次に読むべき論論文は

屋外における照度度差があるステレオの研究 屋外でステレオを行行う際に有利利or不不利利な日照条件を明らかにする

点光源を用いた研究は行行われていたが屋外での研究はされていなかった

晴れより曇りの方が精度度が良良い雲があるから特徴量量を取りやすい雑音を白色ガウスモデルを想定 季節ごとのデータセットを利利用してみても良良い

Time-lapse photometric stereo and applications [F Shen K Sunkavalli N Bonneel S Rusinkiewicz H Pfisterand X Tong2014] Outdoor photometric stereo [L-F Yu S-K Yeung Y-W Tai D Terzopoulos and T FChan ICCP2013]

どうやって有効性を示した屋外の照明に関するHDR環境マップのデータベースを利利用

Disney 2015424

なかの

COLORBRUSH ANIMATED DIFFUSION FOR INTUITIVE COLORIZATION SIMULATING WATER PAINTING 9

どんなものアニメを水彩画で描いたように変換する 水彩画を描くには経験が必要であるがそれを作成するアルゴリズムを考案絵具が水によりどうにじむかシュミレーションしている

Disney 20141027 ICIP2014

次に読むべき論論文はGabor-space geodesic active contoursrdquo In Algebraic Frames for the Perception-Action Cycle [C Sagiv NA Sochen and YY Zeevi 2000] Practical temporal consistency for image-based graphics applications [M Lang O Wang T Aydin A Smolic and M Gross SIGGRAPH2012] Computer-Generated Watercolor [CJ Curtis SE Anderson JE Seims KW Fleischer and DH Salesin SIGGRAPH1997]

なかの

From Sound to Sight Using Audio Processing to enable Visible Light Communication 10

どんなもの光に情報を載せる技術プロジェクトページがあって光関係の研究が8個載っている

httpwwwdisneyresearchcomprojectvisible-light-communication

ビデオのURL httpwwwdisneyresearchcomwpcontentuploadsPub_InvisibleLightCommunication_Siggraph14_videomp4

• 201211106_KeisukeKawahara
• 201311421_KeitaKanai_02
• 201313095_AkiraIshii_02
• 201413109_YuukiKubo_02
• 201513110_SatoshiHashizume_02
• 鬼輪講マラソン③_1
• 鬼輪講マラソン③_2

なかの

Globally Consistent Multi-Label Assignment on the Ray Space of 4D Light Fields5

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

四次元ライトフィールドの光線情報において マルチラベルの領領域分割を行行う

深度度情報光線情報を用いて領領域分割することで 二次元（空間）情報だけでは分割が難しかった 領領域を分割可能とする

The light field camera Extended depth of field aliasing and superresolution [T Bishop P Favaro IEEE Transactions on Pattern Analysis and Machine Intelligence 2012]

なかの

Line Assisted Light Field Triangulation and Stereo Matching6

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

光線情報を利利用してステレオマッチングの精度度を 向上させる手法三角測量量の誤差を減らす

Light Field Stereo Matchingとかいう手法 グラフ構造を作成

Variational light field analysis for disparity estimation and super-resolution [S Wanner and B Goldlumluecke 2013]

なかの

Adaptive stereo similarity fusion using confidence measures 20157

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

ステレオマッチングの新しい方式fusion weightsを提案複数の手法を組み合わせてコスト計算を行行う手法付録に既存手法のコスト関数一覧あり

パラメータに依存する手法を用いないことで高速化を図っている

一つのアルゴリズムでは異異なる特性を持つ領領域全てに対して適切切なマッチングはできない複数を組み合わせることでそれを補う13種と多い

middleburyとKITTIのデータセットで評価

一枚あたり03sと高速だが001sとより高速なアルゴリズムが存在する

Segment-based stereo matching using belief propagation and a self-adapting dissimilarity measure [A Klaus M Sormann K Karner ICPR2006] On building an accurate stereo matching system on graphics hardware [X Mei X Sun M Zhou S Jiao H Wang X Zhang ICCV2011] Similarity measures for depth estimation [K Wegner O Stankiewicz 3DTV-CON2009] On accurate dense stereo-matching using a local adaptive multi-cost approach [C Stentoumis L Grammatikopoulos I Kalisperakis G Karras ISPRS2014] A quantitative evaluation of confidence measures for stereo vision [X Hu P Mordohai PAMI2012]

なかの

SIMILARITY MEASURE FOR DEPTH ESTIMATIOM 20098

どんなもの

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

4種類の視差推定アルゴリズムを組み合わせている 類似度度の選択性の解析

Belief Propagationの枠組みを用いる

名古屋大学の多視点データベースを利利用

HHI Test Material for 3D Video [I Feldmann M Muller F Zilly R Tanger A SmolicP Kauff T Wiegand 2008] Multiview Video Test Sequence and Camera Parameters [Yo-Sung Ho Eun-Kyung Lee and Cheon Lee 2008] 1D Parallel Test Sequences for MPEG-FTV [M Tanimoto T Fujii N Fukushima 2008] Non-parametric Local Transforms for Computing Visual Correspondence [R Zabih J Woodfill 1994]

なかの

Spatiotemporal Stereo via Spatiotemporal Quadric Element (Stequel) Matching9

どんなもの

技術や手法のキモはどこ

新しいマッチング手法を提案動き考慮することなく時間情報を取り込むことができる 時間方向のエピ線を考える

オプティカルフロー推定は3D境界や低テクスチャで弱いが提案手法はロバストである

なかの

Depth Video Enhancement Based on Weighted Mode Filtering10

どんなもの

議論論はある

ノイズを含んだ低解像度度のデプスマップの質を高める手法（超解像度度とデノイズ）時間方向も使用簡単なオプティカルフローを計算し利利用する

非反復復アルゴリズムのためGPUに載せやすく高速化が考えられる

なかの

Fast Bilateral-Space Stereo for Synthetic Defocus11

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

議論論はある

次に読むべき論論文は

高速な自由焦点ぼけ画像の作成

Bilateral-spaceを提案

従来研究よりも10から100倍速くぼけ具合の精度度も良良い

ぼけを作成するというアプリケーションに利利用する距離離という面では提案手法が有益であるが実測的な距離離という面での精度度は悪い背景と前景が同じ色で近くにある場合同一ととらえてしまう

Efficient high-resolution stereo matching using local plane sweeps [S N Sinha D Scharstein and R SzeliskiCVPR2014] Bilateral filtering-based optical flow estimation with occlusion detection [J Xiao H Cheng H Sawhney C Rao and M IsnardiECCV2006] Efficient nonlocal regularization for optical flow [P Krumlahenbumluhl and V KoltunECCV2012] Real-time spatiotemporal stereo matching using the dual-cross-bilateral grid [C Richardt D Orr I Davies A Criminisi and N A DodgsonECCV2010]

どうやって有効性を示した視差推定の精度度はmiddleburyKITTI

なかの

Robust Spatiotemporal Stereo for Dynamic Scenes12

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

ステレオ動画のフレーム間情報を取り入れることでノイズ耐性を向上させるまた動きの大きなものも考える

時間を含めたウインドウの提案自動的にそのような変化に対応する画像領領域を検出する

従来の時空間ステレオと比べ大きな動きによる急激な視差の時間変化に対して頑健である

なかの

Spacetime Stereo A Unifying Framework for Depth from Triangulation13

どんなもの

先行行研究と比べてどこがすごい

space time stereoを提案ステレオカメラの視差推定でも構造光を用いた視差推定でも利利用可能 動的なシーンでの利利用も可能

フレームごとマッチングを取っていたが複数フレームでのマッチングを可能とした

なかの

Learning to Select and Order Vacation Photographs (Disney research)14

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示したあまりにもたくさん撮影した写真たちから自動的にフォトアルバムを作成する研究

複雑な視覚での区別を試みたのはこの論論文が初

５つの異異なるトピックから63の個人的な写真コレクションのデータセットを利利用し定量量的に評価する

写真間の差別かを定義する顔全体の絵何が写っているか写っていないかを評価する

Jointly aligning and segmenting multiple web photo streams for the inference of collective photo storylines [G Kim and E P Xing CVPR2013] Photo sequencing [T Basha Y Moses and S Avidan CVPR2012]

なかの

A Taxonomy and Evaluation of Dense Two-Frame Stereo Correspondence Algorithms15

どんなもの

どうやって有効性を示した

次に読むべき論論文は

ステレオマッチングに関する分類を行行う 新たなデータセットを作成する

というよりも他の手法が有効性を示すことができるようにデータセットを作成した 今ではmiddleburyのデータセットと言えばステレオ業界では超有名

High-resolution stereo datasets with subpixel-accurate ground truth

なかの

Discriminability Limits in Spatio-Temporal Stereo Block Matching1

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

spatio-temporal disparity estimationの根本的な前提の正当性を解析しマッチング処理理の際に動きが助けとなる程度度を決定する

時空間マッチングのエラーを分析し誤りの原因を確率率率で導出する（フレーム数動きの分散画像特徴ノイズの関数）

[34243334]は時空間マッチングの利利点を指摘していたが本論論文はマッチング精度度の向上のために動きを用いる手法の程度度や性質を研究する

6つのステレオビデオを用いて検証を行行った

Spacetime stereo Shape recovery for dynamic scenes [L Zhang B Curless and S Seitz CVPR2003] Spatiotemporal stereo and scene flow via stequel matching [M Sizintsev and R Wildes PAMI2012] Temporally consistent disparity and optical flow via efficient spatio-temporal filtering [A Hosni C Rhemann M Bleyer and M Gelautz PRCAIVT2012] Spacetime stereo A unifying framework for depth from triangulation [PAMI2005] Dynamic depth recovery from multiple synchronized video streams [H Tao H Sawhney and R Kumar CVPR2001] Spatiotemporal descriptor for wide-baseline stereo reconstruction of non-rigid and ambiguous scenes [ECCV2003]

なかの

Depth-Based Patch Scaling for Content-Aware Stereo Image Completion2

どんなもの

どうやって有効性を示した

ステレオでデプスを取り物体の三次元情報を使ってインペインティングを行行う

bookのデータセット背景が繰り返しパターンが多いものを使っている

なかの

Fast Semi-dense Surface Reconstruction from Stereoscopic Video in Laparoscopic Surgery3

どんなもの

手法の流流れ

次に読むべき論論文は

腹腔内手術の際にステレオビデオから高速に物体の三次元再構成を行行う研究

Evaluation of stereo matching costs on images with radiometric differences [Hirschmueller H Scharstein D PAMI2008]

スコープカメラから画像取得GPUで演算する 視差を算出しフィルタにかける距離離に変換 点群を再びフィルタにかけて三次元再構成

なかの

3D Reconstruction from Accidental Motion4

どんなもの

技術や手法のキモはどこ

議論論はある

数秒のビデオ（単眼）から三次元再構成を行行う 手ぶれなどの動きから再構成が可能で特定の動きや機材を必要としない

短い基線長でも再構成が可能（3mmの基線長）

基線長が短いため背景の精度度が低くなる リフォーカス画像作成には十分 練習では上手く動作したが検証がまだ必要

なかの

Panoramic Video from Unstructured Camera Arrays5

どんなもの

技術や手法のキモはどこ

議論論はある

複数のカメラを用いたパノラマ撮影を行行う その際に不不自然さがないような動画を作成する

不不自然さを感じる感覚特性を提示しそれにのっとって対策を講じている

一つのカメラの解像度度と品質を向上させるよりも複数台のカメラを組み合わせることがはるかに簡単で有益である専門家でなくてもGoProのカメラセットを組み合わせることは容易易

カメラの配置は厳密に決められていない完璧な時間同期やローリングシャッターの不不足のような実撮影での問題もクリアしている

先行行研究と比べてどこがすごい

どうやって有効性を示した左のシステムは14台のカメラを使用 右のシステムはGoProを5台使用

Disney 201558

なかの

Floating Scale Surface Reconstruction6

どんなもの

技術や手法のキモはどこ

流流動的にスケールを変えられる三次元再構成手法

サンプル規模に依存するパラメータがない rarrどのスケールのサンプルにも対応できる

siggraph2014

なかの

A Super Resolution Reconstruction Scheme for Mixed Spatio-Temporal Stereo Video7

どんなもの

技術や手法のキモはどこ

ビデオ超解像アルゴリズム

二台のカメラを使用 一台は低解像度度で高速一台は高解像度度で低速

HHI 3DV ftp siteのBookarrivalとbeergadenを使用どうやって有効性を示した

なかの

What Is a Good Day for Outdoor Photometric Stereo8

どんなもの

先行行研究と比べてどこがすごい

議論論はある

次に読むべき論論文は

屋外における照度度差があるステレオの研究 屋外でステレオを行行う際に有利利or不不利利な日照条件を明らかにする

点光源を用いた研究は行行われていたが屋外での研究はされていなかった

晴れより曇りの方が精度度が良良い雲があるから特徴量量を取りやすい雑音を白色ガウスモデルを想定 季節ごとのデータセットを利利用してみても良良い

Time-lapse photometric stereo and applications [F Shen K Sunkavalli N Bonneel S Rusinkiewicz H Pfisterand X Tong2014] Outdoor photometric stereo [L-F Yu S-K Yeung Y-W Tai D Terzopoulos and T FChan ICCP2013]

どうやって有効性を示した屋外の照明に関するHDR環境マップのデータベースを利利用

Disney 2015424

なかの

COLORBRUSH ANIMATED DIFFUSION FOR INTUITIVE COLORIZATION SIMULATING WATER PAINTING 9

どんなものアニメを水彩画で描いたように変換する 水彩画を描くには経験が必要であるがそれを作成するアルゴリズムを考案絵具が水によりどうにじむかシュミレーションしている

Disney 20141027 ICIP2014

次に読むべき論論文はGabor-space geodesic active contoursrdquo In Algebraic Frames for the Perception-Action Cycle [C Sagiv NA Sochen and YY Zeevi 2000] Practical temporal consistency for image-based graphics applications [M Lang O Wang T Aydin A Smolic and M Gross SIGGRAPH2012] Computer-Generated Watercolor [CJ Curtis SE Anderson JE Seims KW Fleischer and DH Salesin SIGGRAPH1997]

なかの

From Sound to Sight Using Audio Processing to enable Visible Light Communication 10

どんなもの光に情報を載せる技術プロジェクトページがあって光関係の研究が8個載っている

httpwwwdisneyresearchcomprojectvisible-light-communication

ビデオのURL httpwwwdisneyresearchcomwpcontentuploadsPub_InvisibleLightCommunication_Siggraph14_videomp4

• 201211106_KeisukeKawahara
• 201311421_KeitaKanai_02
• 201313095_AkiraIshii_02
• 201413109_YuukiKubo_02
• 201513110_SatoshiHashizume_02
• 鬼輪講マラソン③_1
• 鬼輪講マラソン③_2

なかの

Line Assisted Light Field Triangulation and Stereo Matching6

どんなもの

技術や手法のキモはどこ

次に読むべき論論文は

光線情報を利利用してステレオマッチングの精度度を 向上させる手法三角測量量の誤差を減らす

Light Field Stereo Matchingとかいう手法 グラフ構造を作成

Variational light field analysis for disparity estimation and super-resolution [S Wanner and B Goldlumluecke 2013]

なかの

Adaptive stereo similarity fusion using confidence measures 20157

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

ステレオマッチングの新しい方式fusion weightsを提案複数の手法を組み合わせてコスト計算を行行う手法付録に既存手法のコスト関数一覧あり

パラメータに依存する手法を用いないことで高速化を図っている

一つのアルゴリズムでは異異なる特性を持つ領領域全てに対して適切切なマッチングはできない複数を組み合わせることでそれを補う13種と多い

middleburyとKITTIのデータセットで評価

一枚あたり03sと高速だが001sとより高速なアルゴリズムが存在する

Segment-based stereo matching using belief propagation and a self-adapting dissimilarity measure [A Klaus M Sormann K Karner ICPR2006] On building an accurate stereo matching system on graphics hardware [X Mei X Sun M Zhou S Jiao H Wang X Zhang ICCV2011] Similarity measures for depth estimation [K Wegner O Stankiewicz 3DTV-CON2009] On accurate dense stereo-matching using a local adaptive multi-cost approach [C Stentoumis L Grammatikopoulos I Kalisperakis G Karras ISPRS2014] A quantitative evaluation of confidence measures for stereo vision [X Hu P Mordohai PAMI2012]

なかの

SIMILARITY MEASURE FOR DEPTH ESTIMATIOM 20098

どんなもの

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

4種類の視差推定アルゴリズムを組み合わせている 類似度度の選択性の解析

Belief Propagationの枠組みを用いる

名古屋大学の多視点データベースを利利用

HHI Test Material for 3D Video [I Feldmann M Muller F Zilly R Tanger A SmolicP Kauff T Wiegand 2008] Multiview Video Test Sequence and Camera Parameters [Yo-Sung Ho Eun-Kyung Lee and Cheon Lee 2008] 1D Parallel Test Sequences for MPEG-FTV [M Tanimoto T Fujii N Fukushima 2008] Non-parametric Local Transforms for Computing Visual Correspondence [R Zabih J Woodfill 1994]

なかの

Spatiotemporal Stereo via Spatiotemporal Quadric Element (Stequel) Matching9

どんなもの

技術や手法のキモはどこ

新しいマッチング手法を提案動き考慮することなく時間情報を取り込むことができる 時間方向のエピ線を考える

オプティカルフロー推定は3D境界や低テクスチャで弱いが提案手法はロバストである

なかの

Depth Video Enhancement Based on Weighted Mode Filtering10

どんなもの

議論論はある

ノイズを含んだ低解像度度のデプスマップの質を高める手法（超解像度度とデノイズ）時間方向も使用簡単なオプティカルフローを計算し利利用する

非反復復アルゴリズムのためGPUに載せやすく高速化が考えられる

なかの

Fast Bilateral-Space Stereo for Synthetic Defocus11

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

議論論はある

次に読むべき論論文は

高速な自由焦点ぼけ画像の作成

Bilateral-spaceを提案

従来研究よりも10から100倍速くぼけ具合の精度度も良良い

ぼけを作成するというアプリケーションに利利用する距離離という面では提案手法が有益であるが実測的な距離離という面での精度度は悪い背景と前景が同じ色で近くにある場合同一ととらえてしまう

Efficient high-resolution stereo matching using local plane sweeps [S N Sinha D Scharstein and R SzeliskiCVPR2014] Bilateral filtering-based optical flow estimation with occlusion detection [J Xiao H Cheng H Sawhney C Rao and M IsnardiECCV2006] Efficient nonlocal regularization for optical flow [P Krumlahenbumluhl and V KoltunECCV2012] Real-time spatiotemporal stereo matching using the dual-cross-bilateral grid [C Richardt D Orr I Davies A Criminisi and N A DodgsonECCV2010]

どうやって有効性を示した視差推定の精度度はmiddleburyKITTI

なかの

Robust Spatiotemporal Stereo for Dynamic Scenes12

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

ステレオ動画のフレーム間情報を取り入れることでノイズ耐性を向上させるまた動きの大きなものも考える

時間を含めたウインドウの提案自動的にそのような変化に対応する画像領領域を検出する

従来の時空間ステレオと比べ大きな動きによる急激な視差の時間変化に対して頑健である

なかの

Spacetime Stereo A Unifying Framework for Depth from Triangulation13

どんなもの

先行行研究と比べてどこがすごい

space time stereoを提案ステレオカメラの視差推定でも構造光を用いた視差推定でも利利用可能 動的なシーンでの利利用も可能

フレームごとマッチングを取っていたが複数フレームでのマッチングを可能とした

なかの

Learning to Select and Order Vacation Photographs (Disney research)14

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示したあまりにもたくさん撮影した写真たちから自動的にフォトアルバムを作成する研究

複雑な視覚での区別を試みたのはこの論論文が初

５つの異異なるトピックから63の個人的な写真コレクションのデータセットを利利用し定量量的に評価する

写真間の差別かを定義する顔全体の絵何が写っているか写っていないかを評価する

Jointly aligning and segmenting multiple web photo streams for the inference of collective photo storylines [G Kim and E P Xing CVPR2013] Photo sequencing [T Basha Y Moses and S Avidan CVPR2012]

なかの

A Taxonomy and Evaluation of Dense Two-Frame Stereo Correspondence Algorithms15

どんなもの

どうやって有効性を示した

次に読むべき論論文は

ステレオマッチングに関する分類を行行う 新たなデータセットを作成する

というよりも他の手法が有効性を示すことができるようにデータセットを作成した 今ではmiddleburyのデータセットと言えばステレオ業界では超有名

High-resolution stereo datasets with subpixel-accurate ground truth

なかの

Discriminability Limits in Spatio-Temporal Stereo Block Matching1

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

spatio-temporal disparity estimationの根本的な前提の正当性を解析しマッチング処理理の際に動きが助けとなる程度度を決定する

時空間マッチングのエラーを分析し誤りの原因を確率率率で導出する（フレーム数動きの分散画像特徴ノイズの関数）

[34243334]は時空間マッチングの利利点を指摘していたが本論論文はマッチング精度度の向上のために動きを用いる手法の程度度や性質を研究する

6つのステレオビデオを用いて検証を行行った

Spacetime stereo Shape recovery for dynamic scenes [L Zhang B Curless and S Seitz CVPR2003] Spatiotemporal stereo and scene flow via stequel matching [M Sizintsev and R Wildes PAMI2012] Temporally consistent disparity and optical flow via efficient spatio-temporal filtering [A Hosni C Rhemann M Bleyer and M Gelautz PRCAIVT2012] Spacetime stereo A unifying framework for depth from triangulation [PAMI2005] Dynamic depth recovery from multiple synchronized video streams [H Tao H Sawhney and R Kumar CVPR2001] Spatiotemporal descriptor for wide-baseline stereo reconstruction of non-rigid and ambiguous scenes [ECCV2003]

なかの

Depth-Based Patch Scaling for Content-Aware Stereo Image Completion2

どんなもの

どうやって有効性を示した

ステレオでデプスを取り物体の三次元情報を使ってインペインティングを行行う

bookのデータセット背景が繰り返しパターンが多いものを使っている

なかの

Fast Semi-dense Surface Reconstruction from Stereoscopic Video in Laparoscopic Surgery3

どんなもの

手法の流流れ

次に読むべき論論文は

腹腔内手術の際にステレオビデオから高速に物体の三次元再構成を行行う研究

Evaluation of stereo matching costs on images with radiometric differences [Hirschmueller H Scharstein D PAMI2008]

スコープカメラから画像取得GPUで演算する 視差を算出しフィルタにかける距離離に変換 点群を再びフィルタにかけて三次元再構成

なかの

3D Reconstruction from Accidental Motion4

どんなもの

技術や手法のキモはどこ

議論論はある

数秒のビデオ（単眼）から三次元再構成を行行う 手ぶれなどの動きから再構成が可能で特定の動きや機材を必要としない

短い基線長でも再構成が可能（3mmの基線長）

基線長が短いため背景の精度度が低くなる リフォーカス画像作成には十分 練習では上手く動作したが検証がまだ必要

なかの

Panoramic Video from Unstructured Camera Arrays5

どんなもの

技術や手法のキモはどこ

議論論はある

複数のカメラを用いたパノラマ撮影を行行う その際に不不自然さがないような動画を作成する

不不自然さを感じる感覚特性を提示しそれにのっとって対策を講じている

一つのカメラの解像度度と品質を向上させるよりも複数台のカメラを組み合わせることがはるかに簡単で有益である専門家でなくてもGoProのカメラセットを組み合わせることは容易易

カメラの配置は厳密に決められていない完璧な時間同期やローリングシャッターの不不足のような実撮影での問題もクリアしている

先行行研究と比べてどこがすごい

どうやって有効性を示した左のシステムは14台のカメラを使用 右のシステムはGoProを5台使用

Disney 201558

なかの

Floating Scale Surface Reconstruction6

どんなもの

技術や手法のキモはどこ

流流動的にスケールを変えられる三次元再構成手法

サンプル規模に依存するパラメータがない rarrどのスケールのサンプルにも対応できる

siggraph2014

なかの

A Super Resolution Reconstruction Scheme for Mixed Spatio-Temporal Stereo Video7

どんなもの

技術や手法のキモはどこ

ビデオ超解像アルゴリズム

二台のカメラを使用 一台は低解像度度で高速一台は高解像度度で低速

HHI 3DV ftp siteのBookarrivalとbeergadenを使用どうやって有効性を示した

なかの

What Is a Good Day for Outdoor Photometric Stereo8

どんなもの

先行行研究と比べてどこがすごい

議論論はある

次に読むべき論論文は

屋外における照度度差があるステレオの研究 屋外でステレオを行行う際に有利利or不不利利な日照条件を明らかにする

点光源を用いた研究は行行われていたが屋外での研究はされていなかった

晴れより曇りの方が精度度が良良い雲があるから特徴量量を取りやすい雑音を白色ガウスモデルを想定 季節ごとのデータセットを利利用してみても良良い

Time-lapse photometric stereo and applications [F Shen K Sunkavalli N Bonneel S Rusinkiewicz H Pfisterand X Tong2014] Outdoor photometric stereo [L-F Yu S-K Yeung Y-W Tai D Terzopoulos and T FChan ICCP2013]

どうやって有効性を示した屋外の照明に関するHDR環境マップのデータベースを利利用

Disney 2015424

なかの

COLORBRUSH ANIMATED DIFFUSION FOR INTUITIVE COLORIZATION SIMULATING WATER PAINTING 9

どんなものアニメを水彩画で描いたように変換する 水彩画を描くには経験が必要であるがそれを作成するアルゴリズムを考案絵具が水によりどうにじむかシュミレーションしている

Disney 20141027 ICIP2014

次に読むべき論論文はGabor-space geodesic active contoursrdquo In Algebraic Frames for the Perception-Action Cycle [C Sagiv NA Sochen and YY Zeevi 2000] Practical temporal consistency for image-based graphics applications [M Lang O Wang T Aydin A Smolic and M Gross SIGGRAPH2012] Computer-Generated Watercolor [CJ Curtis SE Anderson JE Seims KW Fleischer and DH Salesin SIGGRAPH1997]

なかの

From Sound to Sight Using Audio Processing to enable Visible Light Communication 10

どんなもの光に情報を載せる技術プロジェクトページがあって光関係の研究が8個載っている

httpwwwdisneyresearchcomprojectvisible-light-communication

ビデオのURL httpwwwdisneyresearchcomwpcontentuploadsPub_InvisibleLightCommunication_Siggraph14_videomp4

• 201211106_KeisukeKawahara
• 201311421_KeitaKanai_02
• 201313095_AkiraIshii_02
• 201413109_YuukiKubo_02
• 201513110_SatoshiHashizume_02
• 鬼輪講マラソン③_1
• 鬼輪講マラソン③_2

なかの

Adaptive stereo similarity fusion using confidence measures 20157

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

議論論はある

次に読むべき論論文は

ステレオマッチングの新しい方式fusion weightsを提案複数の手法を組み合わせてコスト計算を行行う手法付録に既存手法のコスト関数一覧あり

パラメータに依存する手法を用いないことで高速化を図っている

一つのアルゴリズムでは異異なる特性を持つ領領域全てに対して適切切なマッチングはできない複数を組み合わせることでそれを補う13種と多い

middleburyとKITTIのデータセットで評価

一枚あたり03sと高速だが001sとより高速なアルゴリズムが存在する

Segment-based stereo matching using belief propagation and a self-adapting dissimilarity measure [A Klaus M Sormann K Karner ICPR2006] On building an accurate stereo matching system on graphics hardware [X Mei X Sun M Zhou S Jiao H Wang X Zhang ICCV2011] Similarity measures for depth estimation [K Wegner O Stankiewicz 3DTV-CON2009] On accurate dense stereo-matching using a local adaptive multi-cost approach [C Stentoumis L Grammatikopoulos I Kalisperakis G Karras ISPRS2014] A quantitative evaluation of confidence measures for stereo vision [X Hu P Mordohai PAMI2012]

なかの

SIMILARITY MEASURE FOR DEPTH ESTIMATIOM 20098

どんなもの

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

4種類の視差推定アルゴリズムを組み合わせている 類似度度の選択性の解析

Belief Propagationの枠組みを用いる

名古屋大学の多視点データベースを利利用

HHI Test Material for 3D Video [I Feldmann M Muller F Zilly R Tanger A SmolicP Kauff T Wiegand 2008] Multiview Video Test Sequence and Camera Parameters [Yo-Sung Ho Eun-Kyung Lee and Cheon Lee 2008] 1D Parallel Test Sequences for MPEG-FTV [M Tanimoto T Fujii N Fukushima 2008] Non-parametric Local Transforms for Computing Visual Correspondence [R Zabih J Woodfill 1994]

なかの

Spatiotemporal Stereo via Spatiotemporal Quadric Element (Stequel) Matching9

どんなもの

技術や手法のキモはどこ

新しいマッチング手法を提案動き考慮することなく時間情報を取り込むことができる 時間方向のエピ線を考える

オプティカルフロー推定は3D境界や低テクスチャで弱いが提案手法はロバストである

なかの

Depth Video Enhancement Based on Weighted Mode Filtering10

どんなもの

議論論はある

ノイズを含んだ低解像度度のデプスマップの質を高める手法（超解像度度とデノイズ）時間方向も使用簡単なオプティカルフローを計算し利利用する

非反復復アルゴリズムのためGPUに載せやすく高速化が考えられる

なかの

Fast Bilateral-Space Stereo for Synthetic Defocus11

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

議論論はある

次に読むべき論論文は

高速な自由焦点ぼけ画像の作成

Bilateral-spaceを提案

従来研究よりも10から100倍速くぼけ具合の精度度も良良い

ぼけを作成するというアプリケーションに利利用する距離離という面では提案手法が有益であるが実測的な距離離という面での精度度は悪い背景と前景が同じ色で近くにある場合同一ととらえてしまう

Efficient high-resolution stereo matching using local plane sweeps [S N Sinha D Scharstein and R SzeliskiCVPR2014] Bilateral filtering-based optical flow estimation with occlusion detection [J Xiao H Cheng H Sawhney C Rao and M IsnardiECCV2006] Efficient nonlocal regularization for optical flow [P Krumlahenbumluhl and V KoltunECCV2012] Real-time spatiotemporal stereo matching using the dual-cross-bilateral grid [C Richardt D Orr I Davies A Criminisi and N A DodgsonECCV2010]

どうやって有効性を示した視差推定の精度度はmiddleburyKITTI

なかの

Robust Spatiotemporal Stereo for Dynamic Scenes12

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

ステレオ動画のフレーム間情報を取り入れることでノイズ耐性を向上させるまた動きの大きなものも考える

時間を含めたウインドウの提案自動的にそのような変化に対応する画像領領域を検出する

従来の時空間ステレオと比べ大きな動きによる急激な視差の時間変化に対して頑健である

なかの

Spacetime Stereo A Unifying Framework for Depth from Triangulation13

どんなもの

先行行研究と比べてどこがすごい

space time stereoを提案ステレオカメラの視差推定でも構造光を用いた視差推定でも利利用可能 動的なシーンでの利利用も可能

フレームごとマッチングを取っていたが複数フレームでのマッチングを可能とした

なかの

Learning to Select and Order Vacation Photographs (Disney research)14

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示したあまりにもたくさん撮影した写真たちから自動的にフォトアルバムを作成する研究

複雑な視覚での区別を試みたのはこの論論文が初

５つの異異なるトピックから63の個人的な写真コレクションのデータセットを利利用し定量量的に評価する

写真間の差別かを定義する顔全体の絵何が写っているか写っていないかを評価する

Jointly aligning and segmenting multiple web photo streams for the inference of collective photo storylines [G Kim and E P Xing CVPR2013] Photo sequencing [T Basha Y Moses and S Avidan CVPR2012]

なかの

A Taxonomy and Evaluation of Dense Two-Frame Stereo Correspondence Algorithms15

どんなもの

どうやって有効性を示した

次に読むべき論論文は

ステレオマッチングに関する分類を行行う 新たなデータセットを作成する

というよりも他の手法が有効性を示すことができるようにデータセットを作成した 今ではmiddleburyのデータセットと言えばステレオ業界では超有名

High-resolution stereo datasets with subpixel-accurate ground truth

なかの

Discriminability Limits in Spatio-Temporal Stereo Block Matching1

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

spatio-temporal disparity estimationの根本的な前提の正当性を解析しマッチング処理理の際に動きが助けとなる程度度を決定する

時空間マッチングのエラーを分析し誤りの原因を確率率率で導出する（フレーム数動きの分散画像特徴ノイズの関数）

[34243334]は時空間マッチングの利利点を指摘していたが本論論文はマッチング精度度の向上のために動きを用いる手法の程度度や性質を研究する

6つのステレオビデオを用いて検証を行行った

Spacetime stereo Shape recovery for dynamic scenes [L Zhang B Curless and S Seitz CVPR2003] Spatiotemporal stereo and scene flow via stequel matching [M Sizintsev and R Wildes PAMI2012] Temporally consistent disparity and optical flow via efficient spatio-temporal filtering [A Hosni C Rhemann M Bleyer and M Gelautz PRCAIVT2012] Spacetime stereo A unifying framework for depth from triangulation [PAMI2005] Dynamic depth recovery from multiple synchronized video streams [H Tao H Sawhney and R Kumar CVPR2001] Spatiotemporal descriptor for wide-baseline stereo reconstruction of non-rigid and ambiguous scenes [ECCV2003]

なかの

Depth-Based Patch Scaling for Content-Aware Stereo Image Completion2

どんなもの

どうやって有効性を示した

ステレオでデプスを取り物体の三次元情報を使ってインペインティングを行行う

bookのデータセット背景が繰り返しパターンが多いものを使っている

なかの

Fast Semi-dense Surface Reconstruction from Stereoscopic Video in Laparoscopic Surgery3

どんなもの

手法の流流れ

次に読むべき論論文は

腹腔内手術の際にステレオビデオから高速に物体の三次元再構成を行行う研究

Evaluation of stereo matching costs on images with radiometric differences [Hirschmueller H Scharstein D PAMI2008]

スコープカメラから画像取得GPUで演算する 視差を算出しフィルタにかける距離離に変換 点群を再びフィルタにかけて三次元再構成

なかの

3D Reconstruction from Accidental Motion4

どんなもの

技術や手法のキモはどこ

議論論はある

数秒のビデオ（単眼）から三次元再構成を行行う 手ぶれなどの動きから再構成が可能で特定の動きや機材を必要としない

短い基線長でも再構成が可能（3mmの基線長）

基線長が短いため背景の精度度が低くなる リフォーカス画像作成には十分 練習では上手く動作したが検証がまだ必要

なかの

Panoramic Video from Unstructured Camera Arrays5

どんなもの

技術や手法のキモはどこ

議論論はある

複数のカメラを用いたパノラマ撮影を行行う その際に不不自然さがないような動画を作成する

不不自然さを感じる感覚特性を提示しそれにのっとって対策を講じている

一つのカメラの解像度度と品質を向上させるよりも複数台のカメラを組み合わせることがはるかに簡単で有益である専門家でなくてもGoProのカメラセットを組み合わせることは容易易

カメラの配置は厳密に決められていない完璧な時間同期やローリングシャッターの不不足のような実撮影での問題もクリアしている

先行行研究と比べてどこがすごい

どうやって有効性を示した左のシステムは14台のカメラを使用 右のシステムはGoProを5台使用

Disney 201558

なかの

Floating Scale Surface Reconstruction6

どんなもの

技術や手法のキモはどこ

流流動的にスケールを変えられる三次元再構成手法

サンプル規模に依存するパラメータがない rarrどのスケールのサンプルにも対応できる

siggraph2014

なかの

A Super Resolution Reconstruction Scheme for Mixed Spatio-Temporal Stereo Video7

どんなもの

技術や手法のキモはどこ

ビデオ超解像アルゴリズム

二台のカメラを使用 一台は低解像度度で高速一台は高解像度度で低速

HHI 3DV ftp siteのBookarrivalとbeergadenを使用どうやって有効性を示した

なかの

What Is a Good Day for Outdoor Photometric Stereo8

どんなもの

先行行研究と比べてどこがすごい

議論論はある

次に読むべき論論文は

屋外における照度度差があるステレオの研究 屋外でステレオを行行う際に有利利or不不利利な日照条件を明らかにする

点光源を用いた研究は行行われていたが屋外での研究はされていなかった

晴れより曇りの方が精度度が良良い雲があるから特徴量量を取りやすい雑音を白色ガウスモデルを想定 季節ごとのデータセットを利利用してみても良良い

Time-lapse photometric stereo and applications [F Shen K Sunkavalli N Bonneel S Rusinkiewicz H Pfisterand X Tong2014] Outdoor photometric stereo [L-F Yu S-K Yeung Y-W Tai D Terzopoulos and T FChan ICCP2013]

どうやって有効性を示した屋外の照明に関するHDR環境マップのデータベースを利利用

Disney 2015424

なかの

COLORBRUSH ANIMATED DIFFUSION FOR INTUITIVE COLORIZATION SIMULATING WATER PAINTING 9

どんなものアニメを水彩画で描いたように変換する 水彩画を描くには経験が必要であるがそれを作成するアルゴリズムを考案絵具が水によりどうにじむかシュミレーションしている

Disney 20141027 ICIP2014

次に読むべき論論文はGabor-space geodesic active contoursrdquo In Algebraic Frames for the Perception-Action Cycle [C Sagiv NA Sochen and YY Zeevi 2000] Practical temporal consistency for image-based graphics applications [M Lang O Wang T Aydin A Smolic and M Gross SIGGRAPH2012] Computer-Generated Watercolor [CJ Curtis SE Anderson JE Seims KW Fleischer and DH Salesin SIGGRAPH1997]

なかの

From Sound to Sight Using Audio Processing to enable Visible Light Communication 10

どんなもの光に情報を載せる技術プロジェクトページがあって光関係の研究が8個載っている

httpwwwdisneyresearchcomprojectvisible-light-communication

ビデオのURL httpwwwdisneyresearchcomwpcontentuploadsPub_InvisibleLightCommunication_Siggraph14_videomp4

• 201211106_KeisukeKawahara
• 201311421_KeitaKanai_02
• 201313095_AkiraIshii_02
• 201413109_YuukiKubo_02
• 201513110_SatoshiHashizume_02
• 鬼輪講マラソン③_1
• 鬼輪講マラソン③_2

なかの

SIMILARITY MEASURE FOR DEPTH ESTIMATIOM 20098

どんなもの

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

4種類の視差推定アルゴリズムを組み合わせている 類似度度の選択性の解析

Belief Propagationの枠組みを用いる

名古屋大学の多視点データベースを利利用

HHI Test Material for 3D Video [I Feldmann M Muller F Zilly R Tanger A SmolicP Kauff T Wiegand 2008] Multiview Video Test Sequence and Camera Parameters [Yo-Sung Ho Eun-Kyung Lee and Cheon Lee 2008] 1D Parallel Test Sequences for MPEG-FTV [M Tanimoto T Fujii N Fukushima 2008] Non-parametric Local Transforms for Computing Visual Correspondence [R Zabih J Woodfill 1994]

なかの

Spatiotemporal Stereo via Spatiotemporal Quadric Element (Stequel) Matching9

どんなもの

技術や手法のキモはどこ

新しいマッチング手法を提案動き考慮することなく時間情報を取り込むことができる 時間方向のエピ線を考える

オプティカルフロー推定は3D境界や低テクスチャで弱いが提案手法はロバストである

なかの

Depth Video Enhancement Based on Weighted Mode Filtering10

どんなもの

議論論はある

ノイズを含んだ低解像度度のデプスマップの質を高める手法（超解像度度とデノイズ）時間方向も使用簡単なオプティカルフローを計算し利利用する

非反復復アルゴリズムのためGPUに載せやすく高速化が考えられる

なかの

Fast Bilateral-Space Stereo for Synthetic Defocus11

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

議論論はある

次に読むべき論論文は

高速な自由焦点ぼけ画像の作成

Bilateral-spaceを提案

従来研究よりも10から100倍速くぼけ具合の精度度も良良い

ぼけを作成するというアプリケーションに利利用する距離離という面では提案手法が有益であるが実測的な距離離という面での精度度は悪い背景と前景が同じ色で近くにある場合同一ととらえてしまう

Efficient high-resolution stereo matching using local plane sweeps [S N Sinha D Scharstein and R SzeliskiCVPR2014] Bilateral filtering-based optical flow estimation with occlusion detection [J Xiao H Cheng H Sawhney C Rao and M IsnardiECCV2006] Efficient nonlocal regularization for optical flow [P Krumlahenbumluhl and V KoltunECCV2012] Real-time spatiotemporal stereo matching using the dual-cross-bilateral grid [C Richardt D Orr I Davies A Criminisi and N A DodgsonECCV2010]

どうやって有効性を示した視差推定の精度度はmiddleburyKITTI

なかの

Robust Spatiotemporal Stereo for Dynamic Scenes12

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

ステレオ動画のフレーム間情報を取り入れることでノイズ耐性を向上させるまた動きの大きなものも考える

時間を含めたウインドウの提案自動的にそのような変化に対応する画像領領域を検出する

従来の時空間ステレオと比べ大きな動きによる急激な視差の時間変化に対して頑健である

なかの

Spacetime Stereo A Unifying Framework for Depth from Triangulation13

どんなもの

先行行研究と比べてどこがすごい

space time stereoを提案ステレオカメラの視差推定でも構造光を用いた視差推定でも利利用可能 動的なシーンでの利利用も可能

フレームごとマッチングを取っていたが複数フレームでのマッチングを可能とした

なかの

Learning to Select and Order Vacation Photographs (Disney research)14

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示したあまりにもたくさん撮影した写真たちから自動的にフォトアルバムを作成する研究

複雑な視覚での区別を試みたのはこの論論文が初

５つの異異なるトピックから63の個人的な写真コレクションのデータセットを利利用し定量量的に評価する

写真間の差別かを定義する顔全体の絵何が写っているか写っていないかを評価する

Jointly aligning and segmenting multiple web photo streams for the inference of collective photo storylines [G Kim and E P Xing CVPR2013] Photo sequencing [T Basha Y Moses and S Avidan CVPR2012]

なかの

A Taxonomy and Evaluation of Dense Two-Frame Stereo Correspondence Algorithms15

どんなもの

どうやって有効性を示した

次に読むべき論論文は

ステレオマッチングに関する分類を行行う 新たなデータセットを作成する

というよりも他の手法が有効性を示すことができるようにデータセットを作成した 今ではmiddleburyのデータセットと言えばステレオ業界では超有名

High-resolution stereo datasets with subpixel-accurate ground truth

なかの

Discriminability Limits in Spatio-Temporal Stereo Block Matching1

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

spatio-temporal disparity estimationの根本的な前提の正当性を解析しマッチング処理理の際に動きが助けとなる程度度を決定する

時空間マッチングのエラーを分析し誤りの原因を確率率率で導出する（フレーム数動きの分散画像特徴ノイズの関数）

[34243334]は時空間マッチングの利利点を指摘していたが本論論文はマッチング精度度の向上のために動きを用いる手法の程度度や性質を研究する

6つのステレオビデオを用いて検証を行行った

Spacetime stereo Shape recovery for dynamic scenes [L Zhang B Curless and S Seitz CVPR2003] Spatiotemporal stereo and scene flow via stequel matching [M Sizintsev and R Wildes PAMI2012] Temporally consistent disparity and optical flow via efficient spatio-temporal filtering [A Hosni C Rhemann M Bleyer and M Gelautz PRCAIVT2012] Spacetime stereo A unifying framework for depth from triangulation [PAMI2005] Dynamic depth recovery from multiple synchronized video streams [H Tao H Sawhney and R Kumar CVPR2001] Spatiotemporal descriptor for wide-baseline stereo reconstruction of non-rigid and ambiguous scenes [ECCV2003]

なかの

Depth-Based Patch Scaling for Content-Aware Stereo Image Completion2

どんなもの

どうやって有効性を示した

ステレオでデプスを取り物体の三次元情報を使ってインペインティングを行行う

bookのデータセット背景が繰り返しパターンが多いものを使っている

なかの

Fast Semi-dense Surface Reconstruction from Stereoscopic Video in Laparoscopic Surgery3

どんなもの

手法の流流れ

次に読むべき論論文は

腹腔内手術の際にステレオビデオから高速に物体の三次元再構成を行行う研究

Evaluation of stereo matching costs on images with radiometric differences [Hirschmueller H Scharstein D PAMI2008]

スコープカメラから画像取得GPUで演算する 視差を算出しフィルタにかける距離離に変換 点群を再びフィルタにかけて三次元再構成

なかの

3D Reconstruction from Accidental Motion4

どんなもの

技術や手法のキモはどこ

議論論はある

数秒のビデオ（単眼）から三次元再構成を行行う 手ぶれなどの動きから再構成が可能で特定の動きや機材を必要としない

短い基線長でも再構成が可能（3mmの基線長）

基線長が短いため背景の精度度が低くなる リフォーカス画像作成には十分 練習では上手く動作したが検証がまだ必要

なかの

Panoramic Video from Unstructured Camera Arrays5

どんなもの

技術や手法のキモはどこ

議論論はある

複数のカメラを用いたパノラマ撮影を行行う その際に不不自然さがないような動画を作成する

不不自然さを感じる感覚特性を提示しそれにのっとって対策を講じている

一つのカメラの解像度度と品質を向上させるよりも複数台のカメラを組み合わせることがはるかに簡単で有益である専門家でなくてもGoProのカメラセットを組み合わせることは容易易

カメラの配置は厳密に決められていない完璧な時間同期やローリングシャッターの不不足のような実撮影での問題もクリアしている

先行行研究と比べてどこがすごい

どうやって有効性を示した左のシステムは14台のカメラを使用 右のシステムはGoProを5台使用

Disney 201558

なかの

Floating Scale Surface Reconstruction6

どんなもの

技術や手法のキモはどこ

流流動的にスケールを変えられる三次元再構成手法

サンプル規模に依存するパラメータがない rarrどのスケールのサンプルにも対応できる

siggraph2014

なかの

A Super Resolution Reconstruction Scheme for Mixed Spatio-Temporal Stereo Video7

どんなもの

技術や手法のキモはどこ

ビデオ超解像アルゴリズム

二台のカメラを使用 一台は低解像度度で高速一台は高解像度度で低速

HHI 3DV ftp siteのBookarrivalとbeergadenを使用どうやって有効性を示した

なかの

What Is a Good Day for Outdoor Photometric Stereo8

どんなもの

先行行研究と比べてどこがすごい

議論論はある

次に読むべき論論文は

屋外における照度度差があるステレオの研究 屋外でステレオを行行う際に有利利or不不利利な日照条件を明らかにする

点光源を用いた研究は行行われていたが屋外での研究はされていなかった

晴れより曇りの方が精度度が良良い雲があるから特徴量量を取りやすい雑音を白色ガウスモデルを想定 季節ごとのデータセットを利利用してみても良良い

Time-lapse photometric stereo and applications [F Shen K Sunkavalli N Bonneel S Rusinkiewicz H Pfisterand X Tong2014] Outdoor photometric stereo [L-F Yu S-K Yeung Y-W Tai D Terzopoulos and T FChan ICCP2013]

どうやって有効性を示した屋外の照明に関するHDR環境マップのデータベースを利利用

Disney 2015424

なかの

COLORBRUSH ANIMATED DIFFUSION FOR INTUITIVE COLORIZATION SIMULATING WATER PAINTING 9

どんなものアニメを水彩画で描いたように変換する 水彩画を描くには経験が必要であるがそれを作成するアルゴリズムを考案絵具が水によりどうにじむかシュミレーションしている

Disney 20141027 ICIP2014

次に読むべき論論文はGabor-space geodesic active contoursrdquo In Algebraic Frames for the Perception-Action Cycle [C Sagiv NA Sochen and YY Zeevi 2000] Practical temporal consistency for image-based graphics applications [M Lang O Wang T Aydin A Smolic and M Gross SIGGRAPH2012] Computer-Generated Watercolor [CJ Curtis SE Anderson JE Seims KW Fleischer and DH Salesin SIGGRAPH1997]

なかの

From Sound to Sight Using Audio Processing to enable Visible Light Communication 10

どんなもの光に情報を載せる技術プロジェクトページがあって光関係の研究が8個載っている

httpwwwdisneyresearchcomprojectvisible-light-communication

ビデオのURL httpwwwdisneyresearchcomwpcontentuploadsPub_InvisibleLightCommunication_Siggraph14_videomp4

• 201211106_KeisukeKawahara
• 201311421_KeitaKanai_02
• 201313095_AkiraIshii_02
• 201413109_YuukiKubo_02
• 201513110_SatoshiHashizume_02
• 鬼輪講マラソン③_1
• 鬼輪講マラソン③_2

なかの

Spatiotemporal Stereo via Spatiotemporal Quadric Element (Stequel) Matching9

どんなもの

技術や手法のキモはどこ

新しいマッチング手法を提案動き考慮することなく時間情報を取り込むことができる 時間方向のエピ線を考える

オプティカルフロー推定は3D境界や低テクスチャで弱いが提案手法はロバストである

なかの

Depth Video Enhancement Based on Weighted Mode Filtering10

どんなもの

議論論はある

ノイズを含んだ低解像度度のデプスマップの質を高める手法（超解像度度とデノイズ）時間方向も使用簡単なオプティカルフローを計算し利利用する

非反復復アルゴリズムのためGPUに載せやすく高速化が考えられる

なかの

Fast Bilateral-Space Stereo for Synthetic Defocus11

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

議論論はある

次に読むべき論論文は

高速な自由焦点ぼけ画像の作成

Bilateral-spaceを提案

従来研究よりも10から100倍速くぼけ具合の精度度も良良い

ぼけを作成するというアプリケーションに利利用する距離離という面では提案手法が有益であるが実測的な距離離という面での精度度は悪い背景と前景が同じ色で近くにある場合同一ととらえてしまう

Efficient high-resolution stereo matching using local plane sweeps [S N Sinha D Scharstein and R SzeliskiCVPR2014] Bilateral filtering-based optical flow estimation with occlusion detection [J Xiao H Cheng H Sawhney C Rao and M IsnardiECCV2006] Efficient nonlocal regularization for optical flow [P Krumlahenbumluhl and V KoltunECCV2012] Real-time spatiotemporal stereo matching using the dual-cross-bilateral grid [C Richardt D Orr I Davies A Criminisi and N A DodgsonECCV2010]

どうやって有効性を示した視差推定の精度度はmiddleburyKITTI

なかの

Robust Spatiotemporal Stereo for Dynamic Scenes12

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

ステレオ動画のフレーム間情報を取り入れることでノイズ耐性を向上させるまた動きの大きなものも考える

時間を含めたウインドウの提案自動的にそのような変化に対応する画像領領域を検出する

従来の時空間ステレオと比べ大きな動きによる急激な視差の時間変化に対して頑健である

なかの

Spacetime Stereo A Unifying Framework for Depth from Triangulation13

どんなもの

先行行研究と比べてどこがすごい

space time stereoを提案ステレオカメラの視差推定でも構造光を用いた視差推定でも利利用可能 動的なシーンでの利利用も可能

フレームごとマッチングを取っていたが複数フレームでのマッチングを可能とした

なかの

Learning to Select and Order Vacation Photographs (Disney research)14

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示したあまりにもたくさん撮影した写真たちから自動的にフォトアルバムを作成する研究

複雑な視覚での区別を試みたのはこの論論文が初

５つの異異なるトピックから63の個人的な写真コレクションのデータセットを利利用し定量量的に評価する

写真間の差別かを定義する顔全体の絵何が写っているか写っていないかを評価する

Jointly aligning and segmenting multiple web photo streams for the inference of collective photo storylines [G Kim and E P Xing CVPR2013] Photo sequencing [T Basha Y Moses and S Avidan CVPR2012]

なかの

A Taxonomy and Evaluation of Dense Two-Frame Stereo Correspondence Algorithms15

どんなもの

どうやって有効性を示した

次に読むべき論論文は

ステレオマッチングに関する分類を行行う 新たなデータセットを作成する

というよりも他の手法が有効性を示すことができるようにデータセットを作成した 今ではmiddleburyのデータセットと言えばステレオ業界では超有名

High-resolution stereo datasets with subpixel-accurate ground truth

なかの

Discriminability Limits in Spatio-Temporal Stereo Block Matching1

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

spatio-temporal disparity estimationの根本的な前提の正当性を解析しマッチング処理理の際に動きが助けとなる程度度を決定する

時空間マッチングのエラーを分析し誤りの原因を確率率率で導出する（フレーム数動きの分散画像特徴ノイズの関数）

[34243334]は時空間マッチングの利利点を指摘していたが本論論文はマッチング精度度の向上のために動きを用いる手法の程度度や性質を研究する

6つのステレオビデオを用いて検証を行行った

Spacetime stereo Shape recovery for dynamic scenes [L Zhang B Curless and S Seitz CVPR2003] Spatiotemporal stereo and scene flow via stequel matching [M Sizintsev and R Wildes PAMI2012] Temporally consistent disparity and optical flow via efficient spatio-temporal filtering [A Hosni C Rhemann M Bleyer and M Gelautz PRCAIVT2012] Spacetime stereo A unifying framework for depth from triangulation [PAMI2005] Dynamic depth recovery from multiple synchronized video streams [H Tao H Sawhney and R Kumar CVPR2001] Spatiotemporal descriptor for wide-baseline stereo reconstruction of non-rigid and ambiguous scenes [ECCV2003]

なかの

Depth-Based Patch Scaling for Content-Aware Stereo Image Completion2

どんなもの

どうやって有効性を示した

ステレオでデプスを取り物体の三次元情報を使ってインペインティングを行行う

bookのデータセット背景が繰り返しパターンが多いものを使っている

なかの

Fast Semi-dense Surface Reconstruction from Stereoscopic Video in Laparoscopic Surgery3

どんなもの

手法の流流れ

次に読むべき論論文は

腹腔内手術の際にステレオビデオから高速に物体の三次元再構成を行行う研究

Evaluation of stereo matching costs on images with radiometric differences [Hirschmueller H Scharstein D PAMI2008]

スコープカメラから画像取得GPUで演算する 視差を算出しフィルタにかける距離離に変換 点群を再びフィルタにかけて三次元再構成

なかの

3D Reconstruction from Accidental Motion4

どんなもの

技術や手法のキモはどこ

議論論はある

数秒のビデオ（単眼）から三次元再構成を行行う 手ぶれなどの動きから再構成が可能で特定の動きや機材を必要としない

短い基線長でも再構成が可能（3mmの基線長）

基線長が短いため背景の精度度が低くなる リフォーカス画像作成には十分 練習では上手く動作したが検証がまだ必要

なかの

Panoramic Video from Unstructured Camera Arrays5

どんなもの

技術や手法のキモはどこ

議論論はある

複数のカメラを用いたパノラマ撮影を行行う その際に不不自然さがないような動画を作成する

不不自然さを感じる感覚特性を提示しそれにのっとって対策を講じている

一つのカメラの解像度度と品質を向上させるよりも複数台のカメラを組み合わせることがはるかに簡単で有益である専門家でなくてもGoProのカメラセットを組み合わせることは容易易

カメラの配置は厳密に決められていない完璧な時間同期やローリングシャッターの不不足のような実撮影での問題もクリアしている

先行行研究と比べてどこがすごい

どうやって有効性を示した左のシステムは14台のカメラを使用 右のシステムはGoProを5台使用

Disney 201558

なかの

Floating Scale Surface Reconstruction6

どんなもの

技術や手法のキモはどこ

流流動的にスケールを変えられる三次元再構成手法

サンプル規模に依存するパラメータがない rarrどのスケールのサンプルにも対応できる

siggraph2014

なかの

A Super Resolution Reconstruction Scheme for Mixed Spatio-Temporal Stereo Video7

どんなもの

技術や手法のキモはどこ

ビデオ超解像アルゴリズム

二台のカメラを使用 一台は低解像度度で高速一台は高解像度度で低速

HHI 3DV ftp siteのBookarrivalとbeergadenを使用どうやって有効性を示した

なかの

What Is a Good Day for Outdoor Photometric Stereo8

どんなもの

先行行研究と比べてどこがすごい

議論論はある

次に読むべき論論文は

屋外における照度度差があるステレオの研究 屋外でステレオを行行う際に有利利or不不利利な日照条件を明らかにする

点光源を用いた研究は行行われていたが屋外での研究はされていなかった

晴れより曇りの方が精度度が良良い雲があるから特徴量量を取りやすい雑音を白色ガウスモデルを想定 季節ごとのデータセットを利利用してみても良良い

Time-lapse photometric stereo and applications [F Shen K Sunkavalli N Bonneel S Rusinkiewicz H Pfisterand X Tong2014] Outdoor photometric stereo [L-F Yu S-K Yeung Y-W Tai D Terzopoulos and T FChan ICCP2013]

どうやって有効性を示した屋外の照明に関するHDR環境マップのデータベースを利利用

Disney 2015424

なかの

COLORBRUSH ANIMATED DIFFUSION FOR INTUITIVE COLORIZATION SIMULATING WATER PAINTING 9

どんなものアニメを水彩画で描いたように変換する 水彩画を描くには経験が必要であるがそれを作成するアルゴリズムを考案絵具が水によりどうにじむかシュミレーションしている

Disney 20141027 ICIP2014

次に読むべき論論文はGabor-space geodesic active contoursrdquo In Algebraic Frames for the Perception-Action Cycle [C Sagiv NA Sochen and YY Zeevi 2000] Practical temporal consistency for image-based graphics applications [M Lang O Wang T Aydin A Smolic and M Gross SIGGRAPH2012] Computer-Generated Watercolor [CJ Curtis SE Anderson JE Seims KW Fleischer and DH Salesin SIGGRAPH1997]

なかの

From Sound to Sight Using Audio Processing to enable Visible Light Communication 10

どんなもの光に情報を載せる技術プロジェクトページがあって光関係の研究が8個載っている

httpwwwdisneyresearchcomprojectvisible-light-communication

ビデオのURL httpwwwdisneyresearchcomwpcontentuploadsPub_InvisibleLightCommunication_Siggraph14_videomp4

• 201211106_KeisukeKawahara
• 201311421_KeitaKanai_02
• 201313095_AkiraIshii_02
• 201413109_YuukiKubo_02
• 201513110_SatoshiHashizume_02
• 鬼輪講マラソン③_1
• 鬼輪講マラソン③_2

なかの

Depth Video Enhancement Based on Weighted Mode Filtering10

どんなもの

議論論はある

ノイズを含んだ低解像度度のデプスマップの質を高める手法（超解像度度とデノイズ）時間方向も使用簡単なオプティカルフローを計算し利利用する

非反復復アルゴリズムのためGPUに載せやすく高速化が考えられる

なかの

Fast Bilateral-Space Stereo for Synthetic Defocus11

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

議論論はある

次に読むべき論論文は

高速な自由焦点ぼけ画像の作成

Bilateral-spaceを提案

従来研究よりも10から100倍速くぼけ具合の精度度も良良い

ぼけを作成するというアプリケーションに利利用する距離離という面では提案手法が有益であるが実測的な距離離という面での精度度は悪い背景と前景が同じ色で近くにある場合同一ととらえてしまう

Efficient high-resolution stereo matching using local plane sweeps [S N Sinha D Scharstein and R SzeliskiCVPR2014] Bilateral filtering-based optical flow estimation with occlusion detection [J Xiao H Cheng H Sawhney C Rao and M IsnardiECCV2006] Efficient nonlocal regularization for optical flow [P Krumlahenbumluhl and V KoltunECCV2012] Real-time spatiotemporal stereo matching using the dual-cross-bilateral grid [C Richardt D Orr I Davies A Criminisi and N A DodgsonECCV2010]

どうやって有効性を示した視差推定の精度度はmiddleburyKITTI

なかの

Robust Spatiotemporal Stereo for Dynamic Scenes12

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

ステレオ動画のフレーム間情報を取り入れることでノイズ耐性を向上させるまた動きの大きなものも考える

時間を含めたウインドウの提案自動的にそのような変化に対応する画像領領域を検出する

従来の時空間ステレオと比べ大きな動きによる急激な視差の時間変化に対して頑健である

なかの

Spacetime Stereo A Unifying Framework for Depth from Triangulation13

どんなもの

先行行研究と比べてどこがすごい

space time stereoを提案ステレオカメラの視差推定でも構造光を用いた視差推定でも利利用可能 動的なシーンでの利利用も可能

フレームごとマッチングを取っていたが複数フレームでのマッチングを可能とした

なかの

Learning to Select and Order Vacation Photographs (Disney research)14

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示したあまりにもたくさん撮影した写真たちから自動的にフォトアルバムを作成する研究

複雑な視覚での区別を試みたのはこの論論文が初

５つの異異なるトピックから63の個人的な写真コレクションのデータセットを利利用し定量量的に評価する

写真間の差別かを定義する顔全体の絵何が写っているか写っていないかを評価する

Jointly aligning and segmenting multiple web photo streams for the inference of collective photo storylines [G Kim and E P Xing CVPR2013] Photo sequencing [T Basha Y Moses and S Avidan CVPR2012]

なかの

A Taxonomy and Evaluation of Dense Two-Frame Stereo Correspondence Algorithms15

どんなもの

どうやって有効性を示した

次に読むべき論論文は

ステレオマッチングに関する分類を行行う 新たなデータセットを作成する

というよりも他の手法が有効性を示すことができるようにデータセットを作成した 今ではmiddleburyのデータセットと言えばステレオ業界では超有名

High-resolution stereo datasets with subpixel-accurate ground truth

なかの

Discriminability Limits in Spatio-Temporal Stereo Block Matching1

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

spatio-temporal disparity estimationの根本的な前提の正当性を解析しマッチング処理理の際に動きが助けとなる程度度を決定する

時空間マッチングのエラーを分析し誤りの原因を確率率率で導出する（フレーム数動きの分散画像特徴ノイズの関数）

[34243334]は時空間マッチングの利利点を指摘していたが本論論文はマッチング精度度の向上のために動きを用いる手法の程度度や性質を研究する

6つのステレオビデオを用いて検証を行行った

Spacetime stereo Shape recovery for dynamic scenes [L Zhang B Curless and S Seitz CVPR2003] Spatiotemporal stereo and scene flow via stequel matching [M Sizintsev and R Wildes PAMI2012] Temporally consistent disparity and optical flow via efficient spatio-temporal filtering [A Hosni C Rhemann M Bleyer and M Gelautz PRCAIVT2012] Spacetime stereo A unifying framework for depth from triangulation [PAMI2005] Dynamic depth recovery from multiple synchronized video streams [H Tao H Sawhney and R Kumar CVPR2001] Spatiotemporal descriptor for wide-baseline stereo reconstruction of non-rigid and ambiguous scenes [ECCV2003]

なかの

Depth-Based Patch Scaling for Content-Aware Stereo Image Completion2

どんなもの

どうやって有効性を示した

ステレオでデプスを取り物体の三次元情報を使ってインペインティングを行行う

bookのデータセット背景が繰り返しパターンが多いものを使っている

なかの

Fast Semi-dense Surface Reconstruction from Stereoscopic Video in Laparoscopic Surgery3

どんなもの

手法の流流れ

次に読むべき論論文は

腹腔内手術の際にステレオビデオから高速に物体の三次元再構成を行行う研究

Evaluation of stereo matching costs on images with radiometric differences [Hirschmueller H Scharstein D PAMI2008]

スコープカメラから画像取得GPUで演算する 視差を算出しフィルタにかける距離離に変換 点群を再びフィルタにかけて三次元再構成

なかの

3D Reconstruction from Accidental Motion4

どんなもの

技術や手法のキモはどこ

議論論はある

数秒のビデオ（単眼）から三次元再構成を行行う 手ぶれなどの動きから再構成が可能で特定の動きや機材を必要としない

短い基線長でも再構成が可能（3mmの基線長）

基線長が短いため背景の精度度が低くなる リフォーカス画像作成には十分 練習では上手く動作したが検証がまだ必要

なかの

Panoramic Video from Unstructured Camera Arrays5

どんなもの

技術や手法のキモはどこ

議論論はある

複数のカメラを用いたパノラマ撮影を行行う その際に不不自然さがないような動画を作成する

不不自然さを感じる感覚特性を提示しそれにのっとって対策を講じている

一つのカメラの解像度度と品質を向上させるよりも複数台のカメラを組み合わせることがはるかに簡単で有益である専門家でなくてもGoProのカメラセットを組み合わせることは容易易

カメラの配置は厳密に決められていない完璧な時間同期やローリングシャッターの不不足のような実撮影での問題もクリアしている

先行行研究と比べてどこがすごい

どうやって有効性を示した左のシステムは14台のカメラを使用 右のシステムはGoProを5台使用

Disney 201558

なかの

Floating Scale Surface Reconstruction6

どんなもの

技術や手法のキモはどこ

流流動的にスケールを変えられる三次元再構成手法

サンプル規模に依存するパラメータがない rarrどのスケールのサンプルにも対応できる

siggraph2014

なかの

A Super Resolution Reconstruction Scheme for Mixed Spatio-Temporal Stereo Video7

どんなもの

技術や手法のキモはどこ

ビデオ超解像アルゴリズム

二台のカメラを使用 一台は低解像度度で高速一台は高解像度度で低速

HHI 3DV ftp siteのBookarrivalとbeergadenを使用どうやって有効性を示した

なかの

What Is a Good Day for Outdoor Photometric Stereo8

どんなもの

先行行研究と比べてどこがすごい

議論論はある

次に読むべき論論文は

屋外における照度度差があるステレオの研究 屋外でステレオを行行う際に有利利or不不利利な日照条件を明らかにする

点光源を用いた研究は行行われていたが屋外での研究はされていなかった

晴れより曇りの方が精度度が良良い雲があるから特徴量量を取りやすい雑音を白色ガウスモデルを想定 季節ごとのデータセットを利利用してみても良良い

Time-lapse photometric stereo and applications [F Shen K Sunkavalli N Bonneel S Rusinkiewicz H Pfisterand X Tong2014] Outdoor photometric stereo [L-F Yu S-K Yeung Y-W Tai D Terzopoulos and T FChan ICCP2013]

どうやって有効性を示した屋外の照明に関するHDR環境マップのデータベースを利利用

Disney 2015424

なかの

COLORBRUSH ANIMATED DIFFUSION FOR INTUITIVE COLORIZATION SIMULATING WATER PAINTING 9

どんなものアニメを水彩画で描いたように変換する 水彩画を描くには経験が必要であるがそれを作成するアルゴリズムを考案絵具が水によりどうにじむかシュミレーションしている

Disney 20141027 ICIP2014

次に読むべき論論文はGabor-space geodesic active contoursrdquo In Algebraic Frames for the Perception-Action Cycle [C Sagiv NA Sochen and YY Zeevi 2000] Practical temporal consistency for image-based graphics applications [M Lang O Wang T Aydin A Smolic and M Gross SIGGRAPH2012] Computer-Generated Watercolor [CJ Curtis SE Anderson JE Seims KW Fleischer and DH Salesin SIGGRAPH1997]

なかの

From Sound to Sight Using Audio Processing to enable Visible Light Communication 10

どんなもの光に情報を載せる技術プロジェクトページがあって光関係の研究が8個載っている

httpwwwdisneyresearchcomprojectvisible-light-communication

ビデオのURL httpwwwdisneyresearchcomwpcontentuploadsPub_InvisibleLightCommunication_Siggraph14_videomp4

• 201211106_KeisukeKawahara
• 201311421_KeitaKanai_02
• 201313095_AkiraIshii_02
• 201413109_YuukiKubo_02
• 201513110_SatoshiHashizume_02
• 鬼輪講マラソン③_1
• 鬼輪講マラソン③_2

なかの

Fast Bilateral-Space Stereo for Synthetic Defocus11

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

議論論はある

次に読むべき論論文は

高速な自由焦点ぼけ画像の作成

Bilateral-spaceを提案

従来研究よりも10から100倍速くぼけ具合の精度度も良良い

ぼけを作成するというアプリケーションに利利用する距離離という面では提案手法が有益であるが実測的な距離離という面での精度度は悪い背景と前景が同じ色で近くにある場合同一ととらえてしまう

Efficient high-resolution stereo matching using local plane sweeps [S N Sinha D Scharstein and R SzeliskiCVPR2014] Bilateral filtering-based optical flow estimation with occlusion detection [J Xiao H Cheng H Sawhney C Rao and M IsnardiECCV2006] Efficient nonlocal regularization for optical flow [P Krumlahenbumluhl and V KoltunECCV2012] Real-time spatiotemporal stereo matching using the dual-cross-bilateral grid [C Richardt D Orr I Davies A Criminisi and N A DodgsonECCV2010]

どうやって有効性を示した視差推定の精度度はmiddleburyKITTI

なかの

Robust Spatiotemporal Stereo for Dynamic Scenes12

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

ステレオ動画のフレーム間情報を取り入れることでノイズ耐性を向上させるまた動きの大きなものも考える

時間を含めたウインドウの提案自動的にそのような変化に対応する画像領領域を検出する

従来の時空間ステレオと比べ大きな動きによる急激な視差の時間変化に対して頑健である

なかの

Spacetime Stereo A Unifying Framework for Depth from Triangulation13

どんなもの

先行行研究と比べてどこがすごい

space time stereoを提案ステレオカメラの視差推定でも構造光を用いた視差推定でも利利用可能 動的なシーンでの利利用も可能

フレームごとマッチングを取っていたが複数フレームでのマッチングを可能とした

なかの

Learning to Select and Order Vacation Photographs (Disney research)14

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示したあまりにもたくさん撮影した写真たちから自動的にフォトアルバムを作成する研究

複雑な視覚での区別を試みたのはこの論論文が初

５つの異異なるトピックから63の個人的な写真コレクションのデータセットを利利用し定量量的に評価する

写真間の差別かを定義する顔全体の絵何が写っているか写っていないかを評価する

Jointly aligning and segmenting multiple web photo streams for the inference of collective photo storylines [G Kim and E P Xing CVPR2013] Photo sequencing [T Basha Y Moses and S Avidan CVPR2012]

なかの

A Taxonomy and Evaluation of Dense Two-Frame Stereo Correspondence Algorithms15

どんなもの

どうやって有効性を示した

次に読むべき論論文は

ステレオマッチングに関する分類を行行う 新たなデータセットを作成する

というよりも他の手法が有効性を示すことができるようにデータセットを作成した 今ではmiddleburyのデータセットと言えばステレオ業界では超有名

High-resolution stereo datasets with subpixel-accurate ground truth

なかの

Discriminability Limits in Spatio-Temporal Stereo Block Matching1

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

spatio-temporal disparity estimationの根本的な前提の正当性を解析しマッチング処理理の際に動きが助けとなる程度度を決定する

時空間マッチングのエラーを分析し誤りの原因を確率率率で導出する（フレーム数動きの分散画像特徴ノイズの関数）

[34243334]は時空間マッチングの利利点を指摘していたが本論論文はマッチング精度度の向上のために動きを用いる手法の程度度や性質を研究する

6つのステレオビデオを用いて検証を行行った

Spacetime stereo Shape recovery for dynamic scenes [L Zhang B Curless and S Seitz CVPR2003] Spatiotemporal stereo and scene flow via stequel matching [M Sizintsev and R Wildes PAMI2012] Temporally consistent disparity and optical flow via efficient spatio-temporal filtering [A Hosni C Rhemann M Bleyer and M Gelautz PRCAIVT2012] Spacetime stereo A unifying framework for depth from triangulation [PAMI2005] Dynamic depth recovery from multiple synchronized video streams [H Tao H Sawhney and R Kumar CVPR2001] Spatiotemporal descriptor for wide-baseline stereo reconstruction of non-rigid and ambiguous scenes [ECCV2003]

なかの

Depth-Based Patch Scaling for Content-Aware Stereo Image Completion2

どんなもの

どうやって有効性を示した

ステレオでデプスを取り物体の三次元情報を使ってインペインティングを行行う

bookのデータセット背景が繰り返しパターンが多いものを使っている

なかの

Fast Semi-dense Surface Reconstruction from Stereoscopic Video in Laparoscopic Surgery3

どんなもの

手法の流流れ

次に読むべき論論文は

腹腔内手術の際にステレオビデオから高速に物体の三次元再構成を行行う研究

Evaluation of stereo matching costs on images with radiometric differences [Hirschmueller H Scharstein D PAMI2008]

スコープカメラから画像取得GPUで演算する 視差を算出しフィルタにかける距離離に変換 点群を再びフィルタにかけて三次元再構成

なかの

3D Reconstruction from Accidental Motion4

どんなもの

技術や手法のキモはどこ

議論論はある

数秒のビデオ（単眼）から三次元再構成を行行う 手ぶれなどの動きから再構成が可能で特定の動きや機材を必要としない

短い基線長でも再構成が可能（3mmの基線長）

基線長が短いため背景の精度度が低くなる リフォーカス画像作成には十分 練習では上手く動作したが検証がまだ必要

なかの

Panoramic Video from Unstructured Camera Arrays5

どんなもの

技術や手法のキモはどこ

議論論はある

複数のカメラを用いたパノラマ撮影を行行う その際に不不自然さがないような動画を作成する

不不自然さを感じる感覚特性を提示しそれにのっとって対策を講じている

一つのカメラの解像度度と品質を向上させるよりも複数台のカメラを組み合わせることがはるかに簡単で有益である専門家でなくてもGoProのカメラセットを組み合わせることは容易易

カメラの配置は厳密に決められていない完璧な時間同期やローリングシャッターの不不足のような実撮影での問題もクリアしている

先行行研究と比べてどこがすごい

どうやって有効性を示した左のシステムは14台のカメラを使用 右のシステムはGoProを5台使用

Disney 201558

なかの

Floating Scale Surface Reconstruction6

どんなもの

技術や手法のキモはどこ

流流動的にスケールを変えられる三次元再構成手法

サンプル規模に依存するパラメータがない rarrどのスケールのサンプルにも対応できる

siggraph2014

なかの

A Super Resolution Reconstruction Scheme for Mixed Spatio-Temporal Stereo Video7

どんなもの

技術や手法のキモはどこ

ビデオ超解像アルゴリズム

二台のカメラを使用 一台は低解像度度で高速一台は高解像度度で低速

HHI 3DV ftp siteのBookarrivalとbeergadenを使用どうやって有効性を示した

なかの

What Is a Good Day for Outdoor Photometric Stereo8

どんなもの

先行行研究と比べてどこがすごい

議論論はある

次に読むべき論論文は

屋外における照度度差があるステレオの研究 屋外でステレオを行行う際に有利利or不不利利な日照条件を明らかにする

点光源を用いた研究は行行われていたが屋外での研究はされていなかった

晴れより曇りの方が精度度が良良い雲があるから特徴量量を取りやすい雑音を白色ガウスモデルを想定 季節ごとのデータセットを利利用してみても良良い

Time-lapse photometric stereo and applications [F Shen K Sunkavalli N Bonneel S Rusinkiewicz H Pfisterand X Tong2014] Outdoor photometric stereo [L-F Yu S-K Yeung Y-W Tai D Terzopoulos and T FChan ICCP2013]

どうやって有効性を示した屋外の照明に関するHDR環境マップのデータベースを利利用

Disney 2015424

なかの

COLORBRUSH ANIMATED DIFFUSION FOR INTUITIVE COLORIZATION SIMULATING WATER PAINTING 9

どんなものアニメを水彩画で描いたように変換する 水彩画を描くには経験が必要であるがそれを作成するアルゴリズムを考案絵具が水によりどうにじむかシュミレーションしている

Disney 20141027 ICIP2014

次に読むべき論論文はGabor-space geodesic active contoursrdquo In Algebraic Frames for the Perception-Action Cycle [C Sagiv NA Sochen and YY Zeevi 2000] Practical temporal consistency for image-based graphics applications [M Lang O Wang T Aydin A Smolic and M Gross SIGGRAPH2012] Computer-Generated Watercolor [CJ Curtis SE Anderson JE Seims KW Fleischer and DH Salesin SIGGRAPH1997]

なかの

From Sound to Sight Using Audio Processing to enable Visible Light Communication 10

どんなもの光に情報を載せる技術プロジェクトページがあって光関係の研究が8個載っている

httpwwwdisneyresearchcomprojectvisible-light-communication

ビデオのURL httpwwwdisneyresearchcomwpcontentuploadsPub_InvisibleLightCommunication_Siggraph14_videomp4

• 201211106_KeisukeKawahara
• 201311421_KeitaKanai_02
• 201313095_AkiraIshii_02
• 201413109_YuukiKubo_02
• 201513110_SatoshiHashizume_02
• 鬼輪講マラソン③_1
• 鬼輪講マラソン③_2

なかの

Robust Spatiotemporal Stereo for Dynamic Scenes12

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

ステレオ動画のフレーム間情報を取り入れることでノイズ耐性を向上させるまた動きの大きなものも考える

時間を含めたウインドウの提案自動的にそのような変化に対応する画像領領域を検出する

従来の時空間ステレオと比べ大きな動きによる急激な視差の時間変化に対して頑健である

なかの

Spacetime Stereo A Unifying Framework for Depth from Triangulation13

どんなもの

先行行研究と比べてどこがすごい

space time stereoを提案ステレオカメラの視差推定でも構造光を用いた視差推定でも利利用可能 動的なシーンでの利利用も可能

フレームごとマッチングを取っていたが複数フレームでのマッチングを可能とした

なかの

Learning to Select and Order Vacation Photographs (Disney research)14

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示したあまりにもたくさん撮影した写真たちから自動的にフォトアルバムを作成する研究

複雑な視覚での区別を試みたのはこの論論文が初

５つの異異なるトピックから63の個人的な写真コレクションのデータセットを利利用し定量量的に評価する

写真間の差別かを定義する顔全体の絵何が写っているか写っていないかを評価する

Jointly aligning and segmenting multiple web photo streams for the inference of collective photo storylines [G Kim and E P Xing CVPR2013] Photo sequencing [T Basha Y Moses and S Avidan CVPR2012]

なかの

A Taxonomy and Evaluation of Dense Two-Frame Stereo Correspondence Algorithms15

どんなもの

どうやって有効性を示した

次に読むべき論論文は

ステレオマッチングに関する分類を行行う 新たなデータセットを作成する

というよりも他の手法が有効性を示すことができるようにデータセットを作成した 今ではmiddleburyのデータセットと言えばステレオ業界では超有名

High-resolution stereo datasets with subpixel-accurate ground truth

なかの

Discriminability Limits in Spatio-Temporal Stereo Block Matching1

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

spatio-temporal disparity estimationの根本的な前提の正当性を解析しマッチング処理理の際に動きが助けとなる程度度を決定する

時空間マッチングのエラーを分析し誤りの原因を確率率率で導出する（フレーム数動きの分散画像特徴ノイズの関数）

[34243334]は時空間マッチングの利利点を指摘していたが本論論文はマッチング精度度の向上のために動きを用いる手法の程度度や性質を研究する

6つのステレオビデオを用いて検証を行行った

Spacetime stereo Shape recovery for dynamic scenes [L Zhang B Curless and S Seitz CVPR2003] Spatiotemporal stereo and scene flow via stequel matching [M Sizintsev and R Wildes PAMI2012] Temporally consistent disparity and optical flow via efficient spatio-temporal filtering [A Hosni C Rhemann M Bleyer and M Gelautz PRCAIVT2012] Spacetime stereo A unifying framework for depth from triangulation [PAMI2005] Dynamic depth recovery from multiple synchronized video streams [H Tao H Sawhney and R Kumar CVPR2001] Spatiotemporal descriptor for wide-baseline stereo reconstruction of non-rigid and ambiguous scenes [ECCV2003]

なかの

Depth-Based Patch Scaling for Content-Aware Stereo Image Completion2

どんなもの

どうやって有効性を示した

ステレオでデプスを取り物体の三次元情報を使ってインペインティングを行行う

bookのデータセット背景が繰り返しパターンが多いものを使っている

なかの

Fast Semi-dense Surface Reconstruction from Stereoscopic Video in Laparoscopic Surgery3

どんなもの

手法の流流れ

次に読むべき論論文は

腹腔内手術の際にステレオビデオから高速に物体の三次元再構成を行行う研究

Evaluation of stereo matching costs on images with radiometric differences [Hirschmueller H Scharstein D PAMI2008]

スコープカメラから画像取得GPUで演算する 視差を算出しフィルタにかける距離離に変換 点群を再びフィルタにかけて三次元再構成

なかの

3D Reconstruction from Accidental Motion4

どんなもの

技術や手法のキモはどこ

議論論はある

数秒のビデオ（単眼）から三次元再構成を行行う 手ぶれなどの動きから再構成が可能で特定の動きや機材を必要としない

短い基線長でも再構成が可能（3mmの基線長）

基線長が短いため背景の精度度が低くなる リフォーカス画像作成には十分 練習では上手く動作したが検証がまだ必要

なかの

Panoramic Video from Unstructured Camera Arrays5

どんなもの

技術や手法のキモはどこ

議論論はある

複数のカメラを用いたパノラマ撮影を行行う その際に不不自然さがないような動画を作成する

不不自然さを感じる感覚特性を提示しそれにのっとって対策を講じている

一つのカメラの解像度度と品質を向上させるよりも複数台のカメラを組み合わせることがはるかに簡単で有益である専門家でなくてもGoProのカメラセットを組み合わせることは容易易

カメラの配置は厳密に決められていない完璧な時間同期やローリングシャッターの不不足のような実撮影での問題もクリアしている

先行行研究と比べてどこがすごい

どうやって有効性を示した左のシステムは14台のカメラを使用 右のシステムはGoProを5台使用

Disney 201558

なかの

Floating Scale Surface Reconstruction6

どんなもの

技術や手法のキモはどこ

流流動的にスケールを変えられる三次元再構成手法

サンプル規模に依存するパラメータがない rarrどのスケールのサンプルにも対応できる

siggraph2014

なかの

A Super Resolution Reconstruction Scheme for Mixed Spatio-Temporal Stereo Video7

どんなもの

技術や手法のキモはどこ

ビデオ超解像アルゴリズム

二台のカメラを使用 一台は低解像度度で高速一台は高解像度度で低速

HHI 3DV ftp siteのBookarrivalとbeergadenを使用どうやって有効性を示した

なかの

What Is a Good Day for Outdoor Photometric Stereo8

どんなもの

先行行研究と比べてどこがすごい

議論論はある

次に読むべき論論文は

屋外における照度度差があるステレオの研究 屋外でステレオを行行う際に有利利or不不利利な日照条件を明らかにする

点光源を用いた研究は行行われていたが屋外での研究はされていなかった

晴れより曇りの方が精度度が良良い雲があるから特徴量量を取りやすい雑音を白色ガウスモデルを想定 季節ごとのデータセットを利利用してみても良良い

Time-lapse photometric stereo and applications [F Shen K Sunkavalli N Bonneel S Rusinkiewicz H Pfisterand X Tong2014] Outdoor photometric stereo [L-F Yu S-K Yeung Y-W Tai D Terzopoulos and T FChan ICCP2013]

どうやって有効性を示した屋外の照明に関するHDR環境マップのデータベースを利利用

Disney 2015424

なかの

COLORBRUSH ANIMATED DIFFUSION FOR INTUITIVE COLORIZATION SIMULATING WATER PAINTING 9

どんなものアニメを水彩画で描いたように変換する 水彩画を描くには経験が必要であるがそれを作成するアルゴリズムを考案絵具が水によりどうにじむかシュミレーションしている

Disney 20141027 ICIP2014

次に読むべき論論文はGabor-space geodesic active contoursrdquo In Algebraic Frames for the Perception-Action Cycle [C Sagiv NA Sochen and YY Zeevi 2000] Practical temporal consistency for image-based graphics applications [M Lang O Wang T Aydin A Smolic and M Gross SIGGRAPH2012] Computer-Generated Watercolor [CJ Curtis SE Anderson JE Seims KW Fleischer and DH Salesin SIGGRAPH1997]

なかの

From Sound to Sight Using Audio Processing to enable Visible Light Communication 10

どんなもの光に情報を載せる技術プロジェクトページがあって光関係の研究が8個載っている

httpwwwdisneyresearchcomprojectvisible-light-communication

ビデオのURL httpwwwdisneyresearchcomwpcontentuploadsPub_InvisibleLightCommunication_Siggraph14_videomp4

• 201211106_KeisukeKawahara
• 201311421_KeitaKanai_02
• 201313095_AkiraIshii_02
• 201413109_YuukiKubo_02
• 201513110_SatoshiHashizume_02
• 鬼輪講マラソン③_1
• 鬼輪講マラソン③_2

なかの

Spacetime Stereo A Unifying Framework for Depth from Triangulation13

どんなもの

先行行研究と比べてどこがすごい

space time stereoを提案ステレオカメラの視差推定でも構造光を用いた視差推定でも利利用可能 動的なシーンでの利利用も可能

フレームごとマッチングを取っていたが複数フレームでのマッチングを可能とした

なかの

Learning to Select and Order Vacation Photographs (Disney research)14

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示したあまりにもたくさん撮影した写真たちから自動的にフォトアルバムを作成する研究

複雑な視覚での区別を試みたのはこの論論文が初

５つの異異なるトピックから63の個人的な写真コレクションのデータセットを利利用し定量量的に評価する

写真間の差別かを定義する顔全体の絵何が写っているか写っていないかを評価する

Jointly aligning and segmenting multiple web photo streams for the inference of collective photo storylines [G Kim and E P Xing CVPR2013] Photo sequencing [T Basha Y Moses and S Avidan CVPR2012]

なかの

A Taxonomy and Evaluation of Dense Two-Frame Stereo Correspondence Algorithms15

どんなもの

どうやって有効性を示した

次に読むべき論論文は

ステレオマッチングに関する分類を行行う 新たなデータセットを作成する

というよりも他の手法が有効性を示すことができるようにデータセットを作成した 今ではmiddleburyのデータセットと言えばステレオ業界では超有名

High-resolution stereo datasets with subpixel-accurate ground truth

なかの

Discriminability Limits in Spatio-Temporal Stereo Block Matching1

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

spatio-temporal disparity estimationの根本的な前提の正当性を解析しマッチング処理理の際に動きが助けとなる程度度を決定する

時空間マッチングのエラーを分析し誤りの原因を確率率率で導出する（フレーム数動きの分散画像特徴ノイズの関数）

[34243334]は時空間マッチングの利利点を指摘していたが本論論文はマッチング精度度の向上のために動きを用いる手法の程度度や性質を研究する

6つのステレオビデオを用いて検証を行行った

Spacetime stereo Shape recovery for dynamic scenes [L Zhang B Curless and S Seitz CVPR2003] Spatiotemporal stereo and scene flow via stequel matching [M Sizintsev and R Wildes PAMI2012] Temporally consistent disparity and optical flow via efficient spatio-temporal filtering [A Hosni C Rhemann M Bleyer and M Gelautz PRCAIVT2012] Spacetime stereo A unifying framework for depth from triangulation [PAMI2005] Dynamic depth recovery from multiple synchronized video streams [H Tao H Sawhney and R Kumar CVPR2001] Spatiotemporal descriptor for wide-baseline stereo reconstruction of non-rigid and ambiguous scenes [ECCV2003]

なかの

Depth-Based Patch Scaling for Content-Aware Stereo Image Completion2

どんなもの

どうやって有効性を示した

ステレオでデプスを取り物体の三次元情報を使ってインペインティングを行行う

bookのデータセット背景が繰り返しパターンが多いものを使っている

なかの

Fast Semi-dense Surface Reconstruction from Stereoscopic Video in Laparoscopic Surgery3

どんなもの

手法の流流れ

次に読むべき論論文は

腹腔内手術の際にステレオビデオから高速に物体の三次元再構成を行行う研究

Evaluation of stereo matching costs on images with radiometric differences [Hirschmueller H Scharstein D PAMI2008]

スコープカメラから画像取得GPUで演算する 視差を算出しフィルタにかける距離離に変換 点群を再びフィルタにかけて三次元再構成

なかの

3D Reconstruction from Accidental Motion4

どんなもの

技術や手法のキモはどこ

議論論はある

数秒のビデオ（単眼）から三次元再構成を行行う 手ぶれなどの動きから再構成が可能で特定の動きや機材を必要としない

短い基線長でも再構成が可能（3mmの基線長）

基線長が短いため背景の精度度が低くなる リフォーカス画像作成には十分 練習では上手く動作したが検証がまだ必要

なかの

Panoramic Video from Unstructured Camera Arrays5

どんなもの

技術や手法のキモはどこ

議論論はある

複数のカメラを用いたパノラマ撮影を行行う その際に不不自然さがないような動画を作成する

不不自然さを感じる感覚特性を提示しそれにのっとって対策を講じている

一つのカメラの解像度度と品質を向上させるよりも複数台のカメラを組み合わせることがはるかに簡単で有益である専門家でなくてもGoProのカメラセットを組み合わせることは容易易

カメラの配置は厳密に決められていない完璧な時間同期やローリングシャッターの不不足のような実撮影での問題もクリアしている

先行行研究と比べてどこがすごい

どうやって有効性を示した左のシステムは14台のカメラを使用 右のシステムはGoProを5台使用

Disney 201558

なかの

Floating Scale Surface Reconstruction6

どんなもの

技術や手法のキモはどこ

流流動的にスケールを変えられる三次元再構成手法

サンプル規模に依存するパラメータがない rarrどのスケールのサンプルにも対応できる

siggraph2014

なかの

A Super Resolution Reconstruction Scheme for Mixed Spatio-Temporal Stereo Video7

どんなもの

技術や手法のキモはどこ

ビデオ超解像アルゴリズム

二台のカメラを使用 一台は低解像度度で高速一台は高解像度度で低速

HHI 3DV ftp siteのBookarrivalとbeergadenを使用どうやって有効性を示した

なかの

What Is a Good Day for Outdoor Photometric Stereo8

どんなもの

先行行研究と比べてどこがすごい

議論論はある

次に読むべき論論文は

屋外における照度度差があるステレオの研究 屋外でステレオを行行う際に有利利or不不利利な日照条件を明らかにする

点光源を用いた研究は行行われていたが屋外での研究はされていなかった

晴れより曇りの方が精度度が良良い雲があるから特徴量量を取りやすい雑音を白色ガウスモデルを想定 季節ごとのデータセットを利利用してみても良良い

Time-lapse photometric stereo and applications [F Shen K Sunkavalli N Bonneel S Rusinkiewicz H Pfisterand X Tong2014] Outdoor photometric stereo [L-F Yu S-K Yeung Y-W Tai D Terzopoulos and T FChan ICCP2013]

どうやって有効性を示した屋外の照明に関するHDR環境マップのデータベースを利利用

Disney 2015424

なかの

COLORBRUSH ANIMATED DIFFUSION FOR INTUITIVE COLORIZATION SIMULATING WATER PAINTING 9

どんなものアニメを水彩画で描いたように変換する 水彩画を描くには経験が必要であるがそれを作成するアルゴリズムを考案絵具が水によりどうにじむかシュミレーションしている

Disney 20141027 ICIP2014

次に読むべき論論文はGabor-space geodesic active contoursrdquo In Algebraic Frames for the Perception-Action Cycle [C Sagiv NA Sochen and YY Zeevi 2000] Practical temporal consistency for image-based graphics applications [M Lang O Wang T Aydin A Smolic and M Gross SIGGRAPH2012] Computer-Generated Watercolor [CJ Curtis SE Anderson JE Seims KW Fleischer and DH Salesin SIGGRAPH1997]

なかの

From Sound to Sight Using Audio Processing to enable Visible Light Communication 10

どんなもの光に情報を載せる技術プロジェクトページがあって光関係の研究が8個載っている

httpwwwdisneyresearchcomprojectvisible-light-communication

ビデオのURL httpwwwdisneyresearchcomwpcontentuploadsPub_InvisibleLightCommunication_Siggraph14_videomp4

• 201211106_KeisukeKawahara
• 201311421_KeitaKanai_02
• 201313095_AkiraIshii_02
• 201413109_YuukiKubo_02
• 201513110_SatoshiHashizume_02
• 鬼輪講マラソン③_1
• 鬼輪講マラソン③_2

なかの

Learning to Select and Order Vacation Photographs (Disney research)14

技術や手法のキモはどこか

どんなもの

先行行研究と比べてどこがすごい

次に読む論論文は

どうやって有効性を示したあまりにもたくさん撮影した写真たちから自動的にフォトアルバムを作成する研究

複雑な視覚での区別を試みたのはこの論論文が初

５つの異異なるトピックから63の個人的な写真コレクションのデータセットを利利用し定量量的に評価する

写真間の差別かを定義する顔全体の絵何が写っているか写っていないかを評価する

Jointly aligning and segmenting multiple web photo streams for the inference of collective photo storylines [G Kim and E P Xing CVPR2013] Photo sequencing [T Basha Y Moses and S Avidan CVPR2012]

なかの

A Taxonomy and Evaluation of Dense Two-Frame Stereo Correspondence Algorithms15

どんなもの

どうやって有効性を示した

次に読むべき論論文は

ステレオマッチングに関する分類を行行う 新たなデータセットを作成する

というよりも他の手法が有効性を示すことができるようにデータセットを作成した 今ではmiddleburyのデータセットと言えばステレオ業界では超有名

High-resolution stereo datasets with subpixel-accurate ground truth

なかの

Discriminability Limits in Spatio-Temporal Stereo Block Matching1

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

spatio-temporal disparity estimationの根本的な前提の正当性を解析しマッチング処理理の際に動きが助けとなる程度度を決定する

時空間マッチングのエラーを分析し誤りの原因を確率率率で導出する（フレーム数動きの分散画像特徴ノイズの関数）

[34243334]は時空間マッチングの利利点を指摘していたが本論論文はマッチング精度度の向上のために動きを用いる手法の程度度や性質を研究する

6つのステレオビデオを用いて検証を行行った

Spacetime stereo Shape recovery for dynamic scenes [L Zhang B Curless and S Seitz CVPR2003] Spatiotemporal stereo and scene flow via stequel matching [M Sizintsev and R Wildes PAMI2012] Temporally consistent disparity and optical flow via efficient spatio-temporal filtering [A Hosni C Rhemann M Bleyer and M Gelautz PRCAIVT2012] Spacetime stereo A unifying framework for depth from triangulation [PAMI2005] Dynamic depth recovery from multiple synchronized video streams [H Tao H Sawhney and R Kumar CVPR2001] Spatiotemporal descriptor for wide-baseline stereo reconstruction of non-rigid and ambiguous scenes [ECCV2003]

なかの

Depth-Based Patch Scaling for Content-Aware Stereo Image Completion2

どんなもの

どうやって有効性を示した

ステレオでデプスを取り物体の三次元情報を使ってインペインティングを行行う

bookのデータセット背景が繰り返しパターンが多いものを使っている

なかの

Fast Semi-dense Surface Reconstruction from Stereoscopic Video in Laparoscopic Surgery3

どんなもの

手法の流流れ

次に読むべき論論文は

腹腔内手術の際にステレオビデオから高速に物体の三次元再構成を行行う研究

Evaluation of stereo matching costs on images with radiometric differences [Hirschmueller H Scharstein D PAMI2008]

スコープカメラから画像取得GPUで演算する 視差を算出しフィルタにかける距離離に変換 点群を再びフィルタにかけて三次元再構成

なかの

3D Reconstruction from Accidental Motion4

どんなもの

技術や手法のキモはどこ

議論論はある

数秒のビデオ（単眼）から三次元再構成を行行う 手ぶれなどの動きから再構成が可能で特定の動きや機材を必要としない

短い基線長でも再構成が可能（3mmの基線長）

基線長が短いため背景の精度度が低くなる リフォーカス画像作成には十分 練習では上手く動作したが検証がまだ必要

なかの

Panoramic Video from Unstructured Camera Arrays5

どんなもの

技術や手法のキモはどこ

議論論はある

複数のカメラを用いたパノラマ撮影を行行う その際に不不自然さがないような動画を作成する

不不自然さを感じる感覚特性を提示しそれにのっとって対策を講じている

一つのカメラの解像度度と品質を向上させるよりも複数台のカメラを組み合わせることがはるかに簡単で有益である専門家でなくてもGoProのカメラセットを組み合わせることは容易易

カメラの配置は厳密に決められていない完璧な時間同期やローリングシャッターの不不足のような実撮影での問題もクリアしている

先行行研究と比べてどこがすごい

どうやって有効性を示した左のシステムは14台のカメラを使用 右のシステムはGoProを5台使用

Disney 201558

なかの

Floating Scale Surface Reconstruction6

どんなもの

技術や手法のキモはどこ

流流動的にスケールを変えられる三次元再構成手法

サンプル規模に依存するパラメータがない rarrどのスケールのサンプルにも対応できる

siggraph2014

なかの

A Super Resolution Reconstruction Scheme for Mixed Spatio-Temporal Stereo Video7

どんなもの

技術や手法のキモはどこ

ビデオ超解像アルゴリズム

二台のカメラを使用 一台は低解像度度で高速一台は高解像度度で低速

HHI 3DV ftp siteのBookarrivalとbeergadenを使用どうやって有効性を示した

なかの

What Is a Good Day for Outdoor Photometric Stereo8

どんなもの

先行行研究と比べてどこがすごい

議論論はある

次に読むべき論論文は

屋外における照度度差があるステレオの研究 屋外でステレオを行行う際に有利利or不不利利な日照条件を明らかにする

点光源を用いた研究は行行われていたが屋外での研究はされていなかった

晴れより曇りの方が精度度が良良い雲があるから特徴量量を取りやすい雑音を白色ガウスモデルを想定 季節ごとのデータセットを利利用してみても良良い

Time-lapse photometric stereo and applications [F Shen K Sunkavalli N Bonneel S Rusinkiewicz H Pfisterand X Tong2014] Outdoor photometric stereo [L-F Yu S-K Yeung Y-W Tai D Terzopoulos and T FChan ICCP2013]

どうやって有効性を示した屋外の照明に関するHDR環境マップのデータベースを利利用

Disney 2015424

なかの

COLORBRUSH ANIMATED DIFFUSION FOR INTUITIVE COLORIZATION SIMULATING WATER PAINTING 9

どんなものアニメを水彩画で描いたように変換する 水彩画を描くには経験が必要であるがそれを作成するアルゴリズムを考案絵具が水によりどうにじむかシュミレーションしている

Disney 20141027 ICIP2014

次に読むべき論論文はGabor-space geodesic active contoursrdquo In Algebraic Frames for the Perception-Action Cycle [C Sagiv NA Sochen and YY Zeevi 2000] Practical temporal consistency for image-based graphics applications [M Lang O Wang T Aydin A Smolic and M Gross SIGGRAPH2012] Computer-Generated Watercolor [CJ Curtis SE Anderson JE Seims KW Fleischer and DH Salesin SIGGRAPH1997]

なかの

From Sound to Sight Using Audio Processing to enable Visible Light Communication 10

どんなもの光に情報を載せる技術プロジェクトページがあって光関係の研究が8個載っている

httpwwwdisneyresearchcomprojectvisible-light-communication

ビデオのURL httpwwwdisneyresearchcomwpcontentuploadsPub_InvisibleLightCommunication_Siggraph14_videomp4

• 201211106_KeisukeKawahara
• 201311421_KeitaKanai_02
• 201313095_AkiraIshii_02
• 201413109_YuukiKubo_02
• 201513110_SatoshiHashizume_02
• 鬼輪講マラソン③_1
• 鬼輪講マラソン③_2

なかの

A Taxonomy and Evaluation of Dense Two-Frame Stereo Correspondence Algorithms15

どんなもの

どうやって有効性を示した

次に読むべき論論文は

ステレオマッチングに関する分類を行行う 新たなデータセットを作成する

というよりも他の手法が有効性を示すことができるようにデータセットを作成した 今ではmiddleburyのデータセットと言えばステレオ業界では超有名

High-resolution stereo datasets with subpixel-accurate ground truth

なかの

Discriminability Limits in Spatio-Temporal Stereo Block Matching1

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

spatio-temporal disparity estimationの根本的な前提の正当性を解析しマッチング処理理の際に動きが助けとなる程度度を決定する

時空間マッチングのエラーを分析し誤りの原因を確率率率で導出する（フレーム数動きの分散画像特徴ノイズの関数）

[34243334]は時空間マッチングの利利点を指摘していたが本論論文はマッチング精度度の向上のために動きを用いる手法の程度度や性質を研究する

6つのステレオビデオを用いて検証を行行った

Spacetime stereo Shape recovery for dynamic scenes [L Zhang B Curless and S Seitz CVPR2003] Spatiotemporal stereo and scene flow via stequel matching [M Sizintsev and R Wildes PAMI2012] Temporally consistent disparity and optical flow via efficient spatio-temporal filtering [A Hosni C Rhemann M Bleyer and M Gelautz PRCAIVT2012] Spacetime stereo A unifying framework for depth from triangulation [PAMI2005] Dynamic depth recovery from multiple synchronized video streams [H Tao H Sawhney and R Kumar CVPR2001] Spatiotemporal descriptor for wide-baseline stereo reconstruction of non-rigid and ambiguous scenes [ECCV2003]

なかの

Depth-Based Patch Scaling for Content-Aware Stereo Image Completion2

どんなもの

どうやって有効性を示した

ステレオでデプスを取り物体の三次元情報を使ってインペインティングを行行う

bookのデータセット背景が繰り返しパターンが多いものを使っている

なかの

Fast Semi-dense Surface Reconstruction from Stereoscopic Video in Laparoscopic Surgery3

どんなもの

手法の流流れ

次に読むべき論論文は

腹腔内手術の際にステレオビデオから高速に物体の三次元再構成を行行う研究

Evaluation of stereo matching costs on images with radiometric differences [Hirschmueller H Scharstein D PAMI2008]

スコープカメラから画像取得GPUで演算する 視差を算出しフィルタにかける距離離に変換 点群を再びフィルタにかけて三次元再構成

なかの

3D Reconstruction from Accidental Motion4

どんなもの

技術や手法のキモはどこ

議論論はある

数秒のビデオ（単眼）から三次元再構成を行行う 手ぶれなどの動きから再構成が可能で特定の動きや機材を必要としない

短い基線長でも再構成が可能（3mmの基線長）

基線長が短いため背景の精度度が低くなる リフォーカス画像作成には十分 練習では上手く動作したが検証がまだ必要

なかの

Panoramic Video from Unstructured Camera Arrays5

どんなもの

技術や手法のキモはどこ

議論論はある

複数のカメラを用いたパノラマ撮影を行行う その際に不不自然さがないような動画を作成する

不不自然さを感じる感覚特性を提示しそれにのっとって対策を講じている

一つのカメラの解像度度と品質を向上させるよりも複数台のカメラを組み合わせることがはるかに簡単で有益である専門家でなくてもGoProのカメラセットを組み合わせることは容易易

カメラの配置は厳密に決められていない完璧な時間同期やローリングシャッターの不不足のような実撮影での問題もクリアしている

先行行研究と比べてどこがすごい

どうやって有効性を示した左のシステムは14台のカメラを使用 右のシステムはGoProを5台使用

Disney 201558

なかの

Floating Scale Surface Reconstruction6

どんなもの

技術や手法のキモはどこ

流流動的にスケールを変えられる三次元再構成手法

サンプル規模に依存するパラメータがない rarrどのスケールのサンプルにも対応できる

siggraph2014

なかの

A Super Resolution Reconstruction Scheme for Mixed Spatio-Temporal Stereo Video7

どんなもの

技術や手法のキモはどこ

ビデオ超解像アルゴリズム

二台のカメラを使用 一台は低解像度度で高速一台は高解像度度で低速

HHI 3DV ftp siteのBookarrivalとbeergadenを使用どうやって有効性を示した

なかの

What Is a Good Day for Outdoor Photometric Stereo8

どんなもの

先行行研究と比べてどこがすごい

議論論はある

次に読むべき論論文は

屋外における照度度差があるステレオの研究 屋外でステレオを行行う際に有利利or不不利利な日照条件を明らかにする

点光源を用いた研究は行行われていたが屋外での研究はされていなかった

晴れより曇りの方が精度度が良良い雲があるから特徴量量を取りやすい雑音を白色ガウスモデルを想定 季節ごとのデータセットを利利用してみても良良い

Time-lapse photometric stereo and applications [F Shen K Sunkavalli N Bonneel S Rusinkiewicz H Pfisterand X Tong2014] Outdoor photometric stereo [L-F Yu S-K Yeung Y-W Tai D Terzopoulos and T FChan ICCP2013]

どうやって有効性を示した屋外の照明に関するHDR環境マップのデータベースを利利用

Disney 2015424

なかの

COLORBRUSH ANIMATED DIFFUSION FOR INTUITIVE COLORIZATION SIMULATING WATER PAINTING 9

どんなものアニメを水彩画で描いたように変換する 水彩画を描くには経験が必要であるがそれを作成するアルゴリズムを考案絵具が水によりどうにじむかシュミレーションしている

Disney 20141027 ICIP2014

次に読むべき論論文はGabor-space geodesic active contoursrdquo In Algebraic Frames for the Perception-Action Cycle [C Sagiv NA Sochen and YY Zeevi 2000] Practical temporal consistency for image-based graphics applications [M Lang O Wang T Aydin A Smolic and M Gross SIGGRAPH2012] Computer-Generated Watercolor [CJ Curtis SE Anderson JE Seims KW Fleischer and DH Salesin SIGGRAPH1997]

なかの

From Sound to Sight Using Audio Processing to enable Visible Light Communication 10

どんなもの光に情報を載せる技術プロジェクトページがあって光関係の研究が8個載っている

httpwwwdisneyresearchcomprojectvisible-light-communication

ビデオのURL httpwwwdisneyresearchcomwpcontentuploadsPub_InvisibleLightCommunication_Siggraph14_videomp4

• 201211106_KeisukeKawahara
• 201311421_KeitaKanai_02
• 201313095_AkiraIshii_02
• 201413109_YuukiKubo_02
• 201513110_SatoshiHashizume_02
• 鬼輪講マラソン③_1
• 鬼輪講マラソン③_2

なかの

Discriminability Limits in Spatio-Temporal Stereo Block Matching1

どんなもの

先行行研究と比べてどこがすごい

技術や手法のキモはどこ

どうやって有効性を示した

次に読むべき論論文は

spatio-temporal disparity estimationの根本的な前提の正当性を解析しマッチング処理理の際に動きが助けとなる程度度を決定する

時空間マッチングのエラーを分析し誤りの原因を確率率率で導出する（フレーム数動きの分散画像特徴ノイズの関数）

[34243334]は時空間マッチングの利利点を指摘していたが本論論文はマッチング精度度の向上のために動きを用いる手法の程度度や性質を研究する

6つのステレオビデオを用いて検証を行行った

Spacetime stereo Shape recovery for dynamic scenes [L Zhang B Curless and S Seitz CVPR2003] Spatiotemporal stereo and scene flow via stequel matching [M Sizintsev and R Wildes PAMI2012] Temporally consistent disparity and optical flow via efficient spatio-temporal filtering [A Hosni C Rhemann M Bleyer and M Gelautz PRCAIVT2012] Spacetime stereo A unifying framework for depth from triangulation [PAMI2005] Dynamic depth recovery from multiple synchronized video streams [H Tao H Sawhney and R Kumar CVPR2001] Spatiotemporal descriptor for wide-baseline stereo reconstruction of non-rigid and ambiguous scenes [ECCV2003]

なかの

Depth-Based Patch Scaling for Content-Aware Stereo Image Completion2

どんなもの

どうやって有効性を示した

ステレオでデプスを取り物体の三次元情報を使ってインペインティングを行行う

bookのデータセット背景が繰り返しパターンが多いものを使っている

なかの

Fast Semi-dense Surface Reconstruction from Stereoscopic Video in Laparoscopic Surgery3

どんなもの

手法の流流れ

次に読むべき論論文は

腹腔内手術の際にステレオビデオから高速に物体の三次元再構成を行行う研究

Evaluation of stereo matching costs on images with radiometric differences [Hirschmueller H Scharstein D PAMI2008]

スコープカメラから画像取得GPUで演算する 視差を算出しフィルタにかける距離離に変換 点群を再びフィルタにかけて三次元再構成

なかの

3D Reconstruction from Accidental Motion4

どんなもの

技術や手法のキモはどこ

議論論はある

数秒のビデオ（単眼）から三次元再構成を行行う 手ぶれなどの動きから再構成が可能で特定の動きや機材を必要としない

短い基線長でも再構成が可能（3mmの基線長）

基線長が短いため背景の精度度が低くなる リフォーカス画像作成には十分 練習では上手く動作したが検証がまだ必要

なかの

Panoramic Video from Unstructured Camera Arrays5

どんなもの

技術や手法のキモはどこ

議論論はある

複数のカメラを用いたパノラマ撮影を行行う その際に不不自然さがないような動画を作成する

不不自然さを感じる感覚特性を提示しそれにのっとって対策を講じている

一つのカメラの解像度度と品質を向上させるよりも複数台のカメラを組み合わせることがはるかに簡単で有益である専門家でなくてもGoProのカメラセットを組み合わせることは容易易

カメラの配置は厳密に決められていない完璧な時間同期やローリングシャッターの不不足のような実撮影での問題もクリアしている

先行行研究と比べてどこがすごい

どうやって有効性を示した左のシステムは14台のカメラを使用 右のシステムはGoProを5台使用

Disney 201558

なかの

Floating Scale Surface Reconstruction6

どんなもの

技術や手法のキモはどこ

流流動的にスケールを変えられる三次元再構成手法

サンプル規模に依存するパラメータがない rarrどのスケールのサンプルにも対応できる

siggraph2014

なかの

A Super Resolution Reconstruction Scheme for Mixed Spatio-Temporal Stereo Video7

どんなもの

技術や手法のキモはどこ

ビデオ超解像アルゴリズム

二台のカメラを使用 一台は低解像度度で高速一台は高解像度度で低速

HHI 3DV ftp siteのBookarrivalとbeergadenを使用どうやって有効性を示した

なかの

What Is a Good Day for Outdoor Photometric Stereo8

どんなもの

先行行研究と比べてどこがすごい

議論論はある

次に読むべき論論文は

屋外における照度度差があるステレオの研究 屋外でステレオを行行う際に有利利or不不利利な日照条件を明らかにする

点光源を用いた研究は行行われていたが屋外での研究はされていなかった

晴れより曇りの方が精度度が良良い雲があるから特徴量量を取りやすい雑音を白色ガウスモデルを想定 季節ごとのデータセットを利利用してみても良良い

Time-lapse photometric stereo and applications [F Shen K Sunkavalli N Bonneel S Rusinkiewicz H Pfisterand X Tong2014] Outdoor photometric stereo [L-F Yu S-K Yeung Y-W Tai D Terzopoulos and T FChan ICCP2013]

どうやって有効性を示した屋外の照明に関するHDR環境マップのデータベースを利利用

Disney 2015424

なかの

COLORBRUSH ANIMATED DIFFUSION FOR INTUITIVE COLORIZATION SIMULATING WATER PAINTING 9

どんなものアニメを水彩画で描いたように変換する 水彩画を描くには経験が必要であるがそれを作成するアルゴリズムを考案絵具が水によりどうにじむかシュミレーションしている

Disney 20141027 ICIP2014

次に読むべき論論文はGabor-space geodesic active contoursrdquo In Algebraic Frames for the Perception-Action Cycle [C Sagiv NA Sochen and YY Zeevi 2000] Practical temporal consistency for image-based graphics applications [M Lang O Wang T Aydin A Smolic and M Gross SIGGRAPH2012] Computer-Generated Watercolor [CJ Curtis SE Anderson JE Seims KW Fleischer and DH Salesin SIGGRAPH1997]

なかの

From Sound to Sight Using Audio Processing to enable Visible Light Communication 10

どんなもの光に情報を載せる技術プロジェクトページがあって光関係の研究が8個載っている

httpwwwdisneyresearchcomprojectvisible-light-communication

ビデオのURL httpwwwdisneyresearchcomwpcontentuploadsPub_InvisibleLightCommunication_Siggraph14_videomp4

• 201211106_KeisukeKawahara
• 201311421_KeitaKanai_02
• 201313095_AkiraIshii_02
• 201413109_YuukiKubo_02
• 201513110_SatoshiHashizume_02
• 鬼輪講マラソン③_1
• 鬼輪講マラソン③_2

なかの

Depth-Based Patch Scaling for Content-Aware Stereo Image Completion2

どんなもの

どうやって有効性を示した

ステレオでデプスを取り物体の三次元情報を使ってインペインティングを行行う

bookのデータセット背景が繰り返しパターンが多いものを使っている

なかの

Fast Semi-dense Surface Reconstruction from Stereoscopic Video in Laparoscopic Surgery3

どんなもの

手法の流流れ

次に読むべき論論文は

腹腔内手術の際にステレオビデオから高速に物体の三次元再構成を行行う研究

Evaluation of stereo matching costs on images with radiometric differences [Hirschmueller H Scharstein D PAMI2008]

スコープカメラから画像取得GPUで演算する 視差を算出しフィルタにかける距離離に変換 点群を再びフィルタにかけて三次元再構成

なかの

3D Reconstruction from Accidental Motion4

どんなもの

技術や手法のキモはどこ

議論論はある

数秒のビデオ（単眼）から三次元再構成を行行う 手ぶれなどの動きから再構成が可能で特定の動きや機材を必要としない

短い基線長でも再構成が可能（3mmの基線長）

基線長が短いため背景の精度度が低くなる リフォーカス画像作成には十分 練習では上手く動作したが検証がまだ必要

なかの

Panoramic Video from Unstructured Camera Arrays5

どんなもの

技術や手法のキモはどこ

議論論はある

複数のカメラを用いたパノラマ撮影を行行う その際に不不自然さがないような動画を作成する

不不自然さを感じる感覚特性を提示しそれにのっとって対策を講じている

一つのカメラの解像度度と品質を向上させるよりも複数台のカメラを組み合わせることがはるかに簡単で有益である専門家でなくてもGoProのカメラセットを組み合わせることは容易易

カメラの配置は厳密に決められていない完璧な時間同期やローリングシャッターの不不足のような実撮影での問題もクリアしている

先行行研究と比べてどこがすごい

どうやって有効性を示した左のシステムは14台のカメラを使用 右のシステムはGoProを5台使用

Disney 201558

なかの

Floating Scale Surface Reconstruction6

どんなもの

技術や手法のキモはどこ

流流動的にスケールを変えられる三次元再構成手法

サンプル規模に依存するパラメータがない rarrどのスケールのサンプルにも対応できる

siggraph2014

なかの

A Super Resolution Reconstruction Scheme for Mixed Spatio-Temporal Stereo Video7

どんなもの

技術や手法のキモはどこ

ビデオ超解像アルゴリズム

二台のカメラを使用 一台は低解像度度で高速一台は高解像度度で低速

HHI 3DV ftp siteのBookarrivalとbeergadenを使用どうやって有効性を示した

なかの

What Is a Good Day for Outdoor Photometric Stereo8

どんなもの

先行行研究と比べてどこがすごい

議論論はある

次に読むべき論論文は

屋外における照度度差があるステレオの研究 屋外でステレオを行行う際に有利利or不不利利な日照条件を明らかにする

点光源を用いた研究は行行われていたが屋外での研究はされていなかった

晴れより曇りの方が精度度が良良い雲があるから特徴量量を取りやすい雑音を白色ガウスモデルを想定 季節ごとのデータセットを利利用してみても良良い

Time-lapse photometric stereo and applications [F Shen K Sunkavalli N Bonneel S Rusinkiewicz H Pfisterand X Tong2014] Outdoor photometric stereo [L-F Yu S-K Yeung Y-W Tai D Terzopoulos and T FChan ICCP2013]

どうやって有効性を示した屋外の照明に関するHDR環境マップのデータベースを利利用

Disney 2015424

なかの

COLORBRUSH ANIMATED DIFFUSION FOR INTUITIVE COLORIZATION SIMULATING WATER PAINTING 9

どんなものアニメを水彩画で描いたように変換する 水彩画を描くには経験が必要であるがそれを作成するアルゴリズムを考案絵具が水によりどうにじむかシュミレーションしている

Disney 20141027 ICIP2014

次に読むべき論論文はGabor-space geodesic active contoursrdquo In Algebraic Frames for the Perception-Action Cycle [C Sagiv NA Sochen and YY Zeevi 2000] Practical temporal consistency for image-based graphics applications [M Lang O Wang T Aydin A Smolic and M Gross SIGGRAPH2012] Computer-Generated Watercolor [CJ Curtis SE Anderson JE Seims KW Fleischer and DH Salesin SIGGRAPH1997]

なかの

From Sound to Sight Using Audio Processing to enable Visible Light Communication 10

どんなもの光に情報を載せる技術プロジェクトページがあって光関係の研究が8個載っている

httpwwwdisneyresearchcomprojectvisible-light-communication

ビデオのURL httpwwwdisneyresearchcomwpcontentuploadsPub_InvisibleLightCommunication_Siggraph14_videomp4

• 201211106_KeisukeKawahara
• 201311421_KeitaKanai_02
• 201313095_AkiraIshii_02
• 201413109_YuukiKubo_02
• 201513110_SatoshiHashizume_02
• 鬼輪講マラソン③_1
• 鬼輪講マラソン③_2

なかの

Fast Semi-dense Surface Reconstruction from Stereoscopic Video in Laparoscopic Surgery3

どんなもの

手法の流流れ

次に読むべき論論文は

腹腔内手術の際にステレオビデオから高速に物体の三次元再構成を行行う研究

Evaluation of stereo matching costs on images with radiometric differences [Hirschmueller H Scharstein D PAMI2008]

スコープカメラから画像取得GPUで演算する 視差を算出しフィルタにかける距離離に変換 点群を再びフィルタにかけて三次元再構成

なかの

3D Reconstruction from Accidental Motion4

どんなもの

技術や手法のキモはどこ

議論論はある

数秒のビデオ（単眼）から三次元再構成を行行う 手ぶれなどの動きから再構成が可能で特定の動きや機材を必要としない

短い基線長でも再構成が可能（3mmの基線長）

基線長が短いため背景の精度度が低くなる リフォーカス画像作成には十分 練習では上手く動作したが検証がまだ必要

なかの

Panoramic Video from Unstructured Camera Arrays5

どんなもの

技術や手法のキモはどこ

議論論はある

複数のカメラを用いたパノラマ撮影を行行う その際に不不自然さがないような動画を作成する

不不自然さを感じる感覚特性を提示しそれにのっとって対策を講じている

一つのカメラの解像度度と品質を向上させるよりも複数台のカメラを組み合わせることがはるかに簡単で有益である専門家でなくてもGoProのカメラセットを組み合わせることは容易易

カメラの配置は厳密に決められていない完璧な時間同期やローリングシャッターの不不足のような実撮影での問題もクリアしている

先行行研究と比べてどこがすごい

どうやって有効性を示した左のシステムは14台のカメラを使用 右のシステムはGoProを5台使用

Disney 201558

なかの

Floating Scale Surface Reconstruction6

どんなもの

技術や手法のキモはどこ

流流動的にスケールを変えられる三次元再構成手法

サンプル規模に依存するパラメータがない rarrどのスケールのサンプルにも対応できる

siggraph2014

なかの

A Super Resolution Reconstruction Scheme for Mixed Spatio-Temporal Stereo Video7

どんなもの

技術や手法のキモはどこ

ビデオ超解像アルゴリズム

二台のカメラを使用 一台は低解像度度で高速一台は高解像度度で低速

HHI 3DV ftp siteのBookarrivalとbeergadenを使用どうやって有効性を示した

なかの

What Is a Good Day for Outdoor Photometric Stereo8

どんなもの

先行行研究と比べてどこがすごい

議論論はある

次に読むべき論論文は

屋外における照度度差があるステレオの研究 屋外でステレオを行行う際に有利利or不不利利な日照条件を明らかにする

点光源を用いた研究は行行われていたが屋外での研究はされていなかった

晴れより曇りの方が精度度が良良い雲があるから特徴量量を取りやすい雑音を白色ガウスモデルを想定 季節ごとのデータセットを利利用してみても良良い

Time-lapse photometric stereo and applications [F Shen K Sunkavalli N Bonneel S Rusinkiewicz H Pfisterand X Tong2014] Outdoor photometric stereo [L-F Yu S-K Yeung Y-W Tai D Terzopoulos and T FChan ICCP2013]

どうやって有効性を示した屋外の照明に関するHDR環境マップのデータベースを利利用

Disney 2015424

なかの

COLORBRUSH ANIMATED DIFFUSION FOR INTUITIVE COLORIZATION SIMULATING WATER PAINTING 9

どんなものアニメを水彩画で描いたように変換する 水彩画を描くには経験が必要であるがそれを作成するアルゴリズムを考案絵具が水によりどうにじむかシュミレーションしている

Disney 20141027 ICIP2014

次に読むべき論論文はGabor-space geodesic active contoursrdquo In Algebraic Frames for the Perception-Action Cycle [C Sagiv NA Sochen and YY Zeevi 2000] Practical temporal consistency for image-based graphics applications [M Lang O Wang T Aydin A Smolic and M Gross SIGGRAPH2012] Computer-Generated Watercolor [CJ Curtis SE Anderson JE Seims KW Fleischer and DH Salesin SIGGRAPH1997]

なかの

From Sound to Sight Using Audio Processing to enable Visible Light Communication 10

どんなもの光に情報を載せる技術プロジェクトページがあって光関係の研究が8個載っている

httpwwwdisneyresearchcomprojectvisible-light-communication

ビデオのURL httpwwwdisneyresearchcomwpcontentuploadsPub_InvisibleLightCommunication_Siggraph14_videomp4

• 201211106_KeisukeKawahara
• 201311421_KeitaKanai_02
• 201313095_AkiraIshii_02
• 201413109_YuukiKubo_02
• 201513110_SatoshiHashizume_02
• 鬼輪講マラソン③_1
• 鬼輪講マラソン③_2

なかの

3D Reconstruction from Accidental Motion4

どんなもの

技術や手法のキモはどこ

議論論はある

数秒のビデオ（単眼）から三次元再構成を行行う 手ぶれなどの動きから再構成が可能で特定の動きや機材を必要としない

短い基線長でも再構成が可能（3mmの基線長）

基線長が短いため背景の精度度が低くなる リフォーカス画像作成には十分 練習では上手く動作したが検証がまだ必要

なかの

Panoramic Video from Unstructured Camera Arrays5

どんなもの

技術や手法のキモはどこ

議論論はある

複数のカメラを用いたパノラマ撮影を行行う その際に不不自然さがないような動画を作成する

不不自然さを感じる感覚特性を提示しそれにのっとって対策を講じている

一つのカメラの解像度度と品質を向上させるよりも複数台のカメラを組み合わせることがはるかに簡単で有益である専門家でなくてもGoProのカメラセットを組み合わせることは容易易

カメラの配置は厳密に決められていない完璧な時間同期やローリングシャッターの不不足のような実撮影での問題もクリアしている

先行行研究と比べてどこがすごい

どうやって有効性を示した左のシステムは14台のカメラを使用 右のシステムはGoProを5台使用

Disney 201558

なかの

Floating Scale Surface Reconstruction6

どんなもの

技術や手法のキモはどこ

流流動的にスケールを変えられる三次元再構成手法

サンプル規模に依存するパラメータがない rarrどのスケールのサンプルにも対応できる

siggraph2014

なかの

A Super Resolution Reconstruction Scheme for Mixed Spatio-Temporal Stereo Video7

どんなもの

技術や手法のキモはどこ

ビデオ超解像アルゴリズム

二台のカメラを使用 一台は低解像度度で高速一台は高解像度度で低速

HHI 3DV ftp siteのBookarrivalとbeergadenを使用どうやって有効性を示した

なかの

What Is a Good Day for Outdoor Photometric Stereo8

どんなもの

先行行研究と比べてどこがすごい

議論論はある

次に読むべき論論文は

屋外における照度度差があるステレオの研究 屋外でステレオを行行う際に有利利or不不利利な日照条件を明らかにする

点光源を用いた研究は行行われていたが屋外での研究はされていなかった

晴れより曇りの方が精度度が良良い雲があるから特徴量量を取りやすい雑音を白色ガウスモデルを想定 季節ごとのデータセットを利利用してみても良良い

Time-lapse photometric stereo and applications [F Shen K Sunkavalli N Bonneel S Rusinkiewicz H Pfisterand X Tong2014] Outdoor photometric stereo [L-F Yu S-K Yeung Y-W Tai D Terzopoulos and T FChan ICCP2013]

どうやって有効性を示した屋外の照明に関するHDR環境マップのデータベースを利利用

Disney 2015424

なかの

COLORBRUSH ANIMATED DIFFUSION FOR INTUITIVE COLORIZATION SIMULATING WATER PAINTING 9

どんなものアニメを水彩画で描いたように変換する 水彩画を描くには経験が必要であるがそれを作成するアルゴリズムを考案絵具が水によりどうにじむかシュミレーションしている

Disney 20141027 ICIP2014

次に読むべき論論文はGabor-space geodesic active contoursrdquo In Algebraic Frames for the Perception-Action Cycle [C Sagiv NA Sochen and YY Zeevi 2000] Practical temporal consistency for image-based graphics applications [M Lang O Wang T Aydin A Smolic and M Gross SIGGRAPH2012] Computer-Generated Watercolor [CJ Curtis SE Anderson JE Seims KW Fleischer and DH Salesin SIGGRAPH1997]

なかの

From Sound to Sight Using Audio Processing to enable Visible Light Communication 10

どんなもの光に情報を載せる技術プロジェクトページがあって光関係の研究が8個載っている

httpwwwdisneyresearchcomprojectvisible-light-communication

ビデオのURL httpwwwdisneyresearchcomwpcontentuploadsPub_InvisibleLightCommunication_Siggraph14_videomp4

• 201211106_KeisukeKawahara
• 201311421_KeitaKanai_02
• 201313095_AkiraIshii_02
• 201413109_YuukiKubo_02
• 201513110_SatoshiHashizume_02
• 鬼輪講マラソン③_1
• 鬼輪講マラソン③_2

なかの

Panoramic Video from Unstructured Camera Arrays5

どんなもの

技術や手法のキモはどこ

議論論はある

複数のカメラを用いたパノラマ撮影を行行う その際に不不自然さがないような動画を作成する

不不自然さを感じる感覚特性を提示しそれにのっとって対策を講じている

一つのカメラの解像度度と品質を向上させるよりも複数台のカメラを組み合わせることがはるかに簡単で有益である専門家でなくてもGoProのカメラセットを組み合わせることは容易易

カメラの配置は厳密に決められていない完璧な時間同期やローリングシャッターの不不足のような実撮影での問題もクリアしている

先行行研究と比べてどこがすごい

どうやって有効性を示した左のシステムは14台のカメラを使用 右のシステムはGoProを5台使用

Disney 201558

なかの

Floating Scale Surface Reconstruction6

どんなもの

技術や手法のキモはどこ

流流動的にスケールを変えられる三次元再構成手法

サンプル規模に依存するパラメータがない rarrどのスケールのサンプルにも対応できる

siggraph2014

なかの

A Super Resolution Reconstruction Scheme for Mixed Spatio-Temporal Stereo Video7

どんなもの

技術や手法のキモはどこ

ビデオ超解像アルゴリズム

二台のカメラを使用 一台は低解像度度で高速一台は高解像度度で低速

HHI 3DV ftp siteのBookarrivalとbeergadenを使用どうやって有効性を示した

なかの

What Is a Good Day for Outdoor Photometric Stereo8

どんなもの

先行行研究と比べてどこがすごい

議論論はある

次に読むべき論論文は

屋外における照度度差があるステレオの研究 屋外でステレオを行行う際に有利利or不不利利な日照条件を明らかにする

点光源を用いた研究は行行われていたが屋外での研究はされていなかった

晴れより曇りの方が精度度が良良い雲があるから特徴量量を取りやすい雑音を白色ガウスモデルを想定 季節ごとのデータセットを利利用してみても良良い

Time-lapse photometric stereo and applications [F Shen K Sunkavalli N Bonneel S Rusinkiewicz H Pfisterand X Tong2014] Outdoor photometric stereo [L-F Yu S-K Yeung Y-W Tai D Terzopoulos and T FChan ICCP2013]

どうやって有効性を示した屋外の照明に関するHDR環境マップのデータベースを利利用

Disney 2015424

なかの

COLORBRUSH ANIMATED DIFFUSION FOR INTUITIVE COLORIZATION SIMULATING WATER PAINTING 9

どんなものアニメを水彩画で描いたように変換する 水彩画を描くには経験が必要であるがそれを作成するアルゴリズムを考案絵具が水によりどうにじむかシュミレーションしている

Disney 20141027 ICIP2014

次に読むべき論論文はGabor-space geodesic active contoursrdquo In Algebraic Frames for the Perception-Action Cycle [C Sagiv NA Sochen and YY Zeevi 2000] Practical temporal consistency for image-based graphics applications [M Lang O Wang T Aydin A Smolic and M Gross SIGGRAPH2012] Computer-Generated Watercolor [CJ Curtis SE Anderson JE Seims KW Fleischer and DH Salesin SIGGRAPH1997]

なかの

From Sound to Sight Using Audio Processing to enable Visible Light Communication 10

どんなもの光に情報を載せる技術プロジェクトページがあって光関係の研究が8個載っている

httpwwwdisneyresearchcomprojectvisible-light-communication

ビデオのURL httpwwwdisneyresearchcomwpcontentuploadsPub_InvisibleLightCommunication_Siggraph14_videomp4

• 201211106_KeisukeKawahara
• 201311421_KeitaKanai_02
• 201313095_AkiraIshii_02
• 201413109_YuukiKubo_02
• 201513110_SatoshiHashizume_02
• 鬼輪講マラソン③_1
• 鬼輪講マラソン③_2

なかの

Floating Scale Surface Reconstruction6

どんなもの

技術や手法のキモはどこ

流流動的にスケールを変えられる三次元再構成手法

サンプル規模に依存するパラメータがない rarrどのスケールのサンプルにも対応できる

siggraph2014

なかの

A Super Resolution Reconstruction Scheme for Mixed Spatio-Temporal Stereo Video7

どんなもの

技術や手法のキモはどこ

ビデオ超解像アルゴリズム

二台のカメラを使用 一台は低解像度度で高速一台は高解像度度で低速

HHI 3DV ftp siteのBookarrivalとbeergadenを使用どうやって有効性を示した

なかの

What Is a Good Day for Outdoor Photometric Stereo8

どんなもの

先行行研究と比べてどこがすごい

議論論はある

次に読むべき論論文は

屋外における照度度差があるステレオの研究 屋外でステレオを行行う際に有利利or不不利利な日照条件を明らかにする

点光源を用いた研究は行行われていたが屋外での研究はされていなかった

晴れより曇りの方が精度度が良良い雲があるから特徴量量を取りやすい雑音を白色ガウスモデルを想定 季節ごとのデータセットを利利用してみても良良い

Time-lapse photometric stereo and applications [F Shen K Sunkavalli N Bonneel S Rusinkiewicz H Pfisterand X Tong2014] Outdoor photometric stereo [L-F Yu S-K Yeung Y-W Tai D Terzopoulos and T FChan ICCP2013]

どうやって有効性を示した屋外の照明に関するHDR環境マップのデータベースを利利用

Disney 2015424

なかの

COLORBRUSH ANIMATED DIFFUSION FOR INTUITIVE COLORIZATION SIMULATING WATER PAINTING 9

どんなものアニメを水彩画で描いたように変換する 水彩画を描くには経験が必要であるがそれを作成するアルゴリズムを考案絵具が水によりどうにじむかシュミレーションしている

Disney 20141027 ICIP2014

次に読むべき論論文はGabor-space geodesic active contoursrdquo In Algebraic Frames for the Perception-Action Cycle [C Sagiv NA Sochen and YY Zeevi 2000] Practical temporal consistency for image-based graphics applications [M Lang O Wang T Aydin A Smolic and M Gross SIGGRAPH2012] Computer-Generated Watercolor [CJ Curtis SE Anderson JE Seims KW Fleischer and DH Salesin SIGGRAPH1997]

なかの

From Sound to Sight Using Audio Processing to enable Visible Light Communication 10

どんなもの光に情報を載せる技術プロジェクトページがあって光関係の研究が8個載っている

httpwwwdisneyresearchcomprojectvisible-light-communication

ビデオのURL httpwwwdisneyresearchcomwpcontentuploadsPub_InvisibleLightCommunication_Siggraph14_videomp4

• 201211106_KeisukeKawahara
• 201311421_KeitaKanai_02
• 201313095_AkiraIshii_02
• 201413109_YuukiKubo_02
• 201513110_SatoshiHashizume_02
• 鬼輪講マラソン③_1
• 鬼輪講マラソン③_2

なかの

A Super Resolution Reconstruction Scheme for Mixed Spatio-Temporal Stereo Video7

どんなもの

技術や手法のキモはどこ

ビデオ超解像アルゴリズム

二台のカメラを使用 一台は低解像度度で高速一台は高解像度度で低速

HHI 3DV ftp siteのBookarrivalとbeergadenを使用どうやって有効性を示した

なかの

What Is a Good Day for Outdoor Photometric Stereo8

どんなもの

先行行研究と比べてどこがすごい

議論論はある

次に読むべき論論文は

屋外における照度度差があるステレオの研究 屋外でステレオを行行う際に有利利or不不利利な日照条件を明らかにする

点光源を用いた研究は行行われていたが屋外での研究はされていなかった

晴れより曇りの方が精度度が良良い雲があるから特徴量量を取りやすい雑音を白色ガウスモデルを想定 季節ごとのデータセットを利利用してみても良良い

Time-lapse photometric stereo and applications [F Shen K Sunkavalli N Bonneel S Rusinkiewicz H Pfisterand X Tong2014] Outdoor photometric stereo [L-F Yu S-K Yeung Y-W Tai D Terzopoulos and T FChan ICCP2013]

どうやって有効性を示した屋外の照明に関するHDR環境マップのデータベースを利利用

Disney 2015424

なかの

COLORBRUSH ANIMATED DIFFUSION FOR INTUITIVE COLORIZATION SIMULATING WATER PAINTING 9

どんなものアニメを水彩画で描いたように変換する 水彩画を描くには経験が必要であるがそれを作成するアルゴリズムを考案絵具が水によりどうにじむかシュミレーションしている

Disney 20141027 ICIP2014

次に読むべき論論文はGabor-space geodesic active contoursrdquo In Algebraic Frames for the Perception-Action Cycle [C Sagiv NA Sochen and YY Zeevi 2000] Practical temporal consistency for image-based graphics applications [M Lang O Wang T Aydin A Smolic and M Gross SIGGRAPH2012] Computer-Generated Watercolor [CJ Curtis SE Anderson JE Seims KW Fleischer and DH Salesin SIGGRAPH1997]

なかの

From Sound to Sight Using Audio Processing to enable Visible Light Communication 10

どんなもの光に情報を載せる技術プロジェクトページがあって光関係の研究が8個載っている

httpwwwdisneyresearchcomprojectvisible-light-communication

ビデオのURL httpwwwdisneyresearchcomwpcontentuploadsPub_InvisibleLightCommunication_Siggraph14_videomp4

• 201211106_KeisukeKawahara
• 201311421_KeitaKanai_02
• 201313095_AkiraIshii_02
• 201413109_YuukiKubo_02
• 201513110_SatoshiHashizume_02
• 鬼輪講マラソン③_1
• 鬼輪講マラソン③_2

なかの

What Is a Good Day for Outdoor Photometric Stereo8

どんなもの

先行行研究と比べてどこがすごい

議論論はある

次に読むべき論論文は

屋外における照度度差があるステレオの研究 屋外でステレオを行行う際に有利利or不不利利な日照条件を明らかにする

点光源を用いた研究は行行われていたが屋外での研究はされていなかった

晴れより曇りの方が精度度が良良い雲があるから特徴量量を取りやすい雑音を白色ガウスモデルを想定 季節ごとのデータセットを利利用してみても良良い

Time-lapse photometric stereo and applications [F Shen K Sunkavalli N Bonneel S Rusinkiewicz H Pfisterand X Tong2014] Outdoor photometric stereo [L-F Yu S-K Yeung Y-W Tai D Terzopoulos and T FChan ICCP2013]

どうやって有効性を示した屋外の照明に関するHDR環境マップのデータベースを利利用

Disney 2015424

なかの

COLORBRUSH ANIMATED DIFFUSION FOR INTUITIVE COLORIZATION SIMULATING WATER PAINTING 9

どんなものアニメを水彩画で描いたように変換する 水彩画を描くには経験が必要であるがそれを作成するアルゴリズムを考案絵具が水によりどうにじむかシュミレーションしている

Disney 20141027 ICIP2014

次に読むべき論論文はGabor-space geodesic active contoursrdquo In Algebraic Frames for the Perception-Action Cycle [C Sagiv NA Sochen and YY Zeevi 2000] Practical temporal consistency for image-based graphics applications [M Lang O Wang T Aydin A Smolic and M Gross SIGGRAPH2012] Computer-Generated Watercolor [CJ Curtis SE Anderson JE Seims KW Fleischer and DH Salesin SIGGRAPH1997]

なかの

From Sound to Sight Using Audio Processing to enable Visible Light Communication 10

どんなもの光に情報を載せる技術プロジェクトページがあって光関係の研究が8個載っている

httpwwwdisneyresearchcomprojectvisible-light-communication

ビデオのURL httpwwwdisneyresearchcomwpcontentuploadsPub_InvisibleLightCommunication_Siggraph14_videomp4

• 201211106_KeisukeKawahara
• 201311421_KeitaKanai_02
• 201313095_AkiraIshii_02
• 201413109_YuukiKubo_02
• 201513110_SatoshiHashizume_02
• 鬼輪講マラソン③_1
• 鬼輪講マラソン③_2

なかの

COLORBRUSH ANIMATED DIFFUSION FOR INTUITIVE COLORIZATION SIMULATING WATER PAINTING 9

どんなものアニメを水彩画で描いたように変換する 水彩画を描くには経験が必要であるがそれを作成するアルゴリズムを考案絵具が水によりどうにじむかシュミレーションしている

Disney 20141027 ICIP2014

次に読むべき論論文はGabor-space geodesic active contoursrdquo In Algebraic Frames for the Perception-Action Cycle [C Sagiv NA Sochen and YY Zeevi 2000] Practical temporal consistency for image-based graphics applications [M Lang O Wang T Aydin A Smolic and M Gross SIGGRAPH2012] Computer-Generated Watercolor [CJ Curtis SE Anderson JE Seims KW Fleischer and DH Salesin SIGGRAPH1997]

なかの

From Sound to Sight Using Audio Processing to enable Visible Light Communication 10

どんなもの光に情報を載せる技術プロジェクトページがあって光関係の研究が8個載っている

httpwwwdisneyresearchcomprojectvisible-light-communication

ビデオのURL httpwwwdisneyresearchcomwpcontentuploadsPub_InvisibleLightCommunication_Siggraph14_videomp4

• 201211106_KeisukeKawahara
• 201311421_KeitaKanai_02
• 201313095_AkiraIshii_02
• 201413109_YuukiKubo_02
• 201513110_SatoshiHashizume_02
• 鬼輪講マラソン③_1
• 鬼輪講マラソン③_2

なかの

From Sound to Sight Using Audio Processing to enable Visible Light Communication 10

どんなもの光に情報を載せる技術プロジェクトページがあって光関係の研究が8個載っている

httpwwwdisneyresearchcomprojectvisible-light-communication

ビデオのURL httpwwwdisneyresearchcomwpcontentuploadsPub_InvisibleLightCommunication_Siggraph14_videomp4

• 201211106_KeisukeKawahara
• 201311421_KeitaKanai_02
• 201313095_AkiraIshii_02
• 201413109_YuukiKubo_02
• 201513110_SatoshiHashizume_02
• 鬼輪講マラソン③_1
• 鬼輪講マラソン③_2