Skip to content

Commit

Permalink
Create FlowNet.md
Browse files Browse the repository at this point in the history
  • Loading branch information
sanshin5050 authored Jul 15, 2018
1 parent 6f56193 commit b48a613
Showing 1 changed file with 37 additions and 0 deletions.
37 changes: 37 additions & 0 deletions FlowNet.md
Original file line number Diff line number Diff line change
@@ -0,0 +1,37 @@
# [FlowNet](https://arxiv.org/abs/1504.06852)


#### Category
VIDEO PREDICTION
VIDEO INTERPOLATION
Optical Flow Prediction

#### Context
* Optical Flow予測に必要なもの  
ピクセル単位で位置をきちんと把握すること
2枚の画像inputの間の対応関係を把握すること
* 画像の特徴表現だけではなく、学習した特徴を二つの画像において異なる場所にあるのに、それぞれを把握しなければならない。

* 従来のCNNとの違い
CNNはinput-output relationはしっかりラベルされてたらいける
Image pairsからその二枚の関係性を学ぶみたいなのはできるのか?
と言うチャレンジ

#### Contributions
Optical flowをCNNで予測した最初の論文
2つのアーキテクチャを提案 end to end
・inputは二枚を一つにして、CNNでずっと
・inputは二枚を別で学習して、途中で合体(correlation layer?)

an archtecture with a correlation layer that explicity provides matching capabilities
狙い
multiple levels of scale and abstractionな強力な特徴を手に入れる
その特徴量を用いて対応関係を見つけることができる

データ少なすぎたので椅子が飛ぶやつ作って学習させたやで



#### コメント
コード見てみたい

0 comments on commit b48a613

Please sign in to comment.