-
Notifications
You must be signed in to change notification settings - Fork 0
Commit
This commit does not belong to any branch on this repository, and may belong to a fork outside of the repository.
- Loading branch information
1 parent
6f56193
commit b48a613
Showing
1 changed file
with
37 additions
and
0 deletions.
There are no files selected for viewing
This file contains bidirectional Unicode text that may be interpreted or compiled differently than what appears below. To review, open the file in an editor that reveals hidden Unicode characters.
Learn more about bidirectional Unicode characters
Original file line number | Diff line number | Diff line change |
---|---|---|
@@ -0,0 +1,37 @@ | ||
# [FlowNet](https://arxiv.org/abs/1504.06852) | ||
|
||
|
||
#### Category | ||
VIDEO PREDICTION | ||
VIDEO INTERPOLATION | ||
Optical Flow Prediction | ||
|
||
#### Context | ||
* Optical Flow予測に必要なもの | ||
ピクセル単位で位置をきちんと把握すること | ||
2枚の画像inputの間の対応関係を把握すること | ||
* 画像の特徴表現だけではなく、学習した特徴を二つの画像において異なる場所にあるのに、それぞれを把握しなければならない。 | ||
|
||
* 従来のCNNとの違い | ||
CNNはinput-output relationはしっかりラベルされてたらいける | ||
Image pairsからその二枚の関係性を学ぶみたいなのはできるのか? | ||
と言うチャレンジ | ||
|
||
#### Contributions | ||
Optical flowをCNNで予測した最初の論文 | ||
2つのアーキテクチャを提案 end to end | ||
・inputは二枚を一つにして、CNNでずっと | ||
・inputは二枚を別で学習して、途中で合体(correlation layer?) | ||
|
||
an archtecture with a correlation layer that explicity provides matching capabilities | ||
狙い | ||
multiple levels of scale and abstractionな強力な特徴を手に入れる | ||
その特徴量を用いて対応関係を見つけることができる | ||
|
||
データ少なすぎたので椅子が飛ぶやつ作って学習させたやで | ||
|
||
|
||
|
||
#### コメント | ||
コード見てみたい | ||
|