OpenPoseのPAFモデル
ランニング30分 英語30分 Ian Goodfellowのインタビュー
(1) OpenPose論文の身体構造解析の理解
身体の点をCNNで摘出した後に、点間を結合するモデルPAF(Partial Affinity Field)の理解をする。手足が2点で構成される場合の点間結合は整数計画法(ハンガリアン法)を使って(分離)解いている。
問題は2点以上の場合(例えば腕は3点で構成)は整数計画法で解けないので、以下の緩和解で解いている。
・点間結合は最短になる様に結合しているとする。(c)
・N点間は複数の2点間で分離する(d)
・2点間の整数計画法で解く (e)
この様な方法で以下の複雑な姿勢を解くことができる。