如何在opencv/face變形中重新定位臉部點

Question

我必須模擬臉部圖像上的臉部表情（比如張開嘴巴）。爲此，我首先提取了面部特徵點並找到了嘴脣的角落。現在我需要通過將點向下移動來使圖像變形。

在上述圖像I需要移動點（2）和（3）左和右分別一段距離。點（18）和（19）點點滴滴。所以我會得到一個像張開嘴巴這樣的表情。

我的問題：

1）這是進行模擬面部表情上述方式對不對？

2）如果是正確的如何移動點並在opencv中創建一個新的圖像？

Answer 1

所以，在這裏，我們再次去..

我已經看到了很多的使用delauny三角從這些點的人，然後質地翹曲或變形在OpenGL甚至OpenCV的。

https://github.com/MasteringOpenCV/code/tree/master/Chapter7_HeadPoseEstimation

看起來頗爲相關，在「MasteringOpencv」一書的部分是對google.books

Answer 2

一個相當新的人在這方面使用的技術調查，當然是在這裏： http://old.siggraph.org/publications/2006cn/course30.pdf

TL：DR。從絕對意義上說，沒有「正確」的方式來做到這一點。您需要以可計算的方式定義您的目標。然後找出除了圖像數據本身之外還需要哪些其他（之前）的信息。在決定你需要做什麼之前，擺弄「紋理變形」或其他插值方案是浪費時間。

你提到「一個表情就像張開的嘴巴」，我的解釋是，如果拍攝對象的嘴巴張開，你就想要製作一張類似於真人臉的圖像。您發現的標記顯然沒有提供足夠的信息 - 特別是，它們沒有表達任何「嘴巴」的概念。事實上，這個概念在圖像中找不到。所以，嚴格來說，除非你投入更多的信息，否則你的任務是無法解決的。

我建議你看一下上面指出的論文，然後重新思考你的問題。