在matlab中提取脣部區域和參數，以便用於脣部同步

Question

大家好我在做我的Matlab項目。爲此，我將使用脣部提取算法，該算法將從給定的面部圖像中提取脣部區域。爲此，我使用了基於顏色的分割，通過它我可以獲得脣部區域。這給了我脣區。但是我沒有得到嘴脣參數。因此，我將不得不使用標準脣來進行脣部同步。無論草圖可能具有的嘴脣類型如何，我們都必須使用相同的嘴脣。這種技術不會給我一個適當和準確的結果。
我想問的是，「是否有任何算法或方法可以使用相同的草圖脣部，並根據聲音音素對每個和每個視位（最小視覺元素）適當地修改相同的脣部」
感謝你們都提前

Answer 1

我寫了關於這個問題的碩士論文。我用活動形狀模型來確定嘴脣的確切'形狀'或位置，以減少參數。

http://www.vision.ee.ethz.ch/teaching/sada/sadalink/reports/biwi_00349.pdf

它的工作原理相當不錯，但儘管如此，魯棒性是一個巨大的問題。我不會依靠顏色分割來提取脣部輪廓。它似乎只適用於具有高分辨率和理想光照條件的數據集。此外，有些人的嘴脣非常薄或皮膚色調。

無論如何，看看報告中的參考文獻，他們應該是有幫助的。