MugLife app是一款可以将静态照片变成3D动画的手机应用
MugLife app是一款可以將靜態(tài)照片變成3D動畫的手機應用,如下效果圖所示:
大家可以看到,這個靜態(tài)圖具有了類3D的動畫特效,是不是很好玩?
這種算法是如何實現(xiàn)的呢?
這里給出一篇論文“Bringing Portraits to Life”Siggraph Asia 2017
這篇論文就是通過二維圖像算法來實現(xiàn)靜態(tài)圖的3D動畫效果的。
下面我們來講解一下具體的算法實現(xiàn)過程:
首先根據(jù)一段視頻,將目標靜態(tài)圖動畫處理
整體流程:
將視頻幀定義為S(i),目標靜態(tài)圖為T;
根據(jù)S(i)生成T(i);
1,單張圖處理:
①人臉識別+點位對齊
紅色點為人臉特征點68個;
黃色點為估算點位;
?、跇嫿ㄈ蔷W(wǎng)格變形
?、鄹鶕?jù)S(i)的點位變化,預測T(i)點位變化,對T(i)進行三角變形
效果圖:
2,細節(jié)修復
?、僮彀吞畛?br />
泊松融合PUT /megacorp/employee/1
{
"first_name" : "John",
"last_name" : "Smith",
"age" : 25,
"about" : "I love to go rock climbing",
"interests": [ "sports", "music" ]
}
PUT /megacorp/employee/2
{
"first_name" : www.dfgj157.com "Jane",
"last_name" : "Smith",
"age" : 32,
"about" : "I like to www.dfgjyl.cn/ collect rock albums",
"interests": [ www.caibaoyule.cn "music" ]
}
PUT /megacorp/employee/3
{
"first_name" : "Douglas",
"last_name" : "Fir",
"age" : 35,
"about": "I like to build cabinets",
"interests": [ "forestry" ]
GET /megacorp/employee/1
GET /megacorp/employee/_search ---搜索全部
鏈接方式
GET /megacorp/employee/_search?q=last_name:Smith
使用DSL語句查詢
GET /megacorp/employee/_search
{
"query": {
"match": {
"last_name": "Smith"
}
}
}
更復雜的搜索
GET /megacorp/employee/_search
{
"query": {
"bool": {
"filter": {
"range": {
"age": {
"gte": 10,
"lte": 30
全文搜索
GET /megacorp/employee/www.tygj178.com_search
{
"query" : {
"match" : {
"about" : "rock climbing"
}
}
}
?、谀槻堪櫦y陰影遷移
上述流程串起來,就是整個算法過程,用戶輸入一張照片,導入動畫模版即可實現(xiàn)照片動畫效果了,Muglife因該就是根據(jù)這篇論文來做的,不過可能在此基礎上添加了其他的算法優(yōu)化等等。
本人的效果如下:
原圖:
效果圖GIF(來自視頻截圖,質量受到的影響可以忽略):
上述效果僅僅是一個人臉左右旋轉,其他效果可以替換不同的視頻幀序列模型即可。算法原理就講解到這里了,代碼就不貼了。
總結
以上是生活随笔為你收集整理的MugLife app是一款可以将静态照片变成3D动画的手机应用的全部內(nèi)容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: hadoop KerberosUtil
- 下一篇: Java多线程——FutureTask源