快捷導(dǎo)航

Unity 百度AI實(shí)現(xiàn)人像動(dòng)漫化效果

更新時(shí)間：2022年01月08日 09:53:55 作者：CoderZ1010

這篇文章主要介紹了Unity如何接入百度AI接口，運(yùn)用對(duì)抗生成網(wǎng)絡(luò)技術(shù)，為用戶量身定制千人千面的二次元?jiǎng)勇蜗?，并支持通過參數(shù)設(shè)置，生成二次元?jiǎng)勇讼?。感興趣的可以學(xué)習(xí)一下

接口介紹：

運(yùn)用對(duì)抗生成網(wǎng)絡(luò)技術(shù)，結(jié)合人臉檢測(cè)、頭發(fā)分割、人像分割等技術(shù)，為用戶量身定制千人千面的二次元?jiǎng)勇蜗螅⒅С滞ㄟ^參數(shù)設(shè)置，生成二次元?jiǎng)勇讼瘛?/p>

創(chuàng)建應(yīng)用：

在產(chǎn)品服務(wù)中搜索圖像增強(qiáng)與特效，創(chuàng)建應(yīng)用，獲取AppID、APIKey、SecretKey信息：

查閱官方文檔，以下是人像動(dòng)漫畫接口返回?cái)?shù)據(jù)參數(shù)詳情：

定義數(shù)據(jù)結(jié)構(gòu)：

using System;
 
/// <summary>
/// 人像動(dòng)漫化接口響應(yīng)數(shù)據(jù)結(jié)構(gòu)
/// </summary>
[Serializable]
public class AnimeResponse
{
    /// <summary>
    /// 唯一的log id，用于問題定位
    /// </summary>
    public int log_id;
    /// <summary>
    /// 處理后圖片的Base64編碼
    /// </summary>
    public string image;
}

下載C# SDK：

下載完成后將AipSdk.dll動(dòng)態(tài)庫(kù)導(dǎo)入到Unity中：

以下是調(diào)用接口時(shí)傳入的參數(shù)詳情：

封裝調(diào)用函數(shù)：

using System;
using System.Collections.Generic;
using UnityEngine;
 
/// <summary>
/// 人像動(dòng)漫化
/// </summary>
public class Anime
{
    //以下信息于百度開發(fā)者中心控制臺(tái)創(chuàng)建應(yīng)用獲取
    private const string appID = "";
    private const string apiKey = "";
    private const string secretKey = "";
 
        /// <summary>
    /// 發(fā)起人像動(dòng)漫畫請(qǐng)求
    /// </summary>
    /// <param name="bytes">圖片字節(jié)數(shù)據(jù)</param>
    /// <param name="withMask">是否帶口罩</param>
    /// <param name="maskID">口罩ID 取值范圍1-8</param>
    /// <returns>返回的動(dòng)漫畫圖片字節(jié)數(shù)據(jù)</returns>
    public static byte[] SendRequest(byte[] bytes, bool withMask = false, int maskID = 1)
    {
        var client = new Baidu.Aip.ImageProcess.ImageProcess(apiKey, secretKey);
        try
        {
            var options = new Dictionary<string, object>
            {
                { "type", withMask ? "anime_mask" : "anime" },
                { "mask_id", Mathf.Clamp(maskID, 1, 8) }
            };
            var response = client.SelfieAnime(bytes, options);
            AnimeResponse animeResponse = JsonUtility.FromJson<AnimeResponse>(response.ToString());
            byte[] buffer = Convert.FromBase64String(animeResponse.image);
            return buffer;
        }
        catch(Exception error)
        {
            Debug.LogError(error);
        }
        return null;
    }
    /// <summary>
    /// 發(fā)起人像動(dòng)漫畫請(qǐng)求
    /// </summary>
    /// <param name="url">圖片url地址</param>
    /// <param name="withMask">是否帶口罩</param>
    /// <param name="maskID">口罩ID 取值范圍1-8</param>
    /// <returns>返回的動(dòng)漫畫圖片字節(jié)數(shù)據(jù)</returns>
    public static byte[] SendRequest(string url, bool withMask = false, int maskID = 1)
    {
        var client = new Baidu.Aip.ImageProcess.ImageProcess(apiKey, secretKey);
        try
        {
            var options = new Dictionary<string, object>
            {
                { "type", withMask ? "anime_mask" : "anime" },
                { "mask_id", Mathf.Clamp(maskID, 1, 8) }
            };
            var response = client.SelfieAnimeUrl(url, options);
            AnimeResponse animeResponse = JsonUtility.FromJson<AnimeResponse>(response.ToString());
            byte[] buffer = Convert.FromBase64String(animeResponse.image);
            return buffer;
        }
        catch (Exception error)
        {
            Debug.LogError(error);
        }
        return null;
    }
}

測(cè)試圖片：

using System.IO;
using UnityEngine;
 
public class Example : MonoBehaviour
{
    private void Start()
    {
        //讀取圖片字節(jié)數(shù)據(jù) 發(fā)起請(qǐng)求
        var bytes = Anime.SendRequest(File.ReadAllBytes(Application.dataPath + "/Picture.jpg"));
        //根據(jù)返回的字節(jié)數(shù)據(jù)生成圖片
        File.WriteAllBytes(Application.dataPath + "/Test.png", bytes);
    }
}

下面是生成的圖片：