Unity接入百度AI实现通用物体和场景识别

这篇文章主要介绍了在Unity中接入百度AI接口，从而实现通用物体和场景的识别，其中接口返回大类及细分类的名称，并支持获取识别结果对应的百科信息。感兴趣的可以学习一下

接口介绍：

可识别超过10万类常见物体和场景，接口返回大类及细分类的名称，并支持获取识别结果对应的百科信息；还可使用EasyDL定制训练平台，定制识别分类标签。广泛适用于图像或视频内容分析、拍照识图等业务场景。

创建应用：

在产品服务中搜索图像识别，创建应用，获取AppID、APIKey、SecretKey信息：

查阅官方文档，以下是通用物体和场景识别接口返回数据参数详情：

定义数据结构：

using System; ///  /// 通用物体和场景识别 /// 
 [Serializable] public class AdvancedGeneralRecognition { ///  /// 唯一的log id，用于问题定位 /// 
 public float log_id; ///  /// 返回结果数目，及result数组中的元素个数 /// 
 public int result_num; ///  /// 返回结果数组 /// 
 public AdvancedGeneralRecognitionResult[] result; } ///  /// 通用物体和场景识别结果 /// 
 [Serializable] public class AdvancedGeneralRecognitionResult { ///  /// 图片中的物体或场景名称 /// 
 public string keyword; ///  /// 置信度，0-1 /// 
 public float score; ///  /// 识别结果的上层标签，有部分钱币、动漫、烟酒等tag无上层标签 /// 
 public string root; ///  /// 百科词条 /// 
 public BaikeInfo baike_info; } [Serializable] public class BaikeInfo { ///  /// 对应识别结果百度百科页面链接 /// 
 public string baike_url; ///  /// 对应识别结果百科图片链接 /// 
 public string image_url; ///  /// 对应识别结果百科内容描述 /// 
 public string description; }

下载C# SDK：

下载完成后将AipSdk.dll动态库导入到Unity中：

以下是调用接口时传入的参数详情：

封装调用函数：

using System; using System.Collections.Generic; using UnityEngine; ///  /// 图像识别 /// 
 public class ImageRecognition { //以下信息于百度开发者中心控制台创建应用获取 private const string appID = ""; private const string apiKey = ""; private const string secretKey = ""; ///  /// 通用物体和场景识别 /// 
 /// 图片字节数据 /// 返回百科信息的结果数，默认不返回 ///  public static AdvancedGeneralRecognition AdvancedGeneral(byte[] bytes, int baikeNum = 0) { var client = new Baidu.Aip.ImageClassify.ImageClassify(apiKey, secretKey); try { var options = new Dictionary { { "baike_num", baikeNum }, }; var response = client.AdvancedGeneral(bytes, options); AdvancedGeneralRecognition recognition = JsonConvert.DeserializeObject(response.ToString()); return recognition; } catch (Exception error) { Debug.LogError(error); } return null; } }

测试图片：

using System.IO; using UnityEngine; public class Example : MonoBehaviour { private void Start() { ImageRecognition.AdvancedGeneral(File.ReadAllBytes(Application.dataPath + "/Picture.jpg-600"), 1); } }