隨著越來(lái)越多的家庭飼養(yǎng)多只寵物,傳統(tǒng)智能喂食器的單一識(shí)別功能,已難以滿(mǎn)足用戶(hù)需求。如何確保每只寵物都能公平進(jìn)食?如何記錄和監(jiān)測(cè)每只寵物的進(jìn)食習(xí)慣和食量?如何分析寵物行為,并為每只寵物制定個(gè)性化的喂養(yǎng)策略?
為了實(shí)現(xiàn)科學(xué)喂養(yǎng),提升寵物主人的輕松養(yǎng)寵體驗(yàn),AI 寵物識(shí)別技術(shù)應(yīng)運(yùn)而生。通過(guò)結(jié)合生物特征識(shí)別、機(jī)器學(xué)習(xí)算法及多模態(tài)數(shù)據(jù)分析,它能實(shí)現(xiàn)對(duì)多只寵物的精準(zhǔn)區(qū)分與身份認(rèn)證。
?
AI 寵物識(shí)別技術(shù)運(yùn)行流程:
首先上傳每一只寵物的正面照片進(jìn)行特征分析,并存儲(chǔ)在家庭寵物信息庫(kù)中;
當(dāng)設(shè)備監(jiān)測(cè)到寵物時(shí),就會(huì)通知云端進(jìn)行識(shí)別,云端截取視頻中的高清晰度寵物臉區(qū)域,與家庭寵物信息庫(kù)進(jìn)行相似度比對(duì);
識(shí)別出是哪只寵物后,同步生成進(jìn)食和行為記錄。
對(duì)于多寵家庭來(lái)說(shuō),該功能相當(dāng)實(shí)用,可廣泛應(yīng)用于各類(lèi)寵物智能硬件領(lǐng)域,如寵物喂食器、寵物飲水機(jī)、逗寵器、寵物定位器等。
一、涂鴉 AI 多寵識(shí)別有哪些功能?
依托涂鴉智能強(qiáng)大的 AI 能力,多寵識(shí)別技術(shù)已進(jìn)入量產(chǎn)落地階段,并在多個(gè)寵物智能硬件中得到廣泛應(yīng)用。目前,主要包含 2 個(gè)關(guān)鍵的功能模塊:寵物檔案和進(jìn)食記錄。
?
1、寵物檔案,AI 識(shí)別的身份證
寵物檔案模塊是實(shí)現(xiàn) AI 多寵識(shí)別功能的前提,該模塊專(zhuān)注于收集、管理和展示寵物的基本信息和個(gè)體特征,并支持對(duì)寵物信息的增刪改查。搭配涂鴉強(qiáng)大的圖像識(shí)別和數(shù)據(jù)處理能力,可自動(dòng)生成并維護(hù)每只寵物的檔案。寵物特征的采集交互流程如下:
2、管理進(jìn)食記錄,精準(zhǔn)掌握寵物食量
進(jìn)食記錄模塊負(fù)責(zé)監(jiān)測(cè)和記錄每只寵物的進(jìn)食情況。當(dāng)設(shè)備端監(jiān)測(cè)到寵物進(jìn)食時(shí),就會(huì)上報(bào)消息通知云端,云端收到通知后會(huì)自動(dòng)從云存儲(chǔ)端,獲取上報(bào)時(shí)間前后一分鐘的視頻片段,并通過(guò)大模型分析視頻片段,結(jié)合寵物檔案庫(kù)中的寵物信息進(jìn)行相似度匹配,統(tǒng)計(jì)匹配次數(shù)最高的結(jié)果,從而精準(zhǔn)識(shí)別寵物并生成進(jìn)食記錄,包含進(jìn)食次數(shù)、進(jìn)食量和進(jìn)食時(shí)長(zhǎng)。
同時(shí),也能對(duì)異常進(jìn)食行為進(jìn)行告警,長(zhǎng)期記錄可幫助提早發(fā)現(xiàn)寵物健康問(wèn)題。設(shè)備端、云端、面板之間的交互流程如下:
(進(jìn)食記錄運(yùn)行流程)
?
二、涂鴉采用了哪些獨(dú)特的技術(shù)?
1、涂鴉AI 多寵識(shí)別技術(shù)框架
(涂鴉 AI 多寵識(shí)別技術(shù)框架)
1.1 數(shù)據(jù)驅(qū)動(dòng):構(gòu)建高精度寵物檔案
涂鴉針對(duì)幾十萬(wàn)張寵物全身圖和寵物臉部圖,建立了海量數(shù)據(jù)訓(xùn)練庫(kù),覆蓋不同光照條件下的不同寵物品種與姿態(tài),構(gòu)建起獨(dú)特的“寵物臉特征向量”,確保模型的泛化能力。
?
1.2 雙路徑識(shí)別流程,360 度辨別無(wú)難度
優(yōu)先路徑(有寵物臉):截取視頻中高清的寵物臉生成特征向量后,與數(shù)據(jù)庫(kù)進(jìn)行相似度比對(duì);
備選路徑(無(wú)寵物臉):提取寵物實(shí)體區(qū)域,通過(guò)品種、毛色等語(yǔ)義信息,對(duì)比大模型檔案進(jìn)行寵物識(shí)別。
?
1.3 系統(tǒng)優(yōu)化:從速度到精度的全面提升
GPU 加速推理:利用 TensorRT 優(yōu)化模型,視頻處理速度提升 3 倍;
高維向量設(shè)計(jì):將特征向量維度從 128 提升至 512,顯著提升細(xì)粒度特征捕捉能力;
用戶(hù)共創(chuàng)機(jī)制:允許用戶(hù)標(biāo)記錯(cuò)誤識(shí)別結(jié)果,系統(tǒng)會(huì)每月自動(dòng)更新模型與數(shù)據(jù)庫(kù)。
2、技術(shù)亮點(diǎn)
2.1 搭載雙模型架構(gòu):精準(zhǔn)與效率的平衡
輕量級(jí)檢測(cè)模型:部署在本地設(shè)備中,就能實(shí)時(shí)檢測(cè)視頻中的寵物主體,并快速過(guò)濾無(wú)寵物的片段,確保設(shè)備高效運(yùn)行。
特征提取大模型:結(jié)合云端大模型(如通義千問(wèn)、豆包等),可以對(duì)寵物的臉部、體型等細(xì)節(jié)進(jìn)行高精度特征提取,支持復(fù)雜場(chǎng)景下的多寵區(qū)分。
2.2 混合識(shí)別策略:雙重保障提升準(zhǔn)確率
基于向量檢索的精準(zhǔn)識(shí)別:涂鴉通過(guò)預(yù)訓(xùn)練的寵物臉模型生成特征向量,再利用向量信息庫(kù)(如阿里 DashVector)進(jìn)行快速比對(duì),就能實(shí)現(xiàn)寵物身份的“秒級(jí)”匹配。
?
基于多模態(tài)的語(yǔ)義識(shí)別:當(dāng)寵物面部信息缺失時(shí),通過(guò)寵物的背影或側(cè)身,再結(jié)合品種、毛色、體型等多維度信息,就能通過(guò)大模型分析完成精確的寵物識(shí)別。
?
三、手把手開(kāi)發(fā)教學(xué)
1、創(chuàng)建產(chǎn)品
涂鴉 AI 多寵識(shí)別解決方案適合開(kāi)發(fā)任何與寵物相關(guān)的智能設(shè)備,創(chuàng)建產(chǎn)品步驟如下:
1.1 還沒(méi)有涂鴉 AI 云開(kāi)發(fā)者平臺(tái)賬號(hào)?趕緊注冊(cè)一個(gè)
1.2 單擊頁(yè)面左側(cè)【產(chǎn)品】--【產(chǎn)品開(kāi)發(fā)】,在產(chǎn)品開(kāi)發(fā)頁(yè)面單擊創(chuàng)建產(chǎn)品;
1.3 在標(biāo)準(zhǔn)類(lèi)目下選擇【小家電】--【可視寵物喂食器】, 完善產(chǎn)品信息,并根據(jù)實(shí)際需求選擇對(duì)應(yīng)的功能點(diǎn)。
1.4 為產(chǎn)品配置面板端智能體的時(shí)候,選擇寵物 AI 智能體。
說(shuō)明:如發(fā)現(xiàn)面板端沒(méi)有【寵物 AI 智能體】這個(gè)選項(xiàng),可在產(chǎn)品詳情頁(yè)復(fù)制產(chǎn)品對(duì)應(yīng)的 PID,聯(lián)系您的項(xiàng)目經(jīng)理,并提供該 PID 以配置開(kāi)啟【產(chǎn)品 AI 功能】;如目前沒(méi)有對(duì)接的項(xiàng)目經(jīng)理,可復(fù)制下方涂鴉開(kāi)發(fā)者論壇鏈接,向技術(shù)小哥申請(qǐng)一個(gè):
2、開(kāi)發(fā)AI 多寵識(shí)別設(shè)備
基于涂鴉智能 IPC 功能,開(kāi)發(fā)者使用 AI 多寵識(shí)別方案前,需要先對(duì)接 IPC SDK,設(shè)備端方案請(qǐng)參考 IPC SDK 開(kāi)發(fā)
?
3、設(shè)備面板開(kāi)發(fā)
實(shí)現(xiàn) AI 多寵識(shí)別功能的前提是采集家庭寵物信息,該功能需在設(shè)備面板端實(shí)現(xiàn),開(kāi)發(fā)步驟如下:
3.1 注冊(cè)登錄小程序開(kāi)發(fā)者平臺(tái),創(chuàng)建面板小程序
3.2 打開(kāi) IDE 創(chuàng)建一個(gè)基于 AI 寵物模版的面板小程序項(xiàng)目
?
?
-
AI
+關(guān)注
關(guān)注
88文章
34837瀏覽量
277338 -
喂食器
+關(guān)注
關(guān)注
1文章
27瀏覽量
3655 -
涂鴉智能
+關(guān)注
關(guān)注
7文章
259瀏覽量
19989
發(fā)布評(píng)論請(qǐng)先 登錄
FLIR ONE Edge Pro紅外熱像儀在爬寵飼養(yǎng)中的應(yīng)用
涂鴉重磅發(fā)布萌寵語(yǔ)聊模板!On-App AI降噪+音頻處理技術(shù),讓遠(yuǎn)程安撫寵物更安心

應(yīng)用于智能貓砂盆紅外線(xiàn)感測(cè)領(lǐng)域中的光距感傳感芯片 - WH4530A

涂鴉On-App AI視頻主體突出方案全新上線(xiàn)!自動(dòng)追蹤+智能放大,一鍵革新視頻剪輯體驗(yàn)

云翎智能單北斗執(zhí)法記錄儀的AI智能識(shí)別與云端協(xié)同解決方案

直播預(yù)告|如何在10分鐘內(nèi)開(kāi)發(fā)爆款寵物AI硬件?涂鴉手把手直播教學(xué)來(lái)了

直播預(yù)告| AI 玩偶爆款密碼:涂鴉 AI 玩偶方案如何賦能開(kāi)發(fā)者伙伴?

豆包×涂鴉智能:10分鐘快速打造爆款AI硬件

AI開(kāi)發(fā)者實(shí)踐|多寵識(shí)別開(kāi)啟科技養(yǎng)寵新時(shí)代

G3535N1UVN2U06-310 UVB LED燈珠,爬寵健康的理想選擇
開(kāi)發(fā)者洞察 | 小德智能:用涂鴉GenAI能力打造智能寵物創(chuàng)新應(yīng)用

迎接寵物智能時(shí)代:涂鴉云展現(xiàn)智能養(yǎng)寵全能力

AI for Science:人工智能驅(qū)動(dòng)科學(xué)創(chuàng)新》第4章-AI與生命科學(xué)讀后感
《AI for Science:人工智能驅(qū)動(dòng)科學(xué)創(chuàng)新》第一章人工智能驅(qū)動(dòng)的科學(xué)創(chuàng)新學(xué)習(xí)心得
寵物藍(lán)牙定位,智能養(yǎng)寵新時(shí)代的安全之選

評(píng)論