本技術(shù)涉及增強(qiáng)現(xiàn)實(shí)眼鏡,具體涉及一種基于ar眼鏡交互的手勢(shì)識(shí)別方法及系統(tǒng)。
背景技術(shù):
1、隨著技術(shù)的持續(xù)進(jìn)步與市場(chǎng)需求的不斷攀升,ar眼鏡的市場(chǎng)潛力正逐步顯現(xiàn)并加速釋放。ar眼鏡憑借智能高清技術(shù),成功地將虛擬信息疊加至現(xiàn)實(shí)世界中,極大地豐富了人們的視覺(jué)體驗(yàn)與認(rèn)知范疇。
2、在當(dāng)前的ar眼鏡應(yīng)用中,用戶無(wú)需依賴手持設(shè)備,僅需通過(guò)眼球的轉(zhuǎn)動(dòng)、頭部的移動(dòng)等自然體態(tài)動(dòng)作,即可輕松實(shí)現(xiàn)與虛擬信息的交互。此外,ar眼鏡還廣泛支持語(yǔ)音指令、手勢(shì)識(shí)別以及觸摸板等多種交互模式,為用戶提供了更為豐富、靈活的交互選擇。然而,現(xiàn)有的ar眼鏡交互方式仍存在一定的局限性。具體而言,手勢(shì)識(shí)別技術(shù),目前仍主要局限于對(duì)簡(jiǎn)單手勢(shì)動(dòng)作的識(shí)別,難以應(yīng)對(duì)復(fù)雜多變的交互需求,從而導(dǎo)致用戶與ar眼鏡的交互體驗(yàn)差。
3、因此,亟需可解決上述技術(shù)問(wèn)題的一種基于ar眼鏡交互的手勢(shì)識(shí)別方法及系統(tǒng)。
技術(shù)實(shí)現(xiàn)思路
1、本技術(shù)提供了一種基于ar眼鏡交互的手勢(shì)識(shí)別方法及系統(tǒng),該方法可解決手勢(shì)識(shí)別技術(shù)目前面臨的局限性,提升用戶與ar眼鏡的交互體驗(yàn)。
2、第一方面,本技術(shù)提供了一種基于ar眼鏡交互的手勢(shì)識(shí)別方法,應(yīng)用于服務(wù)器中,方法包括:獲取第一圖像,第一圖像為目標(biāo)ar眼鏡對(duì)目標(biāo)用戶的目標(biāo)手部進(jìn)行拍攝的圖像;若第一圖像中存在預(yù)設(shè)手勢(shì),則確定目標(biāo)用戶觸發(fā)手勢(shì)交互操作,根據(jù)手勢(shì)交互操作獲取預(yù)設(shè)時(shí)長(zhǎng)對(duì)應(yīng)的第二圖像;對(duì)第二圖像進(jìn)行處理,得到第三圖像和第四圖像,第三圖像為第二圖像中第一時(shí)間點(diǎn)對(duì)應(yīng)的圖像,第四圖像為第二圖像中第二時(shí)間點(diǎn)對(duì)應(yīng)的圖像,第一時(shí)間點(diǎn)為預(yù)設(shè)時(shí)長(zhǎng)中對(duì)應(yīng)的開(kāi)始時(shí)間點(diǎn),第二時(shí)間點(diǎn)為預(yù)設(shè)時(shí)長(zhǎng)中對(duì)應(yīng)的結(jié)束時(shí)間點(diǎn),第一時(shí)間點(diǎn)早于第二時(shí)間點(diǎn);對(duì)第三圖像與第四圖像進(jìn)行處理,得到目標(biāo)距離和第一相似度,目標(biāo)距離為第一坐標(biāo)與第二坐標(biāo)之間相隔的距離,第一坐標(biāo)為第三圖像中第一手勢(shì)對(duì)應(yīng)的三維坐標(biāo),第二坐標(biāo)為第四圖像中第二手勢(shì)對(duì)應(yīng)的三維坐標(biāo),第一相似度為第一手勢(shì)和第二手勢(shì)對(duì)應(yīng)的相似度;判斷目標(biāo)距離是否小于或等于預(yù)設(shè)距離,且第一相似度是否大于或等于預(yù)設(shè)第一相似度;當(dāng)目標(biāo)距離小于或等于預(yù)設(shè)距離,且第一相似度大于或等于預(yù)設(shè)第一相似度時(shí),將第二圖像歸納到靜態(tài)圖像集合中;根據(jù)靜態(tài)圖像集合獲取預(yù)設(shè)第一手勢(shì)數(shù)據(jù)庫(kù),將第二圖像輸入預(yù)設(shè)第一手勢(shì)數(shù)據(jù)庫(kù)中進(jìn)行匹配,得到第一識(shí)別信息;根據(jù)第一識(shí)別信息生成第一手勢(shì)操作效果圖,將第一手勢(shì)操作效果圖向目標(biāo)ar眼鏡進(jìn)行發(fā)送,以便在目標(biāo)ar眼鏡的顯示視野上向目標(biāo)用戶展示第一手勢(shì)操作效果圖。
3、通過(guò)采用上述技術(shù)方案,對(duì)第一圖像進(jìn)行手勢(shì)識(shí)別,確定觸發(fā)手勢(shì)交互操作,獲取預(yù)設(shè)時(shí)長(zhǎng)內(nèi)的連續(xù)圖像,即第二圖像,從第二圖像中獲取第三圖像和第四圖像,分別對(duì)第三圖像和第四圖像進(jìn)行處理,得到目標(biāo)距離和第一相似度,目標(biāo)距離是使用三維坐標(biāo)來(lái)精確定位手勢(shì)在空間中的位置,有助于準(zhǔn)確地識(shí)別出手勢(shì)的位置變化,第一相似度是計(jì)算手勢(shì)在不同時(shí)間點(diǎn)(第三圖像和第四圖像)的相似度,并結(jié)合三維坐標(biāo)的距離變化,判斷第二圖像中的手勢(shì)是為靜態(tài)或動(dòng)態(tài),在確定第二圖像中的手勢(shì)是靜態(tài)時(shí),調(diào)取預(yù)設(shè)第一手勢(shì)數(shù)據(jù)庫(kù),將第二圖像輸入預(yù)設(shè)第一手勢(shì)數(shù)據(jù)庫(kù)中進(jìn)行匹配,得到第一識(shí)別信息,一旦識(shí)別出手勢(shì),立即生成相應(yīng)的手勢(shì)操作效果圖,通過(guò)ar眼鏡展示給目標(biāo)用戶,使用戶能夠直觀地看到手勢(shì)操作的結(jié)果,在提升手勢(shì)識(shí)別準(zhǔn)確性的同時(shí),進(jìn)一步提升用戶與ar眼鏡的交互體驗(yàn)。
4、可選的,在判斷目標(biāo)距離是否小于或等于預(yù)設(shè)距離,且第一相似度是否大于或等于預(yù)設(shè)第一相似度之后,方法還包括:當(dāng)目標(biāo)距離大于預(yù)設(shè)距離,且第一相似度小于預(yù)設(shè)第一相似度時(shí),將第二圖像歸納到動(dòng)態(tài)圖像集合中;根據(jù)動(dòng)態(tài)圖像集合獲取預(yù)設(shè)第二手勢(shì)數(shù)據(jù)庫(kù),將第二圖像輸入預(yù)設(shè)第二手勢(shì)數(shù)據(jù)庫(kù)中進(jìn)行匹配,得到第二識(shí)別信息;根據(jù)第二識(shí)別信息生成第二手勢(shì)操作效果圖,將第二手勢(shì)操作效果圖像目標(biāo)ar眼鏡進(jìn)行發(fā)送,以便在目標(biāo)ar眼鏡的顯示視野上向目標(biāo)用戶展示第二手勢(shì)操作效果圖。
5、通過(guò)采用上述技術(shù)方案,當(dāng)目標(biāo)距離大于預(yù)設(shè)距離,且第一相似度小于預(yù)設(shè)第一相似度時(shí),確定第二圖像為動(dòng)態(tài)圖像集,針對(duì)靜態(tài)圖像集和動(dòng)態(tài)圖像集的手勢(shì)動(dòng)作采用不同的識(shí)別策略,這種分類有助于提高手勢(shì)識(shí)別的準(zhǔn)確性,根據(jù)動(dòng)態(tài)圖像集確定預(yù)設(shè)第二手勢(shì)數(shù)據(jù)庫(kù),將第二圖像輸入預(yù)設(shè)第二手勢(shì)數(shù)據(jù)庫(kù)進(jìn)行匹配,得到第二識(shí)別信息,能夠識(shí)別靜態(tài)和動(dòng)態(tài)兩者類型的手勢(shì)動(dòng)作,根據(jù)用戶的實(shí)際需求進(jìn)行靈活調(diào)整,進(jìn)而解決手勢(shì)識(shí)別技術(shù)中主要局限與對(duì)簡(jiǎn)單手勢(shì)動(dòng)作識(shí)別的問(wèn)題,使得用戶可以通過(guò)更復(fù)雜、更多變的手勢(shì)動(dòng)作與ar眼鏡進(jìn)行交互,從而滿足更加多樣化的交互需求。
6、可選的,在將第二圖像輸入預(yù)設(shè)第二手勢(shì)數(shù)據(jù)庫(kù)中進(jìn)行匹配,得到第二識(shí)別信息之前,方法還包括:對(duì)第二圖像進(jìn)行逐幀分析,得到多個(gè)子圖像;獲取第一子圖像對(duì)應(yīng)的第一占比率,第一子圖像為多個(gè)子圖像中的任意一個(gè)子圖像,第一占比率為目標(biāo)手部在第一子圖像中的占比;判斷第一占比率是否大于或等于預(yù)設(shè)占比率;當(dāng)?shù)谝徽急嚷蚀笥诨虻扔陬A(yù)設(shè)占比率時(shí),將第一子圖像歸納到第一圖像集中,并將第一圖像集作為第二圖像進(jìn)行輸出。
7、通過(guò)采用上述技術(shù)方案,對(duì)第二圖像進(jìn)行逐幀分析,可以捕捉到手部動(dòng)作的細(xì)微變化,從而更準(zhǔn)確地識(shí)別出手勢(shì),再?gòu)亩鄠€(gè)子圖像中獲取第一子圖像,再根據(jù)手部在第一子圖像中的占比率進(jìn)行篩選,可以排除手部占比較小,由于拍攝角度不佳導(dǎo)致難以識(shí)別的圖像幀,進(jìn)一步提高手部識(shí)別的準(zhǔn)確性;且通過(guò)篩選和歸類,可以減少需要處理的圖像幀數(shù)量,降低算法的運(yùn)行時(shí)間,減少計(jì)算資源的消耗。
8、可選的,在判斷第一占比率是否大于或等于預(yù)設(shè)占比率之后,方法還包括:當(dāng)?shù)谝徽急嚷市∮陬A(yù)設(shè)占比率時(shí),將第一子圖像歸納到第二圖像集中,并從多個(gè)子圖像中獲取第二子圖像,第二子圖像為多個(gè)子圖像中除第一子圖像之外的任意一個(gè)子圖像;獲取第二子圖像對(duì)應(yīng)的第二占比率;判斷第二占比率是否大于或等于預(yù)設(shè)占比率;當(dāng)?shù)诙急嚷蚀笥诨虻扔陬A(yù)設(shè)占比率時(shí),將第二子圖像歸納到第一圖像集中。
9、通過(guò)采用上述技術(shù)方案,當(dāng)?shù)谝蛔訄D像的手部占比率不滿足預(yù)設(shè)條件時(shí),將第一子圖像歸納到第二圖像集中,再繼續(xù)分析剩下的子圖像,這種方式提高了圖像數(shù)據(jù)的利用率,從多個(gè)子圖像中篩選出部占比率滿足預(yù)設(shè)條件的圖像,能夠確保用于手勢(shì)識(shí)別的圖像數(shù)據(jù)具有較高的質(zhì)量和清晰度,這有助于減少誤識(shí)別率,提高手勢(shì)識(shí)別的準(zhǔn)確性和可靠性。
10、可選的,在當(dāng)?shù)谝徽急嚷蚀笥诨虻扔陬A(yù)設(shè)占比率時(shí),將第一子圖像歸納到第一圖像集中之后,方法還包括:從第一圖像集中獲取第三子圖像和第四子圖像;對(duì)第三子圖像與第四子圖像進(jìn)行相似度計(jì)算,得到第二相似度;判斷第二相似度是否大于或等于預(yù)設(shè)第二相似度;當(dāng)?shù)诙嗨贫却笥诨虻扔陬A(yù)設(shè)第二相似度時(shí),確定第三子圖像與第四子圖像為相同手勢(shì)圖像,將第四子圖像從第一圖像集中進(jìn)行刪除。
11、通過(guò)采用上述技術(shù)方案,計(jì)算第三子圖像和第四子圖像之間的相似度,并刪除相似度高的重復(fù)圖像,能夠顯著減少第一圖像集中的冗余數(shù)據(jù),不僅有助于節(jié)省存儲(chǔ)空間,還能提高后續(xù)手勢(shì)識(shí)別或處理的效率。去除重復(fù)圖像后,第一圖像集中剩余的圖像更具代表性,能夠更準(zhǔn)確地反映用戶的手部動(dòng)作,還有助于減少因重復(fù)圖像導(dǎo)致的誤識(shí)別,提高手勢(shì)識(shí)別的準(zhǔn)確性。
12、可選的,將第二圖像輸入預(yù)設(shè)第二手勢(shì)數(shù)據(jù)庫(kù)中進(jìn)行匹配,得到第二識(shí)別信息,具體包括:根據(jù)時(shí)間先后順序?qū)Φ谝粓D像集中各個(gè)第一子圖像進(jìn)行排序,得到目標(biāo)排序結(jié)果;獲取第五子圖像和第六子圖像,第五子圖像為目標(biāo)排序結(jié)果中排在首位對(duì)應(yīng)的第一子圖像,第六子圖像為目標(biāo)排序結(jié)果中排在末位對(duì)應(yīng)的第一子圖像;將第五子圖像和第六子圖像均輸入到預(yù)設(shè)第二手勢(shì)數(shù)據(jù)庫(kù)中進(jìn)行匹配,得到第二識(shí)別信息。
13、通過(guò)采用上述技術(shù)方案,對(duì)第一圖像集中的子圖像進(jìn)行時(shí)間排序,能夠清晰地捕捉到手勢(shì)動(dòng)作的起始和結(jié)束狀態(tài),選取排在首位的第五子圖像和排在末位的第六子圖像進(jìn)行匹配,可以代表手勢(shì)的開(kāi)始和結(jié)束姿態(tài),分析手勢(shì)的起始和結(jié)束狀態(tài),能夠更全面地識(shí)別和理解用戶的手勢(shì)意圖。這有助于減少因手勢(shì)動(dòng)作不完整或模糊而導(dǎo)致的誤識(shí)別,提高手勢(shì)識(shí)別的準(zhǔn)確性和完整性。
14、可選的,在以便在目標(biāo)ar眼鏡的顯示視野上向目標(biāo)用戶展示第一手勢(shì)操作效果圖之后,方法還包括:響應(yīng)于目標(biāo)用戶對(duì)第一手勢(shì)操作效果圖的點(diǎn)擊操作;確定點(diǎn)擊操作對(duì)應(yīng)的識(shí)別信息,識(shí)別信息包括識(shí)別成功信息和識(shí)別失敗信息;當(dāng)識(shí)別信息為識(shí)別成功信息時(shí),根據(jù)第一手勢(shì)識(shí)別信息執(zhí)行對(duì)應(yīng)目標(biāo)操作指令;當(dāng)識(shí)別信息為識(shí)別失敗信息時(shí),向目標(biāo)用戶發(fā)送提示信息,以便提示目標(biāo)用戶重新進(jìn)行手勢(shì)識(shí)別操作。
15、通過(guò)采用上述技術(shù)方案,根據(jù)第一點(diǎn)擊手勢(shì)操作效果圖來(lái)獲取識(shí)別結(jié)果,并據(jù)此執(zhí)行目標(biāo)操作指令或接收重新識(shí)別的提示,這種交互方式直觀且易于理解。它使用戶能夠清晰地知道手勢(shì)是否被正確識(shí)別,并根據(jù)識(shí)別結(jié)果采取相應(yīng)的行動(dòng),從而增強(qiáng)了用戶的交互體驗(yàn)。通過(guò)明確的識(shí)別成功或失敗信息,用戶可以清楚地了解手勢(shì)是否被正確識(shí)別。這有助于減少因誤識(shí)別而導(dǎo)致的誤操作,提高系統(tǒng)的穩(wěn)定性和可靠性。
16、在本技術(shù)的第二方面提供了一種基于ar眼鏡交互的手勢(shì)識(shí)別系統(tǒng),系統(tǒng)為服務(wù)器,服務(wù)器包括獲取單元、處理單元以及發(fā)送單元;獲取單元,獲取第一圖像,第一圖像為目標(biāo)ar眼鏡對(duì)目標(biāo)用戶的目標(biāo)手部進(jìn)行拍攝的圖像;處理單元,若第一圖像中存在預(yù)設(shè)手勢(shì),則確定目標(biāo)用戶觸發(fā)手勢(shì)交互操作,根據(jù)手勢(shì)交互操作獲取預(yù)設(shè)時(shí)長(zhǎng)對(duì)應(yīng)的第二圖像;對(duì)第二圖像進(jìn)行處理,得到第三圖像和第四圖像,第三圖像為第二圖像中第一時(shí)間點(diǎn)對(duì)應(yīng)的圖像,第四圖像為第二圖像中第二時(shí)間點(diǎn)對(duì)應(yīng)的圖像,第一時(shí)間點(diǎn)為預(yù)設(shè)時(shí)長(zhǎng)中對(duì)應(yīng)的開(kāi)始時(shí)間點(diǎn),第二時(shí)間點(diǎn)為預(yù)設(shè)時(shí)長(zhǎng)中對(duì)應(yīng)的結(jié)束時(shí)間點(diǎn),第一時(shí)間點(diǎn)早于第二時(shí)間點(diǎn);對(duì)第三圖像與第四圖像進(jìn)行處理,得到目標(biāo)距離和第一相似度,目標(biāo)距離為第一坐標(biāo)與第二坐標(biāo)之間相隔的距離,第一坐標(biāo)為第三圖像中第一手勢(shì)對(duì)應(yīng)的三維坐標(biāo),第二坐標(biāo)為第四圖像中第二手勢(shì)對(duì)應(yīng)的三維坐標(biāo),第一相似度為第一手勢(shì)和第二手勢(shì)對(duì)應(yīng)的相似度;判斷目標(biāo)距離是否小于或等于預(yù)設(shè)距離,且第一相似度是否大于或等于預(yù)設(shè)第一相似度;當(dāng)目標(biāo)距離小于或等于預(yù)設(shè)距離,且第一相似度大于或等于預(yù)設(shè)第一相似度時(shí),將第二圖像歸納到靜態(tài)圖像集合中;
17、根據(jù)靜態(tài)圖像集合獲取預(yù)設(shè)第一手勢(shì)數(shù)據(jù)庫(kù),將第二圖像輸入預(yù)設(shè)第一手勢(shì)數(shù)據(jù)庫(kù)中進(jìn)行匹配,得到第一識(shí)別信息;發(fā)送單元,根據(jù)第一識(shí)別信息生成第一手勢(shì)操作效果圖,將第一手勢(shì)操作效果圖向目標(biāo)ar眼鏡進(jìn)行發(fā)送,以便在目標(biāo)ar眼鏡的顯示視野上向目標(biāo)用戶展示第一手勢(shì)操作效果圖。
18、可選的,處理單元用于當(dāng)目標(biāo)距離大于預(yù)設(shè)距離,且第一相似度小于預(yù)設(shè)第一相似度時(shí),將第二圖像歸納到動(dòng)態(tài)圖像集合中;根據(jù)動(dòng)態(tài)圖像集合獲取預(yù)設(shè)第二手勢(shì)數(shù)據(jù)庫(kù),將第二圖像輸入預(yù)設(shè)第二手勢(shì)數(shù)據(jù)庫(kù)中進(jìn)行匹配,得到第二識(shí)別信息;發(fā)送單元用于根據(jù)第二識(shí)別信息生成第二手勢(shì)操作效果圖,將第二手勢(shì)操作效果圖像目標(biāo)ar眼鏡進(jìn)行發(fā)送,以便在目標(biāo)ar眼鏡的顯示視野上向目標(biāo)用戶展示第二手勢(shì)操作效果圖。
19、可選的,處理單元用于對(duì)第二圖像進(jìn)行逐幀分析,得到多個(gè)子圖像;獲取單元用于獲取第一子圖像對(duì)應(yīng)的第一占比率,第一子圖像為多個(gè)子圖像中的任意一個(gè)子圖像,第一占比率為目標(biāo)手部在第一子圖像中的占比;處理單元用于判斷第一占比率是否大于或等于預(yù)設(shè)占比率;當(dāng)?shù)谝徽急嚷蚀笥诨虻扔陬A(yù)設(shè)占比率時(shí),將第一子圖像歸納到第一圖像集中,并將第一圖像集作為第二圖像進(jìn)行輸出。
20、可選的,處理單元用于當(dāng)?shù)谝徽急嚷市∮陬A(yù)設(shè)占比率時(shí),將第一子圖像歸納到第二圖像集中,并從多個(gè)子圖像中獲取第二子圖像,第二子圖像為多個(gè)子圖像中除第一子圖像之外的任意一個(gè)子圖像;獲取單元用于獲取第二子圖像對(duì)應(yīng)的第二占比率;處理單元用于判斷第二占比率是否大于或等于預(yù)設(shè)占比率;當(dāng)?shù)诙急嚷蚀笥诨虻扔陬A(yù)設(shè)占比率時(shí),將第二子圖像歸納到第一圖像集中。
21、可選的,獲取單元用于從第一圖像集中獲取第三子圖像和第四子圖像;
22、處理單元用于對(duì)第三子圖像與第四子圖像進(jìn)行相似度計(jì)算,得到第二相似度;判斷第二相似度是否大于或等于預(yù)設(shè)第二相似度;當(dāng)?shù)诙嗨贫却笥诨虻扔陬A(yù)設(shè)第二相似度時(shí),確定第三子圖像與第四子圖像為相同手勢(shì)圖像,將第四子圖像從第一圖像集中進(jìn)行刪除。
23、可選的,處理單元用于根據(jù)時(shí)間先后順序?qū)Φ谝粓D像集中各個(gè)第一子圖像進(jìn)行排序,得到目標(biāo)排序結(jié)果;獲取單元用于獲取第五子圖像和第六子圖像,第五子圖像為目標(biāo)排序結(jié)果中排在首位對(duì)應(yīng)的第一子圖像,第六子圖像為目標(biāo)排序結(jié)果中排在末位對(duì)應(yīng)的第一子圖像;處理單元用于將第五子圖像和第六子圖像均輸入到預(yù)設(shè)第二手勢(shì)數(shù)據(jù)庫(kù)中進(jìn)行匹配,得到第二識(shí)別信息。
24、可選的,處理單元用于響應(yīng)于目標(biāo)用戶對(duì)第一手勢(shì)操作效果圖的點(diǎn)擊操作;確定點(diǎn)擊操作對(duì)應(yīng)的識(shí)別信息,識(shí)別信息包括識(shí)別成功信息和識(shí)別失敗信息;當(dāng)識(shí)別信息為識(shí)別成功信息時(shí),根據(jù)第一手勢(shì)識(shí)別信息執(zhí)行對(duì)應(yīng)目標(biāo)操作指令;發(fā)送單元用于當(dāng)識(shí)別信息為識(shí)別失敗信息時(shí),向目標(biāo)用戶發(fā)送提示信息,以便提示目標(biāo)用戶重新進(jìn)行手勢(shì)識(shí)別操作。
25、在本技術(shù)第三方面提供一種電子設(shè)備,電子設(shè)備包括處理器、存儲(chǔ)器、用戶接口及網(wǎng)絡(luò)接口,存儲(chǔ)器用于存儲(chǔ)指令,用戶接口和網(wǎng)絡(luò)接口用于與其他設(shè)備通信,處理器用于執(zhí)行存儲(chǔ)器中存儲(chǔ)的指令,使得一種電子設(shè)備執(zhí)行如本技術(shù)上述中任意一項(xiàng)的方法。
26、在本技術(shù)第四方面提供一種計(jì)算機(jī)可讀存儲(chǔ)介質(zhì),計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)存儲(chǔ)有指令,當(dāng)指令被執(zhí)行時(shí),執(zhí)行本技術(shù)上述中任意一項(xiàng)的方法。
27、綜上所述,本技術(shù)實(shí)施例中提供的一個(gè)或多個(gè)技術(shù)方案,至少具有如下技術(shù)效果或優(yōu)點(diǎn):
28、1、對(duì)第一圖像進(jìn)行手勢(shì)識(shí)別,確定觸發(fā)手勢(shì)交互操作,獲取預(yù)設(shè)時(shí)長(zhǎng)內(nèi)的連續(xù)圖像,即第二圖像,從第二圖像中獲取第三圖像和第四圖像,分別對(duì)第三圖像和第四圖像進(jìn)行處理,得到目標(biāo)距離和第一相似度,目標(biāo)距離是使用三維坐標(biāo)來(lái)精確定位手勢(shì)在空間中的位置,有助于準(zhǔn)確地識(shí)別出手勢(shì)的位置變化,第一相似度是計(jì)算手勢(shì)在不同時(shí)間點(diǎn)(第三圖像和第四圖像)的相似度,并結(jié)合三維坐標(biāo)的距離變化,判斷第二圖像中的手勢(shì)是為靜態(tài)或動(dòng)態(tài),在確定第二圖像中的手勢(shì)是靜態(tài)時(shí),調(diào)取預(yù)設(shè)第一手勢(shì)數(shù)據(jù)庫(kù),將第二圖像輸入預(yù)設(shè)第一手勢(shì)數(shù)據(jù)庫(kù)中進(jìn)行匹配,得到第一識(shí)別信息,一旦識(shí)別出手勢(shì),立即生成相應(yīng)的手勢(shì)操作效果圖,通過(guò)ar眼鏡展示給目標(biāo)用戶,使用戶能夠直觀地看到手勢(shì)操作的結(jié)果,在提升手勢(shì)識(shí)別準(zhǔn)確性的同時(shí),進(jìn)一步提升用戶與ar眼鏡的交互體驗(yàn)。
29、2、根據(jù)第一點(diǎn)擊手勢(shì)操作效果圖來(lái)獲取識(shí)別結(jié)果,并據(jù)此執(zhí)行目標(biāo)操作指令或接收重新識(shí)別的提示,這種交互方式直觀且易于理解。它使用戶能夠清晰地知道手勢(shì)是否被正確識(shí)別,并根據(jù)識(shí)別結(jié)果采取相應(yīng)的行動(dòng),從而增強(qiáng)了用戶的交互體驗(yàn)。通過(guò)明確的識(shí)別成功或失敗信息,用戶可以清楚地了解手勢(shì)是否被正確識(shí)別。這有助于減少因誤識(shí)別而導(dǎo)致的誤操作,提高系統(tǒng)的穩(wěn)定性和可靠性。