增強現(xiàn)實投影與現(xiàn)實交互的方法和裝置的制造方法
【專利摘要】本發(fā)明公開了一種增強現(xiàn)實投影與現(xiàn)實交互的方法，包括：對至少一個可穿戴設(shè)備進行三維圖像節(jié)點配置；根據(jù)三維圖像節(jié)點建立圖像模型；獲取至少一個可穿戴設(shè)備的構(gòu)建的動作姿態(tài)模型；將圖像模型與動作姿態(tài)模型合并計算，獲取圖像顯示姿態(tài)。上述方法根據(jù)可穿戴設(shè)備從肢體以及軀干傳來的運動數(shù)據(jù)，構(gòu)建或簡單或復(fù)雜的人體模型，在此人體模型的基礎(chǔ)上構(gòu)造衣物以及盔甲的三維圖像模型；模型建立完畢后當(dāng)智能顯示設(shè)備的輸入模塊輸入該處設(shè)備信息時，相應(yīng)的顯示該圖像，與此同時，當(dāng)人體運動時，通過動作采集、解析以及圖像化，實現(xiàn)衣物跟隨人體運動而運動，具有很好的用戶體驗性與易用性。本發(fā)明還公開了一種增強現(xiàn)實投影與現(xiàn)實交互的裝置。
【專利說明】
増強現(xiàn)實投影與現(xiàn)實交互的方法和裝置
技術(shù)領(lǐng)域
[0001]本發(fā)明屬于三維智能領(lǐng)域，特別涉及一種增強現(xiàn)實投影與現(xiàn)實交互的方法和裝置。
【背景技術(shù)】
[0002]眾所周知，增強現(xiàn)實技術(shù)(Augmented Reality，AR)是隨著虛擬現(xiàn)實技術(shù)(VirtualReality，VR)迅速發(fā)展和實際應(yīng)用需要而出現(xiàn)的一種將真實世界信息和虛擬世界信息“無縫”集成的新技術(shù)。AR技術(shù)最終實現(xiàn)的目標(biāo)為:借助計算機圖形技術(shù)和可視化技術(shù)、交互技術(shù)、顯示技術(shù)等產(chǎn)生顯示環(huán)境中不存在的虛擬對象，并通過注冊技術(shù)將虛擬對象準(zhǔn)確地設(shè)置在真是環(huán)境中，讓用戶出于一種虛擬世界無縫融合的環(huán)境中。目前，將AR技術(shù)和計算機建模結(jié)合在一起，尚屬于首例。

【發(fā)明內(nèi)容】

[0003]本發(fā)明的目的是提供一種增強現(xiàn)實投影與現(xiàn)實交互的方法和裝置，本發(fā)明對人體運動軌跡位置與相關(guān)于人體運動軌跡位置的圖像的形變進行建模，通過上述建模實現(xiàn)了在游戲場景或者購物場景中的社交型體驗，具有易用性。
[0004]為實現(xiàn)上述目的，本發(fā)明的一個方面提供了一種增強現(xiàn)實投影與現(xiàn)實交互的方法，該方法包括:對至少一個可穿戴設(shè)備進行三維圖像節(jié)點配置;根據(jù)所述三維圖像節(jié)點建立圖像模型；獲取所述至少一個可穿戴設(shè)備的構(gòu)建的動作姿態(tài)模型;將所述圖像模型與所述動作姿態(tài)模型合并計算，獲取圖像顯示姿態(tài)。
[0005]在其中一個實施例中，在對至少一個可穿戴設(shè)備進行三維圖像節(jié)點配置之前包括:判斷至少一個可穿戴設(shè)備是否佩戴于人體;若是，則對至少一個可穿戴設(shè)備進行三維圖像節(jié)點配置。
[0006]在其中一個實施例中，所述根據(jù)所述三維圖像節(jié)點建立圖像模型包括:智能顯示設(shè)備預(yù)設(shè)待顯示的三維圖像；智能顯示設(shè)備通過內(nèi)置的圖像輸入模塊對外部圖像進行掃描;判斷掃描的所述外部圖像是否有標(biāo)識;如果掃描的所述外部圖像具有標(biāo)識，則在標(biāo)識處結(jié)合所述三維圖像節(jié)點建立圖像模型。
[0007]在其中一個實施例中，所述獲取所述至少一個可穿戴設(shè)備的構(gòu)建的動作姿態(tài)模型包括:每個所述可穿戴設(shè)備監(jiān)測人體運動軌跡;通過每個所述可穿戴設(shè)備內(nèi)置的通信模塊將監(jiān)測到的所述人體運動軌跡數(shù)據(jù)發(fā)送至所述智能顯示設(shè)備;所述智能顯示設(shè)備根據(jù)所述人體運動軌跡數(shù)據(jù)，建立動作姿態(tài)模型。
[0008]在其中一個實施例中，根據(jù)獲取的所述圖像顯示姿態(tài)進行三維圖像的顯示。
[0009]為實現(xiàn)上述目的，本發(fā)明的另一個方面提供了一種增強現(xiàn)實投影與現(xiàn)實交互的裝置，該裝置包括:配置模塊，用于對至少一個可穿戴設(shè)備進行三維圖像節(jié)點配置;模型建立模塊，用于根據(jù)所述三維圖像節(jié)點建立圖像模型;獲取模塊，用于獲取所述至少一個可穿戴設(shè)備的構(gòu)件的動作姿態(tài)模型;計算模塊，用于將所述圖像模型與所述動作姿態(tài)模型合并計算，獲取圖像顯示姿態(tài)。
[0010]在其中一個實施例中，還包括:判斷模塊，用于判斷至少一個可穿戴設(shè)備是否佩戴于人體。
[0011]在其中一個實施例中，所述模型建立模塊包括:待顯示單元，用于智能顯示設(shè)備預(yù)設(shè)待顯示的三維圖像;掃描單元，用于智能顯示設(shè)備通過內(nèi)置的圖像輸入模塊對外部圖像進行掃描;判斷單元，用于判斷掃描的所述外部圖像是否有標(biāo)識;第一模型建立單元，用于如果掃描的所述外部圖像具有標(biāo)識，則在標(biāo)識處結(jié)合所述三維圖像節(jié)點建立圖像模型。
[0012]在其中一個實施例中，所述獲取模塊包括:監(jiān)測單元，用于每個所述可穿戴設(shè)備監(jiān)測人體運動軌跡;發(fā)送單元，用于通過每個所述可穿戴設(shè)備內(nèi)置的通信模塊將監(jiān)測到的所述人體運動軌跡數(shù)據(jù)發(fā)送至所述智能顯示設(shè)備；第二模型建立單元，用于所述智能顯示設(shè)備根據(jù)所述人體運動軌跡數(shù)據(jù)，建立動作姿態(tài)模型。
[0013]在其中一個實施例中，還包括:顯示模塊，用于根據(jù)獲取的所述圖像顯示姿態(tài)進行三維圖像的顯示。
[0014]如上所述，本發(fā)明公開的增強現(xiàn)實投影與現(xiàn)實交互的方法和裝置，該方法包括:對至少一個可穿戴設(shè)備進行三維圖像節(jié)點配置;根據(jù)三維圖像節(jié)點建立圖像模型；獲取至少一個可穿戴設(shè)備的構(gòu)建的動作姿態(tài)模型；將圖像模型與動作姿態(tài)模型合并計算，獲取圖像顯示姿態(tài)。上述方法根據(jù)可穿戴設(shè)備從肢體以及軀干傳來的運動數(shù)據(jù)，構(gòu)建或簡單或復(fù)雜的人體模型，在此人體模型的基礎(chǔ)上構(gòu)造衣物以及盔甲的三維圖像模型；模型建立完畢后當(dāng)智能顯示設(shè)備的輸入模塊輸入該處設(shè)備信息時，相應(yīng)的顯示該圖像，與此同時，當(dāng)人體運動時，通過動作采集、解析以及圖像化，實現(xiàn)衣物跟隨人體運動而運動，具有很好的用戶體驗性與易用性。
【附圖說明】
[0015]圖1是本發(fā)明中的一種增強現(xiàn)實投影與現(xiàn)實交互的方法的步驟流程圖；
[0016]圖2是本發(fā)明中的一種增強現(xiàn)實投影與現(xiàn)實交互的裝置的結(jié)構(gòu)示意圖。
【具體實施方式】
[0017]為使本發(fā)明的目的、技術(shù)方案和優(yōu)點更加清楚明了，下面結(jié)合【具體實施方式】并參照附圖，對本發(fā)明進一步詳細(xì)說明。應(yīng)該理解，這些描述只是示例性的，而并非要限制本發(fā)明的范圍。此外，在以下說明中，省略了對公知結(jié)構(gòu)和技術(shù)的描述，以避免不必要地混淆本發(fā)明的概念。圖1是本發(fā)明中的一種增強現(xiàn)實投影與現(xiàn)實交互的方法的步驟流程圖。
[0018]步驟102，對至少一個可穿戴設(shè)備進行三維圖像節(jié)點配置。
[0019]本實施例中，在對至少一個可穿戴設(shè)備進行三維圖像節(jié)點配置之前包括:判斷至少一個可穿戴設(shè)備是否佩戴于人體;若是，則對至少一個可穿戴設(shè)備進行三維圖像節(jié)點配置。
[0020]步驟104，根據(jù)三維圖像節(jié)點建立圖像模型。
[0021]本實施例中，根據(jù)三維圖像節(jié)點建立圖像模型包括:智能顯示設(shè)備預(yù)設(shè)待顯示的三維圖像;智能顯示設(shè)備通過內(nèi)置的圖像輸入模塊對外部圖像進行掃描;判斷掃描的外部圖像是否有標(biāo)識;如果掃描的外部圖像具有標(biāo)識，則在標(biāo)識處結(jié)合三維圖像節(jié)點建立圖像模型。
[0022]步驟106，獲取至少一個可穿戴設(shè)備的構(gòu)件的動作姿態(tài)模型。
[0023]本實施例中，獲取至少一個可穿戴設(shè)備的構(gòu)建的動作姿態(tài)模型包括:每個可穿戴設(shè)備監(jiān)測人體運動軌跡;通過每個可穿戴設(shè)備內(nèi)置的通信模塊將監(jiān)測到的人體運動軌跡數(shù)據(jù)發(fā)送至智能顯示設(shè)備;智能顯示設(shè)備根據(jù)人體運動軌跡數(shù)據(jù)，建立動作姿態(tài)模型。
[0024]步驟108，將圖像模型與動作姿態(tài)模型合并計算，獲取圖像顯示姿態(tài)。
[0025]本實施例中，通過對圖像模型與動作姿態(tài)模型根據(jù)預(yù)設(shè)算法結(jié)合合并進行計算，不僅可以獲取圖像的運動軌跡，還可以獲取動作姿態(tài)的運動軌跡，從而完成一次完整的獲取圖像顯示姿態(tài)的過程。此外，本發(fā)明公開的一種增強顯示投影與現(xiàn)實交互的方法還包括:根據(jù)獲取的圖像顯示姿態(tài)進行三維圖像的顯示。
[0026]需要說明的是，根據(jù)可穿戴設(shè)備從肢體以及軀干傳來的運動數(shù)據(jù)，可以構(gòu)建或簡單或復(fù)雜的人體模型，在此人體模型的基礎(chǔ)上便可構(gòu)造衣物以及盔甲的3D圖像模型。模型建立完畢后當(dāng)智能顯示設(shè)備的輸入模塊輸入該處設(shè)備信息時，相應(yīng)的顯示該圖像；同時，當(dāng)人體運動時，通過動作采集、解析以及圖像化，實現(xiàn)衣物跟隨人體運動而運動。
[0027]當(dāng)然，由于設(shè)備都戴在用戶身上，只有當(dāng)用戶通過鏡子或者低頭看時，看能看到自己身上的虛擬現(xiàn)實衣物以及盔甲。而通過區(qū)域互聯(lián)，虛擬現(xiàn)實社交的方式，使用者A可以直接看到使用者B身上的衣物以及盔甲。由此實現(xiàn)在游戲場景或購物中全新的社交型體驗。
[0028]如上所述，本發(fā)明公開的一種增強現(xiàn)實投影與現(xiàn)實交互的方法包括:對至少一個可穿戴設(shè)備進行三維圖像節(jié)點配置;根據(jù)三維圖像節(jié)點建立圖像模型；獲取至少一個可穿戴設(shè)備的構(gòu)建的動作姿態(tài)模型;將圖像模型與動作姿態(tài)模型合并計算，獲取圖像顯示姿態(tài)。上述方法根據(jù)可穿戴設(shè)備從肢體以及軀干傳來的運動數(shù)據(jù)，構(gòu)建或簡單或復(fù)雜的人體模型，在此人體模型的基礎(chǔ)上構(gòu)造衣物以及盔甲的三維圖像模型；模型建立完畢后當(dāng)智能顯示設(shè)備的輸入模塊輸入該處設(shè)備信息時，相應(yīng)的顯示該圖像，與此同時，當(dāng)人體運動時，通過動作采集、解析以及圖像化，實現(xiàn)衣物跟隨人體運動而運動，具有很好的用戶體驗性與易用性。
[0029]可以理解的是，本發(fā)明公開的一種增強現(xiàn)實投影與現(xiàn)實交互方法應(yīng)用場景具有廣泛的易用性。例如，在RPG游戲時，人物需要裝備盔甲，盔甲可通過本技術(shù)即時顯示在用戶身體上，同時同玩游戲的人也可以看到此裝備盔甲。于此同時，可以給盔甲增加一些盔甲耐久度和護甲值等參數(shù)值，在游戲中因為打斗對盔甲造成損耗時，盔甲會隨該情景作一些形變或老化。使用戶的體驗大大提高。
[0030]此外，在購物場景中，顧客可以直接選擇衣物模型通過設(shè)備進行試穿，通過鏡子或額外圖像展示顯示自己與自己穿的衣物，同時可以模擬所在場景例如宴會，旅游，運動等。
[0031]進一步的，在T臺上，用戶可以通過智能頭戴顯示設(shè)備觀看，模特只需身著簡單帶標(biāo)識的衣物便可完成走秀，衣物更換迅速。與此同時，演出也可快速更換服裝。
[0032]基于同樣的原理，圖2是本發(fā)明中的一種增強現(xiàn)實投影與現(xiàn)實交互的裝置的結(jié)構(gòu)示意圖。具體的，一種增強現(xiàn)實投影與現(xiàn)實交互的裝置10包括:配置模塊120、模型建立模塊140、獲取模塊160和計算模塊180。
[0033]其中，配置模塊120用于對至少一個可穿戴設(shè)備進行三維圖像節(jié)點配置;模型建立模塊140用于根據(jù)三維圖像節(jié)點建立圖像模型;獲取模塊160用于獲取至少一個可穿戴設(shè)備的構(gòu)件的動作姿態(tài)模型;計算模塊180用于將圖像模型與動作姿態(tài)模型合并計算，獲取圖像顯示姿態(tài)。
[0034]本實施例中，模型建立模塊140包括待顯示單元141、掃描單元142、判斷單元143和第一模型建立單元144。具體的，待顯示單元141(圖中未示出)用于智能顯示設(shè)備預(yù)設(shè)待顯示的三維圖像;掃描單元142(圖中未示出)用于智能顯示設(shè)備通過內(nèi)置的圖像輸入模塊對外部圖像進行掃描;判斷單元143(圖中未示出)用于判斷掃描的外部圖像是否有標(biāo)識;第一模型建立單元144(圖中未示出)用于如果掃描的外部圖像具有標(biāo)識，則在標(biāo)識處結(jié)合三維圖像節(jié)點建立圖像模型。
[0035]進一步的，本實施例中，獲取模塊160包括:監(jiān)測單元161、發(fā)送單元162和第二模型建立單元163。具體的，監(jiān)測單元161(圖中未示出)用于每個可穿戴設(shè)備監(jiān)測人體運動軌跡；發(fā)送單元162(圖中未示出)用于通過每個可穿戴設(shè)備內(nèi)置的通信模塊將監(jiān)測到的人體運動軌跡數(shù)據(jù)發(fā)送至智能顯示設(shè)備;第二模型建立單元163(圖中未示出)用于智能顯示設(shè)備根據(jù)人體運動軌跡數(shù)據(jù)，建立動作姿態(tài)模型。
[0036]此外，該增強現(xiàn)實投影與現(xiàn)實交互的裝置10還包括判斷模塊110(圖中未示出)用于判斷至少一個可穿戴設(shè)備是否佩戴于人體。
[0037]更進一步的，該增強現(xiàn)實投影與現(xiàn)實交互的裝置10還包括顯示模塊190(圖中未示出)用于根據(jù)獲取的圖像顯示姿態(tài)進行三維圖像的顯示。
[0038]如上所述，本發(fā)明公開的一種增強現(xiàn)實投影與現(xiàn)實交互的裝置包括:通過配置模塊120對至少一個可穿戴設(shè)備進行三維圖像節(jié)點配置;再通過模型建立模塊140根據(jù)三維圖像節(jié)點建立圖像模型;再通過獲取模塊160獲取至少一個可穿戴設(shè)備的構(gòu)建的動作姿態(tài)模型；最后通過計算模塊180將圖像模型與動作姿態(tài)模型合并計算，獲取圖像顯示姿態(tài)。上述裝置根據(jù)可穿戴設(shè)備從肢體以及軀干傳來的運動數(shù)據(jù)，構(gòu)建或簡單或復(fù)雜的人體模型，在此人體模型的基礎(chǔ)上構(gòu)造衣物以及盔甲的三維圖像模型;模型建立完畢后當(dāng)智能顯示設(shè)備的輸入模塊輸入該處設(shè)備信息時，相應(yīng)的顯示該圖像，與此同時，當(dāng)人體運動時，通過動作采集、解析以及圖像化，實現(xiàn)衣物跟隨人體運動而運動，具有很好的用戶體驗性與易用性。
[0039]應(yīng)當(dāng)理解的是，本發(fā)明的上述【具體實施方式】僅僅用于示例性說明或解釋本發(fā)明的原理，而不構(gòu)成對本發(fā)明的限制。因此，在不偏離本發(fā)明的精神和范圍的情況下所做的任何修改、等同替換、改進等，均應(yīng)包含在本發(fā)明的保護范圍之內(nèi)。此外，本發(fā)明所附權(quán)利要求旨在涵蓋落入所附權(quán)利要求范圍和邊界、或者這種范圍和邊界的等同形式內(nèi)的全部變化和修改例。
【主權(quán)項】
1.一種增強現(xiàn)實投影與現(xiàn)實交互的方法，其特征在于，該方法包括: 對至少一個可穿戴設(shè)備進行三維圖像節(jié)點配置； 根據(jù)所述三維圖像節(jié)點建立圖像模型； 獲取所述至少一個可穿戴設(shè)備的構(gòu)建的動作姿態(tài)模型； 將所述圖像模型與所述動作姿態(tài)模型合并計算，獲取圖像顯示姿態(tài)。2.根據(jù)權(quán)利要求1所述的方法，其中，在對至少一個可穿戴設(shè)備進行三維圖像節(jié)點配置之前包括:判斷至少一個可穿戴設(shè)備是否佩戴于人體;若是，則對至少一個可穿戴設(shè)備進行三維圖像節(jié)點配置。3.根據(jù)權(quán)利要求1所述的方法，其中，所述根據(jù)所述三維圖像節(jié)點建立圖像模型包括: 智能顯示設(shè)備預(yù)設(shè)待顯示的三維圖像； 智能顯示設(shè)備通過內(nèi)置的圖像輸入模塊對外部圖像進行掃描； 判斷掃描的所述外部圖像是否有標(biāo)識； 如果掃描的所述外部圖像具有標(biāo)識，則在標(biāo)識處結(jié)合所述三維圖像節(jié)點建立圖像模型。4.根據(jù)權(quán)利要求1所述的方法，其中，所述獲取所述至少一個可穿戴設(shè)備的構(gòu)建的動作姿態(tài)模型包括: 每個所述可穿戴設(shè)備監(jiān)測人體運動軌跡； 通過每個所述可穿戴設(shè)備內(nèi)置的通信模塊將監(jiān)測到的所述人體運動軌跡數(shù)據(jù)發(fā)送至所述智能顯示設(shè)備； 所述智能顯示設(shè)備根據(jù)所述人體運動軌跡數(shù)據(jù)，建立動作姿態(tài)模型。5.根據(jù)權(quán)利要求1所述的方法，還包括: 根據(jù)獲取的所述圖像顯示姿態(tài)進行三維圖像的顯示。6.一種增強現(xiàn)實投影與現(xiàn)實交互的裝置，其特征在于，該裝置包括: 配置模塊，用于對至少一個可穿戴設(shè)備進行三維圖像節(jié)點配置； 模型建立模塊，用于根據(jù)所述三維圖像節(jié)點建立圖像模型； 獲取模塊，用于獲取所述至少一個可穿戴設(shè)備的構(gòu)件的動作姿態(tài)模型； 計算模塊，用于將所述圖像模型與所述動作姿態(tài)模型合并計算，獲取圖像顯示姿態(tài)。7.根據(jù)權(quán)利要求1所述的裝置，其中，還包括:判斷模塊，用于判斷至少一個可穿戴設(shè)備是否佩戴于人體。8.根據(jù)權(quán)利要求1所述的裝置，其中，所述模型建立模塊包括: 待顯示單元，用于智能顯示設(shè)備預(yù)設(shè)待顯示的三維圖像； 掃描單元，用于智能顯示設(shè)備通過內(nèi)置的圖像輸入模塊對外部圖像進行掃描； 判斷單元，用于判斷掃描的所述外部圖像是否有標(biāo)識； 第一模型建立單元，用于如果掃描的所述外部圖像具有標(biāo)識，則在標(biāo)識處結(jié)合所述三維圖像節(jié)點建立圖像模型。9.根據(jù)權(quán)利要求1所述的裝置，其中，所述獲取模塊包括: 監(jiān)測單元，用于每個所述可穿戴設(shè)備監(jiān)測人體運動軌跡； 發(fā)送單元，用于通過每個所述可穿戴設(shè)備內(nèi)置的通信模塊將監(jiān)測到的所述人體運動軌跡數(shù)據(jù)發(fā)送至所述智能顯示設(shè)備； 第二模型建立單元，用于所述智能顯示設(shè)備根據(jù)所述人體運動軌跡數(shù)據(jù)，建立動作姿態(tài)模型。10.根據(jù)權(quán)利要求1所述的裝置，還包括:顯示模塊，用于根據(jù)獲取的所述圖像顯示姿態(tài)進行三維圖像的顯示。
【文檔編號】G06F3/01GK106095094SQ201610406009
【公開日】2016年11月9日
【申請日】2016年6月10日
【發(fā)明人】王飛
【申請人】北京行云時空科技有限公司