情緒監(jiān)控方法和裝置的制造方法
【技術(shù)領(lǐng)域】
[0001]本申請涉及計(jì)算機(jī)技術(shù)領(lǐng)域，具體涉及人機(jī)交互技術(shù)領(lǐng)域，尤其涉及情緒監(jiān)控方法和裝置。
【背景技術(shù)】
[0002]隨著科學(xué)技術(shù)的不斷發(fā)展，人們的生活節(jié)奏也越來越快，這使得人們在關(guān)注自身情緒變化上所能夠花費(fèi)的時(shí)間和精力越來越少，因此需要通過一些輔助的技術(shù)手段來幫助人們記錄情緒變化的相關(guān)情況。現(xiàn)有技術(shù)在記錄用戶的情緒信息時(shí)，通常先獲取用戶在某個(gè)時(shí)刻的情緒狀態(tài)，然后為獲取的情緒狀態(tài)添加相應(yīng)的情緒標(biāo)簽并保存下來。圖1所示為現(xiàn)有技術(shù)中記錄情緒信息的示意圖。如圖1所示，現(xiàn)有技術(shù)可以將具有不同的表情圖像按照情緒類型進(jìn)行區(qū)分，并為每個(gè)類型附加一個(gè)簡單的情緒標(biāo)簽，例如“喜”、“驚”、“哀”、“怒”等。這種情緒記錄方式使得用戶在后期進(jìn)行情緒回顧時(shí)，只能得到簡單的情緒標(biāo)簽，而無法有效地對情緒變化情況進(jìn)行管理分析。

【發(fā)明內(nèi)容】

[0003]本申請?zhí)峁┝艘环N情緒監(jiān)控方法和裝置。
[0004]一方面，本申請?zhí)峁┝艘环N情緒監(jiān)控方法，所述方法包括:獲取用戶的當(dāng)前情緒的情緒表現(xiàn)信息；獲取所述當(dāng)前情緒的情緒刺激源信息；將所述情緒表現(xiàn)信息與所述情緒刺激源信息進(jìn)行關(guān)聯(lián)后存儲(chǔ)。
[0005]在某些實(shí)施方式中，在將所述情緒表現(xiàn)信息與所述情緒刺激源信息進(jìn)行關(guān)聯(lián)后存儲(chǔ)之前，所述方法還包括:檢測到所述當(dāng)前情緒發(fā)生變化。
[0006]在某些實(shí)施方式中，所述當(dāng)前情緒發(fā)生變化包括:所述當(dāng)前情緒的情緒類型或情緒強(qiáng)度發(fā)生變化。
[0007]在某些實(shí)施方式中，所述情緒強(qiáng)度發(fā)生變化具體為:所述情緒強(qiáng)度變化的幅度達(dá)到預(yù)設(shè)閾值。
[0008]在某些實(shí)施方式中，所述獲取用戶的當(dāng)前情緒的情緒表現(xiàn)信息包括:根據(jù)當(dāng)前采集到的多媒體信息和/或生理信號信息確定用戶的當(dāng)前情緒的情緒表現(xiàn)信息，其中，所述多媒體信息包括文本信息、圖像信息、音頻信息和視頻信息中的至少一個(gè)。
[0009]在某些實(shí)施方式中，所述方法還包括:將所述情緒表現(xiàn)信息進(jìn)行信息轉(zhuǎn)化；所述將所述情緒表現(xiàn)信息與所述情緒刺激源信息進(jìn)行關(guān)聯(lián)后存儲(chǔ)包括:將轉(zhuǎn)化后的情緒表現(xiàn)信息與所述情緒刺激源信息進(jìn)行關(guān)聯(lián)后存儲(chǔ)。
[0010]在某些實(shí)施方式中，所述獲取當(dāng)前情緒的情緒刺激源信息包括:根據(jù)當(dāng)前獲取的多媒體信息、環(huán)境信息和生理信號信息中的至少一個(gè)確定所述當(dāng)前情緒的情緒刺激源信息，其中，所述多媒體信息包括文本信息、圖像信息、音頻信息和視頻信息中的至少一個(gè)。
[0011]在某些實(shí)施方式中，所述根據(jù)當(dāng)前獲取的多媒體信息確定所述情緒刺激源信息包括:
[0012]將當(dāng)前輸出和/或采集的音頻信息、所述音頻信息的屬性信息、所述音頻信息在預(yù)設(shè)時(shí)間段內(nèi)的音頻片段和所述音頻信息的語義信息中的至少一個(gè)作為所述情緒刺激源信息。
[0013]在某些實(shí)施方式中，所述根據(jù)當(dāng)前獲取的多媒體信息確定所述情緒刺激源信息包括:將當(dāng)前輸出和/或采集的視頻信息、所述視頻信息的屬性信息、所述視頻信息在預(yù)設(shè)時(shí)間段內(nèi)的視頻片段、所述視頻信息的語義信息、所述視頻信息中的事件信息、所述視頻信息中的人物信息、所述視頻信息的截圖信息和所述視頻信息的音頻信息中的至少一個(gè)作為所述情緒刺激源信息。
[0014]在某些實(shí)施方式中，所述根據(jù)當(dāng)前獲取的多媒體信息確定所述情緒刺激源信息包括:將當(dāng)前輸出和/或采集的圖像信息、所述圖像信息中的事件信息和所述圖像信息中的人物信息中的至少一個(gè)作為所述情緒刺激源信息。
[0015]在某些實(shí)施方式中，所述根據(jù)當(dāng)前獲取的多媒體信息確定所述情緒刺激源信息包括:將當(dāng)前輸出和/或采集的文本信息和所述文本信息的語義信息中的至少一個(gè)作為所述情緒刺激源信息。
[0016]在某些實(shí)施方式中，所述生理信號信息包括用戶當(dāng)前的生理信號信息或根據(jù)所述生理信號信息得到的健康信息。
[0017]在某些實(shí)施方式中，所述環(huán)境信息包括時(shí)間信息、位置信息、天氣信息、溫度信息和濕度信息中的至少一個(gè)。
[0018]在某些實(shí)施方式中，所述方法還包括:將所述當(dāng)前情緒的情緒類型和情緒強(qiáng)度與所述情緒表現(xiàn)信息進(jìn)行關(guān)聯(lián)后存儲(chǔ)。
[0019]在某些實(shí)施方式中，所述方法還包括:將所述情緒強(qiáng)度進(jìn)行歸一化處理。
[0020]在某些實(shí)施方式中，當(dāng)所述當(dāng)前情緒的情緒類型在預(yù)設(shè)的采樣時(shí)間段內(nèi)保持不變時(shí)，所述方法還包括:若所述當(dāng)前情緒的情緒強(qiáng)度大于已存儲(chǔ)的情緒強(qiáng)度，則將已存儲(chǔ)的情緒表現(xiàn)信息和已存儲(chǔ)的情緒刺激源信息分別替換為當(dāng)前情緒的情緒表現(xiàn)信息和當(dāng)前情緒的情緒刺激源信息。
[0021]在某些實(shí)施方式中，在獲取情緒表現(xiàn)信息以及情緒刺激源信息之前，所述方法還包括:檢測到預(yù)設(shè)的情緒監(jiān)控程序運(yùn)行。
[0022]在某些實(shí)施方式中，所述方法還包括:將已存儲(chǔ)的所述情緒表現(xiàn)信息和相關(guān)聯(lián)的所述情緒刺激源信息進(jìn)行分享或展示；或，將已存儲(chǔ)的所述情緒表現(xiàn)信息和相關(guān)聯(lián)的所述情緒刺激源信息進(jìn)行數(shù)據(jù)分析，并將所述數(shù)據(jù)分析的結(jié)果進(jìn)行分享或展示；或，將已存儲(chǔ)的所述情緒表現(xiàn)信息和相關(guān)聯(lián)的所述情緒刺激源信息進(jìn)行數(shù)據(jù)分析，并根據(jù)所述數(shù)據(jù)分析的結(jié)果輸出情緒管理建議信息。
[0023]在某些實(shí)施方式中，所述方法還包括:獲取關(guān)聯(lián)用戶的情緒表現(xiàn)信息和/或情緒刺激源信息；將所述關(guān)聯(lián)用戶的情緒表現(xiàn)信息和/或情緒刺激源信息進(jìn)行分享。
[0024]在某些實(shí)施方式中，所述方法還包括:接收關(guān)聯(lián)用戶分享的情緒表現(xiàn)信息和情緒刺激源信息；將所述關(guān)聯(lián)用戶分享的情緒表現(xiàn)信息和情緒刺激源信息，與已存儲(chǔ)的情緒表現(xiàn)信息和情緒刺激源信息進(jìn)行合并。
[0025]第二方面，本申請?zhí)峁┝艘环N情緒監(jiān)控裝置，所述裝置包括:表現(xiàn)信息獲取模塊，用于獲取用戶的當(dāng)前情緒的情緒表現(xiàn)信息；刺激源信息獲取模塊，用于獲取所述當(dāng)前情緒的情緒刺激源信息；關(guān)聯(lián)存儲(chǔ)模塊，用于將所述情緒表現(xiàn)信息與所述情緒刺激源信息進(jìn)行關(guān)聯(lián)后存儲(chǔ)。
[0026]在某些實(shí)施方式中，所述裝置還包括:變化檢測模塊，用于檢測到所述當(dāng)前情緒發(fā)生變化。
[0027]在某些實(shí)施方式中，所述當(dāng)前情緒發(fā)生變化包括:所述當(dāng)前情緒的情緒類型或情緒強(qiáng)度發(fā)生變化。
[0028]在某些實(shí)施方式中，所述情緒強(qiáng)度發(fā)生變化具體為:所述情緒強(qiáng)度變化的幅度達(dá)到預(yù)設(shè)閾值。
[0029]在某些實(shí)施方式中，所述表現(xiàn)信息獲取模塊包括:表現(xiàn)信息獲取子模塊，用于根據(jù)當(dāng)前采集到的多媒體信息和/或生理信號信息確定用戶的當(dāng)前情緒的情緒表現(xiàn)信息，其中，所述多媒體信息包括文本信息、圖像信息、音頻信息和視頻信息中的至少一個(gè)。
[0030]在某些實(shí)施方式中，所述裝置還包括:表現(xiàn)信息轉(zhuǎn)化模塊，用于將所述情緒表現(xiàn)信息進(jìn)行信息轉(zhuǎn)化。
[0031]在某些實(shí)施方式中，所述關(guān)聯(lián)存儲(chǔ)模塊包括:關(guān)聯(lián)存儲(chǔ)子模塊，用于將轉(zhuǎn)化后的情緒表現(xiàn)信息與所述情緒刺激源信息進(jìn)行關(guān)聯(lián)后存儲(chǔ)。
[0032]在某些實(shí)施方式中，所述刺激源信息獲取模塊包括:刺激源信息獲取子模塊，用于根據(jù)當(dāng)前獲取的多媒體信息、環(huán)境信息和生理信號信息中的至少一個(gè)確定所述當(dāng)前情緒的情緒刺激源信息。
[0033]在某些實(shí)施方式中，所述刺激源信息獲取子模塊具體用于根據(jù)當(dāng)前輸出和/或采集的多媒體信息確定所述情緒刺激源信息，其中，所述多媒體信息包括文本信息、圖像信息、音頻信息和視頻信息中的至少一個(gè)。
[0034]在某些實(shí)施方式中，所述刺激源信息獲取子模塊包括:音頻信息單元，用于將當(dāng)前輸出和/或采集的音頻信息、所述音頻信息的屬性信息、所述音頻信息在預(yù)設(shè)時(shí)間段內(nèi)的音頻片段和所述音頻信息的語義信息中的至少一個(gè)作為所述情緒刺激源信息。
[0035]在某些實(shí)施方式中，所述刺激源信息獲取子模塊包括:視頻信息單元，用于將當(dāng)前輸出和/或采集的視頻信息、所述視頻信息的屬性信息、所述視頻信息在預(yù)設(shè)時(shí)間段內(nèi)的視頻片段、所述視頻信息的語義信息、所述視頻信息中的事件信息、所述視頻信息中的人物信息、所述視頻信息的截圖信息和所述視頻信息的音頻信息中的至少一個(gè)作為所述情緒刺激源信息。
[0036]在某些實(shí)施方式中，所述刺激源信息獲取子模塊包括:圖像信息單元，用于將當(dāng)前輸出和/或采集的圖像信息、所述圖像信息中的事件信息和所述圖像信息中的人物信息中的至少一個(gè)作為所述情緒刺激源信息。
[0037]在某些實(shí)施方式中，所述刺激源信息獲取子模塊包括:文本信息單元，用于將當(dāng)前輸出和/或采集的文本信息和所述文本信息的語義信息中的至少一個(gè)作為所述情緒刺激源信息。
[0038]在某些實(shí)施方式中，所述生理信號信息包括用戶當(dāng)前的生理信號信息或根據(jù)所述生理信號信息得到的健康信息。
[0039]在某些實(shí)施方式中，所述環(huán)境信息包括時(shí)間信息、位置信息、天氣信息、溫度信息和濕度信息中的至少一個(gè)。
[0040]在某些實(shí)施方式中，所述裝置還包括:情緒存儲(chǔ)模塊，用于將所述當(dāng)前情緒的情緒類型和情緒強(qiáng)度與所述情緒表現(xiàn)信息進(jìn)行關(guān)聯(lián)后存儲(chǔ)。
[0041]在某些實(shí)施方式中，所述裝置還包括:歸一化模塊，用于將所述情緒強(qiáng)度進(jìn)行歸一化處理。
[0042]在某些實(shí)施方式中，當(dāng)所述當(dāng)前情緒的情緒類型在預(yù)設(shè)的采樣時(shí)間段內(nèi)保持不變時(shí)，所述裝置還包括:情緒更新模塊，用于當(dāng)所述當(dāng)前情緒的情緒強(qiáng)度大于已存儲(chǔ)的情緒強(qiáng)度時(shí)，將已存儲(chǔ)的情緒表現(xiàn)信息和已存儲(chǔ)的情緒刺激源信息分別替換為當(dāng)前情緒的情緒表現(xiàn)信息和當(dāng)前情緒的情緒刺激源信息。
[0043]在某些實(shí)施方式中，所述裝置還包括:程序檢測模塊，用于檢測到預(yù)設(shè)的情緒監(jiān)控程序運(yùn)行。
[0044]在某些實(shí)施方式中，所述裝置還包括:展示分享模塊，用于將已存儲(chǔ)的所述情緒表現(xiàn)信息和相關(guān)聯(lián)的所述情緒刺激源信息進(jìn)行分享或展示；數(shù)據(jù)分析模塊，用于將已存儲(chǔ)的所述情緒表現(xiàn)信息和相關(guān)聯(lián)的所述情緒刺激源信息進(jìn)行數(shù)據(jù)分析，并將所述數(shù)據(jù)分析的結(jié)果進(jìn)行分享或展示；情緒建議模塊，用于將已存儲(chǔ)的所述情緒表現(xiàn)信息和相關(guān)聯(lián)的所述情緒刺激源信息進(jìn)行數(shù)據(jù)分析，并根據(jù)所述數(shù)據(jù)分析的結(jié)果輸出情緒管理建議信息。
[0045]在某些實(shí)施方式中，所述裝置還包括:關(guān)聯(lián)情緒獲取模塊，用于獲取關(guān)聯(lián)用戶的情緒表現(xiàn)信息和/或情緒刺激源信息；關(guān)聯(lián)情緒分享模塊，用于將所述關(guān)聯(lián)用戶的情緒表現(xiàn)信息和/或情緒刺激源信息進(jìn)行分享。
[0046]在某些實(shí)施方式中，所述裝置還包括:情緒接收模塊，用于接收關(guān)聯(lián)用戶分享的情緒表現(xiàn)信息和情緒刺激源信息；情緒合并模塊，用于將所述關(guān)聯(lián)用戶分享的情緒表現(xiàn)信息和情緒刺激源信息，與已存儲(chǔ)的情緒表現(xiàn)信息和情緒刺激源信息進(jìn)行合并。