[go: up one dir, main page]

TWI482149B - The Method of Emotional Classification of Game Music - Google Patents

The Method of Emotional Classification of Game Music Download PDF

Info

Publication number
TWI482149B
TWI482149B TW101148696A TW101148696A TWI482149B TW I482149 B TWI482149 B TW I482149B TW 101148696 A TW101148696 A TW 101148696A TW 101148696 A TW101148696 A TW 101148696A TW I482149 B TWI482149 B TW I482149B
Authority
TW
Taiwan
Prior art keywords
music
game
game music
emotional
parameters
Prior art date
Application number
TW101148696A
Other languages
English (en)
Other versions
TW201426731A (zh
Original Assignee
Univ Southern Taiwan Sci & Tec
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Univ Southern Taiwan Sci & Tec filed Critical Univ Southern Taiwan Sci & Tec
Priority to TW101148696A priority Critical patent/TWI482149B/zh
Publication of TW201426731A publication Critical patent/TW201426731A/zh
Application granted granted Critical
Publication of TWI482149B publication Critical patent/TWI482149B/zh

Links

Landscapes

  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Description

遊戲音樂的情緒分類方法
本發明是有關於一種音樂分類方法,特別是指一種遊戲音樂的情緒分類方法。
在資訊爆炸的時代中,音樂的獲取相當容易,配合電玩遊戲的日益興盛,許多電玩遊戲後來都會針對其使用之遊戲音樂另外發行遊戲原聲帶,或甚至舉辦演奏會。而遊戲音樂為了符合遊戲場景內容,通常都是有故事性,因此若能以情緒來分類遊戲音樂,並讓遊戲者可挑選符合自己心情的遊戲音樂,則該電玩遊戲將能更受遊戲者所喜愛。
雖然目前已有業者開發出所謂能夠對音樂進行情緒分類的軟體系統或裝置,但這類軟體系統或裝置的分類方法都是以預先設定之制式規則進行音樂情緒分類,由於每個人對於音樂的感受都不盡相同,其分類結果經常不被使用者所接受,所以這種制式分類方式並無法適用每個人,適用性差。
因此,本發明之目的,即在提供一種透過調性、音程與節奏對遊戲音樂進行情緒分類的情緒分類方法。
本發明之另一目的在於提供一種可供使用者根據自身感受進行遊戲音樂之情緒分類的情緒分類方法。
於是,本發明遊戲音樂的情緒分類方法,適用於透過軟體及/或硬體的方式建構在一電子裝置中,而用以對遊戲 音樂進行情緒分類,包含以下步驟:(A)對該電子裝置儲存之多首遊戲音樂樣本分別設定一對應的情緒形容詞參數;(B)對步驟(A)之每一首遊戲音樂樣本進行調性、節奏與音程等音樂特徵分析,而對應每一首遊戲音樂樣本輸出多個音樂特徵參數;(C)以多類別支援向量機統計分析該等遊戲音樂樣本之情緒形容詞參數分別與對應之該等音樂特徵參數的關連性,而建構輸出一個多類別情緒預測模型;及(D)對該電子裝置後續儲存之每一首新遊戲音樂進行音樂特徵分析而對應輸出多個音樂特徵參數,並以該多類別情緒預測模型分析該新遊戲音樂之該等音樂特徵參數,而對該音遊戲音樂進行情緒分類,並輸出一對應該新遊戲音樂之情緒形容詞參數。
本發明之功效:藉由以支援向量機對遊戲音樂之調性、音程與節奏等音樂特徵參數,以及對該等遊戲音樂所設定之情緒形容詞參數進行統計分析的方式,可建構出一能夠對遊戲音樂進行情緒分類,且分類準確度高的多類別情緒預測模型。
有關本發明之前述及其他技術內容、特點與功效,在以下配合參考圖式之一個較佳實施例的詳細說明中,將可清楚的呈現。
如圖1所示,本發明遊戲音樂的情緒分類方法的較佳實施例,適用於透過軟體及/或硬體的方式建構在一電子裝置中,而可用以對該電子裝置所儲存之遊戲音樂進行情緒 分類。該情緒分類方法包含以下步驟:步驟(一)對遊戲音樂樣本設定情緒形容詞參數。先對多首已經被確定其情緒分類之遊戲音樂樣本分別設定一代表其情緒歸屬的情緒形容詞參數。
在本實施例中,會將該等遊戲音樂樣本分為五類情緒,且每一種情緒分類會對應一情緒形容詞與一情緒形容詞參數,該等情緒形容詞分別為『平靜的』、『冰冷的』、『奇異的』、『幽默的』,及『熱情的』。但實施時,採用之情緒形容詞的類型不以上述類型為限。
步驟(二)對所有遊戲音樂樣本進行音樂特徵分析,以取得該等遊戲音樂樣本的音樂特徵參數。對每一首遊戲音樂樣本進行調性、音程與節奏等三種音樂特徵分析,而對應輸出每一首遊戲音樂樣本的音樂特徵參數。
其中,調性音樂特徵分析,是分析每一首遊戲音樂樣本中所含有之調性種類,及各種調性的分佔比例(%),例如C大調、D大調、E大調與B大調等,及C小調、D小調與B小調等調性的分佔比例,而統計分析出每一情緒形容詞參數所對應之所有遊戲音樂樣本的各種調性的平均分佔比例(%)。音程音樂特徵是分析每一首遊戲音樂樣本所採用之完全協和音程、不完全協和音程,及不協和音程的分佔比例,並統計分析出每一情緒形容詞參數所對應之所有遊戲音樂樣本的完全協和音程、不完全協和音程,及不協和音程之平均分佔比例(%)。該節奏音樂特徵的分析是分析每一首遊戲音樂樣本的節奏(beat per minute,bpm),並統計分 析出每一情緒形容詞參數所對應之所有遊戲音樂樣本的平均節奏速度。
在分析出每一首遊戲音樂樣本之該等音樂特徵後,會將該等音樂特徵進行數據編碼與正規化處理,以產生所需的音樂特徵參數。
在本實施例中,該等遊戲音樂樣本之調性音樂特徵、音程音樂特徵與節奏音樂特徵是分別透過MATLAB程式軟體進行分析,但實施時,由於前述音樂特徵之分析方法眾多,因此不以本案採用之軟體為限。此外,由於數據編碼與正規化為現有統計分析常用之技術手段,且方式眾多,因此不再詳述。
步驟(三)以支援向量機(Support Vector Machine,SVM)建立多類別情緒預測模型。以支援向量機對步驟(一)每一遊戲音樂樣本所設定的情緒形容詞參數,及步驟(二)對該等遊戲音樂樣本分析所得之音樂特徵參數進行多類別情緒預測模型的建立。
在本實施例中,根據每一遊戲音樂樣本的該等音樂特徵參數,及每一遊戲音樂樣本對應的情緒形容詞參數進行統計分析,而形成多類別分類問題,再將多類別分類問題分解為一系列一對一(One-against-one,OAO)的支援向量機模型,並透過高斯核心函數(Gaussian kernel)進行交叉驗證,並根據所有支援向量機模型的判斷結果,而建立出一個多類別情緒預測模型。此時,該多類別情緒預測模型即可用以對該電子裝置另外儲存之其他遊戲音樂進行情緒 分類。
步驟(四)分析該等音樂特徵參數對於每一情緒形容詞參數的重要性。根據步驟(三)所建立之多類別情緒預測模型,進一步透過支援向量機遞迴特徵消去法(support vector machine recursive feature elimination,SVMREF)分析每一個音樂特徵參數對每一情緒形容詞參數的影響權重,而輸出該等音樂特徵參數在每一情緒形容詞參數中的權重排列順序資料,例如表1所示。
此權重排序順序可方便遊戲音樂製作者了解哪種音樂特徵對於哪一種情緒的表達較具有影響力,而有助於使製作出來的遊戲音樂所表達的情緒更符合遊戲劇情,也更容易引發遊戲者的情感共鳴。
步驟(五)以該多類別情緒預測模型對該電子裝置儲存之其他遊戲音樂進行情緒分類。在根據前述遊戲音樂樣本建立該多類別情緒預測模型後,就可以該多類別情緒預測模型進行遊戲音樂的情緒分類處理。進行分類時,同樣是先對該等帶分類之新遊戲音樂進行音樂特徵分析,以取 得每一待分類之新遊戲音樂的調性、音程與節奏等音樂特徵參數,然後再以該多類別情緒預測模型對每一待分類之新遊戲音樂的該等音樂特徵參數進行分析,而找出與每一待分類之新遊戲音樂對應的情緒形容詞參數,進而分析出每一新遊戲音樂所屬的情緒類別,並於完成情緒分析後,驅使該電子裝置回饋顯示出一對應於該被分析之新遊戲音樂的情緒形容詞參數的動畫影像,藉以提醒該電子裝置使用者。
步驟(六)將分析後之新遊戲音樂依據其情緒形容詞參數進行分類儲存,建立一遊戲音樂情緒分類資料庫。
本發明透過上述步驟對該等遊戲音樂樣本進行調性、音程與節奏等音樂特徵參數分析,並配合五種情緒形容詞參數進行支援向量機統計分析,以建構出多類別情緒預測模型,此多類別情緒預測模型之情緒分類準確度高,確實可有效根據遊戲音樂的該等音樂特徵參數進行準確的情緒分類。
必須說明的是,前述遊戲音樂樣本之初步情緒分類,可以是使用建構有本方法之電子裝置之使用者依據其本身聆聽感受所做之分類,所以步驟(三)所建立的多類別情緒預測模型的遊戲音樂情緒分類模式會貼近該位使用者之個人喜好,因此,本發明遊戲音樂的情緒分類方法可方便建構有本方法之電子裝置的使用者,依據其自身感受來建立專屬的多類別情緒預測模型,使遊戲音樂的分類結果更符合使用者的需求。
當然,實施時,該等遊戲音樂樣本的情緒分類也可以是透過問卷實驗分析所產生,此時,透過本方法所建構之多類別情緒預測模型的遊戲分類結果,則會較貼近一般大眾的普遍性認知,而可適用於遊戲軟體開發者使用。
因此,本發明遊戲音樂的情緒分類方法可方便根據使用者初始建立之遊戲音樂的情緒分類差異,來建立出符合各種需求之專屬多類別情緒預測模型,而可改善傳統音樂情緒分類系統僅能依據其原先設定之制式分析模式進行音樂情緒分類的缺點。
綜上所述,藉由以支援向量機對遊戲音樂之調性、音程與節奏等音樂特徵參數,以及對該等遊戲音樂所設定之情緒形容詞參數進行統計分析的方式,可建構出一能夠對遊戲音樂進行情緒分類,且分類準確度高的多類別情緒預測模型,此將有助於電玩遊戲者與電玩遊戲開發者快速獲取遊戲音樂之情緒分類,並瞭解各種音樂特徵參數對於情緒屬性的影響力,遊戲音樂開發者可針對特定遊戲情感內容或情境,設計出符合玩家需求的遊戲產品。此外,本發明也可供使用者依據其自身聆聽感受所做之遊戲音樂樣本的情緒分類,透過本發明建立出一個專屬的多類別情緒預測模型,而可使日後對遊戲音樂的情緒分類結果更貼近本身喜好,而可改善傳統音樂情緒分類系統僅能依據其原先設定之制式分析模式進行音樂情緒分類的缺點,相當方便實用。因此,確實可達到本發明之目的。
惟以上所述者,僅為本發明之較佳實施例而已,當不 能以此限定本發明實施之範圍,即大凡依本發明申請專利範圍及發明說明內容所作之簡單的等效變化與修飾,皆仍屬本發明專利涵蓋之範圍內。
圖1是本發明遊戲音樂的情緒分類方法之一較佳實施例的步驟流程圖。

Claims (3)

  1. 一種遊戲音樂的情緒分類方法,適用於透過軟體及/或硬體的方式建構在一電子裝置,而用以對遊戲音樂進行情緒分類,包含以下步驟:(A)對該電子裝置儲存之多首遊戲音樂樣本分別設定一對應的情緒形容詞參數;(B)對步驟(A)之每一首遊戲音樂樣本進行調性、節奏與音程等音樂特徵分析,而對應每一首遊戲音樂樣本輸出多個音樂特徵參數;(C)以多類別支援向量機統計分析該等遊戲音樂樣本之情緒形容詞參數分別與對應之該等音樂特徵參數的關連性,而建構輸出一個多類別情緒預測模型;(F)根據步驟(C)之多類別情緒預測模型,以支援向量機遞迴特徵消去法分析每一種音樂特徵參數對每一種情緒形容詞參數的影響權重順序,而輸出該等音樂特徵參數在每一情緒形容詞參數中的權重排列順序資料;及(D)對該電子裝置後續儲存之每一首新遊戲音樂進行音樂特徵分析而對應輸出多個音樂特徵參數,並以該多類別情緒預測模型分析該新遊戲音樂之該等音樂特徵參數,而對該音遊戲音樂進行情緒分類,並輸出一對應該新遊戲音樂之情緒形容詞參數。
  2. 根據申請專利範圍第1項所述之遊戲音樂的情緒分類方法,還包含一步驟(E):依據步驟(D)分析出之該新 遊戲音樂所對應的情緒形容詞參數,將該新遊戲音樂分類儲存,建立一遊戲音樂情緒分類資料庫。
  3. 根據申請專利範圍第1項所述之遊戲音樂的情緒分類方法,步驟(D)還會在分析出每一新遊戲音樂的情緒形容詞參數時,經由該電子裝置顯示出一影像以進行提醒。
TW101148696A 2012-12-20 2012-12-20 The Method of Emotional Classification of Game Music TWI482149B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
TW101148696A TWI482149B (zh) 2012-12-20 2012-12-20 The Method of Emotional Classification of Game Music

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
TW101148696A TWI482149B (zh) 2012-12-20 2012-12-20 The Method of Emotional Classification of Game Music

Publications (2)

Publication Number Publication Date
TW201426731A TW201426731A (zh) 2014-07-01
TWI482149B true TWI482149B (zh) 2015-04-21

Family

ID=51725633

Family Applications (1)

Application Number Title Priority Date Filing Date
TW101148696A TWI482149B (zh) 2012-12-20 2012-12-20 The Method of Emotional Classification of Game Music

Country Status (1)

Country Link
TW (1) TWI482149B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113038998B (zh) * 2018-11-15 2024-12-10 索尼互动娱乐有限责任公司 游戏中的动态音乐创建

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040111271A1 (en) * 2001-12-10 2004-06-10 Steve Tischer Method and system for customizing voice translation of text to speech
EP1577877A1 (en) * 2002-10-24 2005-09-21 National Institute of Advanced Industrial Science and Technology Musical composition reproduction method and device, and method for detecting a representative motif section in musical composition data

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040111271A1 (en) * 2001-12-10 2004-06-10 Steve Tischer Method and system for customizing voice translation of text to speech
EP1577877A1 (en) * 2002-10-24 2005-09-21 National Institute of Advanced Industrial Science and Technology Musical composition reproduction method and device, and method for detecting a representative motif section in musical composition data

Also Published As

Publication number Publication date
TW201426731A (zh) 2014-07-01

Similar Documents

Publication Publication Date Title
CN104700860B (zh) 律动图像化方法及系统
Li et al. Mec 2017: Multimodal emotion recognition challenge
Wang et al. The acoustic emotion Gaussians model for emotion-based music annotation and retrieval
Kabani et al. Emotion based music player
Ringeval et al. Emotion recognition in the wild: Incorporating voice and lip activity in multimodal decision-level fusion
JP6535497B2 (ja) 楽曲推薦システム、プログラム及び楽曲推薦方法
Ottl et al. Group-level speech emotion recognition utilising deep spectrum features
Drossos et al. Affective acoustic ecology: Towards emotionally enhanced sound events
Lee et al. System for matching paintings with music based on emotions
WO2022242706A1 (zh) 基于多模态的反应式响应生成
Zhang Voice keyword retrieval method using attention mechanism and multimodal information fusion
CN109992677A (zh) 基于Valence-Arousal情感空间的图像-音乐匹配系统
CN110493612A (zh) 弹幕信息的处理方法、服务器及计算机可读存储介质
Khurana et al. Tri-integrated convolutional neural network for audio image classification using Mel-frequency spectrograms
WO2017143951A1 (zh) 一种表情反馈方法及智能机器人
Haider et al. An active data representation of videos for automatic scoring of oral presentation delivery skills and feedback generation
TWI486949B (zh) Music emotion classification method
TWI482149B (zh) The Method of Emotional Classification of Game Music
Wang et al. Video affective content analysis by exploring domain knowledge
Cunha Sergio et al. Emotional Video to Audio Transformation Using Deep Recurrent Neural Networks and a Neuro‐Fuzzy System
CN107507629B (zh) 热触觉音乐感知系统及其控制方法
Huang et al. Research on music emotion intelligent recognition and classification algorithm in music performance system
Tatz et al. Face-voice space: Integrating visual and auditory cues in judgments of person distinctiveness
Lin et al. Emotion visualization system based on physiological signals combined with the picture and scene
CN111950266B (zh) 一种数据处理方法、装置和用于数据处理的装置

Legal Events

Date Code Title Description
MM4A Annulment or lapse of patent due to non-payment of fees