音乐影视情绪视频素材库的编制与评定_徐志斌.pdf

Chinese national Expo 139Music and Dance 音乐舞蹈人审美观的音乐影视情绪视频素材库。根据刺激通道类型，情绪素材库还可以分为视觉通道刺激、听觉通道刺激、视听双通道刺激素材库。如视觉通道刺激素材库通过图片刺激情绪而建立，根据内容分为面孔表情、微表情和图片素材库。面孔表情数据库有日本女性面部表情、卡罗林斯卡定向情绪面孔、加利福尼亚面部表情、自然可见与红外人脸表情数据库等，通过评分者对图片进行情绪类别的判定和情绪强烈程度的自我报告进行 9 点量表评分。微表情素材库有中国科学院微表情、中国科学院微表情、中国科学院宏表情和微表情等。这三个数据库的建立都是在良好环境的实验室中获取样本，采用自我报告的方式进行实验数据收集。图片素材库有国际情绪图片库、中国情绪图片库、中国肢体情绪材料库等。听觉通道刺激素材库是通过声音刺激情绪而建立的素材库，目前有中国情感数码声音系统和中国情绪音乐材料库。视听觉双通道刺激素材库是通过影视素材刺激情绪而建立的素材库，目前有情绪影像、中国情绪影像材料数据库。使用自我报告的 5 点量表、正性负性情绪量表及分化情绪量表进行自我评定。综上所述，通过影视和音乐素材结合的视听双通道情绪素材库暂未建立。本研究试图通过自我报告量表对被试的情绪进行评定，建立音乐影视情绪视频素材库。一、实验材料设计由于“西学东渐”的影响，我国当代的音乐教育主要是以西方音乐体系而建立。音乐素材选择西方古典音乐片段，均来源于互联网络，采用音乐会视频。收集 195 个正性和负引言心理实验成为研究情绪的主要手段，情绪素材库的建设就显得尤为重要。通过心理行为实验，建立一个符合中国人审美习惯的音乐与影视人物表情视频相结合的情绪素材库，补充国内现有的情绪素材库，为情绪、音乐审美教育等心理实验研究提供实验素材和工具。情绪离散理论认为人的各种情绪由几种基本情绪构成，其他情绪都是由不同的基本情绪组合形成。Ekman 将情感划分为 7 种基本情绪，即高兴、悲伤、厌恶、轻蔑、愤怒、恐惧和惊奇，复合情绪由基本情绪进行不同的组合后产生，且具有文化特异性，但复合情绪很难全面反映人类的各种复杂情绪。情绪维度理论认为所有情绪都可以被映射到一个连续的情绪空间模型中，Thayer 通过唤醒度和效价两个维度来量化情绪测量模型，得到国内外广泛的认可，运用正性和负性的效价和激发情绪强弱的唤醒度的二维情绪模型对情绪的情态进行评价。离散情绪数据库在国内外有奈梅亨面孔、Nim Stim、日本女性面部表情、中国情绪影像和中国情绪面孔系统情绪库等。一般规模较小，普遍缺乏稍微复杂的情绪实验材料。维度情绪数据库有情绪影像、中国情绪影像、国际情绪图片情绪库等。量化被试感知材料中的情绪为实数值。影像情绪数据库以及声音情绪数据库多运用情绪维度模型进行评定，为维度情绪数据库。本研究的素材内容是音乐素材和影像人物素材的结合，依照维度情绪库建设的理论与路线图进行，建立适用于中国音乐影视情绪视频素材库的编制与评定徐志斌 邹岚卿（宁波大学音乐学院，浙江 宁波 315000）【摘要】建立音乐影视情绪视频素材库，为情绪研究提供实验素材。搜集正性与负性情绪的音乐音频和无声影视人物视频,根据时间长短和情绪一致的原则进行组合，得到正性素材 20 条，负性 21 条。征集 20 名被试对素材的唤醒度和效价进行二维情绪评定，结果：克隆巴赫系数大于 0.8，正性素材效价平均值大于 7.5，负性小于 3.3，分别激发了强烈的正负性情绪体验。【关键词】音乐影视视频；情绪库；正性情绪；负性情绪【中图分类号】B841.7 【文献标识码】A 【文章编号】10074198（2022）2413904【本文著录格式】徐志斌,邹岚卿.音乐影视情绪视频素材库的编制与评定 J.中国民族博览,2022,12(24).基金项目：本文系国家社会科学基金“十三五”规划 2018 年度教育学一般项目“不同音乐呈现方式在审美教育中的作用：基于行为与脑电的分析”的阶段性研究成果（项目编号：BLA180228）。140 Chinese national Expo中国民族博览 Chinese national Expo通过 Eprime3.0 软件编辑和播放，电脑屏幕随机呈现正负性音乐影视情绪视频素材，用耳机听音乐。实验前告知被试根据即时感受打分，在二维情绪模型图上用鼠标点击相应的位置，不支持长时间思考。各素材间隔 2 秒钟。实验前，工作人员讲解二维情绪模型的含义，并给予被试 3 个实验素材熟悉进行练习。实验结果数据通过 EPrime 软件收集。见图 2。图 2使用 SPSS23 版本，对评价结果从信度、效价、唤醒度三个方面进行相关性、方差和 t 检验等统计分析。计算实验数据的克隆巴赫 系数，评定素材间情绪的一致性，确保数据真实有效。对正负性音乐影视情绪视频素材的效价、唤醒度使用方差分析。情绪类型是被试内变量，性别和专业是被试间变量。探究不同性别、专业与非专业学生对相同音乐影视情绪视频素材的情绪反应有何不同。三、实验结果（一）信度（一致性）信度是指研究中测量结果的一致性程度，判断一项心理研究是否有效的主要依据。克隆巴赫 系数被使用最广泛。使用 SPSS23 软件计算实验结果的克隆巴赫 系数，对于负性情绪，每种情绪的 20 个影像片段的一致性在 0.875 以上；对于正性情绪，每种情绪的 20 个影像片段的一致性在 0.898以上。实验结果表明，实验素材信度高，被试态度认真，素材之间评分一致性较高，结果可信。（二）效价与唤醒度效价是指情绪的类型，分为正性和负性，唤醒度指的是机体情感状态激活的程度，表示情绪程度的强弱。保留的 20条正性效价平均值 7.5，21 条负性效价平均值 3.3，属于正负性情绪范畴。素材的唤醒强度都在 4 分以上，且多数素材能激发平均值在 6 分以上，说明所有素材均能唤醒足够强烈的情绪体验，有效激发个体情绪。（三）性别差异分析对于 p 值检验设定显著性要达到 p 0.05 的结果，才具有统计学意义。负性素材效价的性别主效应显著，t（36）=性的情绪视频片段。通过会声会影视频编辑软件分离原画面，保留音频素材。利用 GOLDWAVE 声音处理软件编辑音乐刺激素材的声音参数，为 MP4 格式，平均时长 18s（范围：1230s），皆为 16BT 立体声，采样率 24kHz，比特率为 100200kbps，平均响度均标准化为7dB，同时淡出 1s。课题组成员依据音质的好坏、情绪激发强度、熟悉程度进行筛选，共选出 101 个音乐演奏片段（46 条正性、55 负性）作为实验素材。根据个体对与自己同一种族的面部表情识别更准确的表情识别的跨文化研究成果，选择东亚人脸情绪面孔的影视片段。素材来源于互联网络，选择了来自东亚地区的商业影视片，内容包括亲情、爱情、战争等，主要突出人物面部表情。为避免熟悉程度，选择冷门生僻的 181 段正性和负性情绪影视视频。时间长短介于 1135 秒，平均时长 22.38s。利用会声会影编辑，去字幕和水印和静音处理。课题组成员依据视频的清晰程度、情绪激发是否明确以及熟悉程度进行筛选，选出 95 个视频片段（47 条正性、48 条负性）作为实验素材。征集被试 50 人，分成音乐音频组和无声影视两组，其中音乐视频组 25 人（音乐专业 10 人，非音乐专业 15 人），无声影视组为25人（音乐专业11视频，非音乐专业14人视频）。对音乐音频和无声视频通过效价的九点评分量表进行效价和唤醒度评价，效价从消极到积极为 1 到 9 分，唤醒度从低到高为 19 分。剔除唤醒度小于 4 分和效价小于 6 分的正性音频、大于 4 分的负性音频素材。共选出正性音乐音频 20 条、负性音乐音频 21 条、正性与负性影视视频各 25 条。以效价为依据，按照情绪一致的原则，综合素材的时间长短，将正负性音乐音频与无声视频进行搭配组合。通过会声会影剪辑成 20 条正性、21 条负性音乐影视情绪视频素材。二、实验设计参加本实验的有：高校音乐专业在校生 18 人，非音乐专业在校生 20 人，10 男 28 女，平均年龄 20 岁，视听正常，无疾病。右利手，矫正视力 2.0 以上。采用效价和唤醒度二维情绪模型作为评价工具，被试进行自我报告。使用 99 网格。见图 1。图 1Chinese national Expo 141Music and Dance 音乐舞蹈医疗、尸体、哭泣、伤残、血淋等；保留下来的 25 条负性无声视频素材中以医疗场景为背景的最多，推测是因为医疗背景给人留下了生死离别的刻板印象，从而更加容易激发人悲伤的情绪。素材库中效价最高/低素材的音频素材中，效价较高的正性素材音频选段速度均为快速，发音点较多且节奏型更加密集的特点，而负性素材音频相对来说速度更慢。可见，慢速而节奏感较弱的音乐素材更易于激发产生负性情绪，而快速、节奏感较强的音乐素材容易产生正性情绪。保留的素材中正性音频均为大调式，负性音频大多为小调式。这也从某种程度上证明了大调明亮大气、和谐，而小调阴柔细腻，在音色上更加暗淡感性的认识。正性音频常出现大三和弦和属七和弦，大三和弦通常带给人积极的感觉，可以表现高兴、喜悦的情绪，表现胜利的景象。配器上，效价高的正性音频中均使用了打击乐器组的乐器，负性素材中则较少出现。推测这可能是因为打击乐器音色明亮，节奏感和韵律感欢快的特点，更能凸显音乐中表达的生命力和激情，正性素材加入打击乐器的部分，能营造出热闹的氛围感。本实验，评分的性别差异显著，男性负性效价均值低于女性。关于情绪体验的性别差异研究结论中，有的差异显著，有的发现不存在性别差异，更有研究则得出女性的情绪体验更为强烈的结果，与本此实验结果相悖，可能与本次实验选择的素材和情绪激发方式有关，因此关于情绪的激发与性别之间的关系还需要更进一步的研究。非专业被试的负性情绪的唤醒度总体高于非专业被试，差异显著，而其他方面差异都不显著，我们推测可能情绪的激发更多只是大脑的基础功能，激发音乐情绪过程对音乐文化经验和学习的要求较低。本研究用音乐和影视视频结合作为情绪激发素材来建立的情绪素材库，数据上有极高的准确率，参考价值高，为情绪心理、音乐审美教育心理等科学实验研究提供研究工具与素材。该素材库建立成功后对建立情绪激发素材库的理论体系构建也有参考意义。参考文献：1 孟昭兰.情绪心理学 M.北京:北京大学出版社，2005.2 宋素涛，张文君.心理学研究中常用的情绪数据库 J.鲁东大学学报（哲学社会科学），2020（5）.3 刘涛生，马慧，黄宇霞，等.建立情绪声音刺激库的初步研究 J.中国心理卫生杂志，2006（11）.4 周欣，郑莹灿，周嘉新，吴佳怡，郑茂平.情绪音乐影像库的初步编制与评定 J.心理学探新，2021（1）.5 田雪垠，郑蝉金，郭少阳，贺冠瑞.基于多层验证性因素分析的2.19，p0.05。正性素材效价、唤醒度和负性素材唤醒度的性别差异都不显著。负性素材效价男性的均值要低于女性，不同于以往女性更加感性的说法，相同的负性素材男性会认为更加消极，见表 1。表 1 男女生评定结果相关性及差异维度n组别（MSD）pt负性效价10男2.200.090.04-2.1928女2.520.08正性效价10男7.700.160.97-0.0328女7.700.11正性唤醒度10男6.540.240.660.4528女6.400.22负性唤醒度10男5.610.180.17-1.4228女6.000.17（四）其他差异分析负性素材唤醒度的专业主效应非常显著 t（36）=3.25，p7.5，21 条负性效价平均值 3.3。所有素材的唤醒强度均在4 分以上，说明所有素材均能唤醒足够强烈的正负性情绪体验，对现有的情绪激发素材库起到补充作用。正性、负性影视人物视频素材画面都以人物面部表情为主，正性画面场景中包括胜利、娱乐旅游、美丽风光、可爱儿童、聚会场景、亲情友情、爱情等；负性画面场景中包括事故、142 Chinese national Expo中国民族博览 Chinese national Expoepisodes,and other things called emotion:Dissecting the elephantJ.Journal of personality and social psychology,1999(5).作者简介：徐志斌（1968），男，浙江宁波人，硕士研究生，讲师，研究方向为音乐教育、音乐心理学；邹岚卿（2001），女，汉族，浙江温州人，本科，研究方向为音乐心理学。各种信度系数方法 J.心理学探新，2019（5）.6 邱皓政.量化研究与统计分析 M.重庆:重庆大学出版社，2009.7周湛菁.性别、情绪效价和情绪唤醒度对风险决策的影响D.长沙:湖南师范大学，2016.8Rosenberg E LEkman P.Coherence between expressive and experiential systems in emotionJ.Cognition&Emotion,1994(3).9Russell J A,Barrett L F.Core affect,prototypical emotional（上接第 138 页）者是伴奏者，在艺术歌曲的演绎中都要做好各自表演思维的灵活、快速转换，从而获得最佳演绎效果。（二）声乐演唱和钢琴伴奏之间速度的融合性不同的艺术歌曲都有着各自不同的节奏特点，而同一首作品的不同部分，在其节奏上也会有明显的节奏差异。如瑶山青这一艺术歌曲作品，作品中部的节奏相比前、后两个部分的节奏明显更快，因此，整部作品在演绎中在节奏上是表现出慢、快、慢的感觉，如果作品的声乐演唱无法对这一钢琴伴奏节奏特点进行有效的配合，那么必然会直接降低作品整体演绎效果。所以，在进入间奏乐段时，就会由钢琴伴奏快速地对声乐演唱者发出提示，引导声乐演唱者根据节奏的变化进行声乐演唱节奏及情绪表达方式的调整5。演唱者可以在心底随着钢琴伴奏打节拍；钢琴伴奏者需要做好随时变化弹奏速度的准备，始终与演唱者保持一致的步调，除了用眼睛仔细观察外，还要用耳朵、用心去倾听、去感受，做到节奏的快速调整，情感的充分抒发。声乐演唱与钢琴伴奏练习或者表演时，除了要以曲子谱面为基础以外，更重要的是对作品真情实感深入了解，进而做到完美诠释。（三）声乐演唱和钢琴伴奏之间情感的融合性声乐演唱者与钢琴伴奏者之间情感的交融是二者平衡之美的重要体现形式。如舒伯特的小夜曲这一作品，首句末尾即以钢琴伴奏烘托出整首作品的艺术特点，并利用双音的演奏带动受众的情绪达到一个更高的点，从而进入作品的情感高潮。作品后段部分也将人声演唱和钢琴伴奏的旋律结合与平衡艺术展示出来，借此实现了歌词与旋律的融合。可见，小夜曲 这一作品的创作者舒伯特不仅做到了歌曲旋律、节奏等方面的融合，甚至通过多方面音乐元素的综合应用而实现了作品各处情感的交融 6。四、结语艺术歌曲作为音乐艺术的一种重要表现形式，其中声乐演唱与钢琴伴奏二者之间的平衡美显然已经成为了作品演绎中不可或缺的重要因素。二者的有机结合带来的“二度创作”赋予了艺术歌曲新的生命和光彩。因此，在作品演绎过程中，演唱者与钢琴伴奏者一定要结合作品的特点做好相关元素的配合与协调，做好各部分的衔接与贯通，将声乐演唱和钢琴伴奏之间的平衡美充分展示出来，从而为广大受众带来更优质的艺术歌曲表演盛宴，吸引更多受众对作品产生情感共鸣，实现作品艺术的进一步升华。参考文献：1 郝俊博.试论中西方艺术歌曲钢琴伴奏的风格 J.艺术教育,2022,(08):84-87.2 刘 佳.声 乐 演 唱 与 钢 琴 伴 奏 的 有 机 融 合 J.当 代 音乐,2022,(08):123-125.3 刘佳.艺术歌曲中声乐与钢琴伴奏的平衡美探究 J.当代音乐,2022,(07):31-33.4 陶奕帆,王君.浅谈钢琴伴奏与声乐演唱的艺术配合 J.当代音乐,2021,(11):143-145.5 靳晓爽.声乐演唱与钢琴伴奏契合的艺术分析 J.戏剧之家,2021,(28):69-70.6 温馨.声乐钢琴伴奏和声乐演唱者之间的协调统一 J.音乐创作,2017,(09):179-181.作者简介：王贝莉（1981），女，江西南昌人，学士，讲师，研究方向为声乐类。