[多模态视角下的话语感知]多模态话语分析
摘 要近年对语言研究“我”因素越越备受重视也就是体脑运作机制和感知生成机制对语言运用影响、阐释心智运作与语言生成机制关系。
“心智哲学”也强调语言体验性即体验基础上义是如何构建。
人们对世界感知是多种模态是集视觉、嗅觉、味觉、听觉、触觉体全方位感知对多模态话语分析近年也成语言学研究焦这方面研究主要集电影、电视和海报等研究层面。
是认知科学理论上发展起知觉理论依据对多模态语言感知进行浅析。
获得三峡学研究生科研创新基金助(项目编0X090)。
、引言。
上世纪80年代身心二元对立问题“心智哲学”应运而生它基观有三心智体验性、认知无识性、思维隐喻性。
心智哲学认人心智活动如畴、概念、推理等并不是客观、镜像反映外部现实这些是由我们身体验形成尤其是由感觉运动系统生成。
“依照体验哲学认知科学被分代认知科学和二代认知科学二代认知科学认认知是种生物学现象具有体验性它与身体其他系统共进化人类与环境交作用方式。
”(王&莫00)知觉是多模态它形成不仅可以通视觉感知还可以其他感觉通道和省进行。
多模态话语指运用听觉、视觉、触觉、味觉、嗅觉等多种感知器官通语言、图像、声音、动作等多种手段进行系统交际现象(张德鲁009)。
这种现象海报、广告、电视节目上等用得比较多对研究是以韩礼德系统功能语法以及克瑞斯和勒(00)提出视觉语法理论依据克瑞斯和勒认多模态就是运用几种学模态( )或综合使用若干学模态强化种义表达或行使补充功能或进行有层次排列(谢竞贤0)。
其实现实生活很多口头或面话语也可以通不模态进行感知和理以感知理论依据研究多模态话语感知。
多模态话语感知研究目是探讨不模态对话语义产生有何作用以及模态是如何动产生义。
对多模态研究主要有两派是以系统功能语言学理论基础从功能角研究主要目是探讨语言社会实义。
二是以认知语言学理论基础从隐喻、喻角剖析多模态认知现象(潘艳艳0)。
也是从认知角对多模态研究基知觉理论对话语感知产生知觉仿真所涉及不模态研究以及它们动从而更理话语含义。
命题理论曾认知科学领域对知识表征给出了很释但是这理论有很局限性不能释所有语言现象。
受哲学思想熏陶巴萨卢999年提出了知觉理论他主张认知质上是知觉性对外界刺激无识神表征和有选择识验都是知觉状态知觉状态出现其些会通选择性被提取并成知觉记忆部分当再次激活这种记忆以形式代表外界事物(朱钗009)。
知觉系统不仅通视觉感官获得也可以通其他感官和体验获得它是多模态感知。
认知心理学巴萨卢提出了知觉理论六核心特征()知觉是感觉运动系统神表征知觉程感觉运动区域神系统从外界环境和身知觉获取信息知觉就是对知觉引起神冲动次记录。
人们对事物感知是具有选择性从不视角出发对事物表层认知加工结构凸显重就会有所不这造成知觉信息分离以图形式构成对信息表征。
虽然视觉感知是重要渠道但是其他感觉器官和省其也起到举足轻重作用。
()知觉长记忆里会组成仿真器认知系统能够客体不眼前仍然能够构建对客体具体仿真这种仿真也是多模态。
(5)知觉理论认对某类事物或事件空和容信息感知会形成框架式表征因仿真程会形成整合知觉系统。
(王瑞明&莫雷00)。
认知心理学公认假设是选择性会分离知觉信息然将分离信息储存长记忆。
(王&莫&李005)这就是说知觉程感知主体会不然到物体某方面可能是颜色、性状、声音、气味、等与它相关特征。
这方面旦被选择很有可能会储存长记忆力。
次对事物感知并不是完整但会随着感知验增加通有选择性对新感知识别不断丰富感知对象心理表征和概念整合。
长记忆知觉不是彼分离相有系会组成仿真器仿真器知觉包含各种模态有听觉、视觉、嗅觉、味觉、触觉认知系统可以认知对象不面前仍能建构出对它们各种模态下感知和仿真。
例如广寒香吹得满山开。
(南宋?杨万里《咏桂》)通不模态感知验获得对桂花不部分、不方位空整合并储存长记忆力。
当桂花不面前对桂花进行仿真主体通视觉和嗅觉对桂花香味和桂花颜色、、形状以及它枝和叶进行知觉仿真但由知觉选择性和主体多样性被仿真桂花可能某模态上有侧重。
这和尚国(0)所持感知加工“线”(l)操作和认知加工“离线”(l)操作观很相似。
他认如感知对象刻不眼前人们仍然可以提取储存脑里抽象概念畴表征而不必每次都要接触实实物体、事件进行系列感知体验。
如说人验有直接验和接验话那么感知也可以根据线和离线而分直接感知和接感知。
但是对从没见桂花人说无论怎么描述他脑海里怎么也不会形成整体表征。
这里以“这冬天是暖冬很有春天感觉。
对这句话感知可以是身体触觉上暖暖阳光洒身体上感到很温暖这就是触觉仿真;也可以是视觉上阳光明媚空气清新这是视觉仿真;当然也可以是听觉上感知听到鸟儿鸣叫等这是听觉仿真;也可以是嗅觉味道有些春天开花儿竟然提前开放散发着阵阵清香这嗅觉仿真;当然也可以是几感官感知它们相作用共形成了与春天特征有很相似性知觉激活了储存头脑长记忆春天象这些多模态通整合形成抽象心理表征进而换生成语言语言也可以反指称这种现象这句具有多种模态感知话语就产生了。
四、结言。
人们对世界感知主要是通五重要感觉器官视觉、听觉、嗅觉、味觉、触觉(有感知障碍人除外)部分感知验都是以这五器官渠道感知是认知基础因对不模态研究对认知起到至关重要作用。
基知觉理论研究不模态下话语感知研究了不模态下语言感知选择性和知觉仿真进而了人们感知事物认知机制、感知整合加工程以及语言换生成程。
参考献。
[]Brl, L rl bl [] Bvrl Br , 999, 577660。
[] Kr, Gr & V L, l r rr [] L r rl, 00。