趙秀鳳 崔亞霄:多模態體認詩學—基於體認語言學的研究 5

戴維森步伐緩慢,但是十分堅定,雙手交互爬行上了梯子……他仍然繼續攀爬,最終他的堅持不懈有了回報,爬行了大概半個小時後,他終於爬完了梯子的最後一根。 幾秒鐘過後,他站在一個非常……(DanieleWski, 2000: 4:00;吉本斯,2021:58)

顯然,這段文字被排列為一個梯子的形狀,從底部一行開始,每個橫檔錯落排開,在空白周邊的映襯下,深黑色字體形成的橫檔越發突顯,如同一架梯子斜依在牆上。 文字的排列順序和空間擺放方式,決定了讀者的閱讀方向和順序:自下而上,從左到右,這一順序與人物的攀爬動作一致———從低到高。 可以說,讀者在視覺符號的引導下,眼睛緊隨人物攀爬的動作,拾級而上,與人物「亦步亦趨」,一起「攀爬」。 梯子橫檔一級級向上,迫使眼睛不時穿過空白處,形成視覺跳躍(Gibbons,2021:60)。 眼睛發揮「動能閉合」(Kinetic occiusion)作用,戴維森「不斷換手」攀爬梯子。 從側面來看,當他在前面的那只手抓到高一級橫檔時,後面的手便跟著向前,這個動作類似於眼睛的動能閉合———讀完一段文字後,空白處便進入眼簾。 該例同時充分體現了兩類互動:讀者的身心互動及讀者與人物的協同共振。 當然,這種雙維互動的前提是多模態符號對讀者體認感知的誘發性潛勢。 從一般抽象意義來說,是不同模態之間的符號互動激發了讀者的身心互動及讀者與人物的互動。

正如吉布斯(Gibbons,2005: 66⁃67)所言:「認知是身體與物理/文化世界互動的產物。 思維並不是存在於人的身體內部,而是存在於大腦、身體、世界……交織形成的網絡。 『涉身』就是指大腦、身體和物理/文化環境之間的動態交互。」約翰遜(Johnson,1987:5)也指出:「我們所認識的現實由以下因素所塑造:身體運動型式、時空定位軌跡、我們與物體的互動形式;它絕不僅僅是抽象的概念和命題判斷。」為此,吉本斯(Gibbons,2021:4:2) 強調:「既然涉身是人類理解和體驗的奠基之本,那麼我們似乎可以做出這樣的邏輯推演:身體在閱讀中的參與度越多,閱讀就越有意義,影響就越深遠。」

以上實例分析表明,多模態文學語篇充分運用多種模態符號,調動讀者的多維交互體驗,無論是人與符號資源在物理意義上的本體互動,還是文本內多種模態符號之間互動所引發的讀者在身體感知和心理認識之間的互動,都反映了多模態符號對讀者整體體認過程的影響。

1·3 體認的複雜系統性

從複雜動態系統理論視角來看(Complex Dynamic Systems,簡稱:CDS), 在多模態文學的交流過程中,讀者的體認也呈現出複雜動態系統性特征。 根據CDS理論,複雜系統具有以下突出特征:「複雜性,即構成元素和施動體豐富多樣、互動方式多元;動態性,即構成元素與施動體始終變化,互動方式亦始終在變;開放性,即新元素和施動體隨時可進入系統;非線性,即系統的整體變化不可預測,無法以變量分析法找到規律;此外,系統可具自發組織性和共適性,有時體現為相對穩定的狀態。」(單理揚,2019:94)

就多模態文學交流而言,一方面,讀者的體認具有多模態感官聯動性,另一方面,多模態文學的構成要素豐富多樣,這些都對多模態文學的理解體認過程產生直接影響,使體認本身成為一種複雜的動態系統,呈現出複雜系統的一般特征。 首先,多模態文學交流的對象,文學作品本身就是一個由多個子模態符號系統構成的複雜系統,如後現代實驗小說系統往往包含圖像、圖形、頁面設計、空間佈局、字體、顏色、詞匯、語法、篇章結構、文學常規等等多個子系統。 多模態小說尤其是後現代實驗文學達到了高度的形式自覺,大量運用元小說和互文指涉手段、彰顯實體性、創新文本排版形式等。 吉本斯(Gibbons, 2021: 2) 把這種形式自覺在符號上的主要體現概括為以下八類:存在明顯的文本布局和頁面設計;排印方式多樣,在文字和圖像中運用色彩;類似於具象詩,把文本文字具象化;使用包括元小說寫作在內的多種手段;吸引讀者關注文本的物質屬性;使用腳注和其他形式傳遞自我質疑;使用翻頁書技巧設計部分章節;混合使用多種文學樣類,包括文學創作風格上的混搭,如恐怖,也包括視覺效果的混搭,如剪報和劇本對白。 每個子系統之間相互聯系,相互制約,表征和建構小說世界,創建文學意義。

(原題:多模態體認詩學—基於體認語言學的研究;作者趙秀鳳&崔亞霄;原載:外國語文 [雙月刊];2023 年9 月;第39 卷 第5期;82至92頁;作者單位: 中國石油大學 外國語學院,北京10224:9;關鍵詞:多模態認知詩學;體認語言學;多模態文學;體認詩學;參考文獻略,請看原文)

Views: 14

Comment

You need to be a member of Iconada.tv 愛墾 網 to add comments!

Join Iconada.tv 愛墾 網

愛墾網 是文化創意人的窩;自2009年7月以來,一直在挺文化創意人和他們的創作、珍藏。As home to the cultural creative community, iconada.tv supports creators since July, 2009.

Videos

  • Add Videos
  • View All