基于具身互動的聲音傳達在情感認知中的作用研究 碩 士 學 位 論 文基于具身互動 的 聲音傳達在情感 認知中的作用研究the study of sound communication based on embodied interaction in the emotional cognition張 壯 哈 爾 濱 工 業 大 學 2012 年 7 月國 內 圖 書 分 類 號 :g206.2學 校 代 碼 :10213 國 際 圖 書 分 類 號 :7.094密 級 : 公 開文 學 碩 士 學 位 論 文基于具身互動 的 聲音傳達在情感 認知中的作用研究碩 士 研 究 生 : 張 壯 導 師 : 陳越紅 教授申請學位 : 文 學碩士 學科 : 藝術學 所 在 單 位 : 媒 體 技 術 與 藝 術 系 答 辯 日 期 : 2012 年 7 月 授予學位單位 : 哈 爾 濱 工 業 大 學classified index: g206.2 u.d.c: 7.094dissertation for the master degree in artsthe study of sound communication based on embodied interaction in the emotional cognition candidate : zhang zhuang prof. chen yuehong supervisor : academic degree applied for : master of arts speciality : arts affiliation : department of new media and art date of defence : july,2012 harbin institute of technology degree-conferring-institution : 哈爾濱工業大學文學碩士學位論文 摘 要 現在 人類 每 天 接 觸 高 科 技 設 備 , 感 官 被 割 裂 , 身 體 不 能 作 為 整 體 存 在 ,即聯覺 帶 來 的 情 感 認 知 逐 漸 淡 化 , 有 被 單 一 視 覺 所 取 代 的 趨 勢 , 本文 希 望 通 過 研究 能 夠 為 人 類 的 情 感 計 算 、 認 知 和 體 驗 提 供 一 種 新 的 方式 , 一 種 最 自 然 、 最 本能 的 方 式 。 在 對 聲 音 交 互 方 式 的 迭 變 發 展 和 情 感 認 知 的 深 入 研 究 基 礎 上 , 本文致 力 于 對 情 感 認 知 中 具 身 化 聲 音 傳 達 的 作 用 進 行 研 究 , 從 理 論 和 實 踐 兩 方 面 論證了 聲 音 要 依 賴 于 具 身 表 達 與 具 身 理 解 才 能 更 深 層 次 地 傳達 信息 , 從 而 達 到 更好 、 更 準 確 進行 情 感 認 知 和 情 感 體 驗 的 目 的 。 首 先 , 本 文 從 具 身 認 知 理 論 出 發 , 強 調 身 心 是 合 一 的 , 是 自 動 映 射 的 , 身體 與 精 神 融 合 在 一 起 , 而 身 體 解 釋 比 大 腦 解 釋 更 為 充 分 , 明 確 闡 述 具 身 化 ( 具身 性 ) 和 具 身 互 動 的 概 念 。 一 方 面 , 依 據 情 感 理 論 ,分析 情 感 認 知 的 內 涵 和 過程 , 證 明 具 身 性 是 身 心 耦 合 的 新 取 向 , 是 情 感 能 量 的 展 示 ; 另 一 方 面 , 依 據 聲音 和 音 樂 理 論 , 歸納 聲 音 的 屬 性 和 聽 覺 模 式 , 總 結 出 身 體 律 動 最 自 然 的 本 質 是聲 音 , 即 媒 介 的 延 伸 。 根 據 上 述 兩 方 面 的 內 容 找 到 聲 音 、 身 體 、 情 感 的 結 合 點 ,從 而 提 出 具 身 認 知 視 域 下 的 聲 音 和 情 感 能 跨 越 時 空 的 界 限 實 時 地 進 行 交 流,實現 人 與 信 息 的 高 度 融 合 , 使 人們 釋 放 壓 力 , 重 拾 個 人 特 質 、 意 志 和 生 命 愉 悅 。 再 者 , 本 文 的 重 點 之 一 是 在 多 種 理 論 支 撐 下 創 造 性 的 設 計 出 一 種 具 身 化 聲音 環境 。 這 種 具 身 化 聲 音 環 境 有 動 作 內 化 、 隱 喻 投 射 、 意 象 圖 式 三 元 素 的 共 同參 與 , 缺 一 不 可 。 而 且 , 通 過 實 驗 也 驗 證 了 這 種 環 境 作 用 于 情 感 認 知 的 可 能 性 ,從 根 本 上 擺 脫 了 離 身 認 知 的 束 縛 , 充 分 重 視 人 的 主 動 性 和 身 體 的 整 體 性 在 聲 音傳 達 中 的 作 用 , 這 也 從 另 一 個 角 度 解 釋 了 “ 在 場 感 ” 和 “ 沉 浸 感 ” 的 概 念 。 最 后 , 從 聲 音 的 敘 事 性 、 通 感 的 顯 現 和 身 體 的 反 饋 三 個 維 度 探討 基 于 具 身互 動 的 聲 音 包 含 語 言 的 隱 喻 性 、 技 能 的 認 知 性 和 交 互 的 情 境 性 三 機 制 , 它們 之間 也 是 一 一 對 應 的 , 從 而 說 明 具 身 互 動 的 聲 音 對 認 知 情 感 有 增 強 性 作 用 , 這 種作 用 表 現 在 : 模 糊 現 實 與 虛 擬 的 邊 界 , 在 虛 擬 環 境 下 體 會 真 實 感 ,從 而 調 控 和釋 放 內 心 能 量 , 在 同 一 時 間 內 身 體 全 部 感 官 由 此 展 開 , 達 到 回 歸 自 然 生 存 本 能和 生 命 律 動 的 最 終 目 的 。 關 鍵 詞 : 具 身 互 動 ; 聲 音 傳 達 ; 情 感 認 知 ; 隱 喻-i- 哈爾濱工業大學文學碩士學位論文 abstract nowadays people contact high-tech equipment every day,our sensory has been separated and our body can not exist as a whole, namely, the the synesthesia of emotional cognitive gradually fade, it will be replaced by single visual. the author hope that it will provide a new way, one of the most natural and most instinctive way for human emotions calculation, cognition, and experience by studying. in-depth study on the basis of the iterative change development and emotional awareness of sound interaction, the author study the sound communication based on embodied interaction in the emotional cognition, the argument from both theoretical and practical aspects proves that sound depends on embodied expression and embodied understanding to exchange of information in a deeper extent, so as to achieve better and more accurate emotional awareness and emotional experiencefirst, the paper form the theory of embodied cognition, stressed that body and mind are one thing and automatic mapping, body and spirit together, explains the concept of embodiment and embodied interaction. on the one hand, based on emotion theory, analyze the emotional cognitive content and process, prove that embodiment is the new trends of the combine of body and mind, and the display of emotional energy; on the other hand, according to the voice and music theory, summarized the properties of sound and hearing mode , summed up the essence of rhythmic movement, the most natural sound, that is an extension of the mediaaccording to the above two aspects it find the point of integration of the sound, body and emotion, so it can put forward that the sound and emotion in the embodiment environment can exchange in a natural and real time way across time and space, and achieve a high degree of integration of people with information, so that people can release pressure and regain their personal qualities, will and life pleasantfurthermore, the focus of this paper is one of creativity in a variety of theoretical support for the design of an embodied sound environment. such an embodied environment needs the three parts of action internalized, metaphorical projection and the image schema element, no part can be indispensable. moreover, the experiments verify the possibilities that this environment acts on emotional cognitive, and free themselves from the shackles from the body awareness, and pay full attention to the initiative of the person and physical integrity to sound communication, which from another angle to explain the concept of a sense of presence and immersion -ii- 哈爾濱工業大學文學碩士學位論文 finally, from the three dimensions of sound narrative sense, synaesthesia appeared and the bodys feedback shows the that the sound based on embodied interaction contains the language of metaphor, cognitive skills and situational interaction. they also between the one-to-one, so paper can conclude that the sound based on embodiment can enhance the the cognitive emotions and the role of performance: blurred reality and virtual boundaries, experience realism in the virtual environment, to control and release of inner energy, all the senses of the body can feel the thing at the same time ,thus giving rise to achieve a return to natural survival instincts and feel the rhythm of lifekeywords: embodied interaction ,sound communication ,emotional cognition ,metaphorical-iii- 哈爾濱工業大學文學碩士學位論文 目 錄 摘 要.i abstract ii 第 1 章 緒 論. 1 1.1 課 題 來 源 及 研 究 的 目 的 和 意 義1 1.1.1 課 題 來 源 1 1.1.2 研 究 目 的 2 1.1.3 研 究 意 義 2 1.2 當 前 研 究 現 狀 分 析. 3 1.2.1 國 內 外 關 于 具 身 互 動 的 研 究3 1.2.2 國 內 外 關 于 聲 音 傳 達 的 研 究4 1.2.3 國 內 外 關 于 情 感 認 知 的 研 究6 1.3 主 要 研 究 內 容 和 研 究 方 法. 7 第 2 章 具 身 認 知 視 域 下 聲 音 與 情 感 的 關 系. 10 2.1 具 身 性 在 情 感 中 的 介 入 10 2.1.1 情 感 認 知 的 內 涵 及 其 過 程 解 析11 2.1.2 具 身 性 是 身 心 耦 合 的 新 取 向 11 2.1.3 身 體 語 言 是 情 感 能 量 的 展 示 12 2.2 作 為 聲 音 延 伸 的 身 體 姿 態13 2.2.1 聲 音 的 聽 覺 模 式 及 其 屬 性. 13 2.2.2 身 體 即 媒 介 的 延 伸. 15 2.2.3 身 體 律 動 最 自 然 的 本 質 是 聲 音16 2.3 聲 音 與 情 感 的 具 身 表 征 17 2.3.1 跨 越 時 空 的 動 態 實 時 交 流. 17 2.3.2 人 與 信 息 的 融 合18 2.3.3 具 身 化 聲 音 使 情 感 得 到 釋 放 18 2.3.4 重 拾 個 人 特 質 和 生 命 愉 悅. 19 2.4 本 章 小 結20 第 3 章 面 向 具 身 體 驗 的 聲 音 設 計 研 究 21 3.1 具 身 互 動 中 的 聲 音 傳 達 21 - iv - 哈爾濱工業大學文學碩士學位論文 3.1.1 具 身 互 動 的 內 涵21 3.1.2 從 離 身 認 知 到 具 身 認 知 的 轉 向22 3.1.3 主 動 的 人 本 主 義 觀 點 23 3.1.4 在 場 感 與 沉 浸 感 的 構 建24 3.2 聲 音 交 互 下 情 感 認 知 的 具 身 化 設 計 元 素 25 3.2.1 面 向 動 作 內 化25 3.2.2 面 向 隱 喻 投 射26 3.2.3 面 向 意 象 圖 式27 3.3 具 身 化 聲 音 設 計 實 證 性 方 法 分 析28 3.3.1 實 驗 設 計 闡 述28 3.3.2 實 驗 過 程 分 析31 3.3.3 實 驗 結 果 總 結32 3.4 本 章 小 結40 第 4 章 具 身 互 動 中 聲 音 傳 達 對 情 感 認 知 的 影 響41 4.1 具 身 化 聲 音 交 互 下 的 情 感 認 知 維 度. 41 4.1.1 聲 音 的 敘 事 41 4.1.2 通 感 的 顯 現 42 4.1.3 身 體 的 反 饋 43 4.2 具 身 化 聲 音 交 互 下 的 情 感 認 知 機 制. 44 4.2.1 知 識 與 語 言 解 釋 的 隱 喻 性. 44 4.2.2 技 能 與 聲 音 傳 達 的 認 知 性. 45 4.2.3 情 感 與 身 體 交 互 的 情 境 性. 46 4.3 具 身 化 聲 音 交 互 下 的 情 感 認 知 評 價. 46 4.3.1 情 感 以 聲 音 交 互 的 方 式 被 具 身 化. 46 4.3.2 動 態 系 統 中 現 實 與 虛 擬 邊 界 的 模 糊 47 4.3.3 內 心 能 量 的 調 控 和 釋 放47 4.3.4 自 然 生 存 本 能 和 生 命 律 動 的 回 歸. 48 4.4 具 身 化 聲 音 交 互 在 情 感 化 設 計 中 的 應 用 49 4.4.1 圖 像 輔 助 聲 音 與 圖 像 表 現 聲 音49 4.4.2 可 視 化 聲 音 和 可 聽 化 畫 面 界 面50 4.4.3 基 于 具 身 互 動 的 音 樂 治 療. 50 4.5 本 章 小 結51 結 論. 52 - v - 哈爾濱工業大學文學碩士學位論文 參 考 文 獻. 53 附 錄. 57 攻 讀 碩 士 學 位 期 間 發 表 的 論 文 及 其 它 成 果 58 哈 爾 濱 工 業 大 學 學 位 論 文 原 創 性 聲 明 及 使 用 授 權 說 明. 59 致 謝. 60- vi - 哈爾濱工業大學文學碩士學位論文 第 1 章 緒 論 1.1 課 題 來 源 及 研 究 的 目 的 和 意 義 1.1.1 課 題 來 源 本 論 文 的 課 題 為 自 選 課 題 , 依 據 導 師 方 向 “ 新 媒 體 聲 音 藝 術 理 論 與 應 用 ” ,屬 于 教 育 部 人 文 社 會 科 學 項 目 。 在 對 聲 音 交 互 方 式 的 迭 變 發 展 和 情 感 認 知 的 深入 研 究 基 礎 上 , 本文 致 力 于 對 情 感 認 知 中 具 身 化 聲 音 傳 達 的 作 用 進 行 研 究 , 強調 聲 音 要 依 賴 于 具 身 表 達 與 具 身 理 解 才 能 更 深 層 次 地 交 流 信 息 , 從 而 達 到 更好 、 更 準 確 進行 情 感 認 知 和 情 感 體 驗 的 目 的 。 首 先 , 經 過 研 究 發 現 聲 音 傳 播 方 式 從 古 至 今 發 生 了 巨 大 的 改 變 。 “ 人 類 是1會 傳 播 的 動 物 , 傳 播 滲 透 在 人 類 的 一 切 活 動 中 ” 。 “ 有 了 傳 播 行 為 后 , 人 就加 快 了 脫 離 動 物 界 的 步 伐 , 就 連 人 類 只 會 發 簡 單 單 音 的 時 候 , 他 們 的 相 互 聯 絡 ,溝 通 最 切 近 的 信 息 ? 或 避 害 或 協 同 追 捕 獵 物 ? 這 時 與 動 物 還 沒 有 實 質 性的 區 別 ? 一 旦 他 們 相 互 傳 授 經 驗 , 譬 如 一 個 猿 人 教 另 一 個 猿 人 怎 么 樣 打 擊 石2器 ? 包 含 了 抽 象 的 符 號 動 作 時 , 真 正 的 社 會 傳 播 就 出 現 了 ” 。 最 初 的 聲 音交 互 方 式 是 自 然 的 , 是 人 類 最 適 合 的 表 達 和 理 解 手 段 , 人 們 可 以 面 對 面 地 聲 音交 流 , 可 以 吶 喊 , 可 以 唱 歌 , 而 這 些 傳 達 手 段 可 以 借 助 身 體 其 他 感 官 加 以 輔 助 ,進 而 洞 察 情 感 , 達 到 認 知 的 效 果 , 但 是 有 時 間 和 空 間 的 限 制 。 隨 著 科 學 技 術 的發 展 , 人 類 聲 音 的 交 流 既 可 以 面 對 面 , 也 可 以 借 助 手 機 、 電 腦 等 , 這 種 方 式 可以 消 除 時 空 限 制 , 但 設 置 的 人 機 界 面 具 身 性 減 弱 , 觸 覺 、 嗅 覺 、 視 覺 、 味 覺 得不 到 詮 釋 , 情 感 認 知 視 為 空 談 。 所 以 論文 預 測 未 來 的 聲 音 交 流 是 基 于 具 身 互 動(embodied interaction ) 的 , 回 歸 自 然 的 , 體 現 人 本 身 天 性 的 釋 放 , 符 合 人 本3身 的 情 感 所 歸 。 其 次 , 從 認 知 的 角 度 來 看 , 情 感 是 對 自 我 以 及 環 境 中 客 體 的 有 意 識 的 感 受4。 情 感 是 認 知 的 ,強調 他 們 的 精 神 成 分 ; 情 感 是 身 體 的 , 強 調 他 們 的 肉 體 成5分 。 聲 音 的 表 達 和 理 解 是 情 感 認 知 的 形 式 之 一 , 比 如 電 話 比 電 子 郵 件 更 能 準備 地 交 流 情 感 , 就 是 因 為 聲 音 的 語 音 特 征 。 聲 音 、 身 體 、 情 感 認 知 有 著 不 可 分割 的 關 系 , 聲 音 是 情 感 進 行 認 知 的 媒 介 , 身 體 是 情 感 進 行 認 知 的 載 體 。 再 者 , 從 應 用 角 度 來 看 : 現 有 的 游 戲 , 包 括 體 感 游 戲 , 都 不 能 把 身 體 完 全投 射 到 游 戲 之 中 , 即 使 能 語 音 識 別 , 也 不 能 察 覺 聲 音 中 的 情 緒 變 化 , 從 而 不 能達 到 身 心 的 完 全 釋 放 , 不 能 作 用 于 情 感 認 知 。 而 現 有 的 電 影 雖 然 滿 足 了 個體 的視 聽 覺 需 求 , 卻 達 不 到 交 互 的 效 果 , 身 體 的 能 量 不 能 轉 移 , 認 知 是 感 性 的 , 體- 1 - 哈爾濱工業大學文學碩士學位論文 驗 是 理 性 的 , 所 以 其 更 不 能 對 情 感 體 驗 起 到 關 鍵 作 用 。 那 人類 是 否 可 以 通 過 一 種 新 的 方 式 , 一 種 最 自 然 的 方 式 , 一 種 可 以 淡 化 時空 界 限 , 一 種 最 本 能 的 具 身 化 的 方 式 , 通 過 聲 音 的 交 流 作 用 于 情 感 認 知 , 釋 放壓 力 , 帶 來 舒 適 的 體 驗 呢 ? 而 這 樣 具 身 化 的 聲 音 交 流 在 電 影 、 游 戲 中 又 有 什 么樣 的 應 用 原 則 ? 這 是 學者 迫 切 需 要 研 究 的 課 題 。 希 望 帶 著 這 些 問 題 搜 集 資 料 ,在 本 文 中 探 尋 答 案 , 依 據 前 人 經 驗 在 理 論 和 實 踐 上 提 出 自 己 的 觀 點 , 力 圖 提 供理 論 和 實 踐 上 的 創 新 。 1.1.2 研 究 目 的 本文 試圖 利用 具 身 認 知 論 、 情 感 心 理 學 、 聲 音 和 音 樂 理 論 來 探 討 具 身 化 的聲 音 交 流 對 情 感 認 知 的 獨 特 作 用 , 這 是 本 文 的 主 要 研 究 目 的 。 在 理 論 和 實 踐 方面 , 本文 希 望 通 過 多 方 面 的 研究來 驗 證 聲 音 、 身體 、 情 感 的 關 聯 性 , 認 為 身 體 、聲音 對 情 緒 理 解 和 情 感 認 知 的 分析 都 有 非 常 重要 的 意義。 在 此 基 礎 上 , 論 文 將進 一 步 以 聲 音 交 互 方 式 的 迭 變 為 縱 線 , 以 身 體 、 聲 音 、 情 感 認 知 的 關 系 為 橫 線 ,分 析 以 聲 音 為 媒 介 的 具 身 互 動 作 用 于 情 感 認 知 的 可 能 性 。 目 前 人們 每 天 接 觸 高科 技 設 備 , 通 過 聽 覺 帶 來 的 情 感 認 知 逐 漸 淡 化 , 有 被 視 覺 所 取 代 的 趨 勢 , 本文希 望 通 過 研 究 能 夠 為 人 類 的 情 感 計 算 、 認 知 和 體 驗 提 供 一 種 新 的 方式 。 1.1.3 研 究 意 義 一 方 面 , 從理論 意義 來 講 , 本 文 的 研 究 成 果 是 傳 統 聲 音 交 互 方 式 的 革 新 和6完 善 。 本 文 從 具 身 認 知 論 出發 , 力 圖 打 破 傳 統 聲 音 傳 達 中的 情 感 角 色 定位 ,在 聲 音 交 互 的 流 變 中 總 結 規 律 , 尋 找 新 的 能 夠 強 化 情 感 認 知 的 聲 音 傳 達 方 式 ,從 新 的 角 度 探 索 聲 音 表 達 和 理 解 對 身 體 、 對 情 感 認 知 、 對 情 感 體 驗 作 用 的 有效途 徑 。 本 文 致 力 于 將 身體 、 聲音 和 情 感 認 知 結 合 在 一 起 , 強 調 聲 音 要 依 賴 于 具身 表 達 與 具 身 理 解 才 能 更 深 層 次 地 交 流 信 息 , 從 而 達 到 更 好 進行 情 感 認 知 的 目的 。 所 以 說 , 這 不 僅 僅 是 對 聲 音 藝 術 、 音 樂 藝 術 領 域 而 言 具 有 一 定 的 獨創 意義,還會 對 具 身 認 知 論 、 情 感 理 論 起 到 整 合 完 善 的 作 用 。 另 一 方 面 , 從 實 踐 角度 來看 , 個體 可 以 通 過 觀 察 和 分 析 別 人 的 肢 體 語 言 ,有 效 地 獲 得 借 助 有 聲 語 言 得 不 到 的 信 息 和 情 感 認 知 、 體 驗 , 因 為 肢 體 語 言 是 人7下 意 識 的 動作 。 本 文 的 理 論 研 究 能在 音 樂 治 療 、 聲 音 景 觀 (soundscape ) 設計 和 人 類 更 好 的 利 用 聲 音 、 利 用 身 體 進 行 信 息 交 流 , 獲 得 情 感 共 鳴 等 領域 上 得到 一 定 程 度 的 應 用 。 在 論 文 中 , 作者 會 根據 這 些 觀 點 和 理論 , 進 行 相 應 的 實 證性 方 案 分 析 , 即 實 驗 部 分 , 為 論 點 的 確 立 提 供 具 體 數 據 上 的 支 撐 , 也 可 為 作 者的 畢 業 設 計 做 理 論 支持 , 為 設 計 所 服 務 , 使 論 文 具 有 更 廣 闊 的 市 場 價 值 和 社 會- 2 - 哈爾濱工業大學文學碩士學位論文 價 值 。 1.2 當 前 研 究 現 狀 分 析 本 文 的 研 究 對 象 是 具 身 互 動 環境 下 的 聲 音 傳 達 系 統 及 其 對 情 感 認 知 、 情 感體 驗 的 作 用 機 制 , 所 以 國 內 外 關 于 該 方 向 的 研 究 包 括 三 個 主 要 部 分 : 1.2.1 國 內 外 關于 具身互動 的 研 究 本 文 對 于 具 身 互 動 的 研 究 主 要 是 作 為 全 文 的 出 發 點 , 理 論 基 礎 是 具 身 認 知833觀(embodied cognition ) 。 具 身 互 動 (embodied interaction ) 這 個 概 念 最早 是 由 paul dourish 在 2002 年where the action is : the foundations of embodied interaction 一 書 中 進 行 具 體 的 界定 。paul dourish 認 為 具 身 互 動 是人 機 交 互 中 人 類 活 動 被 忽 視 的 一 面 , 是 用 戶 通 過 與 系 統 、 與 彼 此 的 交 互 來 創 建和 交 流 意 義?！?具 身 互 動 不 是 一 項 技 術 或 一 套 規 則 。 它 是 從 一 個 新 的 角 度 來 看待 人 與 系 統 之 間 的 關 系 ” , “ 具 身 互 動 是 與 占 據 著 我 們 物 理 和 社 會 現 實 世 界 、 并利 用 如 何 與 我 們 互 動 的 事 實 的 電 腦 系 統 進 行 互 動?！?這 本 書 提 供 了 一 種 設 計 用戶 界 面 和 交 互 式 體 驗 的 新 的 方 法 。 具 身 互 動 引 申 于 具 身 認 知 觀 , 而 具 身 認 知 觀9的 理 論 基 礎 是 “ 杜 威 的 自 然 主 義 觀 和 梅 洛 ? 龐 蒂 的 身 體 現 象 學 ” 。 杜 威 認 為心 智 和 身 體 絕 非 孤 立 的 整 體 , 梅 洛 ? 龐 蒂 則 認 為 身 體 使 得 知 覺 成 為 可 能 ,1945年 他 提 出 “ 因 為 我 們 看 到 身 體 分 泌 出 一 種 不 知 來 自 何 處 的 意 義 , 因 為 我 們看 到 身 體 把 該 意 義 投 射 到 它 周 圍 的 特 質 環 境 并 傳 遞 給 其 他 具 體 化 的 主 體 ”10262。 梅 洛 ? 龐 蒂 區 分 了 客 觀 身 體 和 現 象 身 體 兩類身體 ,而認知的獲得需 要依 靠 這 兩 類 身 體 的 相 互 作 用 。 海 德 格 爾 、 邁 克 爾 ? 安 德 森 、 皮 亞 杰 、 維 果 斯 基都 對 具 身 認 知 思 想 的 形 成 有 基 礎 性 作 用 , 這 既 是 一 種 意 識 和 思 維 的 顛 覆 , 也 是一 種 視 域 和 視 角 的 轉 換 。 具 身 化 思 想 在 lakoff 著 的 范 疇 一 書 中 登 場 , 在lakoff 和 johnson 合 著 的 另 一 部 著 作 肉 身 中 的 哲 學 作 為 哲 學 術 語 則 得 到 詳盡 的 闡 述 , 他 們 提 出 的 具 身 認 知 觀 主 要 包 含 三 個 基 本 思 想 : 心 智 是 具 身 的 ; 隱喻metaphorical 是 思 維 的 核 心 ; 認 知 是 無 意 識 的 。 rolf pfeifer 和 josh bongard11在body intelligence 中 將 具 身 性 和 人 工 智 能 聯 系 起 來 。 并 且 具 身 互動理念 在 其 他 領 域 也 得 到 了 廣 泛 的 應 用 , 每 個 領 域 都 有 杰 出 代 表 人 物 。 比 如 說, 在認 知 發 展 領 域 有 e.thelen ; 在 語 言 學 領 域 則 有 g.lakoff 和 m.johnson ; 在 機 器人 學 領 域 有 ballard 、hayhoe 、pook 和 rao ; 在 動 力 學 和 神 經 科 學 領域有 t.van gelder 、 chiel 、beer 、f.m. edelman ; 在 哲 學 領 域 有 a.clark 、 /.el 、12e.thompson 和 rosch 。 赫拉 ? 別恩 是 一 位 非 常 著 名 的 心 理 學 家 , 他 曾 提出這樣 一 種 算 式 : “ 百 分 之 五 十 五 的 表 情 、 動作 加 上 百 分 之 三 十 八 的 語 調 語 速 ,- 3 - 哈爾濱工業大學文學碩士學位論文 13再 加 上 百 分 之 七 的 語言 才 等 于 傳 播 信 息 的 總 成 效 ” 。2007 年 的 realizing 14embodied interaction for visual analytics through large displays 和 2008 年的15interactive media: the semiotics of embodied interaction 等 書 分 析 了 具 身 互動 在 媒 介 中 的 應 用 機 制 ,2010 年 的 authoring as acting-exploring embodied 16interaction in game authoring environments for children 和 2009 年的 fighting for control: childrens embodied interactions when using physical and digital 17representations 等 則 講 述 了 具 身 互 動 對 孩 子 教 育 的 獨 特 作 用 。 綜 上 所 述 ,本 論 文 在 理 論 上 和 實 踐 上 都 有 一 定 程 度 的 前 瞻 性 。 目前 國內 對于 “embodiment ” 和 “embodied ” 的 譯 法 還 沒 有 完 全 統 一 。2001年 龐 學 銓 在 新 現 象 學 解 決 心 身 關 系 的 新 嘗 試 、2005 年 陳 立 勝 在 “ 回 到 身體 ” : 當 代 思 想 中 的 “ 身 體 ” 轉 向 及 其 意 義 、2006 年 李 恒 威 和 黃 華 新 在 “ 第二 代 認 知 科 學 ” 的 認 知 觀 等 中 都 對 具 身 化 進 行 了 分 析 , 強 調 了 其 在 認 知 過 程中 的 重 要 性 。 縱 觀 國 內 外 研 究 , 具 身 互 動 的 理 念 應 用 在 越 來 越 多 的 領 域 , 如 電 影 和 游 戲 ,體 感 游 戲 就 是 其 一 。 具 身 電 影 如rewind to rome 則 是 電 影 界 的 方 向 標 。具身 認 知 論 的 基 本 觀 點 對 本 文 的 研 究 有 十 分 重 要 的 啟 示 意 義 , 但 極 少 有 將 具 身 互動 和 聲 音 傳 達 融合 起 來 的 研究 訴 求 。 1.2.2 國 內 外 關 于 聲 音 傳 達 的 研 究 本文 論 述 的 核心 就 是 聲 音 傳 達 , 其 他 內 容 都是 圍 繞 著 聲 音 表 達 和 聲 音 理 解而 展 開 。 詹 姆 斯 ? 丹 吉 洛 是 美 國 著 名 的 聲 音 治 療 師 ,他 表示 : 聲音 大致 可以 分成 兩 種 , 一 種 是 耳 朵 接 受 到 的 聲 音 , 另 一 種 則 是 人類 自 己 所 發 出 的 聲 音 。 從 心臟 跳 動 的 那 一 刻 開 始 , 身 體 內 就 存 在 著 各 種 各 樣 的 聲 音 , 而 它 們 會 傳 遞 到 全 身的 各 個 角 落 。 聲 音 是 人 類 最 早 研 究 的 自 然 現 象 之 一 , 聲 學 則 是 唯一 歷 史 最 悠 久 但 當 前 仍處 于 前 沿 地位 的 分 支 學 科 。 聲 音 傳 達 由 視 覺 傳 達 演 化 而 來 。 世 界 上 最 早 對 聲學的 研 究 工 作 開 始 于 音 樂 方 面 , 而 有 關 聲 學 的 系 統 研 究 開 始 于 17 世 紀 初 伽 利 略研 究 的 物 體 振 動 和 單 擺 周 期 。在 1843 年 ,g.s. 歐姆 首 次 提 出 了 人類 的 耳 朵 可以 把 比 較 復 雜 的 聲 音 分 解 為 比 較 簡 單 的 諧 波 分 量 , 并 且 能 按 分 音 大 小 來 判 斷 音樂 品 質 的 理 論 。 在 歐 姆 聲 學 的 啟 發 下 , 國 外 開 展 了 很 多 有關 聽 覺 的 聲 學 研 究 ,這 些 聲 學 研 究 以 后 被 稱 為 心 理 聲 學 和 生 理 聲 學 , 他 們 在 聲 學 研 究 中 取 得 了 重 要的 成 果 , 在 其 中 最 著名 的是 h.von 亥姆霍茲 所 寫 的 音 的 感 知 。 在 1877 年 ,瑞 利 出 版 的 聲 學 原 理 兩 卷 都 是 集 經 典 聲 學 大 成 的 著 作 , 開 辟 了 現 代 聲 學 的18新 紀 元 。 同 時 他 開 始 探 討 的 電 話 理 論 已 經 發 展 為 電聲 學 。在 1927 年 10 月 ,- 4 - 哈爾濱工業大學文學碩士學位論文 華 納 公 司 出品 的 爵 士 歌 王 第一 次 把 聲 音 引到 電 影 中 。 在 1974 年 , 米 爾 頓 ? 布拉 德 利 推 出 了 “ 西蒙simon ” , 這 是 首款 引入 聲音 概 念 的 游 戲 。 雖 然 最 初 聲音 在 傳 遞 信 息 的 方 式 中 并 不 是 占 據 主 導 地 位 , 但 在 人 類 以 后的進化 過程 中, 隨 著 勞 動 的 發 展 , 聲 音 成 為 語 言 媒