第八周 【講座二】臉部情緒辨識的原理與平台操作

【講座二】臉部情緒辨識的原理與平台操作

2012.10.29 講師 許富淞

富淞學長這套臉部辨識系統針對情緒辨識的平台發想於判斷廣告信件的Bad of Words(BoW)方法，以卡內基大學Cohn-Kanade(CK+) dataset提供的照片資料庫為依據，使用的裝置為攝影機，並且發展自動臉部表情分析平台，可以即時地追蹤臉部會因情緒變化而改變的特徵，像是眉毛與嘴唇等特徵，以臉部特徵點到點之間的距離作為情緒判斷的參考，並保持追蹤使用者情緒特徵資訊，情緒辨識包含自然(Neutral)、高興(Happy)、驚訝(Surprise)、生氣(Angry)、噁心(Disgust)、害怕(Fear)和難過(Sadness)七種基本情緒。
在計算每個Code出現的次數，而後轉換成圖表化資料，當單位不同時，則需要正規化。
何謂正規化
將表格細分成多個更小的表格，直到每個表格只描述一種事實為止，這一連串的調整過程就稱為資料正規化（Normalization）。正規化的目的何在？簡單的說就是要將資料的重覆性降至最低（避免資料重複的狀況發生）。

-----------------------------------------------------------------------------------------------------------

應用
目前研發臉部辨識技術的公司相當多，但Google的動作最為積極，日前已經在歐洲取得技術專利。其實，早在2009年Google Googles推出時，Google的影像辨識搜尋技術就已經造成市場不小震撼。使用者只要用手機拍照，不論是景點、路牌、商標、條碼、書籍、產品、藝術品還是海報，Google Googles都可以把照片內容送到雲端伺服器，利用照片比對的方式搜尋相關資訊，當場就把文字搜尋和語音搜尋給比了下去。Google Googles剛推出之時，服務尚未推及人臉辨識，但Google後續透過併購取得相關技術，並持續投入研發工作，最近成果才逐一浮現，因此在android的手機上可以發現臉部辨識的應用程式。而APPLE在臉部辨識也有相關研究，儘管這兩大對頭互相為了專利在競爭，但是臉部辨識這項技術的確已經在科技產品上造成便利的功能，例如相機對焦.解鎖等，在便利性之下似乎隱私安全問題又將是一大挑戰。可參考：臉部辨識技術入侵，變臉捍衛個資

還能用來做甚麼?

• 醫療：對於缺乏臉部表情患者，可以透過臉部辨識設計出的表情遊戲，來訓練患者表情的表現。
• 行車安全：偵測駕駛於行車中表情變化，發現有闔眼(非眨眼)的表情，車輛即可啟動相關安全模式，避免疲勞駕駛造成的意外事故。
• 動畫軟體：Crazy talk 是一套革命性臉部動畫製作工具。只要輸入一張圖片，透過 CrazyTalk 簡單的步驟，便能創造出細緻、生動、擬真的臉部動畫角色。簡單易懂的操作介面讓初學者容易上手，其進階動畫功能亦可滿足專業使用者對動畫創作的慾望。
• 瀏覽器：Opera根據現有的滑鼠手勢(Mouse Gestures)功能的架構上進一步開發而成，往後瀏覽網路變得更加簡單，只要動一動臉部表情，例如眨眼、微笑、或是張大鼻孔。

由於臉部有著相當多的變數(環境.使用者)，在辨識上有一定難度以及正確性，就目前的技術來看，這些變數有一天一定會被解決，完善的產品也將會誕生。

第七周 PLAYAROUND 國際工作坊

第七周 PLAYAROUD 國際工作坊

這是第三次參加工作坊，不過這次很特別的是，此工作坊的講師團隊是由PLAYAROUND外國講師所組成，他們在台北辦了一場為期7天的太空殖民工作坊，很高興在台中也夠舉辦，雖然只有一天，但也是新的一種體驗。

先說說一些前置作業好了，很開心能參予到工作坊的準備工作，處理報名以及整個活動的一些前置工作，說實在的準備時間有點匆忙，也是第一次擔任這樣的工作，難免有些小地方疏忽，感謝主任給了這次的經驗，讓我學習到許多進退之道以及做事方式。

當天工作坊，將講師們接待至會場準備開幕儀式，接著開始分組課程，我選擇了VVVV視覺音樂，因為對於音樂視覺化頗有興趣，相當期待課程的進行。

• VVVV (轉自)

是一個開源程序語言及開發環境，提供給那些想要對影像、動畫、聲音進行程序編輯的學生、藝術家、設計師、研究員以及有興趣的人。vvvv可以免費地下載，支持的平臺是Windows。一個可做3D的軟體，也可跟processing做結合。

在 VVVV 的環境下沒有條列式的程序撰寫，其運作方式是將程序代碼集結成特定功能的程序組節點（Node），再進一步整合節點架構出整個視覺性的網絡系統。

它適用於許多任務，涉及常見計算機相關媒體如音頻，視頻，三維動畫，網絡…..。並且還能很方便的連接各種外部設備。

VVVV的特點有：

1. 能夠同時處理大量計數的物件，圖形或數據。控制單個圖形對象與1000個之間不會有明顯的差別，這種技術被稱為”Spreading”。

2. 無縫多媒體投影技術，這樣可以讓我們很容易的使用多臺投影儀進行超寬屏無縫投影，這個由一臺服務器統一控制任何數量的客戶端計算機的技術被稱為“Boygrouping”

3. 基於DirectX的三維渲染，加載3D模型，3D紋理，實時著色，實時物理模擬。

DirectX的三維渲染

DirectX的三維渲染

加載3D模型

實時著色

4. 實時視頻分析（光學追蹤）,在4v裏可以同時或分別使用不同追蹤技術. 如:輪廓捕捉，色彩捕捉，運動檢測,二維碼識別等等。

實時視頻分析

5．音頻功能。vvvv的聲音引擎基於微軟的DirectShow技術，能夠播放絕大多數格式的音頻文件以及對多個音頻文件進行簡單的混合。而且運用FFT(傅立葉轉換)算法可以很方便的創作現場實時音視頻交互作品。

---------------------------------------------------------------------------------------------------------

vvvv這套軟體是我第一次聽到也是第一次使用，就是一種圖型化的程式工具，跟puredata有著相似的面貌，只需要一點的程式概念，就能"連出"有趣的作品。

講師Paul用簡單入門的範例來教學。

慢慢的越連越多程式方塊，可以更改顏色.大小。

還接上了麥克風，利用麥克風匯入的聲音變化去改變視覺畫面，我播放了流行音樂讓克風去接收，不同的旋律產生不同的視覺，初階的作品看起來滿像windows player的視覺波紋。

因為一開始在設備上出現了故障的情況，耽誤了許多時間，而Paul即時改變教學方式，讓我們在最短時間了解VVVV的基本功能，在這一天8小時的時間，雖然不是非常能夠完全吸收，但VVVV的魅力已經傳達到我們的腦中，由於VVVV是開放性的軟體，在網路上能可搜尋到許多資料，看著這麼各式各樣由VVVV創作的作品，完全可以說是用嘖嘖稱奇來形容了。

工作坊合照

組合照

與Paul合照

最後成果發表也欣賞了其他兩組的作品，都是不錯的科技藝術領域的新體驗，只可惜我的作品在課程後段某個程式方塊發生錯誤，無法及時回覆，沒辦法展現給大家觀賞，真是可惜。感謝所有協助人員以及系上，讓此工作坊辦的圓滿成功，希望下次能有機會再次舉辦。

第五周 編碼練習

https://www.dropbox.com/s/5lsu6xs1damp96u/18014111%E6%B2%88%E6%AF%85%E7%8F%8A%20%E7%B7%A8%E7%A2%BC%E7%B7%B4%E7%BF%92.docx

第四周 講座【情緒的探測】心得

首先非常感謝張岑瑤教授的熱情分享作研究的一些想法，張教授介紹其學習背景為視覺傳達領域到專注於美學設計以及情感方面，告訴身為設計系的我們對於設計敏銳度是非常重要的，必須要從小地方去了解人，因為人性是不可忽略的，不過從這點來討論，通常設計是從人需要甚麼，而去設計讓人使用，但是賈伯斯當在設計I-POD以及I-PAD時，社會上並沒有這樣的商品，賈伯斯也沒有做市場調查，因為他不屑，而人也不知道它需要這個，就在商品出現後，人們因為APPLE的品牌而去購買，才發現它可已是被人所需要的，所以再這裡賈伯斯的敏銳度是和一般人的思維不太一樣的。

談到EMOTION PROBES這篇論文，是一篇針對快速民族誌學法探討網頁經驗設計，一般民族誌的田野調查，必須要了解當地生活文化、系統化的歸納，在這研究方法上的特點是貼近被研究者，跟他們一起作息，以觀察其整體生活的樣態，建立人情關係，而且還經常談話和一起活動，並且要學會當地的語言，達到不依賴翻譯即能聽講自如的地步，全面地掌握當地生活的結構和脈絡，在研究過程中，研究者自己必須時刻自我反省，調整自己的理解方式，以便更準確地掌握當地人的世界觀，因此需要花費相當久的時間。張教授在英國攻讀博士時，田野工作是她必須的工作，因此他沿伸民族誌研究法產生快速民族誌，針對特定族群做出訪談。訪談要能提出問題，單一問題無法用單一方法，因此在資料的設計上很相當注意，而張教授認為分析是最困難的一部分，當在面對龐大的資料時，人們往往會迷失在其中，不知如何是好，這時就必須要從旁觀者的角度，切勿太過於主觀，所謂可遠觀而不可褻玩焉。民族誌研究即是文化探測的方法之一，張教授提到”人”是最重要的一環，從設計層面探究創新，並且提高研究價值的很重要的。

講座中張教授提到Medicine man(燃燒的天堂)這部電影，內容相當沉重，描述一位生物學家，深入熱帶雨林區，從事治療癌症藥方的研究，過程中，他融入了當地土著的生活，在笑中帶淚的日常生活中，孜孜矻矻，不斷研究曾經如曇花一現的成功藥劑，也許是某部份成份的錯置或漏失，讓他一直無法研發出先前成功的藥劑。

第二周 CH3 設計的三個層次

上一章的最後，本能、行為和反思，每一層次在產品的設計、行銷和使用中也都有同樣重要的作用。

【本能的設計】

我們對於物品的第一印象一定脫離不了外貌、觸感和聲音，因此有些產品將外包裝設計得非常有質感。

上餐館吃飯時，總是覺得有好的擺盤跟有特色的裝潢，會使得食物變好吃，星巴克咖啡與85度c，雖然前者售價較高，但消費者喜愛度偏高，在於星巴克一進店裡面給消費者的感覺：音樂、沙發、香味甚至是杯子的觸感；相較於85度c，雖然平價，但是光店裡播著廣播，和吵雜的環境，就讓不少人卻步了。

【行為的設計】

有好的功能才是好設計，以人為出發點，有些產品設置的防呆裝置，就避免使用者在使用過程中發生錯誤，無法使用產品進而產生危險，例如現在很多手機的電池或sim卡都有這種設計，方向不對就插不進去，電腦記憶體模組的防呆設計──凹洞，因此易用性的設計非常重要。

【反思的設計】

反思的設計與使用者的回憶有關也與自我形象表達有關，像是購買化妝品時，有部分女生們總是在意的是包裝好不好看，在補妝拿出來的時候能夠引起注意，裝著產品的紙袋或購物袋也非常重要，有時人們只是拿著他們的紙袋但是裝著別樣東西，但是他們就是有一種虛榮感。

有時也會發現，在餐廳訂位時非常困難，但是一到餐廳，客人卻不是客滿，利用反思的策略，是消費者的渴望提升，排再久的隊也要吃到；有想到前陣子麥當勞的kitty風潮，最後一款是紫色，這引起我的本能反應，而限量是業者的反思策略，大家半夜不睡覺，一窩蜂的衝到麥當勞排上兩個小時，而蒐集到全套的人，將照片發布至社群，受到大家羨慕以及崇拜的眼神回應這也變成了一種榮耀。

iphone5雖然沒有爆點但也創下銷售紀錄。

設計的迷失

消費者就是迷失在業者的設計裡，ikea宜家家居的賣場擺設即為最大範例，將賣場分為多個區塊，以體驗行銷手法，使得一位女性消費者為一隻杯子買下整座客廳。她原先只想買一個辦公室用的馬克杯。但是她到了瑞典家具公司 IKEA 的賣場後，看到賣場區隔出十幾個不同的空間，用家具及家飾打造出不同的生活型態，從單身生活空間、雅痞區、粉領新貴區，到小家庭以及都會風格區，讓消費者置身體驗的情境中。單身又是辦公室女郎的她，在專為粉領新貴打造的家居環境中，逗留特別久，她試試舒適的單人沙發後，又摸了摸頗有設計感的書櫃，在逛了一小時之後，她帶走的不僅是一個漂亮的馬克杯，她還購買了一個小型咖啡桌，以及一張漂亮的客廳地毯(楊倩蓉，2006)。 

結論

提供給人用的設計要具有通用性，以人本為概念，但有時不好的設計也能引起討論，知名度大增；身為設計師要怎麼去衡量、消費者要怎麼去選擇，最終還是回歸到自身的情感上。

第一周 情感@設計 物品的意義

情感@設計 物品的意義

物品之所以要被設計，
成功的設計是能讓人擁有正面情緒，
而正面的情緒就能吸引人，
使人感到愉快。

    人類是在動物當中情感最豐富的，在行為上往往也是受到情感影響，好的心情能夠使大腦充分思考，而壞的心情則會打亂思緒，無法解決事情。

    掌握設計的三個層面:本能.行為以及反思去思考人們使用方式，設計是需要大量的注意力，因為有許多細節是要有相當多的創意思考在上面。

    提到一個逃生門的設計是能保護人身安全，這例子可以讓我們聯想到生活中的小細節，因此"情感設計"在近年來成為了設計的趨勢，產品本身產生情感與使用者作連結，便是產品能受歡迎的關鍵；不管是產品，也有越來越多產品的行銷策略加入了情感，透過五感(觸.視.嗅.聽.味)加深了與使用這之間的繫絆。

   有吸引力的東西真的比較好用嗎??多半是人的情感作祟，重點在於正面情緒，作者舉例了ATM自動提款機的版面配置設計，在不同的國家，使用者對好用的定義在於它富有數計感且有趣的操作面板。

   Donald A.Norman在這部分充分解釋設計的本能層次、行為層次與反思層次，這三個層次之間有著「時間」上的差別，就是現在以及未來。

本能層次先於意識，是形成第一印象的地方，因此外觀設計在這層面非常重要。

行為層次為當下使用產品的情感與體驗，看重的是功能性。

反思層次則以透過對產品的感觸讓使用者體會到更高層的情緒感覺。

 「使用者和產品之間的互動」即是Donald A.Norman所強調的，國際創價學會會長池田大作曾說:創造並非物的本身，而是存在於人與物.人與人之間的價值。1949年獲頒若貝爾物理獎的湯川秀樹博士更提到:人類的感情或情緒，反而比知性更直接關係著幸福。回想過去和打算未來的推理模式，讓許多紀念品甚至是"有意義"的東西讓人回味的主要原因。

    需求(needs)和欲求(wants)，欲求的產品通常比需求的產品更吸引人，欲求的產品更具有個性，這個性來自於品牌，這讓產品做出了市場區隔，特定的品牌就會吸引使用者的情緒反應，成為了情緒的表徵，可口可樂前首席行銷主管瑟吉歐‧柴曼曾說過:「感性品牌行銷就是要建立品牌與使用者之間的情感聯繫，建立起品牌或產品長期的價值。」價值就在於與使用這一起建立起來的獨特信任。

    物品的意義建立在正面情緒上，透過本能.行為以及反思三個層面的思考，設計師將好的產品創造出來，就是設計師與使用者之間傳達情感與意念表達方法的媒介，在未來人們使用產品上減少產生負面情感，或許社會上將變得更和平更友善。