Jabberstamp: Embedding sound and voice

Jabberstamp是2007 MIT Tangible Media Group研發的一個給兒童使用的講故事玩具，在平常遊戲時利用色筆作畫的時候，他們可以利用蓋印圖章的小玩意去記錄聲音，標註記於畫上，再拿另一個喇叭形狀的工具去播放錄製的聲音，不同於圖紙平面畫畫的表現，他們更可以把畫中的小鳥兒，人物角色加上聲音與對話，與看畫的朋友交流，與老師＆父母互動，變成有聲有色的畫面。

一開始作者把此裝置擺設再藝術畫廊約兩週，150個使用者中，其中三分之一是5-15歲的兒童，所以發展出給小朋友使用的研究，兒童的塗鴉中常常反映著內心的思想，他們往往藉由繪畫去表達自己的思想情緒，但小朋友的手部尚未發育完成，拙劣的畫風常常讓師長或是父母想問，這個是畫誰阿？那這個是代表什麼呢？之類的問題，藉由此工具，小朋友可以把自己的大作加上配音，再即時性的播放出來，呈現了一個有聲的繪圖，除了可以訓練小朋友的說故事能力，家長也可以藉由此裝置來了解小孩子的想法，錄製的的聲音可以給予小朋友同儕之間的有趣互動。

此篇讓我聯想到2050我們的尋寶遊戲單元，當我們看到一篇地圖的時候，上面提供的片段，是否可以有助於使用者後面的尋寶動機，誘發使用者去走完全程的路徑這樣，還有也可使用於美術館或是一些抽象畫，作者的表達往往與觀者的想像有種落差，如果留一些註記可以解釋畫中的意義，讓觀者近一步了解藝術家的思想與感情，是可以有很大的發展空間的。


Jabberstamp




REFERENCES：Hayes Raffl e, Cati Vaucelle, Ruibing Wang* and Hiroshi Ishii.(2007) Jabberstamp: Embedding sound and voice.IDC '07

AudioCubes: a Distributed Cube Tangible Interface based

AudioCubes是比利時ETRO/DSSP大學的Bert Schiettecatte在2004年提出的超棒概念，機制完成最後到2008年才實現，AudioCubes是個可以混音播放，讓你變身成超級聲光DJ的好玩意，外觀成方塊狀，使用者可以自行輸入各種音效，經由方塊的四面旋轉與擺放，即時的任意的混音輸入輸出，加上Cubes的聲光效果，舞台效果與TUI概念發揮到極致，而且已經成功上市囉！

AudioCubes作品與其他TUI作品不同之處是它多了聲音及自由輸入輸出功能，就像一個大朋友的DJ台，小朋友學習的輔助工具，加上的聲光效果令人驚喜，藉由移動方塊面與面的接觸以及手勢的遮蓋等去產生新的聲音，很基本的原型，很直覺的操作，激盪出絕佳的舞台效果。

隨著電子音樂，混音設備的進步，音樂工作者通常在界面上處理音樂素材，基本的混音旋鈕與滑桿，虛擬化之後漸漸消失成平面，GUI已不是最佳的互動聽覺體驗，因為它不能在同一時間操縱多個控制鈕，而AudioCubes可以藉由雙手或是多人，在即時的混音下產生不同的隨機音樂，藉由與台下觀眾的互動，更精準的把聲音表演呈現於空間中。

AudioCubes是一個塑料立方體，內置DSP感測器與光感測器和發射器，還有紅綠藍的LED燈（紅黃藍紫綠），透過定位立方體相對的空間和移動，偵測角度範圍， 藉由四面的旋轉，產生出新的聲音，因為機械的限制，所以上下面無法使用。

機構完成時他們拿給了表演藝術工作者，或是小孩，芭蕾舞者，老人等等做測試， 使用者隨機堆疊，把方塊拉遠拉近，操縱控制的驚喜感， 發現許多有趣的現象。現在AudioCubes以上市，在日本也買的到，但是價格並不可愛，兩個基本配備的AudioCubes，要價€399。

PAPER FROM ACM:pdf

TEI '08: Proceedings of the 2nd international conference on Tangible and embedded interaction

AudioCubes:http://www.percussa.com/

REFERENCES

Bert,S. and Jean, V. AudioCubes: a Distributed Cube Tangible Interface based on Interaction Range for Sound DesignProc. of TEI'2008.

Gamelunch: Forging a Dining Experience through Sound

Gamelunch是個用餐時會發出有趣聲音的整套餐具，目標試圖發掘用餐流程以及連續的聲響與互動手勢，利用wii手把改造湯碗瓢盆，像是刀子，叉子，沙拉匙與裝水瓶罐，調味罐等 ，使用者用餐時，藉由食的動作發出有趣聲音，賦予不同於現實的環境音，讓使用者發現不同於以往用餐時的感受，進而去重視日常生活中的聲響。

此篇paper有趣的地方在於作者創造出了一個不同於以往的聲音環境，現實世界中，通常用餐程序是一整個流程，西餐的餐前酒，前菜沙拉，濃湯，麵包到主餐，到後續的小點心，通常一整個流程的餐具食物聲響是有連貫性的，但我們也不常去發現，往往食物的美味與人際的談笑忽略了這些，這個作品目標是想要帶給人們去重視真正的環境聲響，也給用餐多點樂趣。

用餐器具總共有 1.刀子2.叉子3.沙拉碗（乾的與溼的兩種）4.開水罐5.調味罐等等，都是很衝突的音色，乾沙拉在攪拌時，會發出向流水般的聲音，調味罐的醬，則是好像會掉出金屬球大顆的東西出來一樣，其他用具也是賦予不同於現實生活中的聲波誤導行為，利用靈敏的wii手把去感測使用手勢，即時的發出聲音，受測者在影片中，通常是會心一笑，用各種不同手勢去感測聲響，形成一種有趣的互動。

想想在很多表演團體中，餐具是必備的表演道具，我們常常只顧著食物的美味，卻常常忽略了真實環境中的聲響，算是流暢的連貫性，筷子的聲音，拉麵的好吃聲音，西餐一定要發出的刀碗瓢盆聲，其實都是很有趣的點子，我想如果有一個餐具可以在你吃太多時提醒你發出聲音，促進減肥，或是餐具之間可以互相溝通，記錄吃的環境的人的訊息， 這樣應該蠻有趣的。

Human Computer Biosphere Interaction: Towards Sustainable Society

Human Computer Biosphere Interaction: Towards Sustainable Society這篇paper來自於 CHI2009東京大學The University of Tokyo 的Cyber Interface Lab ，作者提出了一個概念HCBI Human Computer Biosphere Interaction（人機生物圈互動），擴展的概念來自於HCI (Human Computer Interaction)和HCPI （人機寵物互動） 。HCI＆HCPI ，一對一(1 to 1)的互動延伸出HCBI(1 to many)，我們對於環境的互動，除了人以外，周遭的大自然環境，佔了我們生活的極大部分，他們默默的隨著四季更迭，聲音的鳥鳴，嗡嗡的昆蟲，輕輕搖曳的樹葉和潺潺的水流，大自然的美麗在我們的記憶中，作者以日系的禪（ZEN）冥想概念，實現人與自然的互動，用不破壞自然的方式去關心，文中提到許多作品，都是類似放置senser在大自然森林中以科技觀察不打擾自然生態的方式去與大自然互動，例如一個無線電跟蹤項圈，結合了紅外線和高速無線通信設備，可以事先打電話給猛禽野生動物，誘導反饋反應，讓他們遠離公路，車禍的危險。或者是植物可以透過sensers偵測沒水時，打手機通知人們給予水分The Plants Have Your Number。

那使用這些電子數位化的東西在森林中是否會造成破壞呢?作者也提出了討論，有些適度節制是不會的，我想他的想法是這些感測可以透過網路數位化給廣大的人群關心自然環境，總比人們成群結隊去森林踏青破壞生態來的好，這種透過數位方式間接的關心，與大自然聯繫，也是一個未來值得探討的方向。

文中開頭提到的soundbum網站中的Iriomote Island西表島live（上圖）在日本的最南西部，人們可以透過在網路上連結那兒大自然的即時聲音，降雨狀況及天氣，聽膩了機械或流行歌的大家可以去感受看看美妙的大自然，而且在soundbum也可聽到台灣的新竹米粉，台北，谷關溫泉等人聲或是自然的聲音呢！

讓我也想到老師之前介紹的鳥兒收音機，以收音機的外型，上面設置了東西南北的方位，使用者可以利用方位旋鈕去找尋環境四周的鳥鳴聲，也是一種HCBI吧！

加碼贈：地球水的聽診器：AQUASCAPE: the stethoscope for the Earth’s waters