見ているモノは触れているモノか？（２）

3/02/2010

「自分の興味が「カーソル」に向かっているので，以前，英語で書いた‘What You See is What You touch?’ を（少しずつ）訳してみる．このテキストは，名古屋大学で行われた第４回感覚設計国際シンポジウムで発表したものです．」と考えて訳し始めてたけれど，ちょっとずつ変え始めている．
見ているモノは触れているモノか？（１）
--

ディスプレイ行為

私たちはコンピュータを使っているとき，何をしているだろうか．ほとんどの人がディスプレイ上のイメージを見ながら，マウスを持って動かし，キーボードをうっているのではないだろうか．私たちが，目の前にあるプラスチック製のモノに何かしらの行為を行うと，ディスプレイ上のイメージが変化すること．これは私たちにとって，とても「自然」なことだ．しかし，この身体とイメージとの関係はコンピュータが，特に GUI が現れるまでは存在しなかったものである．身体とイメージとが結びついて機能する行為のことを，私は「ディスプレイ行為」と呼ぶ．だが，この行為はよく理解されてはいない．なぜなら，ヒトとコンピュータとのコミュニケーション，つまりインターフェイスの領域においては，ヒトの行為とイメージとがそれぞれ別物として考えられがちだからである．行為とイメージは，コミュニケーションを成立させるための回路の部分として考えなければならない．

ヒトとコンピュータのコミュニケーション回路における行為とイメージとの関係を明らかにするために，この論考では物理世界にあるマウスとディスプレイ上のカーソルに注目する．カーソルとは「コンピュータのユーザインタフェースを構成する要素のひとつで，指示や操作の対象を指し示すために用いられる」もので，ほとんどが向きや位置を指し示すための矢印：←の形をしている．私たちはディスプレイ上のカーソルをただ見ている．それはアイコンを指し示すためだったり，たんにそれがどこにあるのかを知るためだったりする．そしてそのとき同時に，マウスに触れている．ここでは，見ることが触れることにつながり，触れることが見ることにつながっている．見ることと触れることからヒトとコンピュータとのコミュニケーションのための回路が構成されている．

このブログの人気の投稿

美術評論家連盟創立70周年記念アンケート「美術評論のこれまでとこれから」に回答

11/08/2024

マジック・メモ：行為＝痕跡＝イメージの解体可能性

1/03/2010

フロイトは，自らの記憶と知覚のメカニズムに関する仮説のために，当時，売り出されていた玩具である，マジック・メモという装置を取りあげた．その理由は，この装置のイメージを表示する表面が，「いつでも新たな受け入れ能力を提供すると同時に，記録したメモの持続的な痕跡を維持するという二つの能力を備えている」2-11) からであった．フロイトは，「情報を無限に受け入れる能力と，持続的な痕跡の保存は，互いに排除しあう特性」2-12) と考えていたが，マジック・メモは，その相反する能力を同時に実現する装置であり，その構造は，次のように記されている．このマジック・メモは，暗褐色の合成樹脂あるいはワックスのボードに，厚紙の縁をつけたものである．ボードの上を一枚の透明なカバー・シートが覆っていて，その上端がボードに固定されている．このカバー・シートは，固定されている部分を除いて，ボードから離れている．この小さな装置でもっとも興味深いのは，このカバー・シートの部分である．このカバー・シートは二枚のシートで構成され，シートは二カ所の末端部分を除くと，互いに離すことができる．上のシートは透明なセルロイドである．下のシートは半透明の薄いパラフィン紙である．この装置を使用しない時にはパラフィン紙の下の面は，ワックス・ボードの上の表面に軽く粘着している．2-13) ここから，マジック・メモについてわかることは，大きく分けて，ワックス・ボードとカバー・シートという二つの部分から，この装置が構成されているということである．そして，カバー・シートは，透明なセルロイドの層と半透明の薄いパラフィン紙から構成されているので，全体としては，三層構造の装置ということになる．フロイトは，次に，この装置を使用するプロセスを詳細に述べている．このマジック・メモを使う際には，ボードを覆ったカバー・シートのセルロイドのシートの部分にメモを書く．そのためには鉛筆もチョークも不要である．受け入れ表面の上になにか物質を沈着させて記録を残すのではないからである．マジック・メモは，古代において粘土板や鑞盤に記録したのと同じ方式を採用しているのであり，尖筆のようなもので表面を引っ掻くと，表面がへこみ，これが「記録」となるのである．マジック・メモではこの引っ掻く動作は直接行われるのではなく，ボードを覆った二枚のシートを介して行われる

画面分割と認知に関するメモ

2/05/2011

画面分割についてのスライドを作っていて，アメリカのドラマ「24」が初期のころはよく画面分割を使って緊迫感をだしていたのに，その手法が徐々に使われなくなっていたことを Wikipedia で知る．なぜだろうと思いつつ，マイク・フィグスの「時代×４ [About Time 2] 」を見る．これは４分割された画面で同時に物語が進んでいく短編映画で，「 10 Minutes Older 」というオムニバスの映画のひとつである．画面を４分割して，物語で進んでいくと，段々のそこで起こっていること全てを認知することが難しくなり，認知限界を超えることを実感した．「24」は，リアルタイムという軸があるから，ために画面が分割されても，それは空間的に離れているところで「同時に」物事が起こっていることを示すために有効だが，そこで「リアルタイム」という軸が外れてしまうと，見ているヒトは分割された画面の関係性が分からなくなってしまうのではないだろうか．そこで，「24」で画面分割が使われなくなったことには，認知限界が関係しているのではということを考えた． 24 時代×４[About Time 2] レフ・マノヴィッチが画面分割はユーザ・インターフェイスの「GUI」からの影響であると指摘している．「ひとつのスクリーンにひとつのイメージ」というのが画面構成の論理であったが， GUI を構成する要素であるビットマップ方式のディスプレイがこの論理を破綻させたと，マノヴィッチは考えている．ビットマップ以前に，映画では電話をかける場面などで画面分割を行っていたが，大々的には行われていなかったとはいえるので，マノヴィッチの指摘には賛成である．そして，画面分割を「空間的モンタージュ」と呼び，これまでの「時間的モンタージュ」に変わるものだとし，「空間的モンタージュ」は，GUI の画面を占拠して，そこでは何も消えることがない「記憶」の場として機能していると，マノビッチは考える． my desktop マルチウィンドウシステムにもつながる，パーソナル・コンピュータの大元のアイデアであるヴァネバー・ブッシュのメメックスは２画面を備えた装置として描かれている．メメックスは増大する情報量に対処するために作られた装置であった．ブッシュは膨大な情報に対するヒトの認知限界を考え，メメックスを開発

マウスとカーソル：カーソルによる選択行為

3/11/2010

コンピュータのディスプレイで表現されている世界は，現実の世界ではないという単純な事実を考えなければならない．そこは，もともと，コンピュータが複雑な論理計算を瞬時に行って表示しているものにすぎない論理の世界であったはずである．そして，論理の世界は，ヒトの身体を排除しているものとして，レイコフとジョンソンが批判したものである．4-21) この事実は，コンピュータによって作り出されるディスプレイ世界には，元来，メタファーの基盤となるヒトの身体が存在していなかったことを示しているのではないか．しかし，レイコフとジョンソン，楠見，久保田の説明では，コンピュータの論理の世界に，いつ，どのようにして，私たちの身体が入り込んでいったのかということは考えられていない．ここから，ヒトの身体が，コンピュータとのコミュニケーションに入り込んでいくプロセスを詳しくみていく必要がでてくる．そして，そこには論理の世界にメタファーが立ち上がっていく様を捉えるという興味深い問題がでてくるはずである．メタファー形成の基盤となるイメージ・スキーマは，基本レベルの行為の繰り返しによって生じるものであるから，身体経験の基本レベルとコンピュータとの関係から考察していかなければならない．よって，私たちが，デスクトップ・メタファーについて，はじめに考えるべきことは，このメタファーが生み出される前に，ヒトの身体経験がその基本レベルで．コンピュータの論理世界に何らかのかたちで入り込んでいたのではないか，ということになる．この問題への手がかりを，シェリー・タークルは与えてくれる．彼女は，デスクトップ・メタファーを一般化したマッキントッシュのインターフェイスについて，次のように書いている．マッキントッシュのインターフェイス──実際はその画面──は，実物の机をシミュレートしている．私のアップルⅡの CP/M システム4-22) のような，論理的コマンドで操作される論理的インターフェイスではなく，たとえ二次元とはいえ，ヴァーチャル・リアリティだったのだ．この世界では，空間を進むのと同じように情報の中を進む．実際，マウスを手にして平面上で動かせば，その物理的な動きが，通常は矢印か指の形である指示アイコンによって，画面に反映されるのがわかるだろう．4-23) このタークルの記述には，「論理的コマンドで操作される論理的イ

インスタグラムの設定にある「元の写真を保存」について

8/03/2013

スケッチパッドで描く，ふたつの手（４）

4/02/2010

スケッチパッドで描く，ふたつの手（１）スケッチパッドで描く，ふたつの手（２）スケッチパッドで描く，ふたつの手（３） -- ５．ライトペンで描く手を見せるボタンを用いてコンピュータとの対話における身体のノイズを最小限にすることは，ヒトの身体を排除してコンピュータとの共生関係を築こうとしたリックライダーらと同じことを，サザーランドも行っているのではないか．確かに，ボタンを押す手だけを考察した限りでは，サザーランドもリックライダーらと同じようにみえる．しかし，スケッチパッドの記録映像には，ボタンを押す手とともに，ペンで線を描く手も映っていることを忘れてはいけない．スケッチパッドはふたつの手の行為の組み合わせによって図形を描く装置なのだ．次に，ペンを持つ手ふたつの手の関係における，ボタンを押す「システムの手」の役割を考えたい．記録映像に映る右手はライトペンというデバイスを持って，ディスプレイ上に線をとても自然に描いているようにみえる．しかし，スケッチパッドはヒトとコンピュータとの間に情報経路を構築して「描く」行為を行うシステムであり，そこでは「ヒトとしての行為」はノイズにすぎない．それゆえに私たちの描くという行為は「システムとしての行為」へと変換されなくてはならない．だとすれば，ライトペンを持つ手が示す描く行為の「自然さ」が，いささか奇妙なものに感じられてくる．なぜなら，ライトペンというデバイスで図形を描いていく手は，その行為の「自然さ」ゆえにシステム化されたボタンを押す手と正反対の「行動する手」に見えるからである．身体というノイズからの影響を最小限にして，ヒトとシステムとの間に情報経路を形成する必要があるにもかかわらず，「ヒトとしての行為」を続ける「行動する手」が存在し続けること．さらに，「行動する手」と「システムの手」とが組み合わされて，描くという「ヒトとしての行為」を実現していること．これらのことを考えるために，サザーランドがなぜ「ライトペンで描く」という形態を，スケッチパッドに採用したのかということを見てきたい． 1957年にMITリンカーン研究で，B・ガーリーとC・F・ウッドワードがライトペンの原型を開発し，1959年には多くのコンピュータシステムで普通に使われていた．このことから，1961年からはじめられたスケッチパッドのデザインにお

「グリッチワークショップ」を見学して考えたこと

8/22/2011

東京藝術大学芸術情報センターで８月20・21日に開催された公開講座「グリッチワークショップ」を見学しました．「データを壊す」ってどういうことなんだろうと疑問から見学させてもらったのですが，とても興味深い内容でした． ucnv さん, 林洋介さんによるグリッジの技術的な講義と針谷周作さんによるグリッチの歴史とその可能性を示す講義といった，グリッチをめぐる技術と概念を端的に学べました．ワークショップ参加者は，技術を学んだあとに，グループごとに作品作りをしていたので，単に見学していた私よりもはるかに深く「グリッチ」のことを理解できたのではないかと思います．制作には参加しませんでしたが，私自身もこれから自分がメディアアートを考える上で役に立つような「グリッチ」という概念を得たような気がします．ここからはワークショップに参加した私の個人的な感想です． ucnv さんがグリッチの定義として「データは壊れているけれども再生できる」と言われていて，ここでの「壊れている」って何だろうと思いました．バイナリエディタで画像ファイルを開くと，その画像を構成しているデータが文字と数字ででてきて，この時点で自分的にはファイルが「壊れている」と感じてしまうわけですが，それは，画像を構成するデータの別の見え方であるわけです．「攻殻機動隊」や「マトリックス」で，緑の文字・数字が画面を覆い尽くすことのイメージや，概念では画像データを文字・数字で示すことは知っていても，バイナリエディタで画像ファイルを開くだけで，それが文字・数字ででてくると，やはりそれまでとは違って，やはりそうだったのかということを感じます．その文字・数字を適当なところで消したり，コピペなどで編集，保存して，その画像ファイルを画像として開くと，画像が変な感じになっている．バイナリエディタでやっていることは，自分の感覚からいうと「編集」という行為ですが，その結果生じた画像は「壊れた」と感じる．「編集」から「破壊」が生じるという変な感覚です．さらに，コンピュータにとっては別にそのデータが「壊れている」というわけではなくて，それをデータ通りに画像として表示しているわけです．元画像バイナリエディタで編集（ちょっとした）グリッチ画像コンピュータはデータは壊れ

矢印の自立

1/29/2010

The World's Biggest Signpost from adghost on Vimeo . ノキアのナビゲーションサービスのプロモーションのためにつくられた巨大な矢印．携帯から位置情報を送ると，矢印が動いてその方向を指すもの．情報を送った人は，矢印の先に何があるかも想像することができるので何を指しているかわかるけれども，多くの人は，そこに流れるメッセージを読んだとしてもこの矢印の先にあるモノを想像できないなのではないだろうか．でも，矢印の方向に私たちの注意は向いてしまう．矢印の先に注意を向けるということを，私たちはごく自然に行っているが実はそれはつい最近になって生まれた行為らしい．矢印は，長い間，「モノの動く方向を示す」という意味しかもっていなかったが，今世紀に入って，矢印が示す意味が多様化してきてると，以下のように書かれている．矢印の意味をほんの少し調べただけでも，現在の記号的な教えを示す矢印のなかから，たちどころに７種類もの違う意味で使われている矢印を見つけることができる．１．動きの向き物体の動きであったり，動かす必要がある物理的な動きの向きを示す．２．物理的な変化，変容ある状態や状況に置かれているところから別のものに変化，変容することを示す．３．ディメンションの提示通例としては距離を示したり，数量，重量，時間といったいろいろな寸法とともに使われる．距離を表したり，重量を示す．４．連結関係を示す例えば組み合わせにすべき部品と部品を示す矢印．この場合，昔の医学書や科学書で見られるものと同じく，結合線（破線）と同一の意味を持つ．この矢印は，現在使われている矢印と同じくさまざまな起源から生まれてきたことを示す．５．注意を喚起どこを見るべきか，図版の特定の場所を示すために使われる．６．連続性を示す現代の科学技術では，機能を使ったり，ある要素と要素を組み合わせるには，多くの手順を経る必要がある．そうした一連の手順において，矢印で次にするべき段階を示す．７．特定の意味を持つ矢印が教え示す意味は，必ずしもいつも明確とは限らない．また仮に明確でなくとも，意味は持っている．例えば「電気」や「リサイクル」に使われている記号がそれにあたる．(pp.19-20) 矢印の起源と多様化 in 矢印の力：その先にあるモ

矢印についての寄せ集めメモ

11/30/2010

「矢印」について考えたいと思っていて，Youtube で見つけた動画．いろいろなところに矢印があるな．以前，教えてもらった廣村正影さんの矢印関する仕事も気になる．矢印　意識と行動予測の視覚化去年銀座で展覧会やったときにいくつかのムービーをつくったんですね。矢印っていうのは面白いなって思ってサインをやることになると矢印たくさんつかうじゃないですか。それで矢印が動いたらどうなるんだろうなって思ったんですよ。人間の頭に矢印をつけて歩いてもらったらどう見えるんだろうなって思ったんですよ。頭に矢印ついてると、興味がある方向に少しぶれたりするんじゃないかなって思ったんですね。地球大学クリエイティブ第2回　廣村正彰「意味のコンテクストをデザインする」from tamalog （C）廣村正影 2次元（2 dimension）の平面的とも言えるサインデザインが、3次元（3 dimension）の空間の中に位置付けられたときにいかなる視覚効果をもたらすかということに注目し、これまでの「サイン計画」や「VI計画」の概念を取り払い、様々な建築家や写真家とのコラボレーションを手がけてきた異色のクリエイター・廣村正彰。今回の展覧会では、1階では「矢印→」や「アルファベット」をモチーフに、矢印という記号それ自体が、空間の中で動きをもった表情を得ることによって、平面にはない新たな意味をもつのではないか。 http://www.tokyoartbeat.com/event/2007/5284 ２次元と３次元のあいだを移行する「矢印→」．カーソルも含めてというか，カーソルから派生して出てきた「矢印→」そのものへの興味をどう研究に結びつけるか．アートの領域では，クレーとか，荒川修作とデュシャンとかも「矢印」を考えるうえで重要．アートとかデザインとか区別せずに，「矢印→」を中心にしてそれらをリンクさせていければおもしろことになりそう．矢印は位置と向きと長さの３つの情報を同時に表すことができる記号だ。だから力や運動の位置、向き、大きさを過不足なく表すことができる。ふむ、そう考えるとサインに使われている矢印はたいてい情報が余ってるな。 https://twitter.com/yam_eye/status/27793247926 その際に大きな指針を与えてくれそうなのが，イ