次の学会発表のためのメモ（13）：データ｜マウス｜相互行為


データと紐づけられたモノ→マウス
キーボードもデータと紐づけられている．
データとは何か．
コンピュータに与えられる（入力される）数値．
数値化されたモノ．数値で捉えられたモノや行為．

あるプログラムは，その形式的な性質，すなわち構文論的な性質によって完全に特徴づけられる．すなわち，それが入力として何を受け取り，出力として何を生み出すかという形式的な性質と，入力と出力を媒介する過程の形式的な側面である．
ドナルド・デイヴィドソン「表象と解釈」

ヒトとコンピュータとのあいだで相互行為が行われていること．
相互行為で発生したデータが，コンピュータに入力される_．
このデータが，ピクセルの形でディスプレイに出力され，ヒトに解釈される．

このブログの人気の投稿

サマーウォーズ：身体とアバターのデザイン（３）

ポストシンボリックコミュニケーション 最後にOZのアバターのもうひとつの可能性を考えてみたいと思います．それは「コミュニケーション」についてです．今までの考察で暗黙に前提にしていたことがあります，それは今では多くの人が「インターフェイスの非対称性」を自分の感覚として持っているということです．作品のなかでも，若い人に限らず，老若男女誰もがOZにログインして，アバターを操作している．そして，作品を見ている人も特に何の違和感もなく「OZのアバター」といったものを受け入れられるし，それについて考えるもことができる．つまり，ゲームやコンピュータの体験：「インターフェイスの非対称性」が一般化した今だからこそ，サマーウォーズという作品は生まれたのです．このことの意味はしっかりと考える必要があります．次の引用は，マリオの生みの親として有名な任天堂の宮本茂さんの対談での細田さんの発言です． 細田　本当に，その社会情勢がもたらしたのがあの映画の設定だったと思うんです．そうじゃなければ，とてもああいう設定で普通の人が活躍するってことはできなかったと思いますね．アクション映画はやっぱり，特別な人が活躍するものみたいな部分があって．『マトリックス』じゃないけど，「キミは選ばれし人だ」とか言われないと活躍できない．でも，DSがこれだけ広まっているという世界的な状況があれば，DSや携帯も含めてそこからアクセスできる身近な道具を使うことによって，普通の人でも活躍できるアクション映画が成り立つんじゃないかと．(p.169)  「PLUS MADHOUSE 03：細田守」キネマ旬報社，2009年 ゲームやコンピュータが当たり前の存在となって，選ばれた誰かがヒーローになるのではなく，誰もがヒーローになれる作品が生まれた，というふたりの話はとても興味深いです．では，誰もがヒーローになれる作品の舞台になっているOZについて改めて考えてみたいと思います． 細田監督作品の特徴と言われる記号的表現．その効用のひとつが，色や形態などを単純化する記号を使うことで，表現にある種のスピード感が得られることだ．単純化とは表現力に制限を加えることだが，その反面，視認性がアップする．たとえばその性質は交通標識などによく現われていて，標識に向かい合った人間はその表示内容にすぐさま反応することが求めら...
続きを読む

インターフェイス再考：アラン・ケイ「イメージを操作してシンボルを作る」は何を意味するのか．

.review  にテキストを書くために，昔発表したものを改めて読んでみた．カーソルについては論じていないけど，GUI が担っている思想的背景みたいなものを自分がどのようにまとめたかを確認できた．このときは「カーソル」という存在をまったく見落としていたので，ここからどうカーソルと関係させていくか． -- イメージ操作シンボル View more presentations from Masanori MIzuno . インターフェイス再考：アラン・ケイ「イメージを操作してシンボルを作る」は何を意味するのか． １．はじめに アラン・ケイが提唱したスローガン「イメージを操作してシンボルを作る [Doing with images makes symbols] 1 」は，現在のグラフィカル・ユーザ・インターフェイス（GUI）につながるアイデアを簡潔に表現し，GUI の開発に大きな影響力をもった．ケイのスローガンは，ヒトとコンピュータとのコミュニケーションをどのように変えたのであろうか．現在，世界中に，GUI を実装したコンピュータは数えきれないほどあり，私たちはそれを使って日々の作業を行っていることから，ヒトとコンピュータの関係の変化は，ヒトのコミュニケーションそのものへも影響を与えているのではないだろうか．本論考では，上記のことを考えるために，まずは，一般化した GUI がどのような影響をもっているのかを確認するために，東浩紀とシェリー・タークルの議論を考察する．次に，ケイが，どのような影響のもとで，上記のスローガンを掲げるに至ったのかを明らかにする．最後に，スペルベルとウィルソンの「関連性理論」を参照して，GUI が私たちに提示したコミュニケーションの手段を考える． ２．インターフェイス的主体とブリコラージュの再評価 哲学者の東浩紀は，『サイバースペースはなぜそう呼ばれるのか』の中で，現在のユーザ・インターフェイスの主流を占めている GUI について興味深い議論をしている．東は，ジャック・ラカンとスラヴォイ・ジジェクの精神分析の理論をもとにして，シェリー・タークルが1990年代のコンピュータ文化を特徴づけるために用いた「at interface va...
続きを読む

あのマウスカーソル邪魔じゃね？

.review で公開した「 カーソルの先 」のアブストに興味をもってもらった k_soryu さんから「夢オチ」という作品を教えてもらいまいた． http://www.kenshiro.tv/ から「WORK」をクリックし、左にある三角をクリックしたところにある「夢オチ」というFlashです。  「森井ケンシロウ.tv」はトップページから，画像とカーソルとの関係があってとても楽します．で，「夢オチ」なのですが，これはタイトル通り「夢」の中のお話です．とても面白い映像になっていますので，是非見てみて下さい．森井さん自身が書いていますが，クリックしてから，しばらくはなにも起きませんが，気長に映像が始まるのをお待ち下さい（私は，最初何度もクリックしてしまいましたが…）． 森井さんが作ったこの「夢オチ」では，ディスプレイ上というある種仮想空間の入口みたいなところでありながら，確かな現実として私たちが見ているカーソルが，夢の中に登場してモノ化するということが起こっています． この作品の中では，「マウスカーソル」も立派なキャラクターとして登場しています．といっても，はじめて見たときは，「マウスカーソル」が作品の中にあることなど気づきもしませんでしたが…．自分の動かしてるカーソルには注意して，作品が流れている枠の外に出して見ていたのですが，突然，作品の中の「森井さん」が「あのマウスカーソル邪魔じゃね？」と言って，「マウスカーソル」を指さして，見ている人に「カーソルをどかしてください」と言います．私はこの言葉に，ドキッとして，すぐさま自分のカーソルを動かそうとマウスに手を伸ばしました．この「ドキッ」とした感じは，映画館か何かでうっかり，プロジェクターとスクリーンの間を横切ってしまって，自分の影をスクリーンに映してしまったのを注意されたのに似たような感じです．でも，「森井さん」が邪魔と言っていた「マウスカーソル」は作品の中に予め登場していた白いカーソルのことでした． 次に，「森井さん」は「マウスカーソル」をバシッと叩きます．画面上の白いカーソルが叩き落とされます．もちろん，私のマウスとつながっている黒いカーソルは画面のどこかに何事もなくあり続けますが，作品の中の「マウスカーソル」は心地よい効果音とともに「森井さん」に叩き落とされます．ここから，「マウ...
続きを読む

メモ：「貧しい画像」はもうない

2007年に書かれたHito Steyerlの「 In Defense of the Poor Image 」には，高解像度画像の劣化版ではなく独自の存在となった低解像度画像のことが書かれている．2007年といえば，iPhoneが発表された年であるが，インターフェイスでの大変動ともともに画像の認識においても大きな変化が起こっていたと考えるべきであろう． 「In Defense of the Poor Image」の出だしの一文「The poor image is a copy in motion.｜貧しい画像は動きのなかでのコピーである」は，「貧しい画像」がもともと「コピー」であり，ネットでの画像流通という「動き」に関係していることを端的に表している．「貧しい画像」は低解像度であっても，実際にはコピーではなく，オリジナルの画像であることもあるかもしれないが，「貧しい画像」と呼ばれる低解像度画像が「コピー」に近い存在で，ネットに流通しているという認識が重要なのである． 低解像度の画像に対してはどこかに「高解像度画像＝オリジナル」があるという認識が対として存在しているが，Steyerlはこの認識を間違ったもとして糾弾する．低解像度画像は高解像度画像とは異なる存在意義をもつというのが，Steyerlの主張である．ネット上を隈なく「流通」していくことこそが，低解像度画像の存在意義なのである．ネットは通信速度の制約から高解像度画像は流通しにくい．それゆえに，画像は解像度を落とされ，データ量を減らされたかたちで流通していく．画像は流通すればするほど人目につくようになる．このことこそが「貧しい画像」に求められていることなのである．そこには解像度の高さによる画像の真正さではなく．いかに人目につくのかというあらたな評価基準が適用される．このあたらしい評価基準のもとでは「アウラ」の出現もまた変わってくると，Steyerlは主張する．「オリジナル」が示すアウラのように，それがいつまでも確かに存在しつづけるからこその価値ではなく，「コピー」のはかさなさゆえに「アウラ」が生じるとされる．ここで「アウラ」という言葉を双方に適用していいかは疑問であるが，現在において「アウラ」という存在も変わっていることは間違いない． 論考の最後にSteyerlは「貧しい画像」はリアルな存在が放つオリ...
続きを読む

「\風景＝風景」あるいは「システム＝風景」

「風景」をめぐる２つの作品， 新津保建秀『\風景』 と ペトラ・コートライト 《 System Landscape 》を考えているけれど，考えれば考えるほど，広がりをもつトピックだなと感じています． 『\風景』では，ページをめくるごとに，意識がネットに行ったり，写真で撮られている「現実」にいったり，デスクトップ上のウィンドウに行ったりする．意識がフラフラする．この意識のフラフラが，最後にある「バックスラッシュ」の説明ですっきりする．「すっきりする」と言っても，写真を見ているときの意識がネットに行ったり，「現実」に行ったりする感じのすべてを理解できたわけではいのだけれど，「あぁ，そういうことか」と思う．池上高志さんが 美術手帖 に書いている「安定した解の存在しない関係式『\a = a』」によって，意識が落ち着く感じがある．今まで見ていたものが風景なのなか，デスクトップも風景なのか，そうしたことが「\風景」として無効化されて，その上でそれが「\風景＝風景」となるという感じ． ペトラのときに書いたことでいうと，写真集の写真の隣接性によって意味がわからないけれど，とても強烈な結びつきを感じていたものが，最後の一文によってまとめ上げられて，意味を持つ感じ．これは言いすぎかもしれない，池上さんの「\a = a」という式によってこそ，まとめ上げられるというべきかもしれない．まとめ上げられるといっても，隠喩的なものではなくて，「\風景＝風景」という直結回路ができた感じ．メタファーを経由しないから，デスクトップ・メタファーで特権的に位置にある「カーソル」が写真に写っていなくてもいいのかなと思えるようになった．以前は，「カーソル」が写っていないことに違和感を感じたのだけれど，今の解釈だと感じない． 新津保さんはインタビュー（ アサヒカメラ2012年５月 ：あたらしい「風景」をとらえるために，インタビュー 島貫泰介）で「ネットワーク内の膨大な情報は、第二の自然環境といえるのではないでしょうか。写真は見えるものしか撮ることができないけど、写真が持つ『フレーム』の意味を拡張することで現れる風景があるんです」と言っています．コンピュータのディスプレイに映っているもののスクリーン・ショットを撮ることで，「第二の自然環境」を撮影しているとすれば，ペトラの《System L...
続きを読む

マジック・メモ：行為＝痕跡＝イメージの解体可能性

フロイトは，自らの記憶と知覚のメカニズムに関する仮説のために，当時，売り出されていた玩具である，マジック・メモという装置を取りあげた．その理由は，この装置のイメージを表示する表面が，「いつでも新たな受け入れ能力を提供すると同時に，記録したメモの持続的な痕跡を維持するという二つの能力を備えている」2-11) からであった．フロイトは，「情報を無限に受け入れる能力と，持続的な痕跡の保存は，互いに排除しあう特性」2-12) と考えていたが，マジック・メモは，その相反する能力を同時に実現する装置であり，その構造は，次のように記されている． このマジック・メモは，暗褐色の合成樹脂あるいはワックスのボードに，厚紙の縁をつけたものである．ボードの上を一枚の透明なカバー・シートが覆っていて，その上端がボードに固定されている．このカバー・シートは，固定されている部分を除いて，ボードから離れている．この小さな装置でもっとも興味深いのは，このカバー・シートの部分である．このカバー・シートは二枚のシートで構成され，シートは二カ所の末端部分を除くと，互いに離すことができる．上のシートは透明なセルロイドである．下のシートは半透明の薄いパラフィン紙である．この装置を使用しない時にはパラフィン紙の下の面は，ワックス・ボードの上の表面に軽く粘着している．2-13) ここから，マジック・メモについてわかることは，大きく分けて，ワックス・ボードとカバー・シートという二つの部分から，この装置が構成されているということである．そして，カバー・シートは，透明なセルロイドの層と半透明の薄いパラフィン紙から構成されているので，全体としては，三層構造の装置ということになる．フロイトは，次に，この装置を使用するプロセスを詳細に述べている． このマジック・メモを使う際には，ボードを覆ったカバー・シートのセルロイドのシートの部分にメモを書く．そのためには鉛筆もチョークも不要である．受け入れ表面の上になにか物質を沈着させて記録を残すのではないからである．マジック・メモは，古代において粘土板や鑞盤に記録したのと同じ方式を採用しているのであり，尖筆のようなもので表面を引っ掻くと，表面がへこみ，これが「記録」となるのである．マジック・メモではこの引っ掻く動作は直接行われるのではなく，ボードを覆った二枚のシートを介して行われる...
続きを読む

isea 2009 のための覚え書き

Seeing the ‘light-color’ seduces a new kind of touching     When we use a computer, what do we do? Almost all of us look at some image on an electric display, grab and move a mouse, and type on a keyboard, then our right hand holds the mouse in order to point to an image called an icon on the display. This is all very 'natural' for us; if our body makes some actions, then the images on the computer display change. However, this relationship between our body and the image did not exist until the computer, and especially until the Graphical User Interface, appeared.  I call this phenomenon 'Display Acts': the action formed by connecting our body action with the change of images on the electric display. Through living with the computer, we have acquired new actions in order to inhabit this new image world.  In other words, 'Display Acts' is the first step for our new actions in the man-computer world. I have already discussed ‘Display Acts’ on the first computer gr...
続きを読む

GIFとループと物語

GIF論文を書いていて，途中で外したテキスト．レフ・マノヴィッチが考えていたニューメディアの「ループ」のあり方とGIFのループとを比較することで，ループにおける「物語」の扱いを考えてみたもの． −− 2001年に出版された『ニューメディアの言語』で，マノヴィッチは映像の「ループ」がニューメディアのひとつの特徴だとしている．そこには長時間の再生が難しい当時のコンピュータのスペックの問題があった．そして，マノヴィッチはループの映像の例として，QuickTimeやFlashアニメーションを取り上げる．さらに，マノヴィッチは初期映画とニューメディアはともに「ループ」というテクニックを用いていると指摘すし，映像の歴史を「19世紀の前映画的視覚的デバイスもまたループに頼っていた．19世紀を通じて，ループは長くなっていき，最終的には「物語」へと至った」と簡潔にまとめる．「物語」を語れるほど長く映像を再生できないので，ループ映像が必要だっというのがマノヴィッチの考えの根底にある．マノヴィッチにとっての「ループ」とは物語に従属した要素のひとつであって，「物語を駆動するエンジンとしてのループ」なのである．それは，彼がデジタルの５つの特徴としてあげたもののひとつ「モジュール性」と関係がある． マノヴィッチが制作した《Software Cinema》や，ループ映像の例として取り上げられるジャン＝ルイ・ボワシエの《押し花》は，ループする映像を次々とクリックしていくなかで物語が進んでいく構造になっている．クリックとクリックのあいだ映像が常に動いている必要があるが，長時間の映像を再生させることは難しく，短い映像のループが採用される．そして，映像へのリアクションであるクリックによって物語が分岐していき，ループ再生による映像が物語の「モジュール」として機能していく．ここでのループはプログラムの基本構造のひとつである「次の出来事」へ分岐するためのループとなっている．マノヴィッチが考える「ループ」は，プログラムの構造に基づいたヒトとコンピュータとのインタラクションの基本であるデータの処理を再帰させながら「次へ次へ」と選択を迫る性質を，「物語」を駆動する力に応用した映像なのである． 技術的制約のもとループに着目したマノヴィッチだが，同じ制約のもとウェブで使われているGIFに言及することはない．...
続きを読む

GIFとの遭遇：選択的認識と低解像度のデフォルメされた世界（３）

３．GIFと初期映画 ３−１．映像 　GIFは「動画」であるにもかかわらず，物語の一部にもならない「動き」を切り取った「静止画」のような特殊な性質をもったものである．GIFは「物語」ではなく，デフォルメされた「動き」が強調される．ここで初期映画とGIFとを対比してみたい．なぜなら，初期映画とGIFはとともにそれぞれのメディアの黎明期に現われた映像の形態であり，映画研究者のトム・ガニングが「初期映画は，その後あからさまに映画を支配するようになる物語への衝動に屈服していたわけではなかった 22 」というように，初期映画は「物語」を強調した映像ではないなど，物語の要素がうすい「短い動画」であるGIFと多くの類似点が見出されるからである． 　ガニングは1906年頃まで映画を支配した映画と観客のあり方を「アトラクションの映画」と呼ぶ．そして，映画が「物語」を積極的に活用するようになったあとも，アトラクションの映画は消えることなく，物語映画の要素としてあり続けているとしている 23 ．アトラクションの映画について，ガニングは次のようにまとめている． アトラクションの映画は観客の注意をじかに引きつけ，視覚的好奇心を刺激し，興奮をもたらすスペクタクルによって快楽を与える───虚構のものであれドキュメンタリー的なものであれそれ自体が興味をかき立てる独特のイベントなのである．展示に供されるアトラクションは映画的特性も備えていて，それはたとえば今しがた述べたばかりの初期のクロース・アップやトリック映画だが，後者は映画的操作（スロー．モーション，逆回転，変身，多重露出）が物珍しさを提供する．虚構の状況はというと，ギャグやヴォードヴィルの演目，衝撃的で好奇心を煽る出来事の再現（刑の執行，最新の事件）に限定されがちだった．映画製作へのこうしたアプローチを規定するのは観衆への直接的な呼びかけであり，それに基づいて映画興行師が観客にアトラクションを供するのである．ストーリー展開や物語世界の想像と引き換えにショックや驚きのような直接的刺激を強調することで，物語に没入させることよりも演劇的な誇示の方が優位に立つ．アトラクションの映画は，心理的動機や個人的人格を備えた登場人物を想像することにエネルギーを費やすことはほとんどしない．フィクションとノンフィクションの双方のアトラクシ...
続きを読む

「テクノロジーと表現論」（2026年度）の授業資料

京都精華大学で「テクノロジーと表現論」という授業を担当しました。全7回で、表現の道具としてのコンピュータ、そのインターフェイスの歴史を辿る授業です。Sketchpad、マウスとカーソル、ウィンドウとデスクトップメタファー、ハイパーテキスト、スキューモーフィズムからフラットデザイン、Fluid Interfaces、そしてAIを順番に読んでいきました。 この授業を準備しながら、わたしはずっと渡邊恵太さんの『 融けるデザイン 』（2015年）を読み直していました。出版から10年。10年前の本を、いまのインターフェイス体験のなかで読み直していくと、不思議なことに、この本は「これまで」の本ではなく「これから」の本に見えてきました。 授業が終わってしばらくして、渡邊さん本人のこんなポストを見つけました。 最近は融けるデザインとは何だったかみたいな話し方にシフトしてる。さすがに10年過ぎて。そこの超軽工業への話をプラスして話す感じ。 （ @100kw のポスト ） これを読んだとき、「おお！」と思いました。渡邊さん本人が「融けるデザインとは何だったか」を10年後に読み直し、そこに超軽工業への話を足して話していたことを、わたしは半期の授業で、図らずもやっていたからです。もちろん、本人の語り直しとわたしの授業がそっくり同じというわけではありません。それでも、『融けるデザイン』（2015年）を読み直し、そこに『 超軽工業へ 』（2025年）を重ねていくという流れは、意図しないまま、このポストとよく似た形になっていました。 感覚的リアリティと意味的リアリティ 授業を振り返ってみます。第1回で、わたしはまず渡邊さんの「分けない」を紹介しました。 むしろ物質も結果的には体験であり、実は情報的に捉えられる。だから情報も物質も分けない設計ができる。  渡邊恵太『融けるデザイン』（2015年）、p. 40 確かに設計面では「情報も物質も分けない」ということが行われてきたのが、この10年でした。けれど、そこから生まれる体験のほうを考えると、話はもう少し込み入ってきます。情報も物質も分けない設計のもとで、うまくいった体験は、疑問の余地なく、一つのまとまりとして立ち上がってくれます。けれど、それは本当に一つのリアリティなのでしょうか。わたしには、感覚的リアリティと意味的リ...
続きを読む