次の学会発表のためのメモ（13）：データ｜マウス｜相互行為


データと紐づけられたモノ→マウス
キーボードもデータと紐づけられている．
データとは何か．
コンピュータに与えられる（入力される）数値．
数値化されたモノ．数値で捉えられたモノや行為．

あるプログラムは，その形式的な性質，すなわち構文論的な性質によって完全に特徴づけられる．すなわち，それが入力として何を受け取り，出力として何を生み出すかという形式的な性質と，入力と出力を媒介する過程の形式的な側面である．
ドナルド・デイヴィドソン「表象と解釈」

ヒトとコンピュータとのあいだで相互行為が行われていること．
相互行為で発生したデータが，コンピュータに入力される_．
このデータが，ピクセルの形でディスプレイに出力され，ヒトに解釈される．

このブログの人気の投稿

ナウシカの世界におけるメディア・コミュニケーション（１）

みなさんはケータイで友人と話，インターネットで動画を見たりすることが当たり前だと思います．もし明日からこれらの通信・情報技術がなくなってしまったらどうするでしょうか．友人とも連絡がとれないし，時間をどうやってすごしたらいいのか分からなくなってしまうのではないでしょうか． 　 今回は『風の谷のナウシカ』で描かれている世界を通信・情報技術が可能にしたメディア・コミュニケーションという観点から，私たちが生きている世界と比較していきます．その中で，私たちの世界のあり方を考えていくことになります． 復活しない通信・情報技術 宮崎駿監督の「風の谷ナウシカ」は一度文明が滅んだ後の物語です．一度リセットされた技術．リセットされる前には，車も飛行機などの移動技術もあっただろうし，電話などの通信技術，コンピュータに代表される情報技術もあったでしょう．しかし，ナウシカの世界では通信・情報技術はまったくと言っていいほどに復活していないのです．飛行機は復活して「船」と呼ばれて空を飛んでいます．しかも現在とは異なるより高度なエンジンを用いて飛んでいるにもかかわらず，この世界には電話すらないというのが，今の私たちから見たときの感想ではないでしょうか．ナウシカの世界では，なぜ通信・情報技術は復活しないのでしょうか．　 【問い： もし今の技術すべてが失われたとしたら，「通信．情報技術」を再生させますか？　「再生する／しない」を選択して，その理由を考えみましょう．】 通信・情報技術は，私たちにとってごくごくあたり前の存在です．ケータイでいつでもどこでも友達と話し，メールする．それが便利だとも思わないくらいにあたりまえになっています．確かに，ナウシカが映画化された1984年（マンガは1982年から連載開始）には，ケータイはなかった．けれど，宮崎さんの想像力を持ってすれば，容易に描くことができる未来だったのではないでしょうか．1984年と言えば，コンピュータをディスプレイ，キーボード，マウスという「今」のかたちにすることを決定づけた，アップル社のマッキントシュが発売されています．多くの人がコンピュータを使うようになっている「現在」につながる「未来」が1984年に示されていたのです．だとすれば，「風の谷のナウシカ」の世界に通信・情報技術が「ない」という状況は，宮崎さんの明確な意思でなされた...
続きを読む

名古屋学芸大学メディア造形学部映像メディア学科での特別講義：「自己」を経由しない「処理」の高度化

名古屋学芸大学メディア造形学部映像メディア学科 の伏木先生に招かれて、大学院授業で特別講義「 「自己」を経由しない「処理」の高度化 」をしてきました。 レクチャーは資料と文字起こしにその様子が記録されています。資料を作っても、そのまま話せないものです。発表をしているときに、一度最後までスクロールされてしまって、焦りました。質疑応答も学生から示唆に富む質問があって、回答するのが楽しかったです。伏木先生の質問には、一瞬頭が真っ白になってしまって、「映像というのはピクセルの操作だと思っていて」という回答をしてしまいました。このあたりも文字起こしに入っています。 「自己が薄くなっている」ということをインターフェイスの歴史から話したのだけれど、それを「悪い」ものとして捉えたくなくて、そもそも「自己」が確立している必要があるのかとかという疑問があって、「私」が何かするではなくて、私とコンピュータ、スマートフォン、AIとが組み合わされた「私たち」が何かをするときに、私の「自己」というのは薄くなった方がいいのではないかということを考えていました。 でも、話しながら、これは大きな矛盾であるということも考えました。それもまた、私が「自己」を意識しすぎなのではないかという考えになっています。私というもの、人間というものが、変わり続けることが重要で、その変わり続けていることを変わり続けているその中から記述するにはどうしたらいいのかということを、「わたしたち」は考えているのだと思います。 近頃、「私」というのは文章の中で区切りが強い気がして、わたし、わたしたちという言葉を使っています。ここでいう文章は日記なので、論文やレクチャーなどではまだ「私」でした。これからもそこでも「わたし」「わたしたち」にしようかな。 レクチャーの後に、3名の発表がありました。わたしの発表内容に惹きつけて、それぞれ発表してくれていて、聴いていて、とても刺激を受けました。即座にいい質問ができなくて、発表をなぞるようなコメントしかできませんでした。わたしと同じような考え方をしているんだというのが、うれしかったからだと思います。メディア体験を身体レベルから考えるということをして、それを発表にまとめていくというプロセスがとても鮮明で、聞いていて、気持ちよかったです。ありがとうございました！ レクチャーの後にも、コメントをもら...
続きを読む

Surfin' に見たふたつのデスクトップ───永田康祐《Sierra》と山形一生《Desktop》

Surfin' を見てきた．永田さんの《Sierra》は「乱層のデスクトップ」という感じ，と書いてみて，すぐに「乱層」ではないなと思った．平面の重なりで，デスクトップという普段は静止画のところに動画が流れることで，ひとつ土台が崩れるというか，デスクトップが平面ではなく映像となることで，前提が崩れるというか，メニューバーやドックの奥にデスクトップがあることが，もうひとつだけ奥に行っているような感じがした．何が言いたいかというと，「デスクトップ」という平面が無効化されて，その奥に映像が流れていると感じたということなんだろう．「デスクトップ」がなくなってしまっている．けれど，その他のカーソルやウィンドウは通常通りである．だからこそ，少し感覚が狂う感じがある．失われた地面の上で通常通りの行為を行うという感じだろうか．永田さんの作品によく感じる平面がパラレルに重なっていく感じを，ディスプレイのデスクトップを基準に，その前面と背面でミニマルに行なっている感じがした．となると，それはディスプレイのデスクトップという平面での前面と背面との重なりが強調されると同時に，ディスプレイというモノとそれが置かれた空間における3次元的な重なり，ディスプレイとその裏側に置かれたMac Pro，ディスプレイ下からケーブルが伸びるヘッドフォン，もうひとつの平面であるトラックパッド，そして，それらを操作するヒト，ヒトがいる展示空間といったものが平面的に重なり合っている感じがでてくる．そこでは，ディスプレイのデスクトップ基点の重なりが確かにあると感じつつも，その重なりがあやふやになっているので，3次元空間で起こるモノの重なりが不思議に思えてくる．3次元を投影したデスクトップという2次元が消え去って，その重なりがあやふやに強調されて3次元的になって，その感覚が3次元に投影されるなかで，次元が折り重なるというか，2次元と3次元とが等価に投影し合うというありえない状態が生まれているのかもしれない． 永田さんの《Sierra》を見た後に，けど，この重なりは時間差で起こっている感じがある．机の上に形成された「痕跡」が，おそらく，かつて，そこに垂直に近い角度で「デスクトップ」が表示されていたことを示している．作品にはディスプレイはないけれど，ノートパソコンが置かれていただろう痕跡から，ディ...
続きを読む

アレゴリーを創造するプログラムという言語的記号

既に述べたように，プログラミング言語とは，ユーザと対話するものである．同時に，CPU とも対話するものであるがゆえに，ヒトにとって不可解な記号となっていた．スミスは，私たちにとって異質なものとなってしまった言語的記号を，アイコンという絵画的記号で示すことで，コンピュータとヒトという異なる秩序をもったものの間に，新たな対話環境を作り出そうとした．やがて，この対話環境が「機械の中にある世界と，人間の中の世界をメタフォリカルに重ねていこうという考え方」3-36) に基づいて，アイコンは現実世界との類似が求められていった．その結果，コンピュータ・ディスプレイは，現実世界に類似していなければならないというアナロジーの原理によって生み出される絵画的記号によって支配され，コンピュータの逐次的情報処理が現実世界と比喩的に結びつけられたデスクトップ画面が生まれることになる． コンピュータを，ヒトの直観は視覚的なものであるという信念に基づいて，ケイは，ノイマンロジックによる逐次的情報処理を隠蔽することで，絵画的記号を表示するための平面を作った．その平面に，スミスがコンピュータを操作するための絵画的記号，アイコンを導入した．けれども，アイコンを表示することは，コンピュータにしてみれば，従来通りの言語的記号の逐次的処理の結果として生じているにすぎない．確かに，情報処理という観点からみれば，プログラムという言語的記号の指示によって，ディスプレイ上の点が塗りつぶされていくだけである．そして，その塗りつぶされたものを，ヒトが，言語的，絵画的記号のどちらかとして解釈する．この意味で，ディスプレイに映し出されているものが，絵画的記号か，言語的記号かを決めるのはヒトであって，コンピュータにとって，それは点の集まりにすぎない． しかし，ここで問題としたいのは，アイコンが，プログラムによって塗りつぶされた点の集合だということではない．この説明は，コンピュータがプログラムによって，アイコンを「どのように」ディスプレイに表示していくのかを教えてくれる．だが，ヒトにとって何万行もの膨大な言語的記号の集まりといえるものが，ディスプレイに表示される時に，「なぜ」絵画的記号の集まりといえるものになるのかは分からないままである．つまり，デスクトップ画面と呼ばれることになるインターフェイスのレベルで，プログラムという言語...
続きを読む

Expanded Smooth

SMART THINGS: Ubiquitous Computing User Experience Design, MIke KUniavsky を読んで，印象に残ったテキスト．デジタル情報は，手に触れることができる固有な性質を持っていないということ，デバイス間の情報のシームレスのやりとりに「なめらかさ」という言葉が与えられていること． Traditional material (steel, plastic, or cotton) have properties such as elasticity, strength, resistance to corrosion, etc., but digital information has none of these inherently. (p.48) 伝統的な素材（鉄，プラスチックや綿）は，伸縮性や強度，腐蝕耐性などの性質を持っているが，デジタル情報はこれらの固有な性質を持っていない． These technique approach ubicomp UX design involving multiple devices by smoothing over task disconnects through consistency. No technique has emerged as dominant and it may be that technological immaturity will continue to frustrate designers' attempts at anything but highly limited continuity. This may actually be for the best. Critiques of attempts to create "seamless" interaction often conclude that clear but inconsistent interactions may create more continuity than consistent but confusing ones. (p.281) ユビキタスコンピューティングのユーザエクスペリエンス・デザインに対するこれらのテクニック...
続きを読む

始点と終点とを決めるという単純な規則に基づいた単純な行為

.review  に投稿するためのテキストを昨日，サインペンで殴り書きしたものをタイプした．今のところ，6382字．でも，全然まとまっていません．何となく形になってきたというところだけが救いですが…．その後，読み返して，自分で赤い入れながら考えを少しでもよくしようと頑張りました．下のツイートはそこからでてきたものです． -- カーソルが私たちに促すのは始点と終点とを決めるという単純な規則に基づいた単純な行為である．ただし，ここで一度決められた終点は，一瞬の後に始点になってしまうがゆえに，延々と始点と終点を決め続けなければならない． http://twitter.com/mmmmm_mmmmm/status/8959994500 コンピュータは，カーソルを介して私たちが延々と行う始点と終点を決め続ける行為を受け入れ，この単純な行為の繰り返しから多様なアウトプットを計算し，表示し続ける． http://twitter.com/mmmmm_mmmmm/status/8960129574 デスクトップ・メタファーをめぐる想像力の変化．1984：マウスとカーソルによって多様な行為が始点・終点の選択という単一の行為に縮減・後退し，現実／仮想という構造が前景化する． http://twitter.com/mmmmm_mmmmm/status/8960538375 1999〜：現実／仮想という構造が後退し，単一化された行為がその単一性にゆえに前景化する．デスクトップ・メタファーをめぐる想像力の反転に，カーソルが示す身体性の「ある｜なし」の重ね合わせが影響してる． http://twitter.com/mmmmm_mmmmm/status/8960699371 -- 私たちは始点と終点を決めるという単純な行為と，キーをして文字を入力するということを延々と繰り返している．キーで文字入力はタイプライターがあったけれども，始点と終点を決めるだけで，ここで始点を決めるというのは少し違うかも知れない．私たちは，カーソルをどこか目的の場所，終点を目指して私たちは動かすのだが，そこでクリックなりなんなりをしてしまったあとは，カーソルはそこに放置される．今まで私たちの身体と結びついていたのに，あっさりと放棄される．放棄されても，カーソルはそこにあり続けて，次の目的...
続きを読む

「サブシンボリックな知能」と Doing with Images makes Symbols

下條 「環境知能」と言うとき，比較的欠けているなと思った視点は，身体や皮膚の感覚，あるいはシンボリックにいく前のサブシンボリックな知能なんです．どういう意味かというと，子供がおもちゃに対してインタラクトしているとき，そのおもちゃにどういう機能があるかなんていう表象を頭のなかにつくらなくても反射的に手を出しているわけです．あるいはそこに本があれば何となくページをめくっているとかね．そうした，ピアジェが言うところの，表象より前の段階の感覚運動知能みたいなものは，安全な言い方をすればそういう研究は将来必要となるでしょう，という言い方になるのですが，そんなことをいっているあいだに，近未来において粗暴なかたちで吹き出てくるんじゃないかなという気がしているんです．(pp.150-151) 環境知能と環境管理をめぐって，東浩紀＋下條信輔　司会＝NTTコミュニケーション科学基礎研究所　in 環境知能のすすめ：情報化社会の新しいパラダイム ここで言われている「サブシンボリックな知能」という言葉で，昔の発表をまとめ直してみたいと思っている．プレシンボリックな知能／行為｜Doing with Images makes Symbols｜アレゴリー的思考 −− インターフェイス再考：アラン・ケイ「イメージを操作してシンボルを作る」は何を意味するのか． Re-thinking the interface: What is the meaning of Alan Kay's"Doing with Images makes Symbols" 水野勝仁 Masanori MIZUNO 名古屋大学大学院情報科学研究科博士後期課程　 Nagoya University, School of Information Science Abstract Alan Kay created a slogan for development of user interfaces: Doing with Images makes Symbols. This reveals the essence of the Graphical User Interface (GUI) which millions...
続きを読む

メディアアート概論（2024年度水野担当分）の授業資料

女子美術大学 の首藤圭介さんに声かけてもらって， 茅ヶ崎市美術館 の藤川悠さんと3人で「メディアアート概論」の授業しました．私の担当分は5回で前半はメディアアートを考える基礎的な事象を考える「3つの空間（現実空間，仮想空間，イメージの空間）で「これ」と「あれ」をつなぐリンクを考える──視界・リンク・3つの空間編」で，後半は前半の知見を活かして 谷口暁彦 さんの作品を考察する「谷口暁彦個展《超・いま・ここ》の「超」の意味を考える──谷口暁彦・ 大岩雄典 編」としました． 〈視界〉編でスマートフォンで写真を撮ることの不思議さを書いていたときに，スマートフォンのディスプレイに映っているものは私の〈視界〉に現れる縮小された私の〈視界〉なのではないかと考えました．そして，スマートフォンのディスプレイに表示されているのが，〈視界〉の縮小版ということで〈マップ〉と名付けました．授業資料を書いたときはこれでいけると思ったのですが，授業をしてみると自分でも理解が及ばず学生から質問が来て，それに答えながら，〈マップ〉を考えていきました．そして，〈視界〉や〈マップ〉，リンクという言葉で，谷口さんの作品を分析しようとすると，ここでも〈マップ〉がうまく使えなくて，悩みました．来年度も授業をお願いされた〈マップ〉についてもっと考えていきたいと思っています． 〈マップ〉に関して，学生の質問に四苦八苦して回答した記録 マップはなぜ世界ではなく〈視界〉の縮小なのでしょうか？ ここは私もまだ明確に言葉にできていないところで，「〈マップ〉は〈視界〉の縮小である」と勢いで言っているところがあります．世界というのは私と関係なく，私の周囲に連続して存在していて，画像や写真というのはその世界を写しとっているものという感じが強かった．しかし，スマートフォンが「撮影」するものは，私の〈視界〉のなかに表示されるもう一つの〈視界〉を切り取っているという感じがあって，ここで行っているのは世界を「撮影」することではなくて，〈視界〉をピクセルにマッピングしているという感じを私が強く持っています．うまく回答できていないですね． スマートフォンで「撮影」するようになって，私が持つスマートフォンのディスプレイに「私が見ている世界」が表示されているのを見たときに，ディスプレイ以外に見えているのが，私が見ている世界＝〈視界〉の〈底〉が...
続きを読む

ナウシカの世界におけるメディア・コミュニケーション（３）

ガンシップの速度計 ナウシカの世界における「見える」に関してもうひとつ興味深いところが，ガンシップのコクピットの速度計です．この速度計は，私たちがよく知っているように「時速◯◯㎞」と数字で表示されていません．何かが燃えているような５つの玉があって，その燃え方の具合で，速度を読み取っています．私たちは普段，車のスピードを数字で把握します．だから，道路標識にも制限速度「50」などと書いてあるわけです．標識の「50」と速度計の「50」をあわせる．これは簡単にできそうです．しかし，ナウシカが乗っているガンシップの速度計では，このように「50」と「50」を合わせるといったようなことはできません．なぜなら，数字で示されていないので，玉の燃え方でなんとなく合わせるしかないからです（そもそも戦闘機なので制限速度に合わせるということ自体がないですが…）．あくまでなんとなく「今はこのくらいスピード」で飛んでいるとわかればいい．そして，ナウシカの世界では，それでまったく問題ないので，これでいいのでしょう． ガンシップの速度計にも，信号弾や鏡の通信と同じように，「知覚を直接行うこと」が重要だというナウシカ世界のあり方が示されていると考えられます．速度を数字で時速〇〇㎞と示すことは，誰にでも分かる方法です．しかし，その速さを生み出しているエンジンの状態を数字は何も表していません．エンジンが激しく動いていても，速度計にはただ「100」などの数字が表示されるだけです．もちろん現在の飛行機のコクピット，車のダッシュボードには速度計以外にも多くのメーターがついていて，それらの数字を読み取って，機体の状態を確認しているわけです．ガンシップの場合は，エンジンが激しく燃えていると速度計の玉も激しく燃えて，そしてスピードもでます．ナウシカはエンジンの状態が速度へと変換された数字を見ているのではなく，エンジンの状態そのもの，つまり速さを作り出しているおおもとの実体の状態を直接見ているといえます．これは，私たちの世界での速度計とは全く異なる表示の在り方です．もちろん，私たちも速度計などの数字だけで判断しているわけではなく，エンジンの音とか匂いとかを直接感じとって，判断している部分もあります．しかし，それらの情報は常にインターフェイスの「外」，つまり環境に置かれたままなのです．インターフェイスの「中...
続きを読む

手が「本来」の器用さを発揮する /

Mag+ (video prototype footage only) from Bonnier on Vimeo . このような電子書籍・雑誌はすぐそこまできているのでしょう．僕たちの手は本のページをめくってきた．本を開いて，その両端を親指で抑えたりしながら．指は，ページの端の方で，なるべく目立たないようにひっそりとしていた．ページをめくるときに，私たちの視界に入ってきても，すぐに端にいく手．じっとしている手．あまり動かない手．ページをめくる手．本を読んでいるときに，多くの時間をページをおさえる，そしてたまにめくるという行為を行っていく手． 下條 ：子供にとって本の中身よりもページをめくることのほうが重要だったりするように，文化的に見えるものの生理的な基盤が，見えにくくても動かしがたくある．新しいIT技術はそこをまったくマーケティングしていないですよ．つまり，既存のメディアの周辺的に見えるようなデバイスで，歴史的かつ技術的な制約としてしか捉えられていないもののなかに，じつは人間の生物学的な構造の基盤が反映されていることがあると僕は思っているんです．(pp.155-156) 環境知能と環境管理をめぐって，東浩紀＋下條信輔　司会＝NTTコミュニケーション科学基礎研究所　in 環境知能のすすめ：情報化社会の新しいパラダイム Mag＋の手，指は，せわしなく動き続ける．ここにはめくるという行為はない．ページは人差し指でスワイプされたり，親指でタップされると切り替わる．また，ページ上のイメージは，，人差し指で指されたれて，そのまま拡大されたりする．手はよく動く．私たちの視界の中に遠慮無く入り込んでくる．ページをめくることが「生物学的な構造の基盤」の反映なのか，Mag＋で行っているような手の動きがその反映なのかはまだわからない．しかし，ヒトが長い間ページをめくってきたことは事実である．それがただたんに代替のテクノロジーがなかったからなのかどうかが，今やっと実験できるときにきたのではないだろうか． Mag＋でヒトの手がせわしなく動くのを見ながら，私はディスプレイ上の→，カーソルのことを思った．コンピュータを使用している際に，私たちの手は視界の外にあるマウスなどのデバイスに置かれ，そこで比較的単純な行為を行ってきた．その単純な行為によって動かされているマウスは...
続きを読む