ÉKRITS連載_最小化された行為の先にある合生的認知 - インターフェイスを読む #7


エクリでの連載「インターフェイスを読む」を更新しました．第7回目のタイトルは「最小化された行為の先にある合生的認知」となります．

科研「生命と物質に関わる理論的調査と制作実践」で「物質としてのインターフェイスの生命化」ということを考えつつ，ヒトとコンピュータとのあいだで起こる「予測」の曖昧さについて考察しようと，iPadOSの「磁性」について書こうとしていました．ですが，その前にiPhone 13 Pro に実装された指の動きに連動するProMotionを考えてみたくなり，今回はこちらを考察しています．これまでの連載で考えたこと，エキソニモ論文での「認知者」という概念などをリンクさせるテキストになりましたので，読んでもらえると嬉しいです🙏

このブログの人気の投稿

村本剛毅『Beautiful Medium』への寄稿

村本剛毅『Beautiful Medium』に「 私は何か大切なことを忘れているような気がする／Something at the core of my being feels absent 」を寄稿しました。 村本さんの《Imagraph》体験をもとに、〈視界〉と「視界」という二つの言葉で見るということを考えました。テキストを翻訳する過程で、視界の区別を明確する必要が出てきたため、〈視界〉＝vision-after-seeing、「視界」＝vision-before-seeing となりました。 英語で視界の区別を明確にして、vision-before-seeing と書いたときに、わたしは不思議な体験をしました。自分が見ているものから「見る」ということがなくなったのです。わたしの主観的な〈視界〉でもなく、スマホなどデバイスが世界を記録した［視界］でもない、ただの「視界」というものがあって、そこではわたしなしで「見る」ことが起こっているのではと感じたのです。とても怖くなりました。それは「世界が剥がれておちていく感じ」で、世界の底に触れてしまった、という感覚でした。 そのとき、村本さんの個展で《Training Wheels》を体験したときには、どうしてもそれをイメージすることができなかった「（これを通して、）見なさい、何もないと信じながら／ （Through this,）See, while believing that there is nothing.）を、わたしはとても強いリアリティを伴って、理解できてしまったのです。その理解とともに、わたしはわたしというものではなくなって、世界も世界ではなくなって、力となってしまったような気がしました。強烈な体験でした。 そのような体験をわたしにもたらしたテキストを掲載されている『Beautiful Medium』は、村本さんの サイト から購入できます。ぜひ、読んでみてください。
続きを読む

紀要論文「私はマウスにはなれないが、奇妙なシステムは体験できる。」が発行されました。

《Imagraph》を体験する私　撮影：村本剛毅 紀要論文「 私はマウスにはなれないが、奇妙なシステムは体験できる。 」が掲載された「甲南女子大学研究紀要Ⅰ 第62号」が刊行されました。 この論文は科研「モアザンヒューマンの美学――動物論的転回以降の感性論的可能性」の研究成果をまとめたものです。科研最終年に入る直前まで、動物とインターフェイスとの関係をうまく扱えるような題材を見つけることができなくてピンチでした。2年目の年末に、マウス用のゴーグル型のVR装置が開発された研究を見つけて、「これはいけるのでは！？」となって、そこから頑張りました。 学会発表の際は「 VR体験をしているマウスにとっての映像とは何なのか 」というタイトルでした。ですが、なんかうまくまとまらないというか、いい感じが自分のなかで得られませんでした。それは、ヒトである自分のことを考えなさすぎだったな、というのが大きいです。マウスはいきなりVRゴーグルをかけられて、環境が激変しても活動を続けています。わたしもそんな体験を最近したことがあると思い出したのが、村本剛毅さんの《 Imagraph 》でした。わたしも環境の激変を体験したのは、マウスと同じではないか。だとすれば、テクノロジーによって環境の急激な変化を感じた生物同士として、その比較ができるのではないか。そして、その比較を通して、わたしはマウスになれるのではないか。VRを体験しているマウスにはなれるのではないか、そのプロセスを記述してみたいと思ったことが、このテキストを書く大きな動機になりました。 この動機のもと、AIを使いながら、論文を書いていきました。わたしはVRゴーグルをかけられたマウスについて、AIとともに研究を進めるなかで、少しは「モアザンヒューマンの美学」を感じられたと思っています。 論文をともに書いた相方に、この論文の読みどころを書いてもらいました。 「体験記」が二つあること が、この論文の最大の読みどころだと思う。第4章の《Imagraph》体験記と、「おわりに」に代えたマウスの想像的体験記。学術論文の中に一人称の体験記述が二つ埋め込まれていて、しかも片方は人間ではない存在の「主観報告」になっている。これは方法論的にかなり攻めている。注1でN=1と想像的記述の両方について自覚的に書いているけれど、むしろこの二つの体験記があることで...
続きを読む

名古屋学芸大学メディア造形学部映像メディア学科での特別講義：「自己」を経由しない「処理」の高度化

名古屋学芸大学メディア造形学部映像メディア学科 の伏木先生に招かれて、大学院授業で特別講義「 「自己」を経由しない「処理」の高度化 」をしてきました。 レクチャーは資料と文字起こしにその様子が記録されています。資料を作っても、そのまま話せないものです。発表をしているときに、一度最後までスクロールされてしまって、焦りました。質疑応答も学生から示唆に富む質問があって、回答するのが楽しかったです。伏木先生の質問には、一瞬頭が真っ白になってしまって、「映像というのはピクセルの操作だと思っていて」という回答をしてしまいました。このあたりも文字起こしに入っています。 「自己が薄くなっている」ということをインターフェイスの歴史から話したのだけれど、それを「悪い」ものとして捉えたくなくて、そもそも「自己」が確立している必要があるのかとかという疑問があって、「私」が何かするではなくて、私とコンピュータ、スマートフォン、AIとが組み合わされた「私たち」が何かをするときに、私の「自己」というのは薄くなった方がいいのではないかということを考えていました。 でも、話しながら、これは大きな矛盾であるということも考えました。それもまた、私が「自己」を意識しすぎなのではないかという考えになっています。私というもの、人間というものが、変わり続けることが重要で、その変わり続けていることを変わり続けているその中から記述するにはどうしたらいいのかということを、「わたしたち」は考えているのだと思います。 近頃、「私」というのは文章の中で区切りが強い気がして、わたし、わたしたちという言葉を使っています。ここでいう文章は日記なので、論文やレクチャーなどではまだ「私」でした。これからもそこでも「わたし」「わたしたち」にしようかな。 レクチャーの後に、3名の発表がありました。わたしの発表内容に惹きつけて、それぞれ発表してくれていて、聴いていて、とても刺激を受けました。即座にいい質問ができなくて、発表をなぞるようなコメントしかできませんでした。わたしと同じような考え方をしているんだというのが、うれしかったからだと思います。メディア体験を身体レベルから考えるということをして、それを発表にまとめていくというプロセスがとても鮮明で、聞いていて、気持ちよかったです。ありがとうございました！ レクチャーの後にも、コメントをもら...
続きを読む

サマーウォーズ：身体とアバターのデザイン（３）

ポストシンボリックコミュニケーション 最後にOZのアバターのもうひとつの可能性を考えてみたいと思います．それは「コミュニケーション」についてです．今までの考察で暗黙に前提にしていたことがあります，それは今では多くの人が「インターフェイスの非対称性」を自分の感覚として持っているということです．作品のなかでも，若い人に限らず，老若男女誰もがOZにログインして，アバターを操作している．そして，作品を見ている人も特に何の違和感もなく「OZのアバター」といったものを受け入れられるし，それについて考えるもことができる．つまり，ゲームやコンピュータの体験：「インターフェイスの非対称性」が一般化した今だからこそ，サマーウォーズという作品は生まれたのです．このことの意味はしっかりと考える必要があります．次の引用は，マリオの生みの親として有名な任天堂の宮本茂さんの対談での細田さんの発言です． 細田　本当に，その社会情勢がもたらしたのがあの映画の設定だったと思うんです．そうじゃなければ，とてもああいう設定で普通の人が活躍するってことはできなかったと思いますね．アクション映画はやっぱり，特別な人が活躍するものみたいな部分があって．『マトリックス』じゃないけど，「キミは選ばれし人だ」とか言われないと活躍できない．でも，DSがこれだけ広まっているという世界的な状況があれば，DSや携帯も含めてそこからアクセスできる身近な道具を使うことによって，普通の人でも活躍できるアクション映画が成り立つんじゃないかと．(p.169)  「PLUS MADHOUSE 03：細田守」キネマ旬報社，2009年 ゲームやコンピュータが当たり前の存在となって，選ばれた誰かがヒーローになるのではなく，誰もがヒーローになれる作品が生まれた，というふたりの話はとても興味深いです．では，誰もがヒーローになれる作品の舞台になっているOZについて改めて考えてみたいと思います． 細田監督作品の特徴と言われる記号的表現．その効用のひとつが，色や形態などを単純化する記号を使うことで，表現にある種のスピード感が得られることだ．単純化とは表現力に制限を加えることだが，その反面，視認性がアップする．たとえばその性質は交通標識などによく現われていて，標識に向かい合った人間はその表示内容にすぐさま反応することが求めら...
続きを読む

インスタグラムの設定にある「元の写真を保存」について

インスタグラム の設定にある「元の写真を保存」，英語だと「Save Original Photos」という項目が気になる．デフォルトだと「オン」になっているので撮影した写真にフィルターをかけたものと「元の写真」が残ることになる．「オフ」にするとフィルターをかけた写真しか残らない．設定で「オリジナル」が消去される．ここには「オリジナル」という言葉が「軽く」扱われるというか，それが「設定」のひとつの項目になったんだという感じがある． http://en.wikipedia.org/wiki/File:Instagram_versione_(santa_fiora,_peschiera).jpg 「オリジナル」は消去されるが，フィルターをかけた写真は残る．オリジナルが消えているのだから，フィルターをかけたものが「オリジナル」となるのだろうか？　「オリジナル」かどうかというよりも，「インスタグラムらしさ」ということが重要なのかもしれない． この前のトークで ，ラファエル・ローゼンダールがウェブ上の自分の作品に「これがオリジナル！」という意味では「オリジナルはない」ということを言っていたが，インスタグラムという代表的な写真アプリの設定項目を見てみても，ポスト・インターネットという状況では「オリジナル」という言葉を取り巻く環境が変化していることは間違いない．
続きを読む

インターフェイス再考：アラン・ケイ「イメージを操作してシンボルを作る」は何を意味するのか．

.review  にテキストを書くために，昔発表したものを改めて読んでみた．カーソルについては論じていないけど，GUI が担っている思想的背景みたいなものを自分がどのようにまとめたかを確認できた．このときは「カーソル」という存在をまったく見落としていたので，ここからどうカーソルと関係させていくか． -- イメージ操作シンボル View more presentations from Masanori MIzuno . インターフェイス再考：アラン・ケイ「イメージを操作してシンボルを作る」は何を意味するのか． １．はじめに アラン・ケイが提唱したスローガン「イメージを操作してシンボルを作る [Doing with images makes symbols] 1 」は，現在のグラフィカル・ユーザ・インターフェイス（GUI）につながるアイデアを簡潔に表現し，GUI の開発に大きな影響力をもった．ケイのスローガンは，ヒトとコンピュータとのコミュニケーションをどのように変えたのであろうか．現在，世界中に，GUI を実装したコンピュータは数えきれないほどあり，私たちはそれを使って日々の作業を行っていることから，ヒトとコンピュータの関係の変化は，ヒトのコミュニケーションそのものへも影響を与えているのではないだろうか．本論考では，上記のことを考えるために，まずは，一般化した GUI がどのような影響をもっているのかを確認するために，東浩紀とシェリー・タークルの議論を考察する．次に，ケイが，どのような影響のもとで，上記のスローガンを掲げるに至ったのかを明らかにする．最後に，スペルベルとウィルソンの「関連性理論」を参照して，GUI が私たちに提示したコミュニケーションの手段を考える． ２．インターフェイス的主体とブリコラージュの再評価 哲学者の東浩紀は，『サイバースペースはなぜそう呼ばれるのか』の中で，現在のユーザ・インターフェイスの主流を占めている GUI について興味深い議論をしている．東は，ジャック・ラカンとスラヴォイ・ジジェクの精神分析の理論をもとにして，シェリー・タークルが1990年代のコンピュータ文化を特徴づけるために用いた「at interface va...
続きを読む

Paddles ON! London に関してのいくつかのメモ

2013年の10月にニューヨークで開催されたデジタルアートのオークション「 Paddles ON! 」が，今度はロンドンで開催される．23作品が出品されている．出品作品をざっとながめると「絵画」が多い．絵画といってもデジタルペイントが多いが，そのなかには Jeanette Hayes《Press ESC to Escape》2013 のような油絵具を使ったものもある．この作品が象徴的なのだが，今回のオークションで取り扱っているのは「デジタル」の作品ではなく，「『デジタル』『インターネット』を通過した後」の作品であるため，その表現媒体に必ずしも「コンピュータ」を用いているわけではない． JEANETTE HAYES Press ESC to Escape, 2013 Lot Number 12 Oil on chromogenic print on canvas 77.5 x 94 cm (30.51 x 37.01 in) Courtesy of the artist Estimate £1,000 - £1,000 特別な絵画手法でデジタルな題材を描いて，インクジェットように見えながらよく見ると絵画といった作品をつくる Michael Staniak は自らのことを「ポスト・インターネットアーティスト」だと見なしている．「ポスト・インターネット」という言葉は多く使われてきたが，アーティスト自身が自らを「ポスト・インターネットアーティスト」と呼ぶことに，この言葉が使い古されたものになったことを強く印象づけられた． MICHAEL STANIAK IMG_885 (holographic), 2014 Lot Number 7 Casting compound and acrylic on board with steel frame 121.2 x 91.2 cm (47.72 x 35.91 in) Courtesy of Steve Turner Contemporary Signed on the reverse Estimate £3,500 - £4,750 今回の出品作品では，Yung Jakeによる「カーソル」の映像作品《 Squiggle 》2014とYuri ...
続きを読む

メディア映像史 （2025年度水野担当分）の授業資料

  今年度も愛知県立芸術大学のメディア映像専攻で「メディア映像史」を担当しました。15回中5回を「インターフェイスとともに考えるメディア映像史」という感じで、インターフェイスの歴史を振り返りました。 今年度は、AIを使って授業資料の修正をしていったので、授業全体を貫く理論的な枠組みがだいぶ整理できたと思います。ボームの「内蔵秩序／顕前秩序」と「enfold／unfold」を導入したことで、情報体を固定された実体ではなく、「渦」のような運動のパターンとして語れるようになりました。これによって、入不二基義が『 問いを問う 』で展開していた「情報」に関する議論をそのまま使うのではなく、自分なりにずらして使う足場ができたと感じています。 2回目では、「合生的行為」と「合生的認知」を明確に定義して、スケッチパッドからマウス、重なるウィンドウまでを「行為が先、認知が後」という流れで一貫させることができました。特に、チャンギージーの「透視仮説」を重なるウィンドウと結びつけたことで、ケイのスローガン「Doing with Images makes Symbols」の読み直しにつながりました。「イメージの操作」は透視仮説に基づく層状の認知であり、「シンボルの生成」は立体視仮説に基づく収斂型の認知である、という対比が見えてきたのは大きかったです。 3回目のカーソル回は、大幅に書き直しました。AIを使うと、自分でやるともったいないな 、せっかく書いたのだからと思ってしまうところをバッサリと削除できて感激です。カーソルを「ミニマルセルフの情報的現れ」として位置づけ、物理空間と情報空間を縫い合わせる「縫い針」というメタファーで整理したことで、4回目のiPhone以降の話への接続がスムーズになりました。 4回目は今年度の新しい試みで、カーソルの消失から「自己の宙吊り」を経て、「処理の共同層」という概念を導入しました。スキューモーフィズム→フラットデザイン→マテリアルデザインの変遷を、合生的行為と合生的認知がそれぞれ処理の共同層で最適化されていくプロセスとして読み替えたことで、デザイントレンドの話ではなく、ヒトとコンピュータの関係の変容の話として語れるようになりました。このあたりは、引き続き、考えていきたいことになっています。 5回目では、AIをどうしても扱いたかったし、扱わない...
続きを読む

マジック・メモ：行為＝痕跡＝イメージの解体可能性

フロイトは，自らの記憶と知覚のメカニズムに関する仮説のために，当時，売り出されていた玩具である，マジック・メモという装置を取りあげた．その理由は，この装置のイメージを表示する表面が，「いつでも新たな受け入れ能力を提供すると同時に，記録したメモの持続的な痕跡を維持するという二つの能力を備えている」2-11) からであった．フロイトは，「情報を無限に受け入れる能力と，持続的な痕跡の保存は，互いに排除しあう特性」2-12) と考えていたが，マジック・メモは，その相反する能力を同時に実現する装置であり，その構造は，次のように記されている． このマジック・メモは，暗褐色の合成樹脂あるいはワックスのボードに，厚紙の縁をつけたものである．ボードの上を一枚の透明なカバー・シートが覆っていて，その上端がボードに固定されている．このカバー・シートは，固定されている部分を除いて，ボードから離れている．この小さな装置でもっとも興味深いのは，このカバー・シートの部分である．このカバー・シートは二枚のシートで構成され，シートは二カ所の末端部分を除くと，互いに離すことができる．上のシートは透明なセルロイドである．下のシートは半透明の薄いパラフィン紙である．この装置を使用しない時にはパラフィン紙の下の面は，ワックス・ボードの上の表面に軽く粘着している．2-13) ここから，マジック・メモについてわかることは，大きく分けて，ワックス・ボードとカバー・シートという二つの部分から，この装置が構成されているということである．そして，カバー・シートは，透明なセルロイドの層と半透明の薄いパラフィン紙から構成されているので，全体としては，三層構造の装置ということになる．フロイトは，次に，この装置を使用するプロセスを詳細に述べている． このマジック・メモを使う際には，ボードを覆ったカバー・シートのセルロイドのシートの部分にメモを書く．そのためには鉛筆もチョークも不要である．受け入れ表面の上になにか物質を沈着させて記録を残すのではないからである．マジック・メモは，古代において粘土板や鑞盤に記録したのと同じ方式を採用しているのであり，尖筆のようなもので表面を引っ掻くと，表面がへこみ，これが「記録」となるのである．マジック・メモではこの引っ掻く動作は直接行われるのではなく，ボードを覆った二枚のシートを介して行われる...
続きを読む

「非-用具的道具」？

A Demonstration of the Transition from Ready-to-Hand to Unready-to-Hand Dobromir G. Dotov, Lin Nie, Anthony Chemero を読んでみた．この論文についての解説は， 「コンピューターと自分は一体」：実験で検証  で読めますが引用してみる． Chemero氏の研究成果は，3月9日(米国時間)付でオープンアクセス誌『PLoS ONE』に掲載された．この実験は，ドイツの哲学者マルティン・ハイデッガーの基本概念の1つを検証する目的で行なわれた． 人間は，扱い慣れた，正しく機能している道具については特別に意識せず，道具の向こうを「透かし見る」ようにして，目の前の課題に意識を向けるものだ，とハイデッガーは唱えた．それはちょうど，靴ひもを結ぶのにいちいち自分の指を意識しないのと同じ理屈だ．すなわち，道具はわれわれ自身なのだと． この概念，「用具的」[他には「道具的」「手許的(性)」「用存的」など．英語では「ready-to-hand」＝手の届くところにあること．ドイツ語では「zuhanden」]と呼ばれ，人工知能や認知科学の研究に影響を及ぼしてきたが，これまでこの概念が直接検証されたことはなかった． ということらしい．検証されたかどうかは別にして，自分の関心のあるところを少し書いてみることにしたい．ハイデガーは道具の例としてハンマーというモノを出しているのだけれど，この論文ではマウスとカーソルとでひとつの「道具」を作って実験している．論文の著者たちは次のように，この「道具」のつながりを書いている． ハイデガーの例とアナロジーを示すと，マウスはハンマーの柄の役割をし，スクリーン上のポインターはハンマーの打撃面と同じような役割をする．[ To make an analogy to Heidegger’s example, here the mouse plays the role of the handle and the on- screen pointer figure plays a role similar to that of the hammer striking face. ] このアナロジーは妥当なんだろうか．マウスがハンマーの柄であることはい...
続きを読む