コントローラの問題 for touch-touch-touch

10/31/2010

「コントローラに関するメモ」を書くきっかけになった講義のためのスライドのブログヴァージョン．コントローラの問題 for touch-touch-touch

View more presentations from Masanori MIzuno.

このブログの人気の投稿

日本映像学会第51回大会での発表：『映像そのもの』という何かを感じ始める

5/31/2026

5月30日（土）に、愛知淑徳大学で開かれた日本映像学会の大会で、「『映像そのもの』という何かを感じ始める：古澤龍・大原崇嘉の映像とともに生じる体験を記述する」という発表をしてきました。古澤龍さんの《Mid Tide #3》と大原崇嘉さんの《Hyle(s)》という二つの映像インスタレーションの前で、わたしに起きていたことを記述する、という発表です。発表という行為そのものが、わたしが発表で話そうとしていたことのパフォーマンスになっていて、研究報告とは異なるものになったと思う。「それでいいのか？」ということは考えつつも、やり切った感じはあります。近頃、研究をしている「わたし」というものを考えないと、研究ができないというか、自分にとってのリアリティがなくて、研究が進められない感じになっています。そんなこともあって、今回は発表原稿を用意して、「読み上げる」という方法にしました。「パフォーマンス」なのに「読み上げ」というのは矛盾しているような気もしますが、セリフを覚えて、演じるという感じで、しっかりとした台本が必要でした。最後まで大きな変更もなく読み上げられたのですが、「結論」は発表原稿とは異なることを言ってしまいました。それもまたリアルタイムで起こるパフォーマンスということで良かったと思いつつも、最後までやり通せなかったことを残念にも思っています。パフォーマンスのような発表をするために、発表のあいだ、スクリーンには発表用のWEBを映していて、その背景には大原さんと古澤さんの作品映像や参照作品の映像をループで流し続けました。お二人に提供してもらった映像データや、Vimeoのループ再生に黒背景で表示して、始まりも終わりもなく、ただ流れている状態をつくりました。HTMLは、AIに書いてもらいました。わたしはただ指示したり、こうしてほしいなというだけで、どんどん形になっていくのは、面白かったです。テキストを共同で書くのとは異なる感触がありました。わたしの読み上げと、AIが作ったサイトのあいだで、口頭で読み上げられるテキストとループで流れている映像とが、合ったり合わなかったりしていきました。発表時は、映像の進行にあわせて、つい、原稿に書かれていないことを話してしまいましたが、今から思うと、読み上げに徹したほうがズレが面白かったかなと思っています。しかし、最後に原稿とは違う...

「テクノロジーと表現論」（2026年度）の授業資料

6/04/2026

京都精華大学で「テクノロジーと表現論」という授業を担当しました。全7回で、表現の道具としてのコンピュータ、そのインターフェイスの歴史を辿る授業です。Sketchpad、マウスとカーソル、ウィンドウとデスクトップメタファー、ハイパーテキスト、スキューモーフィズムからフラットデザイン、Fluid Interfaces、そしてAIを順番に読んでいきました。この授業を準備しながら、わたしはずっと渡邊恵太さんの『融けるデザイン』（2015年）を読み直していました。出版から10年。10年前の本を、いまのインターフェイス体験のなかで読み直していくと、不思議なことに、この本は「これまで」の本ではなく「これから」の本に見えてきました。授業が終わってしばらくして、渡邊さん本人のこんなポストを見つけました。最近は融けるデザインとは何だったかみたいな話し方にシフトしてる。さすがに10年過ぎて。そこの超軽工業への話をプラスして話す感じ。（ @100kw のポスト）これを読んだとき、「おお！」と思いました。渡邊さん本人が「融けるデザインとは何だったか」を10年後に読み直し、そこに超軽工業への話を足して話していたことを、わたしは半期の授業で、図らずもやっていたからです。もちろん、本人の語り直しとわたしの授業がそっくり同じというわけではありません。それでも、『融けるデザイン』（2015年）を読み直し、そこに『超軽工業へ』（2025年）を重ねていくという流れは、意図しないまま、このポストとよく似た形になっていました。感覚的リアリティと意味的リアリティ授業を振り返ってみます。第1回で、わたしはまず渡邊さんの「分けない」を紹介しました。むしろ物質も結果的には体験であり、実は情報的に捉えられる。だから情報も物質も分けない設計ができる。渡邊恵太『融けるデザイン』（2015年）、p. 40 確かに設計面では「情報も物質も分けない」ということが行われてきたのが、この10年でした。けれど、そこから生まれる体験のほうを考えると、話はもう少し込み入ってきます。情報も物質も分けない設計のもとで、うまくいった体験は、疑問の余地なく、一つのまとまりとして立ち上がってくれます。けれど、それは本当に一つのリアリティなのでしょうか。わたしには、感覚的リアリティと意味的リ...

ペンからマウスへ：ヒトとコンピュータとの共進化

1/07/2010

スケッチパッドを開発した二年後の1965年に，サザーランドは「究極のディスプレイ」という論文を書いている．このテキストの後半部分は，ヴァーチャル・リアリティの登場を予言したものとして有名なのだが，前半部分には，コンピュータと向き合う際に必要とされるヒトの行為と当時の入力デバイスの状況が書かれている．2-45) サザーランドは，安価で，信頼性もあり，電送可能な信号を容易に発生させられることから，タイプライターのキーボードがコンピュータの入力の装置の基本となっていることを指摘する．2-46) さらに，キーボードがインターフェイスの基本となるにちがいないので，ユーザはタッチタイプを習得しなければならないという予言までしている．そして，その他の入力デバイスとして，スケッチパッドで用いたライトペンと，ランド社が開発したタブレットを挙げ，この二つのデバイスは，ディスプレイ上の対象を選択することと，コンピュータで何かを描くことを行うのにとても便利だと書いている．2-47) ここで，サザーランドは選択行為と描く行為を遂行するための道具としてライトペンとタブレットを挙げているのであるが，コンピュータのプログラムで一番必要とされるのは，ヒトがディスプレイのどこを指さしているのかを知ることであると指摘する．2-48) 描く行為が，ディスプレイ上の点を指さすという選択行為によって構成されていることを，サザーランドは認識していた．この認識を持ちながらも，サザーランドは，選択行為を描く行為で遂行するという方向でスケッチパッドを開発し，行為を遂行する形式に，「ペン」で「紙」に向かって描く行為を踏襲したものを採用した．スケッチパッドが描く行為の形式を採用していることに関して，ティエリー・バーディニは興味深い指摘をしている．スケッチパッドのスタイラスは，ユーザーの手と目を画面上の表示と結びつけた．ペンは，杖の先の目と画面上のペンという，両方の役目を果たしていたと言える．したがってこれは，電信技術からタイプライターまで，目で見たものから手でやることを切り離すように進んできた入出力技術の歴史の趨勢を逆転させるものだった．2-49) ここで注目したいのは，バーディニが，スケッチパッドでは，行為を遂行する面とイメージを表示する面が同一なのに対して，タイプライターではそれぞれが切り離されて別...

ポストシンボリックコミュニケーション最後にOZのアバターのもうひとつの可能性を考えてみたいと思います．それは「コミュニケーション」についてです．今までの考察で暗黙に前提にしていたことがあります，それは今では多くの人が「インターフェイスの非対称性」を自分の感覚として持っているということです．作品のなかでも，若い人に限らず，老若男女誰もがOZにログインして，アバターを操作している．そして，作品を見ている人も特に何の違和感もなく「OZのアバター」といったものを受け入れられるし，それについて考えるもことができる．つまり，ゲームやコンピュータの体験：「インターフェイスの非対称性」が一般化した今だからこそ，サマーウォーズという作品は生まれたのです．このことの意味はしっかりと考える必要があります．次の引用は，マリオの生みの親として有名な任天堂の宮本茂さんの対談での細田さんの発言です．細田　本当に，その社会情勢がもたらしたのがあの映画の設定だったと思うんです．そうじゃなければ，とてもああいう設定で普通の人が活躍するってことはできなかったと思いますね．アクション映画はやっぱり，特別な人が活躍するものみたいな部分があって．『マトリックス』じゃないけど，「キミは選ばれし人だ」とか言われないと活躍できない．でも，DSがこれだけ広まっているという世界的な状況があれば，DSや携帯も含めてそこからアクセスできる身近な道具を使うことによって，普通の人でも活躍できるアクション映画が成り立つんじゃないかと．(p.169) 「PLUS MADHOUSE 03：細田守」キネマ旬報社，2009年ゲームやコンピュータが当たり前の存在となって，選ばれた誰かがヒーローになるのではなく，誰もがヒーローになれる作品が生まれた，というふたりの話はとても興味深いです．では，誰もがヒーローになれる作品の舞台になっているOZについて改めて考えてみたいと思います．細田監督作品の特徴と言われる記号的表現．その効用のひとつが，色や形態などを単純化する記号を使うことで，表現にある種のスピード感が得られることだ．単純化とは表現力に制限を加えることだが，その反面，視認性がアップする．たとえばその性質は交通標識などによく現われていて，標識に向かい合った人間はその表示内容にすぐさま反応することが求めら...

スケッチパッドで描く、ふたつの手（１）

3/30/2010

１．記録映像に映るふたつの手ひとつの動画ファイルがある．そのファイルを再生すると，1962年の夏に撮影されたアイヴァン・サザーランドが開発したシステム「スケッチパッド」の映像が，グラフィカル・ユーザ・インターフェイスの基礎を築いたアラン・ケイによる説明とともに映し出される．そこでは黒い画面に白い線が，ペンで描かれていく．ケイが紹介していることからも，このスケッチパッドが，コンピュータの歴史の中で大きな影響力を持っていることが伺えるが，実は，このシステムに実際に触れた人はごく限られている．アラン・ブラックウェルとケリー・ローデンは，サザーランドの博士論文の電子版の前文で，スケッチパッドは，マサチューセッツ工科大学（MIT）のリンカーン研究所でカスタマイズされたマシン，TX-2 でしか動かなかったので，その影響力は，論文と使用状況を撮影したこの記録映像によって広まったと書いている 1 ．その記録映像には，ディスプレイ横にあるボタンを押す手とディスプレイにライトペンと呼ばれるペンで線を描いていく手が映っている．また，これらふたつの手がまったく映っていないときに，白い線が規則的に動くということも記録されている．描く手を必要とせずに線が動いているのであるが，その線の動きには摩擦や空気抵抗が感じられない．そして，この摩擦や抵抗のなさは，ライトペンで線を描いている際にも同様にみることができる．今から，40年以上も前に撮影され，サザーランドのアイディアを多くの人に伝え，スケッチパッドを「個人によって書かれた最も影響力のあるコンピュータ・プログラム 2 」という地位にまで押し上げたこの映像は，何を示しているのであろうか．私は，以前，スケッチパッドが「変換」という原理でイメージを生み出す装置であることを示した 3 ．それは「痕跡」との一致という原理を逃れたイメージを描けるということである．この映像で，手が全く映し出されていないときに線が規則的に動くという，ある意味，マジックとも言えるようなシーンは，そのことを示している．このマジックは，後にケイが「最初のコンピュータ・グラフィックス・プログラムだということばかりでなく，スケッチパッドにはすばらしい面がたくさんあった．単に何かを描くための道具でなく，常に正しい法則に従って描くプログラムだったね．スケッチパッドで正方形を描こ...

テクスチャーの裏側にあるかもしれない記憶_レジュメ＆スライド

8/20/2016

名古屋学芸大学メディア造形学部映像メディア学科での特別講義：「自己」を経由しない「処理」の高度化

3/06/2026

名古屋学芸大学メディア造形学部映像メディア学科の伏木先生に招かれて、大学院授業で特別講義「「自己」を経由しない「処理」の高度化」をしてきました。レクチャーは資料と文字起こしにその様子が記録されています。資料を作っても、そのまま話せないものです。発表をしているときに、一度最後までスクロールされてしまって、焦りました。質疑応答も学生から示唆に富む質問があって、回答するのが楽しかったです。伏木先生の質問には、一瞬頭が真っ白になってしまって、「映像というのはピクセルの操作だと思っていて」という回答をしてしまいました。このあたりも文字起こしに入っています。「自己が薄くなっている」ということをインターフェイスの歴史から話したのだけれど、それを「悪い」ものとして捉えたくなくて、そもそも「自己」が確立している必要があるのかとかという疑問があって、「私」が何かするではなくて、私とコンピュータ、スマートフォン、AIとが組み合わされた「私たち」が何かをするときに、私の「自己」というのは薄くなった方がいいのではないかということを考えていました。でも、話しながら、これは大きな矛盾であるということも考えました。それもまた、私が「自己」を意識しすぎなのではないかという考えになっています。私というもの、人間というものが、変わり続けることが重要で、その変わり続けていることを変わり続けているその中から記述するにはどうしたらいいのかということを、「わたしたち」は考えているのだと思います。近頃、「私」というのは文章の中で区切りが強い気がして、わたし、わたしたちという言葉を使っています。ここでいう文章は日記なので、論文やレクチャーなどではまだ「私」でした。これからもそこでも「わたし」「わたしたち」にしようかな。レクチャーの後に、3名の発表がありました。わたしの発表内容に惹きつけて、それぞれ発表してくれていて、聴いていて、とても刺激を受けました。即座にいい質問ができなくて、発表をなぞるようなコメントしかできませんでした。わたしと同じような考え方をしているんだというのが、うれしかったからだと思います。メディア体験を身体レベルから考えるということをして、それを発表にまとめていくというプロセスがとても鮮明で、聞いていて、気持ちよかったです。ありがとうございました！レクチャーの後にも、コメントをもら...

出張報告書_20150212−0215　あるいは，アスキーアート写経について

2/18/2016

12日は六本木の東京ミッドタウン・デザインハブに行き「デジタルメディアと日本のグラフィックデザインその過去と未来」を見た．展示は「現在までのデジタルメディアとグラフィックデザインの関係を，プレデジタルメディアの時代（70年代以前），CGの時代（80年代），マルチメディアの時代（90年代），ウェブ広告の時代（00年代）に分け，コンピュータを道具ではなく環境として、あるいは素材として制作された先駆的な作品を集め」たものであった．展示方法で興味深かったのは，記録映像や紙媒体での展示ではなく，発表当時のコンピュータを使って作品が体験できるようになっていたことである．また，各時代のキーパーソンのインタビューも行われていて，その映像も視聴できた．時間の都合で，CGの時代の藤幡正樹，ウェブ広告の時代の田中良治のインタビューしか視聴することができなかったが，コンピュータとともに表現の領域を切り開いてきたふたりの言葉はとても示唆に満ちたものであった．藤幡がコンピュータのアルゴリズムに美を見つけていたのに対して，田中はコンピュータをインターネットにつなぐための道具と見なしていた．このコンピュータに対する感覚のちがい，それはまたインターネットという環境に対するちがいでもあるものは，とても興味深いものであった． 13日は午前中に六本木の国立新美術館に「第19回メディア芸術祭」を見に行った．アート部門の大賞作品はCHUNG Waiching Bryanによる《 50 . Shades of Grey 》で，これは様々なプログラミング言語で50段階の灰色のグラデーションの画像を制作したものである．ここでのメインは50段階の灰色のグラデーションの画像ではなく，それを生み出すプログラミン言語である．同一画像であっても，プログラミン言語によってその記述方法は全く異なる．全く異なる記述から同一の画像が生みだされるのも興味深いことであったけれど，この作品の展示で一番興味があったのは額装された6つの「プログラミン言語」の横にそれぞれつけられた作者の「思い出」である．そこにはそれぞれのプログラミン言語に対して，CHUNG Waiching Bryanがいつ，どのようにそれを学んだのか，その言語を最後に使ったのはいつかなどが書かれていた．私はほとんどのプログラミン言語を理解することはできなかった...