コントローラの問題 for touch-touch-touch

「コントローラに関するメモ」を書くきっかけになった講義のためのスライドのブログヴァージョン．コントローラの問題 for touch-touch-touch

このブログの人気の投稿

マジック・メモ：行為＝痕跡＝イメージの解体可能性

フロイトは，自らの記憶と知覚のメカニズムに関する仮説のために，当時，売り出されていた玩具である，マジック・メモという装置を取りあげた．その理由は，この装置のイメージを表示する表面が，「いつでも新たな受け入れ能力を提供すると同時に，記録したメモの持続的な痕跡を維持するという二つの能力を備えている」2-11) からであった．フロイトは，「情報を無限に受け入れる能力と，持続的な痕跡の保存は，互いに排除しあう特性」2-12) と考えていたが，マジック・メモは，その相反する能力を同時に実現する装置であり，その構造は，次のように記されている． このマジック・メモは，暗褐色の合成樹脂あるいはワックスのボードに，厚紙の縁をつけたものである．ボードの上を一枚の透明なカバー・シートが覆っていて，その上端がボードに固定されている．このカバー・シートは，固定されている部分を除いて，ボードから離れている．この小さな装置でもっとも興味深いのは，このカバー・シートの部分である．このカバー・シートは二枚のシートで構成され，シートは二カ所の末端部分を除くと，互いに離すことができる．上のシートは透明なセルロイドである．下のシートは半透明の薄いパラフィン紙である．この装置を使用しない時にはパラフィン紙の下の面は，ワックス・ボードの上の表面に軽く粘着している．2-13) ここから，マジック・メモについてわかることは，大きく分けて，ワックス・ボードとカバー・シートという二つの部分から，この装置が構成されているということである．そして，カバー・シートは，透明なセルロイドの層と半透明の薄いパラフィン紙から構成されているので，全体としては，三層構造の装置ということになる．フロイトは，次に，この装置を使用するプロセスを詳細に述べている． このマジック・メモを使う際には，ボードを覆ったカバー・シートのセルロイドのシートの部分にメモを書く．そのためには鉛筆もチョークも不要である．受け入れ表面の上になにか物質を沈着させて記録を残すのではないからである．マジック・メモは，古代において粘土板や鑞盤に記録したのと同じ方式を採用しているのであり，尖筆のようなもので表面を引っ掻くと，表面がへこみ，これが「記録」となるのである．マジック・メモではこの引っ掻く動作は直接行われるのではなく，ボードを覆った二枚のシートを介して行われる...
続きを読む

メモ：「貧しい画像」はもうない

2007年に書かれたHito Steyerlの「 In Defense of the Poor Image 」には，高解像度画像の劣化版ではなく独自の存在となった低解像度画像のことが書かれている．2007年といえば，iPhoneが発表された年であるが，インターフェイスでの大変動ともともに画像の認識においても大きな変化が起こっていたと考えるべきであろう． 「In Defense of the Poor Image」の出だしの一文「The poor image is a copy in motion.｜貧しい画像は動きのなかでのコピーである」は，「貧しい画像」がもともと「コピー」であり，ネットでの画像流通という「動き」に関係していることを端的に表している．「貧しい画像」は低解像度であっても，実際にはコピーではなく，オリジナルの画像であることもあるかもしれないが，「貧しい画像」と呼ばれる低解像度画像が「コピー」に近い存在で，ネットに流通しているという認識が重要なのである． 低解像度の画像に対してはどこかに「高解像度画像＝オリジナル」があるという認識が対として存在しているが，Steyerlはこの認識を間違ったもとして糾弾する．低解像度画像は高解像度画像とは異なる存在意義をもつというのが，Steyerlの主張である．ネット上を隈なく「流通」していくことこそが，低解像度画像の存在意義なのである．ネットは通信速度の制約から高解像度画像は流通しにくい．それゆえに，画像は解像度を落とされ，データ量を減らされたかたちで流通していく．画像は流通すればするほど人目につくようになる．このことこそが「貧しい画像」に求められていることなのである．そこには解像度の高さによる画像の真正さではなく．いかに人目につくのかというあらたな評価基準が適用される．このあたらしい評価基準のもとでは「アウラ」の出現もまた変わってくると，Steyerlは主張する．「オリジナル」が示すアウラのように，それがいつまでも確かに存在しつづけるからこその価値ではなく，「コピー」のはかさなさゆえに「アウラ」が生じるとされる．ここで「アウラ」という言葉を双方に適用していいかは疑問であるが，現在において「アウラ」という存在も変わっていることは間違いない． 論考の最後にSteyerlは「貧しい画像」はリアルな存在が放つオリ...
続きを読む

2046年の携帯電話と2007年のスマートフォンのあいだにある変化（１）

2046年の携帯電話 新海誠監督のSFアニメ「ほしのこえ」を「インターフェイス」の観点から見ると何が見えてくるでしょうか．「SF」というジャンルには近未来を予測した様々な「インターフェイス」がでてきますが，「ほしのこえ」では主にミカコとノボルをつなぐ「携帯電話」を扱いたいと思います． ノボルとミカコの物語は2046年が舞台です．2046年の中学生3年生がもっている携帯電話は，大きな液晶タッチパネルで操作するスマートフォンとは異なり，小さな液晶ディスプレイと多くのボタンを備えたものです．2046年という未来であるにもかかわらず，「ガラケー」とも呼ばれる古いかたちの携帯電話を持っているのはおかしいと思う人もいるでしょう．しかし，現在のスマートフォンのかたちを決定づけたアップル社のiPhoneが発表されたのは2007年ですから，「ほしのこえ」が発表された2002年には液晶タッチパネルを備えた携帯電話は一般的ではなかったことになります．2002年にはiPhoneがまだ存在していなかったけれど，今（2015年）では携帯通信機器の主流は，ノボルとミカコがもつような携帯電話からタッチ型インターフェイスのスマートフォンへとシフトしました．この事実は「ほしのこえ」を考察する上で重要な意味を持ちます． 「ほしのこえ」はSFなので，iPhoneのようなタッチ型インターフェイスの携帯電話の登場を正確に予測する必要はありません．なぜなら，SFは「サイエンス」という言葉がついていても，あくまで「フィクション」なので，現実的な未来の予測に囚われる必要はないからです．しかし，SFは現実世界の正確な予測ではないけれど，単なる絵空事でもありません．SFと現実とのあいだには独特なつながりがあります．例えば，『SF映画で学ぶインタフェースデザイン』には携帯電話に関する例が挙げられています． SFに見られるフィクションの技術によって，ファンは来るべき刺激的な何かを期待します．顕著な例は，『宇宙大作戦』の通信機です．1960年代後半，一般的な通信機といえば，トランシーバーないしは壁にコードにつながっているお姫様型電話だったころ，『宇宙大作戦』に登場した通信機によってモバイル電話の期待が高まりました．その使い方は電話というよりもややトランシーバー寄りではありましたが，初期の...
続きを読む

画面分割と認知に関するメモ

画面分割についてのスライドを作っていて，アメリカのドラマ「24」が初期のころはよく画面分割を使って緊迫感をだしていたのに，その手法が徐々に使われなくなっていたことを Wikipedia で知る． なぜだろうと思いつつ，マイク・フィグスの「 時代×４ [About Time 2] 」を見る．これは４分割された画面で同時に物語が進んでいく短編映画で，「 10 Minutes Older 」というオムニバスの映画のひとつである． 画面を４分割して，物語で進んでいくと，段々のそこで起こっていること全てを認知することが難しくなり，認知限界を超えることを実感した．「24」は，リアルタイムという軸があるから，ために画面が分割されても，それは空間的に離れているところで「同時に」物事が起こっていることを示すために有効だが，そこで「リアルタイム」という軸が外れてしまうと，見ているヒトは分割された画面の関係性が分からなくなってしまうのではないだろうか．そこで，「24」で画面分割が使われなくなったことには，認知限界が関係しているのではということを考えた． 24 時代×４[About Time 2] レフ・マノヴィッチが画面分割はユーザ・インターフェイスの「GUI」からの影響であると指摘している．「ひとつのスクリーンにひとつのイメージ」というのが画面構成の論理であったが， GUI を構成する要素であるビットマップ方式のディスプレイがこの論理を破綻させたと，マノヴィッチは考えている．ビットマップ以前に，映画では電話をかける場面などで画面分割を行っていたが，大々的には行われていなかったとはいえるので，マノヴィッチの指摘には賛成である．そして，画面分割を「空間的モンタージュ」と呼び，これまでの「時間的モンタージュ」に変わるものだとし，「空間的モンタージュ」は，GUI の画面を占拠して，そこでは何も消えることがない「記憶」の場として機能していると，マノビッチは考える． my desktop マルチウィンドウシステムにもつながる，パーソナル・コンピュータの大元のアイデアであるヴァネバー・ブッシュのメメックスは２画面を備えた装置として描かれている．メメックスは増大する情報量に対処するために作られた装置であった．ブッシュは膨大な情報に対するヒトの認知限界を考え，メメックスを開発...
続きを読む

マジックマウスの慣性スクロール / Magic Mouse Scroll with momentum.

マジックマウスの慣性スクロール．iPhone でもできてしかも気持ちいいけど．マジックマウスの慣性スクロールも気持ちいい．同じ慣性スクロールなので，やっている行為，指の動きは同じで，ディスプレイ上のイメージの動きも同じ．でもなんか違う．iPhone は，とても滑りのいいガラスの上を指がすいすいと動いて，その指にイメージが反応している感じ．ガラスの滑らかさとイメージの指への吸い付き．マジックマウスは，すこし滑りがわるいプラスチックの表面なんだけど，緩やかな傾斜がついているので，指をその傾斜に沿わして動かしている感じ．指にイメージが反応しているのは一緒だけど，プラスチックも指に吸い付くし，イメージも吸い付く感じ．プラスチックの表面に指が物理的にくっつくことが少し気になる．でも，一番の違いは，iPhone は直接的にイメージに触れているように見えているのに対して，マジックマウスは，指とイメージとが離れているということなのでしょうか．最初は，マジックマウスの傾斜が重要かなとも思ったんですが…．でも，この傾斜は人差し指で行ったり来たりするときに，私にとってはとても気持ちいい． どちらにしても，この慣性スクロールは，私たちの物理的世界の慣性をコンピュータの論理世界に入れてしまったわけです，でも，それも論理で実現されているわけです．まわりまわって，いつも私たちが体験していることが，ディスプレイ上のイメージで表現されるとなんか気持ちよさを感じてしまう．少し違うか．慣性というものだけが，ディスプレイ上のイメージに入り込んでいるから気持ちいいのか？　世界の物理法則の一部を切り取って，イメージに入れ込む．それも，私たちの行為にピタリと合った形で．そうすると，実現しているのは物理世界で起こっていることなんだけれど，体感としては何か新しいことが起こっているように感じてしまっているのか？　 この新しく感じてしまう慣性スクロールとそれを行う表面の形状の関係について，最初に考えたのは，マジックマウスの緩やかな傾斜は，傾斜に対して私たちは日頃昇るときも勢いをつけるし，下るときは自然と勢いがついてしまうことと関係しているのではということでした．それが，プラスチックの表面という滑りの悪さを補うのかと．でも，私たちの物理世界から慣性だけを切り取って，それを指の...
続きを読む

メタファーと身体の関係

1996年に，ダン・ゲントナーとヤコブ・ニールセンは，「アンチ-マック・インターフェイス」という論文を発表した．そこで，彼らは，現在でもGUI デザインを論じる際にバイブルとして参照されることが多い「マッキントッシュ・ヒューマン・インターフェイス・ガイドライン」の原理に，あえて反することで，新たなインターフェイスの可能性を論じている．4-3) マッキントッシュの第一の原理には，インターフェイスは私たちの馴染みの環境を用いたメタファーに基づいているべきだと書かれている．4-4) マッキントッシュの開発者たちは，この原理に則って，現在まで使用されている洗練されたデスクトップ・メタファー（図4-1）を開発した． 　　　　　　　　　　図4-1 システム1.1 のデスクトップ そこでは，ディスプレイ画面を「机の上（デスクトップ）」と見なし，「ファイル」，「フォルダ」，「ごみ箱」などを模したアイコンを，マウスで選択し，クリックすることで，コンピュータの操作が可能になっている．この原則に対して，ゲントナーとニールセンは，「ワードプロセッサ」は「タイプライター」にたとえられるが，ワードプロセッサには，タイプライターにはない「やり直し」の機能があるなど，メタファーが示す目標領域（コンピュータ）と基底領域（たとえる対象）とのミスマッチを指摘する．そして，彼らは，このようなメタファーの使用は混乱を招くことになるので，コンピュータ・システムの構造に即した，メタファーに頼らないインターフェイスをデザインすべきだと主張し，言語主体のインターフェイスの提案を行った．4-5) メタファーによる対象の機能のミスマッチを問題視するゲントナーとニールセンに対して，ジョン・キャロルらは，以前から，対象間のミスマッチを含んではいるが，メタファーの使用は私たちの最も基本的な学習へのアプローチのひとつなので，インターフェイス・デザインには不可欠なものだと主張していた．4-6) 確かに，コンピュータを取り巻くメタファーには多くのミスマッチがあるが，それにも関わらず，私たちは，それらを手がかりにして，コンピュータを使い始めて，気がつくと，それらを当たり前のように操作して自分の作業を進めてきたことは事実である． ゲントナーとニールセン，キャロルらは，似ている対象を結びつける言語の機能としてメタファーを論じ...
続きを読む

「グリッチワークショップ」を見学して考えたこと

東京藝術大学 芸術情報センター で８月20・21日に開催された公開講座「 グリッチワークショップ 」を見学しました． 「データを壊す」ってどういうことなんだろうと疑問から見学させてもらったのですが，とても興味深い内容でした． ucnv さん, 林洋介さんによるグリッジの技術的な講義と 針谷周作 さんによるグリッチの歴史とその可能性を示す講義といった，グリッチをめぐる技術と概念を端的に学べました．ワークショップ参加者は，技術を学んだあとに，グループごとに作品作りをしていたので，単に見学していた私よりもはるかに深く「グリッチ」のことを理解できたのではないかと思います．制作には参加しませんでしたが，私自身もこれから自分がメディアアートを考える上で役に立つような「グリッチ」という概念を得たような気がします． ここからはワークショップに参加した私の個人的な感想です． ucnv さんがグリッチの定義として「データは壊れているけれども再生できる」と言われていて，ここでの「壊れている」って何だろうと思いました． バイナリエディタで画像ファイルを開くと，その画像を構成しているデータが文字と数字ででてきて，この時点で自分的にはファイルが「壊れている」と感じてしまうわけですが，それは，画像を構成するデータの別の見え方であるわけです．「攻殻機動隊」や「マトリックス」で，緑の文字・数字が画面を覆い尽くすことのイメージや，概念では画像データを文字・数字で示すことは知っていても，バイナリエディタで画像ファイルを開くだけで，それが文字・数字ででてくると，やはりそれまでとは違って，やはりそうだったのかということを感じます．その文字・数字を適当なところで消したり，コピペなどで編集，保存して，その画像ファイルを画像として開くと，画像が変な感じになっている．バイナリエディタでやっていることは，自分の感覚からいうと「編集」という行為ですが，その結果生じた画像は「壊れた」と感じる．「編集」から「破壊」が生じるという変な感覚です．さらに，コンピュータにとっては別にそのデータが「壊れている」というわけではなくて，それをデータ通りに画像として表示しているわけです． 元画像 バイナリエディタで編集 （ちょっとした）グリッチ画像 コンピュータはデータは壊れ...
続きを読む

モノのフラットデザイン化とアフォーダンスなきサーフェイス

モノからインターフェイスがなくなるということはどういうことなのだろうか．もともとはモノに「インターフェイス」はなくて，必然的な形態がそこにあるだけであった．けれど，コンピュータによって，ハードウェアとソフトウェアとが分離して，そこにインターフェイスが生まれた．いや，「ボタン」が生まれたときにインターフェイスが生まれたとしたほうがいいのかもしれない．サーフェイスが機能と直結しなくなったときに，インターフェイスが生まれたということかもしれない． インターフェイスはサーフェイスに張り付いていた．exUIはサーフェイスからインターフェイスを剥ぎ取り，もともとあったボタンも剥ぎ取る．ピアノから鍵盤を引き離してしまうものだろうか．ピアノはまた違う問題かもしれない．いや，音が出る四角い箱があって，スマートフォンにインターフェイスとしてピアノの鍵盤が表示されて，それをタッチする，箱からピアノの音が聞こえてくるとき，四角い箱が「ピアノ」となる．このように考えると，exUIはハードウェアからインターフェイスを引き離すだけではなくて，スマートフォンというハードウェアとソフトウェアとが一体化したモノから，ハードウェアを引き離したものとも言えるのではないだろうか． スマートフォンが一枚の板としてハードウェアとソフトウェアとを一体化したモノとしてのインターフェイスを提供していた．exUIはスマートフォンからハードウェアを引き離し，モノのハードウェアに引き渡す．そのとき，モノはインターフェイスをスマートフォンに引き渡す．モノはサーフェイスを持つようになり，スマートフォンはインターフェイスを持ち続ける．このとき，スマートフォン自体はほとんど変わりないが，サーフェイス化したモノは，これまでの機能と直結した形から切り離される．この機能と形との切り離しは，スマートフォンがフラットデザインになったときに起こったことだといえる．そのときに「メタファー」がスマートフォンから消えたとすると，exUIを付与されたモノもまた「メタファー 」のあるなしで 語られるなるようなあたらしさを示すことになるだろう．このように考えてみるとexUIというのは，モノのフラットデザイン化であり，それはアフォーダンスを示さないサーフェイスをつくるということなのではないだろうか． exUIはモノからインターフェ...
続きを読む

インターフェイス再考：アラン・ケイ「イメージを操作してシンボルを作る」は何を意味するのか．

.review  にテキストを書くために，昔発表したものを改めて読んでみた．カーソルについては論じていないけど，GUI が担っている思想的背景みたいなものを自分がどのようにまとめたかを確認できた．このときは「カーソル」という存在をまったく見落としていたので，ここからどうカーソルと関係させていくか． -- イメージ操作シンボル View more presentations from Masanori MIzuno . インターフェイス再考：アラン・ケイ「イメージを操作してシンボルを作る」は何を意味するのか． １．はじめに アラン・ケイが提唱したスローガン「イメージを操作してシンボルを作る [Doing with images makes symbols] 1 」は，現在のグラフィカル・ユーザ・インターフェイス（GUI）につながるアイデアを簡潔に表現し，GUI の開発に大きな影響力をもった．ケイのスローガンは，ヒトとコンピュータとのコミュニケーションをどのように変えたのであろうか．現在，世界中に，GUI を実装したコンピュータは数えきれないほどあり，私たちはそれを使って日々の作業を行っていることから，ヒトとコンピュータの関係の変化は，ヒトのコミュニケーションそのものへも影響を与えているのではないだろうか．本論考では，上記のことを考えるために，まずは，一般化した GUI がどのような影響をもっているのかを確認するために，東浩紀とシェリー・タークルの議論を考察する．次に，ケイが，どのような影響のもとで，上記のスローガンを掲げるに至ったのかを明らかにする．最後に，スペルベルとウィルソンの「関連性理論」を参照して，GUI が私たちに提示したコミュニケーションの手段を考える． ２．インターフェイス的主体とブリコラージュの再評価 哲学者の東浩紀は，『サイバースペースはなぜそう呼ばれるのか』の中で，現在のユーザ・インターフェイスの主流を占めている GUI について興味深い議論をしている．東は，ジャック・ラカンとスラヴォイ・ジジェクの精神分析の理論をもとにして，シェリー・タークルが1990年代のコンピュータ文化を特徴づけるために用いた「at interface va...
続きを読む

「サブシンボリックな知能」と Doing with Images makes Symbols

下條 「環境知能」と言うとき，比較的欠けているなと思った視点は，身体や皮膚の感覚，あるいはシンボリックにいく前のサブシンボリックな知能なんです．どういう意味かというと，子供がおもちゃに対してインタラクトしているとき，そのおもちゃにどういう機能があるかなんていう表象を頭のなかにつくらなくても反射的に手を出しているわけです．あるいはそこに本があれば何となくページをめくっているとかね．そうした，ピアジェが言うところの，表象より前の段階の感覚運動知能みたいなものは，安全な言い方をすればそういう研究は将来必要となるでしょう，という言い方になるのですが，そんなことをいっているあいだに，近未来において粗暴なかたちで吹き出てくるんじゃないかなという気がしているんです．(pp.150-151) 環境知能と環境管理をめぐって，東浩紀＋下條信輔　司会＝NTTコミュニケーション科学基礎研究所　in 環境知能のすすめ：情報化社会の新しいパラダイム ここで言われている「サブシンボリックな知能」という言葉で，昔の発表をまとめ直してみたいと思っている．プレシンボリックな知能／行為｜Doing with Images makes Symbols｜アレゴリー的思考 −− インターフェイス再考：アラン・ケイ「イメージを操作してシンボルを作る」は何を意味するのか． Re-thinking the interface: What is the meaning of Alan Kay's"Doing with Images makes Symbols" 水野勝仁 Masanori MIZUNO 名古屋大学大学院情報科学研究科博士後期課程　 Nagoya University, School of Information Science Abstract Alan Kay created a slogan for development of user interfaces: Doing with Images makes Symbols. This reveals the essence of the Graphical User Interface (GUI) which millions...
続きを読む