京都精華大学集中授業「メディア論」

メディアが融けたあとのメディア論
───モノとディスプレイとの重なり合いから考える

 スライドと授業のメモ

＞メディアとメタメディア篇（PDF）

  • 誰もが使えるようになってはじめてメディア
    • それゆえに，エンゲルバートはコンピュータをメディア化したとは言えない
  • メタメディアと身体の縮小
    • 外爆発の結果の内爆発というベクトルの変化
      • 内爆発＝知能の拡張＝メタメディア
        • メタメディアによって外爆発で拡張した身体自体が内爆発にベクトルを変化させる
  • アラン・ケイのタブレットのイメージとプログラミング
    • プログラミングで内爆発を記述する？

＞融けるデザイン篇（PDF）

  • 表層と深層
    • 深層をプログラミングで記述するからこそ，メディアは溶けだす．
    • 二層構造が前提となっているからこそ，コンピュータはメタメディアである
  • モノとメタファー
    • 電話のようなもの
      • 電話線が光回線になって，インターネットのもとで「電話のようなもの」となっている
      • 深層の記述と表象の古さ＝過去のメディアの流用
        • 「メタファー」というモデルに惹きつけられるヒト？
      • 物理層から離れて，アプリという独自の地位を与えられる
        • 物理層，プロトコル層，インターフェイス層


＞ポストインターネット篇（PDF）

  • Artie Vierkant
    • Image Objects
      • 写真という3次元のものを2次元平面で見せる視点をコピースタンプツールで破壊して，2次元にしか見えない平面を3次元にみえる2次元平面に混入させる
  • 紐
    • レイヤーを貫通して，ゆるやかにつなぐ紐
      • 実際のレイヤーはあるけれど，そのように考える小林さんの思考が興味深い
リンク集
4日目
3日目

このブログの人気の投稿

中途半端な存在｜カーソル｜コンピュータの身体性

カーソルって，中途半端な存在なんですよね．映像なんだけど，映像とはみなされない．動画を再生するときは，脇に避けられる．動きがカクると，不安に思われる．画面の中にありつつ，自分自身の身体の一つのような存在．みんなが当たり前に受け入れているだけど，それが何なのか，ちゃんと理解されていません．コンピュータの身体性を語る上で，カーソルには重要な秘密が隠されていると感じます．(p.77) exonemo's view「カーソル」in Web Designing Vol.108 カーソルについて考えてきたけれど，こう言われてしまって，しかもそれを作品として具体化させられては，もう何も言えない．けど，何か考えて，書かなければならない．エキソニモも言っているように，私たちはカーソルが何なのかちゃんと理解していないのだ． カーソルはマウスというモノと密接に結びついていると同時に，画面上の位置情報を表すために映像化されたデータでもある．カーソルは映像でありながら，マウスというモノとつながり，位置情報というデータともつながっている．モノとデータと映像とを行ったり来たりするような「中途半端な存在」としてあり続けるカーソル．「中途半端な存在」であるカーソルを考えることで，「コンピュータの身体性」が見えてくるのではないだろうか． エキソニモのカーソルの巡る作品を考えることで，カーソルとは何かを考えることはとても重要だと思う．それは「コンピュータの身体性」を考えること．人間，ヒトの身体性ではなく，コンピュータの身体性．私は今まで，コンピュータに触れる際のヒトの身体性について，マウスとカーソルのつながりを中心に考えてきた．カーソルはデスクトップ・メタファーの中で，ヒトの身体性をコンピュータの論理空間の中に持ち込むような機能を果たしてきた，と私は考えた．なぜなら，カーソルはヒトが世界を把握するためのメタファーの中で，そのメタファーに属さない存在であると同時に，デスクトップ・メタファーでコンピュータが機能するために必要な成立させる指さしという行為を遂行する存在としてあるからだ．つまり，カーソルはヒトとコンピュータとの「あいだ」にあるような「中途半端な存在」である． カーソルは今まで当たり前にあったけれど，iPad にはない．カーソルなしのコンピュータ体験も普通になっていく（かもしれ...
続きを読む

「グリッチワークショップ」を見学して考えたこと

東京藝術大学 芸術情報センター で８月20・21日に開催された公開講座「 グリッチワークショップ 」を見学しました． 「データを壊す」ってどういうことなんだろうと疑問から見学させてもらったのですが，とても興味深い内容でした． ucnv さん, 林洋介さんによるグリッジの技術的な講義と 針谷周作 さんによるグリッチの歴史とその可能性を示す講義といった，グリッチをめぐる技術と概念を端的に学べました．ワークショップ参加者は，技術を学んだあとに，グループごとに作品作りをしていたので，単に見学していた私よりもはるかに深く「グリッチ」のことを理解できたのではないかと思います．制作には参加しませんでしたが，私自身もこれから自分がメディアアートを考える上で役に立つような「グリッチ」という概念を得たような気がします． ここからはワークショップに参加した私の個人的な感想です． ucnv さんがグリッチの定義として「データは壊れているけれども再生できる」と言われていて，ここでの「壊れている」って何だろうと思いました． バイナリエディタで画像ファイルを開くと，その画像を構成しているデータが文字と数字ででてきて，この時点で自分的にはファイルが「壊れている」と感じてしまうわけですが，それは，画像を構成するデータの別の見え方であるわけです．「攻殻機動隊」や「マトリックス」で，緑の文字・数字が画面を覆い尽くすことのイメージや，概念では画像データを文字・数字で示すことは知っていても，バイナリエディタで画像ファイルを開くだけで，それが文字・数字ででてくると，やはりそれまでとは違って，やはりそうだったのかということを感じます．その文字・数字を適当なところで消したり，コピペなどで編集，保存して，その画像ファイルを画像として開くと，画像が変な感じになっている．バイナリエディタでやっていることは，自分の感覚からいうと「編集」という行為ですが，その結果生じた画像は「壊れた」と感じる．「編集」から「破壊」が生じるという変な感覚です．さらに，コンピュータにとっては別にそのデータが「壊れている」というわけではなくて，それをデータ通りに画像として表示しているわけです． 元画像 バイナリエディタで編集 （ちょっとした）グリッチ画像 コンピュータはデータは壊れ...
続きを読む

デスクトップ・メタファーと「ディスプレイ行為」　

ここで，デスクトップ・メタファーが生み出されたパロアルト研究所に考察の対象を移したい．なぜなら，この研究所において，ディスプレイ上の対象物を指さすための道具であったマウスに，次々に新たな行為が付け加えられることになるからである． パロアルト研究所では，1973年に，アルト（図4-4）と呼ばれるシステムが開発された．アルトは，アラン・ケイや，バトラー・ランプソン，チャールズ・サッカーが中心となって開発された実験的なワークステーションであり，その大きな特徴は，ディスプレイ上のピクセルがメインメモリのビットに対応するビットマップ方式を採用していたことである．この決定は，ヒトが環境の情報を最も捉えることができる視覚を重視したインターフェイスを提供することが，マシンとソフトウェアの最大の目的であるという開発者たちの認識から導かれたものであった．そして，アルトのインターフェイスでもうひとつ重要なことは，ポインティング・デバイスとして，マウスが採用されたことである．当時，マウスは，入力デバイスとしては馴染みの薄いものであったが，スチュワート・カードによる実験によって，マウスが，ディスプレイ上の対象を指示するのに最も適したデバイスということになり，標準装備されることになった．4-42) 視覚重視の考えと，ヒトの手の原初的な感覚をコンピュータに持ち込むマウスという道具が，アルトというワークステーションで出会うことになる．     図4-4 ゼロックス社 アルト 視覚重視のアルトは，ディスプレイ上のイメージを自由に表示することができた．このことは，ディスプレイ上のイメージが示すアフォーダンスの直接的な知覚に基づく指さし選択行為とマウスとの関係に影響を与えた． エンゲルバートのシステムでは，マウス・カーソルのイメージは，単なる点であった．しかし，アルトでは，カーソルの形は，矢印（→）になる．カーソルの形が，矢印ではなく点であっても，ディスプレイ上のイメージを指さす選択行為を遂行することはできる．では，なぜ形が変わったのか．それは，ディスプレイ上のイメージを自由に表示できるようになっために，指さし選択行為の遂行に，より適したアフォーダンスを示すイメージを表示するようになったと考えることができる． ここでは，身体的行為を導くアフォーダンスとディスプレイ...
続きを読む

画面分割と認知に関するメモ

画面分割についてのスライドを作っていて，アメリカのドラマ「24」が初期のころはよく画面分割を使って緊迫感をだしていたのに，その手法が徐々に使われなくなっていたことを Wikipedia で知る． なぜだろうと思いつつ，マイク・フィグスの「 時代×４ [About Time 2] 」を見る．これは４分割された画面で同時に物語が進んでいく短編映画で，「 10 Minutes Older 」というオムニバスの映画のひとつである． 画面を４分割して，物語で進んでいくと，段々のそこで起こっていること全てを認知することが難しくなり，認知限界を超えることを実感した．「24」は，リアルタイムという軸があるから，ために画面が分割されても，それは空間的に離れているところで「同時に」物事が起こっていることを示すために有効だが，そこで「リアルタイム」という軸が外れてしまうと，見ているヒトは分割された画面の関係性が分からなくなってしまうのではないだろうか．そこで，「24」で画面分割が使われなくなったことには，認知限界が関係しているのではということを考えた． 24 時代×４[About Time 2] レフ・マノヴィッチが画面分割はユーザ・インターフェイスの「GUI」からの影響であると指摘している．「ひとつのスクリーンにひとつのイメージ」というのが画面構成の論理であったが， GUI を構成する要素であるビットマップ方式のディスプレイがこの論理を破綻させたと，マノヴィッチは考えている．ビットマップ以前に，映画では電話をかける場面などで画面分割を行っていたが，大々的には行われていなかったとはいえるので，マノヴィッチの指摘には賛成である．そして，画面分割を「空間的モンタージュ」と呼び，これまでの「時間的モンタージュ」に変わるものだとし，「空間的モンタージュ」は，GUI の画面を占拠して，そこでは何も消えることがない「記憶」の場として機能していると，マノビッチは考える． my desktop マルチウィンドウシステムにもつながる，パーソナル・コンピュータの大元のアイデアであるヴァネバー・ブッシュのメメックスは２画面を備えた装置として描かれている．メメックスは増大する情報量に対処するために作られた装置であった．ブッシュは膨大な情報に対するヒトの認知限界を考え，メメックスを開発...
続きを読む

2046年の携帯電話と2007年のスマートフォンのあいだにある変化（１）

2046年の携帯電話 新海誠監督のSFアニメ「ほしのこえ」を「インターフェイス」の観点から見ると何が見えてくるでしょうか．「SF」というジャンルには近未来を予測した様々な「インターフェイス」がでてきますが，「ほしのこえ」では主にミカコとノボルをつなぐ「携帯電話」を扱いたいと思います． ノボルとミカコの物語は2046年が舞台です．2046年の中学生3年生がもっている携帯電話は，大きな液晶タッチパネルで操作するスマートフォンとは異なり，小さな液晶ディスプレイと多くのボタンを備えたものです．2046年という未来であるにもかかわらず，「ガラケー」とも呼ばれる古いかたちの携帯電話を持っているのはおかしいと思う人もいるでしょう．しかし，現在のスマートフォンのかたちを決定づけたアップル社のiPhoneが発表されたのは2007年ですから，「ほしのこえ」が発表された2002年には液晶タッチパネルを備えた携帯電話は一般的ではなかったことになります．2002年にはiPhoneがまだ存在していなかったけれど，今（2015年）では携帯通信機器の主流は，ノボルとミカコがもつような携帯電話からタッチ型インターフェイスのスマートフォンへとシフトしました．この事実は「ほしのこえ」を考察する上で重要な意味を持ちます． 「ほしのこえ」はSFなので，iPhoneのようなタッチ型インターフェイスの携帯電話の登場を正確に予測する必要はありません．なぜなら，SFは「サイエンス」という言葉がついていても，あくまで「フィクション」なので，現実的な未来の予測に囚われる必要はないからです．しかし，SFは現実世界の正確な予測ではないけれど，単なる絵空事でもありません．SFと現実とのあいだには独特なつながりがあります．例えば，『SF映画で学ぶインタフェースデザイン』には携帯電話に関する例が挙げられています． SFに見られるフィクションの技術によって，ファンは来るべき刺激的な何かを期待します．顕著な例は，『宇宙大作戦』の通信機です．1960年代後半，一般的な通信機といえば，トランシーバーないしは壁にコードにつながっているお姫様型電話だったころ，『宇宙大作戦』に登場した通信機によってモバイル電話の期待が高まりました．その使い方は電話というよりもややトランシーバー寄りではありましたが，初期の...
続きを読む

デジタルな現象をそのまま扱うということは，モダニズム的な態度

ucnvさんとのトークで「アーティ・ヴィアーカントの画像はそこにあったものをそのまま映していて，そこで生成されているわけではない」というようなことをucnvさんが言ったことがずっと気になっている． ヴィアーカントのイメージオブジェクト で展示の記録として撮影された画像は，そこで起こっている現象をそのまま記録している．もちろん3次元を2次元に変換するときの欠損はあるけれども，それでもそこで起こっている現象をそのまま記録している． その後，Photoshopでその画像が加工される．このときヴィアーカントはスタンプツールを主に使って，その展示会場で一度記録された色情報以外のものを使っていないということを，ucnvさんの指摘で気付かされた．これはとても大切なことような気がしている．展示空間を記録して，それを加工しているというのはこれまでの写真の見方で，ヴィアーカントは展示空間をスキャン＝撮影して，デジタル化して，色情報が集積された平面にしていて，そこにもともとある色情報のみを使うことをルールにしているのかもしれない．スキャンというデジタルの現象をそのまま扱う．そこで生まれた情報のみを扱うという感じだろうか．スキャンによって空間を色情報をもった平面＝テクスチャに変換する．そこでは空間や作品画像といった区別はなくなり，すべてが色情報になる．ただ，そこにあるもの以外は使えない．一度のスキャンという現象でうまれる情報だけを扱うこと． 「Vacant Room」での360度写真で感じたことは，見えない部分が生まれるということ．それは一度では見ることがなくなる．「フレームの外」が生まれること．現実も視点からしょうじる視界フレームによって「フレームの外」が生まれる．写真は「フレームの外」をなくして，「フレームの中」だけにする．360度画像には「フレームの外」がある．この感じが，空間をスキャンして色情報として「フレームの中」に閉じ込めるヴィアーカントのイメージオブジェクトと似ている． 「フレームの外」を感じさせる「Vacant Room」と「フレームの中」だけの「イメージオブジェクト」が似ているというはどういうことか．似ているというよりも，それが両立し得るのがデジタルという現象なのではないか．「Vacant Room」のとなりに「イメージオブジェクト」があっても，...
続きを読む

「一つの絶対知」としてのインタラクティブ経験

たとえば，私が机のまえに立ったままで居て，両手でもってそれにのしかかっているという場合，私の手だけが強調されていて，私の身体全体はまるで彗星の尾のように手の背後へと流れて行っている．というのも，私の肩なり腰なりの位置が私にわからないからではない．テーブルのうえに突いた両手のその支えのなかに，私の姿勢の全体位置が言わば読みとられるからである．また，私が立って居て，私のパイプをを手で握りしめているという場合，私の手の位置というものは，私の手の位置が私の前腕とのあいだでとる角度，私の前腕が私の上腕とのあいだでとる角度，私の上腕が私の胴体とのあいだでとる角度，最後に私の胴体が大地とのあいだでとる角度──といったものから次々に推論されて行って決まるものではない．私は自分のパイプがどこにあるかを，一つの絶対知によって知ってしまっているのであり，まさにそれによって，私の手がどこにあるのか，私の身体がどこにあるかも知っているのであって，それはあたかも，沙漠のなかで原始人がそのつど一気に方向を見定めてしまって，別に出発以来辿ってきた道のりや外れて来た角度を思い出したり加算したりする必要なぞないのと相似ている．(p.175) モーリス・メルロ＝ポンティ『知覚の現象学』 「一つの絶対知」 マテリアルと身体と間の作用・反作用 As someone who thinks of things from the perspective of creating interactive experiences, I really think that you do need something. from: Q&A: Nintendo’s Shigeru Miyamoto on Mario Zelda, Project Natal and More 宮本さんとメルロ＝ポンティを並べてみる． 「一つの絶対知」としてのインタラクティブ経験． そこには，身体が接する何かが必要となる． マテリアルと，マテリアルとしての身体． また， ＃52　概念を触る指 [Finger touches concepts] 第３章で掲載した角をなぞる図版の延長版であるが，ここでなぞられている角は，点線や括弧など，アクチュアルに決して触る事のできない概念的な要素で構成されている．「概念を触る」という日常で体験できない表...
続きを読む

メディアアート概論（2024年度水野担当分）の授業資料

女子美術大学 の首藤圭介さんに声かけてもらって， 茅ヶ崎市美術館 の藤川悠さんと3人で「メディアアート概論」の授業しました．私の担当分は5回で前半はメディアアートを考える基礎的な事象を考える「3つの空間（現実空間，仮想空間，イメージの空間）で「これ」と「あれ」をつなぐリンクを考える──視界・リンク・3つの空間編」で，後半は前半の知見を活かして 谷口暁彦 さんの作品を考察する「谷口暁彦個展《超・いま・ここ》の「超」の意味を考える──谷口暁彦・ 大岩雄典 編」としました． 〈視界〉編でスマートフォンで写真を撮ることの不思議さを書いていたときに，スマートフォンのディスプレイに映っているものは私の〈視界〉に現れる縮小された私の〈視界〉なのではないかと考えました．そして，スマートフォンのディスプレイに表示されているのが，〈視界〉の縮小版ということで〈マップ〉と名付けました．授業資料を書いたときはこれでいけると思ったのですが，授業をしてみると自分でも理解が及ばず学生から質問が来て，それに答えながら，〈マップ〉を考えていきました．そして，〈視界〉や〈マップ〉，リンクという言葉で，谷口さんの作品を分析しようとすると，ここでも〈マップ〉がうまく使えなくて，悩みました．来年度も授業をお願いされた〈マップ〉についてもっと考えていきたいと思っています． 〈マップ〉に関して，学生の質問に四苦八苦して回答した記録 マップはなぜ世界ではなく〈視界〉の縮小なのでしょうか？ ここは私もまだ明確に言葉にできていないところで，「〈マップ〉は〈視界〉の縮小である」と勢いで言っているところがあります．世界というのは私と関係なく，私の周囲に連続して存在していて，画像や写真というのはその世界を写しとっているものという感じが強かった．しかし，スマートフォンが「撮影」するものは，私の〈視界〉のなかに表示されるもう一つの〈視界〉を切り取っているという感じがあって，ここで行っているのは世界を「撮影」することではなくて，〈視界〉をピクセルにマッピングしているという感じを私が強く持っています．うまく回答できていないですね． スマートフォンで「撮影」するようになって，私が持つスマートフォンのディスプレイに「私が見ている世界」が表示されているのを見たときに，ディスプレイ以外に見えているのが，私が見ている世界＝〈視界〉の〈底〉が...
続きを読む

告知：SOBOでucnvさんとトークします

7月25日（土）16:30から神保町にある SOBO で開催中の展覧会「Vacant Room」で，企画・展示設計を行った ucnv さんとトークをします．トークでは，今のところ先日の映像学会で発表した「 テクスチャを透してモデルを見てみると：ポストインターネットにおける２D−3D 」から考えた「テクスチャ」と「画像／写真」との関係や展示のドキュメントのことなどを話そうと考えています． テクスチャとなったリアルの重ねるかたちで３Dモデルを置いてみる．リアル３Dモデルからその表面＝テクスチャだけを抜き取るのが写真＝画像． — mizuno masanori (@mmmmm_mmmmm) 2015, 7月 5 （ リアルの →リアルに） 反射光で見ていることにはなるが，どっか世界を透過している感じを与えているという感覚が興味深いのかもしれない．枠を透して世界を見る．カメラで世界を枠付けるのではなく，枠そのもので世界を切り取ること．薄い板というかたちから考える． — mizuno masanori (@mmmmm_mmmmm) 2015, 7月 5
続きを読む

GIFとループと物語

GIF論文を書いていて，途中で外したテキスト．レフ・マノヴィッチが考えていたニューメディアの「ループ」のあり方とGIFのループとを比較することで，ループにおける「物語」の扱いを考えてみたもの． −− 2001年に出版された『ニューメディアの言語』で，マノヴィッチは映像の「ループ」がニューメディアのひとつの特徴だとしている．そこには長時間の再生が難しい当時のコンピュータのスペックの問題があった．そして，マノヴィッチはループの映像の例として，QuickTimeやFlashアニメーションを取り上げる．さらに，マノヴィッチは初期映画とニューメディアはともに「ループ」というテクニックを用いていると指摘すし，映像の歴史を「19世紀の前映画的視覚的デバイスもまたループに頼っていた．19世紀を通じて，ループは長くなっていき，最終的には「物語」へと至った」と簡潔にまとめる．「物語」を語れるほど長く映像を再生できないので，ループ映像が必要だっというのがマノヴィッチの考えの根底にある．マノヴィッチにとっての「ループ」とは物語に従属した要素のひとつであって，「物語を駆動するエンジンとしてのループ」なのである．それは，彼がデジタルの５つの特徴としてあげたもののひとつ「モジュール性」と関係がある． マノヴィッチが制作した《Software Cinema》や，ループ映像の例として取り上げられるジャン＝ルイ・ボワシエの《押し花》は，ループする映像を次々とクリックしていくなかで物語が進んでいく構造になっている．クリックとクリックのあいだ映像が常に動いている必要があるが，長時間の映像を再生させることは難しく，短い映像のループが採用される．そして，映像へのリアクションであるクリックによって物語が分岐していき，ループ再生による映像が物語の「モジュール」として機能していく．ここでのループはプログラムの基本構造のひとつである「次の出来事」へ分岐するためのループとなっている．マノヴィッチが考える「ループ」は，プログラムの構造に基づいたヒトとコンピュータとのインタラクションの基本であるデータの処理を再帰させながら「次へ次へ」と選択を迫る性質を，「物語」を駆動する力に応用した映像なのである． 技術的制約のもとループに着目したマノヴィッチだが，同じ制約のもとウェブで使われているGIFに言及することはない．...
続きを読む