ホームハイテクデバイスカメラ生命の描画と機械学習: アーティストのアンナ・リドラーへのインタビュー

生命の描画と機械学習: アーティストのアンナ・リドラーへのインタビュー

1月 10, 2024

—

📖

機械学習はすでに日常生活の中で大きな役割を果たしており、その役割は今後も高まるばかりです。 Google 検索や Amazon の Alexa へのつぶやきリクエストは、巧妙なアルゴリズムのベールに包まれた世界を利用するかもしれませんが、これらの技術は、より大きなもの、つまり自己開発する人工知能の世界にぐらつきます。

ディープラーニングと、その思考を行うニューラルネットワークは、デジタルテクノロジーに不可欠な要素になりつつあります。ひいては、人工知能は私たちの世界体験にますます大きな影響を与えており、アーティストとして無視できない素材となっています。少なくとも、それがアンナ・リドラーの考えだ。アンナ・リドラーは、機械学習技術を持ち上げてギャラリーに持ち込んだ作品で名を上げている。

たとえば、リドラーの『アッシャー家の崩壊』（2017 年）には、エドガーアランポーの短編小説の 1928 年の映画版の静止画に基づいた、アーティスト自身のインク画に関するニューラルネットワークのトレーニングが含まれていました。 AI はその後、独自のバージョンの映画を作成できるようになりました。各フレームに続くべきと考えられた画像の種類に基づいて、真っ黒なインテリアと半分ちらりと見える顔の印象派の流れが生まれました。

この作品は単なる技術デモではなく、物語と記憶、つまりそれらが機械だけでなく私たちの心の中でどのように形成され、また誤って形成されるのかという問題を突きつけています。

Drawing with Sound (2017) では、リドラーは作曲家ベンハイムと協力し、アーティストの人生を描いたスケッチから形状を認識し、サンプリングされたソプラノを使用してハイムが開発したサウンドとしてこれらの形状を解釈するようにニューラルネットワークをトレーニングしました。

パフォーマンスとして組み立てられたこの作品には、リドラーが木炭を使って白い表面に線を描く様子が含まれています。彼女は眼鏡に埋め込まれたウェブカメラを着用しており、それが彼女が作っている形を拾い上げ、それを処理された人間の声の不協和音に変換します。

リドラーの身体の前景と、木炭の破片、生命の描画のルーツ、そしてその下に隠された複雑な計算プロセスが相まって、『音を伴う描画』は、人間のパフォーマンスとして分類できるものの限界についての特に印象的な調査となっています。私はアーティストに連絡を取り、彼女の作品について、また機械学習とアートに関する一般的な考えについて詳しく尋ねました。

アーティストにとって、機械学習と人工知能について疑問を抱くことはどのくらい重要だと思いますか?

かなり重要。アートは複数のことを行うことができます。これは、学術界やテクノロジーの外にいる人々、特にそれをめぐる道徳的および倫理的な議論に参加する人々に、機械学習に参加する方法を提供できます。コンピューターサイエンスコミュニティの外部の人々がこれらのアイデアに関与し、質問しなければ、バブルの中で開発されることになります。

アートは、このテクノロジーを使った新しい方法を提案することもできます。私は最近、SF がテクノロジーにどのような影響を与えてきたかについて多くの議論が行われたカンファレンスに出席しましたが、アートでも機械学習で同じことができる可能性があると思います。最後に、私にとって、仕事において機械学習は、インクや木炭と同じようなツールです。それを使用することを選択すると、さまざまな機能が実行され、さまざまな履歴が提供されます。その重要性は高まるばかりです。それを無視するのは単なる故意のように思えます。

音を使った描画の最初のアイデアは何ですか?

2 年間かけて描いた人生の絵をすべて取り出してスキャンしました。次に、それらをグリッドに分割し、t-SNE と呼ばれるものを使用してマークをグループ化し (つまり、すべての対角線をまとめたり、すべての直線をまとめたり)、自分が最も頻繁に作成したマークが何かを調べました。仕事。次に、作曲家のベン・ハイムと協力して、これらのマークがどのように聞こえるかを考えました。

「ある方向から来る線は、他の方向から来る線とは異なる音を生成します。」

線を描いたときにどのように聞こえるかだけが問題ではありません。描くという行為は作品にとって非常に重要でした。 drawing はもちろん動詞でもあり名詞でもあります。それはプロセスに反応します。一方の方向から来るラインは、もう一方の方向から来るラインとは異なるサウンドを生成します。半円でサウンドが始まり、スムーズに全円に移ります。私がよく描く図形の複合部分を構成するすべてのサウンドが音響的に連携していることを確認するのは、実際には非常に困難でした。

すべての音にマークを割り当てた後、私たちは協力して 30 分ほどかかるスコアを作成しました。これは演奏であると同時に記譜でもあります。記号と音の関係を知っているので、この曲をほぼジャズの演奏に使用できます。描画音4

(上: 音で描く、2017)

私たちは、音階を歌うソプラノが、木炭という媒体と一致することを確認するために、かなりの努力をしました。女性ボーカルが上がったり下がったり、大きくなったり小さくなったりする、非常に強力なヘヴィマークを作成したり消したりする能力が適切であると感じました。声の儚い性質は、炭の儚い性質と一致します。

また、実物を描くこととスケールは両方とも芸術と音楽の両方にとって基本的な実践です。それらを切り取って、この前衛的なテクノロジーを使って何か新しいものを作るのが適切だと感じました。

この作品にはパフォーマンスの要素が強い。なぜ参加者が自分で作品を描くためのツールを提供せず、絵を描くことを中心に作品をデザインしたのですか?

私は、これがただ単に人々が騒ぎ立てるだけの「クールな技術デモ」になってしまうのではないかと非常に懸念していました。これをデザインではなく芸術作品にしたかったのです。私にとって絵を描くことの身体性も重要でした。絵を描くときは動きます。それはとてもジェスチャー的です。これを大規模にやると踊ってしまいそうになるので、それをこの作品で表現したいと思いました。テーブルの上に置かれた紙をズームする単なるカメラではなく、顔や体を何度も見たり見つめたり、動かしたりする必要があるために着用するメガネであるのは、このためです。

私は人々に絵を描くことを許可していませんが、私が行ったパフォーマンスを「再演」するためにメガネを着用することは許可しています。同じ描画ではありますが、誰かがそれを再生しようとするたびに、新しいトラックが生成されます。彼らは異なる場所に立ったり、より速くまたはよりゆっくりと動いたりします。これは、人が他の人と同じ方法で同じものを見ることができないことを表す良い比喩になります。

作品のセットアップは、白い壁、スピーカー、木炭など、信じられないほどミニマルであり、そのため、体験の瞬間、つまりサウンドに重点が置かれています。

他の出力ではなく、ニューラルネットワークに描画を音声として解釈させたいのはなぜですか?

絵を描いて音を作り出すことができるのは、ほとんど魔法のように思えました。そして、共感覚の概念にインスピレーションを受けました。また、Daphne Oram のような人々に触発されて、記譜法のアイデアを新しい方向に推し進めたいとも思いました。代替記譜法と音と記号を一致させる試みには長い歴史があります。私はこれを取り入れたかったのですが、演奏と記譜のアイデアを 1 つにまとめました。

テクノロジーを多用した作品としては、「Drawing with Sound」では人体が前面に押し出されています。この前景化はあなたの作品におけるテクノロジーに対する反応であるとどの程度思いますか?

これはテクノロジーへの反応ではなく、新しい方法、あるいはよりシームレスな方法でテクノロジーを使用しようとする方法だと思います。機械学習などにより、15 年、20 年前であればフィクションの領域にあったようなことが今では可能になっています。

アンナ・リドラー・アッシャー

(上: アッシャー家の崩壊、2017 年)

「公演の終わりには、とても混乱することになる」

私は AI を批判するために AI を使用しているのではなく、むしろ描画の可能性を新しい領域に押し込むために AI を使用しています。これを行うには、それを体で使用しようとすること、つまり、それを単に画面上に隠されているのではなく、現実的で具体的なものにすることによって行われます。

パフォーマンスの終わりには、床には木炭の破片、壁には木炭の汚れ、グラスには汚れなど、たくさんの混乱が発生しますが、それがとても気に入っています。こうした人間らしさの痕跡は、デジタル作品ではどこか場違いに思えますが、とても大切だと思います。

アンナ・リドラーは、今年のテーマが人工知能であるアルスエレクトロニカに展示および講演します。彼女の作品の詳細は、彼女の Web サイトでご覧いただけます。

画像クレジット: アンナ・リドラー