Percakapan dengan Yagiz Mungan, Artis CODAME

Serangkaian wawancara dengan Seniman dan Pembicara ditampilkan di CODAME ART + TECH Festival [2018] oleh Irene Malatesta

Yagiz Mungan, artis interdisipliner

Artis interdisipliner Yagiz Mungan menciptakan karya yang memadukan VR / AR, suara / musik, interaksi, kinerja, dunia virtual, dan game. Dia terutama tertarik pada strategi generatif untuk menciptakan visual dan suara, dan cara-cara menggunakan teknologi untuk mendorong batas-batas persepsi manusia dan respons emosional. Karyanya sering bertujuan untuk mengkontekstualisasikan kembali pengalaman yang sudah dikenal, atau membahas pertemuan teknologi yang tidak biasa dalam kehidupan modern.

Mungan memegang gelar MSc dalam bidang teknik komputer dan MFA dalam seni interaktif, dan telah memamerkan karyanya di seluruh dunia. Untuk CODAME ART + TECH Festival 2018, Mungan akan memamerkan proyek bernama Illy, AI yang berkomunikasi melalui suara tanpa bahasa.

Festival CODAME tahun ini, diberi nama kode #ARTOBOTS, akan menampilkan instalasi, lokakarya, pembicaraan selama 4 hari, dan banyak lagi, semuanya berpusat di sekitar pengaruh perluasan kecerdasan buatan dan robotika di dunia modern. Dalam percakapan ini, Mungan membahas tema-tema itu dan banyak lagi, termasuk latar belakang dan eksperimen suara awalnya, bagaimana ia menggabungkan berbagai media teknologi untuk menciptakan seni media baru, dan bagaimana VR dapat membantu kita mengalami hal yang mustahil.

IM: Hai Yagiz, terima kasih telah menyetujui untuk mengobrol. Anda seorang seniman yang bekerja dengan instalasi interaktif, musik interaktif, dan realitas campuran. Bisakah Anda mulai dengan berbicara sedikit tentang siapa Anda dan jenis pekerjaan yang Anda lakukan?

YM: Saya suka membuat hal-hal interaktif atau hal-hal generatif, di mana komputer atau perangkat lunak adalah bagian dari pengalaman sebagai agen aktif. Kembali pada hari itu, saya belajar teknik, dan saya terinspirasi untuk melihat bagaimana membuat proyek saya lebih kreatif. Saya melihat ke dalam pendekatan algoritmik dan generatif untuk pekerjaan saya. Saya bisa sampai ke tempat di mana tidak ada pengguna tetapi ada lebih banyak ekspresi melalui perangkat lunak. Dari sana, saya masuk ke game: desain game dan instalasi interaktif.

Saya selalu bekerja dengan musik dan seni, tetapi teknologi dan seni adalah dua hal yang terpisah ketika saya masih muda; mereka tidak ada bersama. Ide saya untuk menggabungkan mereka tumbuh seiring waktu. Ketika saya memasuki generasi algoritmik, saya menulis perangkat lunak yang mengomposisi musik dan menciptakan visual. Saya masuk ke sistem yang dapat berinteraksi dengan Anda, untuk membuat musik, video, membuat kode untuk permainan atau instalasi.

Mixed reality atau VR hanyalah media lain untuk membuat instalasi, jika Anda mau. Dan di VR, Anda tidak memiliki batasan fisik apa pun yang dapat Anda buat.

Sepertinya Anda mungkin menggambarkan diri Anda terutama sebagai seorang seniman yang bekerja dengan interaktivitas, dan semua media yang berbeda ini adalah cara yang berbeda untuk mendapatkannya.

Itu salah satu cara untuk mengatakannya, ya. Bagi saya, saya akan mengatakan artis "interdisipliner", karena coding adalah keahlian saya. Bagi saya, suara selalu merupakan aspek terpenting dari suatu hal: Saya selalu berusaha membuatnya fokus pada suara atau musik. Visual selalu ada di sana, tetapi saya selalu berusaha menjadikan suara sebagai bagian yang sangat penting dari proyek dan membangunnya, sebagai lawan dari, "Mari kita letakkan musik di latar belakang." Sebaliknya, saya biasanya ingin membuatnya tentang menciptakan musik.

Itu menarik karena itu sudut pandang yang sangat berbeda tentang apakah musik itu subjek atau apakah musik itu di latar belakang. Anda sebutkan sebelumnya bahwa coding adalah keahlian Anda. Anda memiliki Magister Teknik Komputer dan juga MFA dalam Seni Elektronik. Bisakah Anda berbicara sedikit tentang latar belakang Anda dan dari mana Anda berasal, dan bagaimana Anda memutuskan untuk menempuh jalur pelatihan formal itu?

Saya berasal dari Turki. Di mana saya berasal, di masa kecil saya, di awal tahun 2000-an, itu adalah budaya di mana, jika Anda seorang siswa yang sukses, Anda harus pergi dan mempelajari mata pelajaran tertentu. Saya tidak punya terlalu banyak pilihan untuk dipilih jadi saya belajar Teknik.

Saya selalu merasa ada sesuatu yang hilang di sana. Ketika saya meraih gelar Master, saya beralih dari menyelidiki apa yang bisa dilakukan dengan pemrograman atau rekayasa, hingga menyadari, oke, saya bisa menggunakan ini untuk membuat musik yang saya sukai. Tesis master saya adalah tentang membuat komposisi secara algoritmik. Setelah saya selesai dengan itu, saya pikir saya juga ingin beberapa interaksi pengguna.

Master kedua saya adalah tentang seni interaktif sebagai media berbasis waktu. Itu berfokus pada instalasi, lebih banyak ide berbasis seni dan interaksi pengguna. Itu semacam jalanku.

Jalur kreatif Anda benar-benar masuk akal: Anda telah menjadi pengembang UX, instruktur universitas, Anda bekerja pada desain game ... Anda telah melakukan banyak hal berbeda tetapi mereka semua melibatkan komponen kreativitas ini, menciptakan sesuatu dan interaktivitas. dan teknik. Anda juga sering bepergian. Bisakah Anda mengomentari pekerjaan yang Anda miliki dan kota-kota yang pernah Anda kunjungi?

Itu pertanyaan yang menarik karena saya menghabiskan begitu banyak waktu di sekolah pascasarjana. Ketika datang ke pekerjaan, judul saya telah berubah tetapi apa yang saya lakukan sebagian besar sama. Apa yang saya anggap paling menarik adalah pekerjaan yang saya lakukan di luar "pekerjaan" biasa saya. Orang yang saya temui, komunitas teknologi dan seni di San Francisco. Berbicara dengan orang-orang di komunitas ini selalu, lebih dari menghibur, membuat saya merasa bahwa saya perlu berbuat lebih banyak. Bukan dengan cara kompetitif tetapi Anda tahu, saya merasa terinspirasi!

Saya sudah berada di banyak kota. Saya berada di Indiana setelah menyelesaikan studi pascasarjana. Saya pernah berada di Swedia dan beberapa waktu di Jerman. Banyak waktu di Turki. Mengenai komunitas seni, saya tidak dapat membandingkan, katakanlah, Indiana dengan San Francisco, karena itu sangat berbeda. Di sini, selalu ada orang baru untuk bertemu. Ada banyak hal yang terjadi di sini.

Mengenai pekerjaan Anda secara khusus, apakah ada proyek tertentu yang menginspirasi Anda sejak awal?

Saya selalu terlibat dalam musik sejak sekitar usia tujuh. Instrumen utama saya adalah gitar. Saya juga memainkan synthesizer. Saya pikir itu dimulai ketika saya berada di kelas, dan saya membuat kode pembuatan suara yang sangat sederhana dan saya tertarik untuk melangkah lebih jauh. Saya meneliti penelitian dasar, ada banyak hal di luar sana, dan saya menyadari ada bidang yang ada yang dapat saya pelajari, penelitian untuk meningkatkan diri.

Untuk bagian pertama, itu agak tidak disengaja. Misalnya, Anda mendapatkan iklan sepanjang waktu, email dari vendor dan itu saja, lihat pembicara baru, apa pun. Saya ingat, saya mendapat email yang mengklaim bahwa pembicara baru memiliki beberapa respons frekuensi tertentu dan saya berpikir, "Manusia tidak bisa mendengar itu!" Saya terinspirasi untuk mengujinya. Saya membuat kode sederhana untuk memutar suara itu dan tentu saja kami tidak dapat mendengar apa pun dari laptop.

Ini hanyalah eksperimen awal. Saya hanya bersenang-senang, dan kemudian saya sadar, saya benar-benar dapat membuat musik dengan cara ini. Seiring waktu, saya menemukan berbagai macam alat yang telah digunakan orang untuk teknologi kreatif. Itu adalah langkah pertama bagi saya.

Mari kita bicara sedikit tentang pekerjaan yang kamu buat sekarang. Bisakah Anda berbicara sedikit tentang proyek kreatif Anda saat ini tentang apa yang paling Anda sukai dan juga apa yang mendorong Anda untuk membuatnya? Mengapa Anda membuatnya, apa yang paling ingin Anda komunikasikan?

Nah, pekerjaan saya berjalan di dua jalur. Terkadang, ada sesuatu dalam seni visual yang ingin saya selidiki, atau beberapa interaksi pengguna yang saya ingin tahu. Jadi, tidak ada pesan atau makna sebenarnya tetapi saya hanya ingin melihat di mana saya berakhir dari posisi yang lebih estetis. Kadang-kadang, seperti ada sesuatu yang menggangguku atau membuatku berpikir, aku membuat bagian tentang itu.

Saat ini, saya bergerak ke arah lebih banyak pekerjaan dengan visualisator musik, menciptakan lanskap abstrak melalui musik. Saya mencoba untuk menjauh dari bentuk-bentuk abstrak lama, dan masuk ke visual yang tampak lebih realistis. Ini adalah proyek yang menyenangkan, melihat ke beberapa efek visual yang dapat saya kendalikan melalui suara.

Ada apa dengan lanskap yang Anda tertarik, mengapa lanskap?

Yah, saya akan mengatakan tidak seperti lanskap seperti di alam, tetapi lanskap misalnya, di kota. Seperti ketika Anda duduk di kedai kopi dan menyaksikan orang-orang menyeberang jalan. Saya dapat membuat sesuatu seperti ini yang tidak mungkin terjadi di kehidupan nyata, dengan beberapa orang bergerak ke atas, beberapa orang bergerak ke bawah ....

Dan kemudian saya bisa menggunakan motion capture untuk membuat ini. Kerusakan menarik minat saya, fakta bahwa mereka tidak benar-benar ada atau mereka tidak bisa ada.

Untuk membuat karya seni Anda, Anda menggunakan Unity dan WebGL. Bisakah Anda berbicara sedikit lebih banyak tentang media dan alat yang Anda gunakan untuk membuat karya Anda? Apa yang paling penting bagi Anda?

Ya, itulah dua alat utama saya untuk visual. Saya suka bekerja di sebuah ruang, dan bekerja di ruang fisik itu menarik tetapi tidak selalu terjangkau atau praktis. Jadi itu sebabnya saya suka bekerja di ruang virtual, atau saya menggabungkannya, jadi seperti ada beberapa aspek fisik tentang aspek virtual. Dalam kasus itu, saya menggunakan Unity atau WebGL.

Alasan saya mungkin memilih satu atau yang lain adalah jika ada sesuatu yang spesifik yang saya butuhkan di salah satunya. Terutama saya memilih berdasarkan cara distribusi. Jika saya perlu mendistribusikan karya secara online kepada orang-orang maka saya akan pergi ke WebGL, cara browser, [saya] suka menggunakan perpustakaan three.js sehingga Anda bisa membagikan tautan dan orang lain memiliki akses ke sana. Untuk hal berbasis acara, saya suka menggunakan Unity. Ini sangat menyenangkan dan mudah digunakan dengan banyak kemampuan. Agak sulit untuk didistribusikan.

Hal lain [untuk dipertimbangkan] adalah kesetiaan. Dengan keahlian saya, saya bisa mendapatkan kualitas yang lebih baik di Unity yang terkadang penting. Untuk suaranya, ini sedikit menarik untuk suaranya. Saya suka Unity tetapi kemampuan kreasi suaranya sangat terbatas. Sebagian besar waktu, saya menautkan hal lain seperti MAX / MSP, yang seperti alat pertunjukan langsung, tetapi itu membuat keseluruhan produk lebih sulit untuk digunakan atau dikirim ke orang lain.

Ketika saya bekerja di sebuah ruang, saya suka menggunakan banyak suara di ruang itu untuk bergabung kembali ke dalam pameran, menangkap suara dan memprosesnya kembali. Saya juga terkadang suka menampilkan komposisi saya sendiri bermain gitar sebagai bagian dari pengalaman yang saya buat.

Menurut Anda, konten artistik emosional macam apa yang sekarang menjadi mungkin karena teknologi realitas campuran? Anda bekerja di VR dengan semua alat baru ini. Jelas ada alasan mengapa seniman ingin menggunakan VR untuk mengkomunikasikan sesuatu yang baru, bukan?

Iya. Dalam dunia fisik, ada banyak hal yang tidak dapat Anda capai, karena keterbatasan dasar seperti ruang atau sumber daya seperti uang, dan lain-lain. Apa yang VR berikan kepada Anda adalah kapasitas untuk menciptakan sesuatu, seperti skenario yang mustahil. Ini menempatkan Anda di dalam hal yang mustahil dalam sudut pandang orang pertama. Semuanya tiba-tiba menjadi nyata, seperti, "Aku benar-benar bisa menyentuh ini."

Salah satu hal yang saya lakukan baru-baru ini adalah karya VR dan tarian. Freya Olafson dan saya menciptakan avatar menari ini. Setelah Anda membuat cukup dari mereka, rasanya seperti Anda berada di lantai hutan avatar yang menjulang, robot, bergerak. Itu menciptakan perasaan luhur. Anda tidak bisa sampai di sana dengan mudah. Menuju ke titik yang tidak mungkin, tetapi Anda tiba-tiba merasa bahwa, "Saya sebenarnya di sini, ini tidak mungkin."

Beberapa orang menggunakan VR untuk menciptakan kembali dunia fisik dan kemudian menjadi menyenangkan, seperti lelucon. Bagi saya, yang menarik adalah menempatkan orang ke dalam situasi yang tidak mungkin ini di mana itu menjadi bentuk pengalaman yang sangat pribadi. Anda melihatnya dengan mata kepala sendiri. Itu benar-benar dapat membuat Anda tersadar.

Foto dari Motion Aftereffect oleh Freya Bjorg Olafson dan Yagiz Mungan, 2017. Foto oleh Robbie Sweeny. Karya ini dikembangkan melalui Program Commissioning Residensi Artis CounterPulse dengan dukungan Endowment Nasional untuk Seni, Yayasan Keluarga Zellerbach, dan Dana Ken Hempel untuk Seni. Informasi lebih lanjut di sini.

Seniman telah terlibat dengan keagungan dengan cara yang berbeda untuk waktu yang sangat lama. Apakah Anda berpikir bahwa teknologi realitas campuran adalah media atau ruang yang sangat baik untuk mengomunikasikan perasaan itu?

Ya saya pikir begitu. Ini adalah media untuk apa pun, tetapi kenyataan bahwa Anda dapat menempatkan orang di mana saja sangat kuat karena Anda dapat menempatkan orang ke mana pun Anda bayangkan, tidak hanya di dalam lanskap tetapi juga di mindstate. Itu tidak perlu menjadi ruang nyata yang bisa menjadi tempat mereka berdiri. Ini bisa berupa ruang tanpa landasan, atau bisa juga ruang transisi. Bisa jadi hanya lampu dan suara. Itu bisa menjadi ruang kosong. Itu cukup kuat.

Benar. Dan bagaimana kalau melihat ke masa depan sedikit? Apakah ada teknologi baru yang membuat Anda sangat bersemangat yang masih dalam tahap pembuktian konsep tetapi belum sepenuhnya digunakan untuk membuat karya seni tingkat tinggi, menurut pendapat Anda?

Selalu ada kemajuan linier yang dimiliki teknologi yang berkembang. Kami masih berurusan dengan kabel jaringan dan kadang-kadang kabel menjadi lebih mengganggu daripada potongan! Tetapi untuk teknologi baru, akan menarik untuk melihat ke mana AR pergi. Pada titik ini, itu hanya mengikis permukaan tetapi ketika itu benar-benar ada, agak sulit untuk mengatakan apa yang augmented reality dan apa yang fisik. Itu akan menarik dan menakutkan.

Pemandangan Illy, oleh Yagiz Mungan

Mari kita bicara tentang CODAME ART + TECH Festival yang akan datang. Bisakah Anda memberi tahu kami tentang pekerjaan yang akan Anda tunjukkan?

Ini akan menjadi versi Illy, yang merupakan sistem semi-cerdas. Ini adalah proyek yang sedang berkembang yang sudah berjalan selama beberapa waktu.

Titik awal untuk Illy adalah perangkat: Amazon Alexa atau Google Home. Ketika Anda menggunakan salah satu dari ini, Anda sedang berbicara dengan hal-hal plastik, Anda mengatakan sesuatu dan Anda mengharapkan hasilnya. Dan ketika Anda mendapatkan hasil itu, Anda merasa bahagia dan puas, tetapi ketika dikatakan, "Oh, saya tidak mengerti," Anda merasa frustrasi. Ketika memainkan lagu yang salah, Anda menjadi frustrasi.

Setelah melalui proses ini dengan aksen saya, saya merasa khawatir bahwa saya bisa begitu frustrasi dengan bot plastik. Setelah memikirkannya sedikit, saya menemukan Illy, yang merupakan kecerdasan buatan yang tidak mengerti bahasa Inggris. Illy tidak mengerti bahasa apa pun, tidak mengerti berbicara, tetapi ia mencoba menginterpretasikan suara, nada, volume, karakteristik utama suara, dan mencoba merespons kembali berdasarkan itu. Ini menciptakan komunikasi di mana kedua belah pihak tahu bahwa tidak akan ada pemahaman. Terserah Anda untuk memberi makna pada apa yang dikatakannya.

Jadi itu berkomunikasi kembali ketika Anda berbicara dengannya, tetapi tidak dalam bahasa?

Persis. Percakapan lebih seperti monolog, tetapi terserah Anda apa katanya. Jadi itulah ide utamanya. Juga akan ada proyek VR atau layar besar. Anda dapat melihat Illy sebagai sesuatu yang hanya membuat suara kasar, atau bisa jadi hewan peliharaan yang paling memahami Anda, atau Anda dapat memperlakukannya seperti bayi. Seperti yang Anda tahu, Anda berbicara dengan seorang bayi. Anda tahu bahwa bayi itu tidak mengerti Anda. Ini semua tentang bagaimana perasaan Anda.

Apa yang Anda ingin orang tahu tentang pekerjaan Anda? Atau apa yang paling Anda ingin mereka pikirkan ketika mereka melihat pekerjaan Anda di festival?

Ini tentang hubungan kita dengan berbagai hal, dengan teknologi, dengan AI, dan bagaimana cara komunikasi mengubah perspektif dan harapan kita. Seperti misalnya, saya mengatakan sesuatu sekarang dan Anda bisa mengerti karena kami menggunakan simbol yang sama, tetapi jika saya berbicara dalam bahasa Turki itu hanya akan berisik dan sama sekali tidak berharga bagi Anda.

Atau pertimbangkan hubungan antara orang-orang seperti ketika Anda pergi ke kedai kopi dan meminta kopi. Sebagian besar waktu dalam kehidupan kita yang terburu-buru, harapan kita adalah, "Orang ini memberi saya kopi." Jika orang itu mencoba untuk berbicara ringan dengan Anda, reaksi Anda adalah, "Saya harus pergi, mengapa Anda membuang-buang waktu saya!" Itu hal yang kecil, tetapi menjadi sangat sadar akan interaksi ini, versus secara tidak sadar, sangat berbeda.

Sangat menarik untuk berpikir tentang bagaimana suara, kualitas suara dan makna bahasa sering digabungkan. Seperti dalam proyek Anda: Anda mempresentasikannya seperti itu, tetapi kami tahu kami dapat mengatakan sesuatu dengan suara yang sangat manis, dan sebaliknya. Sangat mudah bagi kita untuk memiliki harapan ini yang kemudian salah karena kita hanya menerapkan perspektif kita sendiri.

Itulah konstruksi budaya. Bahasa yang berbeda memiliki cara yang berbeda untuk mengatakan sesuatu. Dengan beberapa, misalnya, mengucapkan sesuatu yang "lucu" dalam satu bahasa bisa terdengar seperti saya sedang berbicara dengan Anda. Semua makna ini adalah hal-hal budaya buatan manusia yang harus kita sepakati. Anda memerlukan dekoder yang benar untuk dapat memahami, dan bagaimana jika Anda tidak memilikinya?

Hubungkan dan pelajari lebih lanjut tentang Yagiz Mungan di situs CODAME:

Anda dapat menemukan karyanya di CODAME ART + TECH Festival [2018], konferensi empat hari dengan lokakarya, ceramah, dan acara kehidupan malam @ The Midway, San Francisco, 4–7 Juni 2018, dengan nama sandi #ARTOBOTS:

CODAME ART + TECH Festival [2018] #ARTOBOTS

Irene Malatesta adalah seorang penulis, ahli strategi kreatif, dan pecinta seni digital di San Francisco. Anda dapat menemukannya di Twitter dan Instagram @irenekaoru.