- Shane Guffogg është një artist abstrakt multimedial me sinestezi, që do të thotë se ai “dëgjon ngjyra”.
- Guffogg punoi me ekspertë dhe muzikantë të AI për të kompozuar muzikë që korrespondonte me pikturat e tij.
- Ai beson se AI është ende një mjet që “ka nevojë për mbikëqyrje”, por e përmirësoi procesin e tij krijues.
Kjo është një bisedë e rrëfyer me Shane Guffogg, një artiste amerikane që lançoi “Në pikën e qetë të botës kthese – të huajt e kohës”, një ekspozitë me 21 piktura në Bienalen e Venecias në fillim të këtij muaji. Kjo bisedë është përmbledhur dhe redaktuar për qartësi.
Unë kam sinestezi, që do të thotë se dëgjoj ngjyra.
Pra, ajo që po dëgjoj kur pikturoj është e rëndësishme. Dëgjoj muzikë klasike indiane, këngë gregoriane dhe disa kompozitorë të panjohur si Gyorgy Ligeti, Leo Ornstein dhe Terry Riley. Muzika më ndez krijimtarinë dhe më lejon të jem plotësisht i pranishëm dhe në atë moment.
Prej vitesh jam preokupuar me atë se si mund të duken pikturat e mia. Revolucioni i AI më shtyu të kërkoja ekspertë që mund të më ndihmonin. Pika ime e parë e kontaktit ishte Radhika Dirks, një eksperte e AI dhe informatikë kuantike. Ne patëm disa seanca Zoom, dhe ajo më tha – me aq sa kishte njohuri – se asnjë program AI nuk mund të më ndihmonte. Në vend të kësaj, ajo më sugjeroi të krijoja një alfabet vizual që përputhej me akordet muzikore që dëgjoja në mendjen time me ngjyrat.
Mendova se mund të ishte një mënyrë për të nxitur krijimtarinë time. Ai u ndërtua gjithashtu mbi idenë e një alfabeti të pavetëdijshëm që ka informuar artin tim gjatë gjithë karrierës sime.
U takova me muzikantë dhe ekspertë të AI për të krijuar një alfabet vizual
Fillova duke kërkuar muzikantë për të bashkëpunuar dhe takova Anthony Cardella, një pianist i ri, jashtëzakonisht i talentuar në Los Angeles. Ai është një student doktorature në USC dhe ka rastisur të njohë – madje edhe të luajë – shumë kompozitorë të panjohur që dëgjoj kur pikturoj.
Filluam të bashkëpunonim. Do të uleshim dhe do të shqyrtonim pikturat e mia së bashku. Unë do të zmadhoja një ngjyrë në Photoshop, do ta shikoja atë dhe do ta ndjeja me ndjeshmëri notën muzikore. Pastaj do t’i thoja Anthony. Unë do të thosha, për shembull, mendoj se kjo është ngjyra e notës B. Ai do të godiste B, dhe unë do të thosha, “Jo, nuk është ashtu; provoni një B të mprehtë?” Pas disa sprovash, ai papritmas kishte goditur notat e duhura. Do ta dija sepse ngjyrat do të fillonin të dridheshin për mua. Së bashku, ne kemi shënuar akorde që korrespondojnë me 40 ngjyra.
Menjëherë pas kësaj, takova një studiues të AI të quajtur Jonah Lynch përmes kontakteve të ndërsjella. Ai punon në kryqëzimin e shkencave humane dixhitale dhe mësimit të makinerive. E ftova në fermën time në Kaliforninë qendrore dhe i shpjegova punën që kisha bërë dhe si i krijova pikturat e mia. Ne patëm diskutime të gjata rreth artit, poezisë dhe krijimit të një algoritmi të AI që mund të ushqehej me akorde.
Ai zhvilloi një program për të “lexuar” pikturat e mia dhe për t’i kthyer ato në muzikë. Unë i dhashë atij ngjyrat kryesore që përdorja në secilën pikturë dhe akordet që dëgjoj kur i shoh ato ngjyra. Jona shikoi video ku unë pikturoja, studioi lëvizjen e duart e mia dhe shkroi softuer që merrte mostra të pikturave, duke ndjekur lëvizjet e duarve të mia, dhe caktoi çdo ngjyrë të mostrës nga pikturat në kordën e saj përkatëse 500 vjet muzikë me tastierë Ai e shtyu rrjetin të “ëndërronte” sekuenca të reja të bazuara në sekuencat e akordit të ngjyrave dhe historisë së muzikës perëndimore për të krijuar faqe muzikore.
Kur dëgjova që më riprodhohej muzika, më sollën lot. Ishte thjesht një version i përafërt i asaj që dëgjova gjatë pikturës, por mendova, “Ja ku është.”
Ia ktheva muzikën Anthony, pianisti. Çuditërisht, unë munda t’i tregoja fletët e muzikës dhe t’i tregoja se çfarë kompozimesh po dëgjoja ndërsa pikturoja, dhe ai do të thoshte: “Po, mund ta shoh në akorde”. Ragat indiane, këngët gregoriane, Ligeti dhe Ornstein – ata ishin të gjithë aty.
Megjithatë, muzika ishte kryesisht një seri akordesh në atë fazë. Anthony tha se mund të kishim melodi nëse e riorganizonim pak.
AI është ende një mjet që ka nevojë për mbikëqyrje njerëzore
Ne kompozuam muzikë për disa piktura dhe e kemi luajtur atë për audiencën në mbarë botën. Ne mbajtëm një koncert muajin e kaluar në Muzeun Forest Lawn në Los Anxhelos, ku kisha edhe disa piktura në një shfaqje. Publiku mund të shikonte pikturat ndërsa Anthony luante, që ishte një përvojë e thellë. Një çift njerëzish qanë.
Në fillimin e ekspozitës sime të fundit gjatë javës së hapjes së Bienales së Venecias, Anthony luajti premierën botërore të një sonate që ai kompozoi frymëzuar nga piktura ime, Vetëm përmes kohës është pushtuar, për një audiencë të drejtpërdrejtë. Pas performancës, fola me disa njerëz dhe ata thanë se mund të shihnin se ku takoheshin ngjyrat dhe shënimet në pikturë. Ishte diçka që nuk e kishin përjetuar kurrë.
E di që shumë njerëz kanë shumë frikë nga AI, dhe unë gjithashtu e shoh atë si një mjet që ka nevojë për mbikëqyrje njerëzore. Nuk është një mjet për një qëllim. Megjithatë, ajo hapi shumë mundësi dhe e rriti procesin tim krijues. Nuk e di nëse do ta kisha zhbllokuar realisht muzikalitetin në pikturat e mia pa të.
Dëgjojeni sonatën më poshtë: