Setiap tahun di Adobe Max, Adobe memamerkan apa yang disebutnya “Sneaks,” proyek R&D yang mungkin — atau mungkin tidak — menemukan jalan mereka ke produk komersial suatu hari nanti. Tahun ini tidak terkecuali, dan beruntung bagi kami, kami diberikan preview menjelang konferensi yang tepat.
Project Clever Composites (seperti yang disebut Adobe) memanfaatkan AI untuk pengomposisian gambar otomatis. Untuk lebih spesifik, secara otomatis memprediksi skala objek, menentukan di mana tempat terbaik untuk memasukkannya ke dalam gambar sebelum menormalkan warna objek, memperkirakan kondisi pencahayaan dan menghasilkan bayangan sesuai dengan estetika gambar.
Begini cara Adobe menjelaskannya:
Pengomposan gambar memungkinkan Anda menambahkan diri sendiri agar terlihat seperti Anda ada di sana. Atau mungkin Anda ingin membuat foto diri Anda berkemah di bawah langit berbintang tetapi hanya memiliki gambar langit berbintang dan diri Anda berkemah di siang hari.
Saya bukan ahli Photoshop, tetapi Adobe memberi tahu saya bahwa pengomposisian bisa menjadi proses yang sangat manual, membosankan, dan memakan waktu. Biasanya, ini melibatkan pencarian gambar yang cocok dari suatu objek atau subjek, dengan hati-hati memotong objek atau subjek dari gambar tersebut dan mengedit warna, nada, skala, dan bayangannya agar sesuai dengan penampilannya dengan sisa adegan yang ditempelkan. Prototipe Adobe menghilangkan ini.
“Kami mengembangkan teknik yang lebih cerdas dan otomatis untuk pengomposisian objek gambar dengan teknologi pencarian compositing-aware baru,” Zhifei Zhang, seorang insinyur penelitian Adobe pada proyek tersebut, mengatakan kepada gerakanpintar.com melalui email. “Teknologi pencarian compositing-aware kami menggunakan beberapa model pembelajaran mendalam dan jutaan titik data untuk menentukan segmentasi semantik, pencarian compositing-aware, prediksi skala lokasi untuk pengomposisian objek, harmonisasi warna dan nada, estimasi pencahayaan, pembuatan bayangan, dan lainnya.”
Kredit Gambar: Adobe
Menurut Zhang, masing-masing model yang mendukung sistem pengomposisian gambar dilatih secara independen untuk tugas tertentu, seperti mencari objek yang konsisten dengan gambar yang diberikan dalam hal geometri dan semantik. Sistem ini juga memanfaatkan jalur pengomposisian otomatis berbasis AI yang terpisah yang menangani prediksi skala dan lokasi objek untuk pengomposisian, normalisasi nada, estimasi kondisi pencahayaan, dan sintesis bayangan.
Hasilnya adalah alur kerja yang memungkinkan pengguna untuk menggabungkan objek hanya dengan beberapa klik, klaim Zhang.
“Mencapai pengomposisian objek otomatis itu menantang, karena ada beberapa komponen proses yang perlu disusun. Teknologi kami berfungsi sebagai ‘lem’ karena memungkinkan semua komponen ini bekerja sama,” kata Zhang.
Seperti semua Sneaks, sistem ini selamanya dapat tetap menjadi demo teknologi. Tapi Zhang, yang percaya itu akan membuat “tambahan yang bagus” untuk Photoshop dan Lightroom, mengatakan pekerjaan sedang berlangsung pada versi perbaikan yang mendukung pengomposisian objek 3D, bukan hanya 2D.
“Kami bertujuan untuk membuat tugas yang umum tetapi sulit ini untuk mencapai komposit yang realistis dan cerdas untuk 2D dan 3D sepenuhnya drag-and-drop,” kata Zhang. “Ini akan menjadi pengubah permainan untuk pengomposisian gambar, karena memudahkan mereka yang bekerja pada desain dan pengeditan gambar untuk membuat gambar yang realistis karena mereka sekarang dapat mencari objek untuk ditambahkan, memotong objek itu dengan hati-hati dan edit warna, nada, atau skalanya hanya dengan beberapa klik.”