Jika Anda memiliki ponsel kamera andalan, Anda mungkin bertanya-tanya bagaimana cara mengambil gambar yang luar biasa. Ponsel mencerahkan bayangan, memburamkan latar belakang untuk bidikan potret seperti DSLR, memompa warna, dan secara umum menambahkan pizzazz ke gambar dengan cara yang tidak dilakukan kamera tradisional.
Sebagian besar dari proses ini bermuara pada pengoptimalan adegan AI, yang akan Anda temukan di sebagian besar ponsel cerdas saat ini dalam kapasitas tertentu – yang terbaik di ponsel cerdas terbaik di pasar.
Ponsel kamera itu pintar; lagipula, mereka adalah komputer mini. Chip yang memberi daya pada ponsel Anda memberikan kekuatan pemrosesan yang tidak dapat kami impikan beberapa dekade lalu.
Pembuat smartphone memasangkan kecerdasan itu dengan modul kamera kecil di bagian belakang ponsel Anda untuk memberikannya mata buatan. Dengan mata ini, ponsel Anda dapat memahami apa yang Anda potret, mencari tahu bagian mana yang harus dioptimalkan, dan membuat foto akhir Anda siap untuk Instagram tanpa perlu mengedit selama berjam-jam.
Lebih mengesankan; dalam pemandangan tertentu, kamera smartphone dapat mengungguli DSLR seharga $1.000+, berkat semua kecerdasan dan kekuatan pemrosesan yang dijejalkan ke dalam prosesornya, dan efek HDR yang cerdas.
Singkatnya, ini adalah kisah tentang bagaimana kesulitan – sensor smartphone kecil – menciptakan evolusi berikutnya dalam fotografi komputasional.
Apa itu pengoptimalan adegan AI?
Petunjuknya ada di namanya. Pengoptimalan pemandangan AI adalah proses di mana ponsel Anda mengoptimalkan foto yang Anda ambil berdasarkan pemandangan yang Anda tangkap.
Berbicara melalui pengambilan foto, saat Anda mengarahkan ponsel kamera ke suatu subjek, cahaya melewati lensa dan jatuh ke sensor. Cahaya ini diproses sebagai gambar oleh image signal processor (ISP), yang biasanya merupakan bagian dari chip smartphone Anda, entah itu Qualcomm Snapdragon 888 atau Apple A11 Bionic.
ISP bukanlah hal baru. Mereka telah menggunakan kamera digital selama bertahun-tahun, dan melakukan hal mendasar yang sama pada smartphone.
Beberapa pekerjaan mereka termasuk memberi Anda gambar untuk pratinjau, mengurangi noise, menyesuaikan eksposur, white balance, dan banyak lagi. Namun, yang istimewa dari ponsel cerdas saat ini adalah seberapa pintar ISP tersebut.
Sebagai permulaan, dengan kemampuan komputasi yang ditingkatkan, ISP ponsel kamera dapat memahami apa yang Anda bidik dengan lebih baik. Saat menggunakan DSLR lama atau kamera saku digital, Anda mungkin harus menyesuaikan pemandangan secara manual – ingat tombol-tombol yang harus Anda alihkan dari ikon running man ke ikon pohon palem? Sekarang, smartphone dapat melakukan peralihan itu sendiri. Itu hanya menggores permukaan sekalipun.
Dengan pengoptimalan adegan AI saat ini, ponsel kamera dapat memahami banyak elemen dalam gambar Anda dan menyesuaikan pemrosesan untuk masing-masing elemen dengan sangat spesifik.
Misalnya, jika Anda mengambil foto seseorang di depan lapangan berumput dengan bingkai langit biru, ISP ponsel Anda dapat mencerahkan wajah mereka mengingat mereka mungkin subjeknya, tingkatkan warna hijau di rerumputan agar terlihat lebih kaya dan meningkatkan warna biru di langit secara terpisah, dan tergantung pada ponsel Anda, bahkan mungkin sedikit melunakkan latar belakang untuk menarik fokus pada subjek Anda.
Banyak smartphone saat ini mengambil langkah lebih jauh. Smartphone kelas atas Sony, misalnya, memiliki pelacakan mata hewan peliharaan, sementara smartphone Huawei memiliki deteksi malam otomatis yang bekerja sangat baik pada flagships, dapat mencerahkan pemandangan yang hampir gelap gulita, membuat malam terlihat seperti siang hari.
Teknologi ini telah tersedia di iPhone, bersama dengan Mode Potret, yang memungkinkan kontrol maksimum atas keburaman latar belakang dan efek pencahayaan saat mengambil foto seseorang, dan ponsel Google Pixel terkenal dengan astrofotografinya.
Meskipun tidak diaktifkan oleh AI, saat ditembakkan, ia melihat ke langit malam dan secara cerdas menilai berapa lama rana digital harus tetap terbuka sehingga dapat menangkap bintang dan bahkan galaksi.
Tentunya, smartphone harus pucat dibandingkan dengan DSLR dalam hal fotografi AI? Sebenarnya, mereka tidak. Menariknya, pembuat kamera mempelajari satu atau dua hal tentang pemrosesan foto dari para insinyur ponsel kamera.
Sensor kecil; solusi cerdas
Jika Anda mengingat kembali 10 tahun yang lalu, Nokia merilis smartphone dengan flash Xenon yang besar dan bertenaga seperti Nokia 808 Pureview.
Itu harus meningkatkan spesifikasi perangkat keras ponsel kameranya karena gambar yang diambil pada sebagian besar ponsel pada malam hari tampak seperti kekacauan yang mengerikan dan kasar. Bahkan telepon seperti Nokia Pureview tidak memotong mustard dalam adegan yang sangat sulit.
Alasan mengapa kamera ponsel begitu ditantang adalah karena ponsel harus pas di telapak tangan dan saku kita, sehingga harus berukuran kecil. Smartphone juga harus menampilkan banyak hal lainnya – layar, speaker, baterai, antena, dan banyak lagi.
Sensor seluler kecil dengan lensa kecil berjuang untuk memasukkan banyak cahaya. Lebih banyak cahaya menghasilkan gambar yang lebih baik, dan di sanalah masalahnya – sensor kecil, kemampuan menangkap cahaya terbatas, kualitas gambar buruk.
Keterbatasan untuk kamera ponsel ini memaksa pembuat ponsel untuk berhenti mencoba memperbaiki masalah dengan perangkat keras yang lebih baik yang mahal, terlalu besar, dan menghabiskan baterai, dan beralih ke perangkat lunak.
Salah satu kali pertama hal ini benar-benar menjadi berita utama adalah ketika Google merilis Pixel, ponsel tanpa stabilisasi gambar optik, tetapi dengan stabilisasi elektronik yang bagus sehingga mengungguli banyak pesaing.
Pixel dan Pixel 2 kemudian memamerkan kemampuan pemrosesan foto luar biasa yang mengubah foto dari meh menjadi wow di depan mata Anda dengan mengenali pemandangannya.
Hal ini kemudian menyebabkan merek-merek seperti Huawei memperkenalkan unit pemrosesan saraf dalam chipset, dengan Mate 9 menampilkan deteksi adegan AI, dan fitur tersebut menemukan jalannya ke ponsel oleh pembuat smartphone lain, dengan ponsel Samsung mendeteksi sekitar 32 adegan.
Apa yang tidak bisa dilakukan deteksi adegan AI?
Dan begitulah cara orang pintar memecahkan tantangan fotografi membuat sesuatu yang tidak mungkin diatasi hanya dengan perangkat keras – foto smartphone berkualitas tinggi dalam semua kondisi pencahayaan – dimungkinkan menggunakan perangkat lunak dan deteksi adegan AI.
Perbatasan berikutnya adalah deteksi adegan AI dalam video. Meskipun sudah tersedia sampai taraf tertentu, kemampuan foto malam hari yang sangat cerdas yang digunakan dalam foto oleh Apple, Google (Night Sight), dan Huawei belum sepenuhnya membuat lompatan ke video malam yang benar-benar tajam.
Sebuah video menampilkan setidaknya 24 gambar per detik, dan itu merupakan tingkat kekuatan pemrosesan yang lain secara keseluruhan.
Saat prosesor menjadi lebih kuat, pengembangan AI mencapai ketinggian baru, dan sensor smartphone menjadi lebih mampu menangkap cahaya meskipun ukurannya kecil, deteksi adegan AI tampaknya akan terus mengubah wajah fotografi untuk semua.