Ike Fibriani menjelaskan tentang disertasinya yang berjudul Deteksi Kekerabatan Menggunakan Hybrid Vision Transformer Mamba Berbasis Mikroekspresi. Foto: Ist.
BANGSAONLINE.com – Doktor lulusan Departemen Teknik Elektro (DTE) Institut Teknologi Sepuluh Nopember (ITS), Ike Fibriani, menciptakan inovasi yang pertama di dunia yakni menggabungkan uji hubungan kekerabatan dengan mikro ekspresi.
Pada Sidang Terbuka Promosi Doktor Baru DTE yang digelar pada Selasa (25/2/2025) lalu, Ike menerangkan bahwa melalui terobosan ini, hubungan kekerabatan antara orang tua dan anaknya dapat dideteksi melalui mikro ekspresi.
“Melalui mikro ekspresi, yakni ekspresi manusia dalam sepersekian detik, itu dapat menentukan hubungan satu keturunan,” ucap Ike, Selasa (4/3/2025).
Ia mengungkapkan bagaimana riset ini menyatukan korelasi antara kinship (kekerabatan) dan mikro ekspresi. Berangkat dari kurangnya penelitian terkait kedua hal tersebut, disertasinya yang berjudul Deteksi Kekerabatan Menggunakan Hybrid Vision Transformer Mamba Berbasis Mikro Ekspresi diharapkan dapat dimanfaatkan sebagai inovasi dalam dunia face-recognition.
Ike mengenalkan sistem tersebut sebagai ViTMa, yang berasal dari gabungan Vision Transformer dan Mamba, yakni metode yang digunakan untuk megoptimalkan sistem. Dalam prosesnya, Vision Transformer (ViT) bekerja dengan memahami antarbagian wajah dan menangkap pola unik serta mikro ekspresi yang terbentuk secara spontan pada wajah.
Lebih lanjut, ViT berperan mengekstraksi fitur dalam ekspresi wajah antara anak dan orang tua dengan cara membagi gambar menjadi 16 patches sebagai input. Input ini bekerja menggunakan mekanisme self-attention yang dapat memungkinkan untuk membaca detail mikro atau perubahan halus dalam ekspresi yang penting untuk pengenalan kekerabatan.
Hasil ekstraksi fitur kemudian dioptimalkan menggunakan metode Mamba untuk meningkatkan akurasi hasil dan menentukan hubungan kekerabatan.
“Setelah optimasi Mamba, nantinya akan keluar hasil adakah hubungan kekerabatan,” terangnya.
Ike menerangkan hasil sistem ViTMa memiliki tingkat keakuratan yang tinggi, sebesar 85,29 persen, mengungguli metode tradisional seperti CNN dan VGGFace.
Nantinya, sistem ViTMa pun dapat dimanfaatkan untuk berbagai macam bidang, seperti forensik, psikologi, verifikasi dokumen, hingga keamanan dan sistem pengawasan. Dengan luasnya manfaat dan bidang yang dapat dicapai, Ike meyakini bahwa besar adanya potensi ViTMa untuk dikembangkan dan terus dioptimalkan kembali.
“Besar harapan saya sistem ini dapat dimanfaatkan untuk masyarakat luas,” ujarnya mengakhiri. (msn)
