Musim panas lalu, ketika jutaan orang turun ke jalan untuk memprotes kebrutalan polisi setelah pembunuhan George Floyd, lembaga pemerintah tidak membuang waktu untuk beralih ke sistem pengenalan wajah untuk melacak pengunjuk rasa. Pada saat yang sama, pihak berwenang mulai mendesak pemakaian masker untuk menahan epidemi Covid-19, dan banyak yang telah menemukan manfaatnya dalam tindakan ini. Sebuah studi besar-besaran yang diterbitkan oleh National Institute of Standards and Technology pada Juli 2020 ditemukanbahwa topeng itu bisa menipu beberapa sistem pengenalan wajah di hampir setengah kasus, menunjukkan bahwa pengunjuk rasa bertopeng mendapatkan perlindungan dari pengawasan massal.
Hal ini membuat saya berpikir: Bagaimana cara paling efektif menggunakan masker dan aksesori sehari-hari lainnya untuk mengacaukan sistem pengenalan wajah? Saya memutuskan untuk mencari tahu.
Menurut Gothamist , Departemen Kepolisian Kota New York menggunakan sistem pengenalan wajah (kemungkinan digabungkan dengan foto dari media sosial) untuk melecehkan aktivis Black Lives Matter, Darrick Ingram. Ada laporan tentang beberapa kesalahan penangkapan , terutama orang kulit hitam, yang dilakukan sebagai akibat dari penggunaan teknologi. Saya telah menguji sendiri sistem pengenalan wajah seperti Clearview AI dan secara pribadi telah menyaksikan kekuatannya. Karena meluasnya penggunaan pengenalan wajah untuk menangkap pengunjuk rasa, seruan mulai dibuat untuk melarang teknologi semacam itu, dan gelombang aktivitas legislatif telah dimulai di seluruh negeri terkait masalah ini.
Banyak aktivis dan pengunjuk rasa enggan menunggu undang-undang yang mengatur penggunaan sistem pengenalan wajah dan mengambil tindakan sendiri, menemukan cara cerdik untuk menyebabkan gangguan teknologi. Dalam kursus pergi dan kosmetik anti-pengawas , dan stiker khusus yang disesuaikan yang terlihat seperti kode QR, dan filter untuk gambar yang bertindak sebagai "topeng" digital. Sayangnya, banyak dari metode ini tidak berhasil . Lainnya, seperti kosmetik anti-pengawasan, memakan waktu dan menarik perhatian. Di sisi lain, masker mudah dilepas dan dikenakan, selain itu, dapat dikenakan di depan umum tanpa terlalu menarik perhatian.
Studi yang dilakukan oleh Institut Standar dan Teknologi Nasional tentang pengaruh topeng pada pengoperasian sistem pengenalan bersifat inklusif - termasuk 89 platform. Tapi ada juga kekurangannya. Misalnya, eksperimen tidak menggunakan topeng nyata - para peneliti memasang topeng digital pada foto, dan kemudian memuat gambar yang diedit untuk menguji berbagai sistem. Juga ditemukan bahwa kesuksesan pengakuan sangat bervariasi. Beberapa sistem mampu menipu 50% dari waktu, sementara yang lain hanya 5%. Saya membuat serangkaian eksperimen sendiri untuk mencari tahu jenis topeng mana yang paling baik digunakan dengan sistem pengenalan wajah.
Untuk pengujian, saya memilih fitur perbandingan wajah dari program Megvii Face ++. Wajah ++ - penyedia populer layanan pengenalan. Platform ini dapat diakses melalui API dan biayanya hanya $ 0,002 untuk membandingkan beberapa foto, membuat platform dapat diakses oleh hampir semua orang. Selain itu, menurut ulasan , Face ++ melakukan pekerjaan yang baik dalam mengenali wajah bertopeng. Hal ini kemungkinan besar karena fakta bahwa perusahaan manufakturnya berasal dari China, tempat masker populer bahkan sebelum pandemi. Sistem ini mungkin dilatih pada foto orang bertopeng bertahun-tahun sebelum digunakan di Barat.
Saya mulai dengan mengunggah foto yang sangat biasa, di mana wajah saya terlihat jelas, ke platform Face ++, dan kemudian saya menambahkan foto lain, hampir identik, yang diambil dalam pencahayaan yang persis sama. Dari sudut pandang sistem pengenalan wajah, ini adalah kondisi yang hampir ideal untuk perbandingan.
Seperti yang Anda harapkan, Face ++ mengatasi tugas tersebut dan menetapkan identitas dengan akurasi 95.071%. Ini memberi saya gambaran umum tentang seberapa baik kinerja sistem.
Kemudian saya melanjutkan untuk menguji menggunakan jenis topeng yang umum. Pertama, saya mencoba mengambil foto dengan topeng sekali pakai biru sederhana. Bidikan, sekali lagi, diambil pada sudut yang sama dan dalam pencahayaan yang sama.
Sebagai penghargaan: topeng tidak terlalu membanjiri Face ++. Skor kemungkinan turun menjadi 74,765% - penurunan yang lumayan, tetapi masih cukup bagus mengingat saya menutupi lebih dari setengah wajah saya. Ini menegaskan dugaan saya tentang dampak asal mula Face ++, serta kebenaran semua studi yang melaporkan bahwa perusahaan sudah merespons efek pandemi dan mengajarkan sistem mereka untuk mengenali wajah bertopeng.
Kemudian saya mulai mencoba desain topeng yang berbeda. Saya berasumsi bahwa masker N95 akan semakin memperburuk hasil, karena menutupi area yang luas. Namun kenyataannya akurasi meningkat menjadi 77,59%.
Ketika saya memakai topeng anak saya dengan karakter dari kartun "Paw Patrol", keakuratannya melonjak menjadi 82.421% - Saya pikir ini karena topengnya terlalu kecil untuk saya dan wajahnya terlihat lebih baik. Saya juga mencoba menggunakan topeng dengan foto staples dari Tom Cruise di depan saya, berharap untuk mencegah Face ++ dengan menempatkan satu wajah di atas yang lain - teknik yang telah berhasil digunakan sebelum saya. Tidak berhasil: sistem mengidentifikasi dengan benar di mana wajah saya berada dan menemukan kecocokan dengan probabilitas 79,191%. Nah, ini tidak terlihat sangat alami.
Kemudian saya menguji desain anti-pengawasan khusus yang dibuat dengan program Python yang membuat histogram gradien yang dibuat khusus untuk membingungkan algoritme pengenalan. Ini juga tidak menghasilkan apa-apa - akurasinya, sebaliknya, juga meningkat menjadi 83,864%. Pada tahap ini, saya sudah mulai kehilangan kesabaran. Face ++ sepertinya mampu melakukan apa saja. Semakin saya mencoba untuk menyamar, semakin percaya diri dia mengenali saya.
Dalam upaya putus asa terakhir, saya memutuskan untuk mencoba metode yang tampaknya terlalu sederhana untuk bekerja. Saya memakai lagi masker sekali pakai biru sederhana, tapi kali ini saya juga menambahkan kacamata hitam yang biasa saya pakai. Ketika saya mengunggah foto ke platform Face ++, hasilnya membuat saya tercengang. Kombinasi topeng dan kacamata hitam tidak hanya mengurangi keakuratan pengenalan - tetapi juga mencegah program untuk benar-benar mendeteksi wajah dalam foto. Dengan hanya menambahkan kacamata ke topeng, saya benar-benar menjadi tidak terlihat oleh sistem.
Sepertinya terlalu bagus untuk menjadi kenyataan, jadi saya mengunggah foto yang sama ke layanan pengenalan wajah populer lainnya, FaceX . FaceX API mengatur foto bertopeng menjadi identik dengan kemungkinan 70,39% - hasil yang sebanding dengan Face ++. Tetapi dengan tambahan kacamata hitam, probabilitas turun menjadi 11,18%, memaksa sistem untuk menyimpulkan bahwa "wajah-wajah ini milik orang yang berbeda."
Tetapi mengapa menambahkan kacamata ke foto memiliki efek yang begitu kuat? Untuk menjawab pertanyaan ini, tidak ada salahnya untuk melihat lebih dekat bagaimana platform seperti Face ++ mengidentifikasi orang. Sistem seperti itu biasanya dilatih untuk menentukan serangkaian berbagai titik kunci pada wajah: posisi mata, hidung, mulut, garis rambut, bentuk wajah. Berikut adalah poin-poin penting yang diungkapkan Wajah ++ di wajah saya, difoto tanpa topeng (ditandai dengan titik-titik biru):
Menambahkan topeng mengurangi keakuratan deteksi - tetapi tidak sampai nol. Bahkan N95 yang besar memungkinkan Face ++ untuk membedakan dengan jelas antara mata dan alis di wajah saya. Berdasarkan tulang pipi, sistem ini juga dapat melengkapi garis besar bagian wajah yang tersembunyi di bawah topeng dengan akurasi yang dapat diterima. Dia bahkan dapat membuat beberapa tebakan yang kurang lebih masuk akal tentang di mana letak hidung dan mulut saya di bawah topeng saya.
Tetapi ketika kacamata hitam dipakai, sistem kehilangan kumpulan data yang kaya dan berharga tentang mata dan alis. Selain itu, tepi kacamata sangat menghalangi tulang pipi sehingga Anda tidak dapat memperoleh banyak informasi dari area ini. Namun, masker masih menutupi hidung dan mulut sepenuhnya serta menyembunyikan area dagu. Secara keseluruhan, topeng dan kacamata tampaknya mengambil volume data yang begitu banyak dari sistem sehingga mereka kehilangan kemampuan untuk membandingkan dengan benar (dan dalam beberapa kasus bahkan mengenali wajah dalam foto, seperti yang terjadi dengan Face ++), dan hasilnya salah.
Ini merupakan kesuksesan yang serius, terutama mengingat masker sekali pakai dan kacamata hitam biasa hampir sejak awal pandemitetap menjadi pakaian standar saya. Jika seseorang di jalan melihat saya dalam bentuk ini, maka mereka tidak akan berkedip - dan pada saat yang sama, ternyata, saya menjadi tidak terlihat oleh sistem pengenalan wajah, yang dengan tenang mengenali wajah saya di bawah topeng sederhana.
Berapa lama teknik ini akan bekerja melawan sistem pengenalan wajah? Sulit dikatakan. Pengenalan wajah sebagai bidang pengetahuan terus berkembang. Mengingat bahwa ini sangat berguna dalam penyelidikan kejahatan serius, selain membuat profil orang yang tidak bersalah, kemungkinan besar cepat atau lambat pembuat algoritme pengenalan akan dapat menyesuaikannya dengan kombinasi topeng dan kacamata. Selain itu, di beberapa tempat umum, kacamata hitam dilarang, dan tidak semua orang memakainya di dalam ruangan (lensa transparan tidak berfungsi di sini - hanya yang gelap). Juga tidak mungkin untuk mengatakan dengan yakin bahwa teknologi akan dapat menipu algoritme yang digunakan oleh polisi dan lembaga pemerintah - algoritme tersebut mungkin berbeda dari algoritme yang ada di domain publik. Akhirnya, bahkan tanpa teknologi pengenalan, lembaga-lembaga ini memiliki banyak cara lain untuk melacak orang.
Tapi untuk saat ini, setidaknya untuk platform yang telah saya lihat, kombinasi kacamata hitam dan topeng adalah cara yang sederhana dan sangat efektif untuk menjaga anonimitas, bahkan dalam menghadapi pengawasan besar-besaran.