Yangi usul mikrofonga ekrandagi kontentni aniqlash imkonini beradi.

Tadqiqotchilar chiqarilayotgan tovush va ekrandagi tasvir o’rtasida bog’liqlikni aniqladilar.

Isroillik va amerikalik tadqiqotchilar jamoasi foydalanuvchi kompyuter ekranida real vaqt rejimida nima ko’rsatilishini aniqlash uchun tovush to’lqinlaridan foydalanadigan hujumni ishlab chiqdilar. Sinesteziya deb nomlangan ushbu texnikadan ma’lumot to’plash, foydalanuvchilarning brauzer faoliyatini kuzatish va boshqa ko’p narsalar uchun foydalanish mumkin. Turli LCD displeylar tomonidan chiqarilgan tovush tebranishlarini tahlil qilish orqali tadqiqotchilar chiqarilgan tovush va ekrandagi tasvir o’rtasidagi bog’liqlikni aniqladilar. Ma’lum bo’lishicha, har bir namoyish etilgan kontent o’zining «tovush imzosiga» ega.

Displeyning ovozi quvvat manbai tomonidan ishlab chiqariladi, u oqim modulyatsiyasi paytida yuqori chastotali tebranishlarni chiqaradi. Ovoz vizual kontentni ko’rsatish uchun quvvat talablariga qarab o’zgaradi. U inson qulog’iga deyarli eshitilmaydi, ammo mikrofonlar (masalan, Amazon Alexa yoki Google Home ichiga o’rnatilganlar) uni osongina aniqlay oladi va yozib oladi.

Tadqiqotchilar oddiy vizual modellar bilan ishlash va mikrofonlar tomonidan yozib olingan audio spektrogrammasini tahlil qilish orqali displeylardagi kontentni aniqlash uchun ishlatilishi mumkin bo’lgan barmoq izlarini yaratdilar.

Tadqiqot haqida ko’proq ma’lumotni bu yerda o’qishingiz mumkin.