Gmail отримав спам-фільтр на базі штучного інтелекту. Ефективність виявлення підвищили на 38 %

З’явилась інформація щодо оновлення спам-фільтрів поштового сервісу Gmail, визнаного компанією одним із ключових оновлень системи захисту протягом останніх років.

Головним аспектом оновлення є інтеграція нової системи класифікації текстів під назвою Resilient & Efficient Text Vectorizer (RETVec) в поштовий сервіс.

Розробники стверджують, що ця система ефективно виявляє спам-повідомлення, включаючи ті, що містять багато спеціальних символів, смайлів, друкарських помилок і інших елементів, які раніше були помітними для людей, але стали викликом для спам-фільтрів. RETVec може ефективно розпізнавати повідомлення з гомогліфами, які є графічно схожими символами, відмінними за значенням.

За даними Google, алгоритм RETVec навчений ефективно виявляти повідомлення, які пройшли різноманітні маніпуляції, такі як вставка або видалення символів, друкарські помилки та гомогліфи. Алгоритм використовує кодер для ефективного кодування будь-яких символів і слів у форматі UTF-8. Це дозволило йому працювати з більш як 100 мовами світу “з коробки”.

RETVec в багатьох відношеннях працює аналогічно тому, як читають люди, базуючись на візуальній “схожості” для визначення значення слів, а не символів, з яких вони складаються.

Використання RETVec дозволило підвищити рівень виявлення спаму в порівнянні з базовим на 38% і зменшити кількість помилкових спрацьовувань на 19,4%. При цьому кількість використовуваних моделлю тензорних обчислювальних процесорів (TPU) знизилася на 83%, що робить це оновлення одним із найбільших для системи захисту Gmail за останні роки.