Оголошення

Оновлення фільтрації Spam у DreamHost

An Update on Spam Filtering at DreamHost thumbnail

Два з половиною роки тому ми розпочали серію покращень нашої електронної пошти, щоб зробити її надійнішою. Наша електронна пошта не отримувала стільки уваги, скільки потрібно було протягом років, і це почало проявлятися. Клієнти, друзі, родина, а також члени команди DreamHost регулярно стикалися з затримками або відхиленням електронних листів через списки блокувань, проблеми з підключенням клієнтів електронної пошти та помилки, а також різні проблеми з веб-поштою. Одразу, як ми усвідомили вплив, який ми могли б зробити, ми приступили до виправлень, і результати були вражаючими.

Ми досягли великого прогресу, але нам ще є куди рости!

Наш поточний проєкт полягає у переході нашого сервісу фільтрації спаму до нового провайдера для вхідних повідомлень. На жаль, ми виявили, що він схильний бути надто агресивним і відправляє деякі повідомлення у вашу папку зі спамом, які очевидно туди не належать. Блокування спаму – це свого роду мистецтво, яке вимагає ретельної уваги для досягнення правильного балансу, і ми працюємо над цим балансом, щоб отримати прийнятні результати. Наш новий провайдер тісно співпрацює з нами, щоб вирішити проблему і пріоритетизувати зусилля з розробки, які покращать фільтрацію вхідної пошти у DreamHost.

Один із методів, який ми використовуємо для вирішення проблеми, полягає у навчанні алгоритму фільтрації Spam у масштабах. Деякі клієнти написали нашій технічній підтримці за допомогою та були попрошені надати приклади повідомлень, які були неправильно відфільтровані. Дякуємо всім, хто це зробив; ці повідомлення були надзвичайно корисними для швидкого навчання алгоритму фільтрації.

Оскільки ми стежимо за звітами про помилково відфільтровані повідомлення, ми також додаємо відомих надійних відправників до білого списку на рівні DreamHost. Хоча навчання алгоритму фільтрації може зайняти деякий час, ці зміни матимуть негайний вплив. Ми додаємо відомі домени до нашого глобального білого списку, коли вони мають дійсну конфігурацію DMARC. Це ручний процес і подібний до налаштувань дозволу та блокування, які ви маєте в панелі керування та інтерфейсі поштових скриньок. Ми також працюємо над покращенням інтерфейсу в панелі керування наших клієнтів, щоб зробити це ще простіше в майбутньому.

Ми спостерігали прогрес у функціональності наших фільтрів для спаму за останні два тижні. Ми помітили, що менше легітимних електронних листів потрапляє в фільтр спаму, і скарги клієнтів знижуються. Наш партнер з фільтрації спаму планує подальші оновлення для покращення своїх можливостей, і ми продовжуємо наш процес ручного додавання до білого списку. Ми сподіваємось найближчим часом виправдати ваші очікування (та наші власні).

Покращення Досі

Одним з перших покращень, які ми впровадили, було повне оновлення обладнання, яке ми використовуємо для електронної пошти. Наше попереднє покоління обладнання для електронної пошти вичерпало свій практичний ресурс, і воно важко впоралося з зростанням кількості користувачів електронної пошти та обсягом зберігання даних, який вони використовували. Нове обладнання швидше, легше в обслуговуванні та високо масштабоване. Це принесло покращення швидкості та стабільності нашого сервісу електронної пошти, а також зменшило кількість помилок для клієнтів у їхніх поштових клієнтах.

Далі ми взялися за виклик із відхиленням електронних листів клієнтів через те, що наші сервери електронної пошти потрапляли до блок-списків. На жаль, факт полягає в тому, що спамери є невтомними та використовують кожен доступний метод — законний чи ні — для відправлення своїх небажаних повідомлень. Це включає в себе злом облікових записів електронної пошти наших клієнтів і використання їх для відправлення спаму. Активність на цих скомпрометованих облікових записах призводить до потрапляння наших серверів електронної пошти до блок-списків, і, на жаль, легітимні електронні листи часто також блокуються в результаті.

Ми впровадили сторонній сервіс для фільтрації вихідних електронних листів та відхилення відправлення шахрайських повідомлень або спаму. Ми одразу побачили покращення репутації наших серверів електронної пошти, і їх поява в списках блокування електронної пошти тепер залишилася в минулому.

На початку цього року ми змінили нашу систему електронної пошти на популярне програмне забезпечення з відкритим кодом, Roundcube. Хоча це може здатися простою заміною програмного забезпечення, було проведено багато роботи для міграції існуючих даних із старої системи електронної пошти до Roundcube. Ми також скористалися цією можливістю для модернізації інфраструктури та процесу розгортання, що в подальшому спростило управління. Коли все було сказано і зроблено, ми отримали більш продуктивну систему електронної пошти з красивим і адаптивним дизайном.

Майбутні плани

У нас є кілька додаткових проектів, які ми хочемо завершити, щоб покращити стабільність та надійність нашої служби електронної пошти. Наступний проект буде зміною, невидимою для користувачів електронної пошти. Ми оновимо архітектуру нашого backend електронної пошти, щоб вона була більш керованою і стійкою до збоїв. Це не надто захоплюючий проект з точки зору “крутих нових функцій”, але він призведе до меншої кількості простоїв та помилок в службі.

Дивлячись у майбутнє, ми плануємо покращити доставленість повідомлень, які відправляються з наших хостинг-машин та переспрямовуються користувачем електронної пошти за межі нашого сервісу. Ці послуги також зазнають впливу від компрометованих акаунтів, списків блокувань та спамерів. Наша мета – забезпечити доставку цих законних повідомлень їх кінцевим отримувачам.

У нас є багато ідей, як покращити досвід користування електронною поштою після завершення цих важливих початкових проектів. Зокрема, ми хочемо покращити користувацький досвід електронної пошти у нашому контролі, забезпечити кращі опції для обробки спаму, замість простого переміщення його в папку спам, та забезпечити кращу інтеграцію функцій у веб-пошті.

Список може бути довгим, але ми з радістю будемо його створювати!

Ми цінуємо ваше терпіння, поки ми працюємо над постійним удосконаленням нашої пропозиції електронної пошти в DreamHost. Будь ласка, ніколи не соромтеся зв’язатися з нами, щоб поділитися вашими думками про електронну пошту — ми дійсно цінуємо ваш відгук.