Anúncios

Uma Atualização sobre a Filtragem de Spam na DreamHost

An Update on Spam Filtering at DreamHost thumbnail

Há dois anos e meio, iniciamos uma série de melhorias em nosso serviço de email para torná-lo mais confiável. Nosso serviço de email não havia recebido tanta atenção quanto deveria ao longo dos anos, e isso começava a aparecer. Clientes, amigos, familiares e até membros da equipe DreamHost viam regularmente emails atrasados ou rejeitados por causa de listas de bloqueio, erros e tempos de espera na conexão do cliente de email, e vários problemas com webmail. Uma vez que percebemos o impacto que poderíamos ter, partimos para consertá-lo, e os resultados têm sido dramáticos.

Fizemos muito progresso mas ainda temos um caminho a percorrer!

Nosso projeto atual é migrar nosso serviço de filtragem de Spam para um novo fornecedor para mensagens recebidas. Infelizmente, estamos descobrindo que ele tende a ser excessivamente agressivo e envia algumas mensagens para sua pasta de spam que claramente não deveriam estar lá. O bloqueio de Spam é um pouco uma forma de arte que requer atenção cuidadosa para acertar o equilíbrio, e estamos trabalhando nesse equilíbrio para obter resultados aceitáveis. Nosso novo fornecedor está trabalhando de perto conosco para resolver o problema e priorizar esforços de desenvolvimento que irão melhorar a filtragem de correio recebido na DreamHost.

Um método que estamos usando para resolver o problema é treinar o algoritmo de filtragem de Spam em massa. Alguns clientes escreveram para nossa equipe de suporte técnico pedindo ajuda e foram solicitados a fornecer exemplos de mensagens que foram filtradas incorretamente. Agradecemos a todos que fizeram isso; essas mensagens têm sido extremamente úteis para treinar o algoritmo de filtragem rapidamente.

À medida que monitoramos os relatórios de mensagens filtradas incorretamente, também estaremos adicionando remetentes confiáveis à lista de permissões no nível do DreamHost. Embora treinar o algoritmo de filtragem possa levar algum tempo, essas alterações terão efeitos imediatos. Estamos adicionando domínios bem conhecidos à nossa lista de permissões global quando eles possuem uma configuração DMARC válida. Este é um processo manual e é semelhante às configurações de permissão e bloqueio que você tem no painel de controle e na interface de caixas de correio. Também estamos trabalhando para melhorar a interface no painel de controle do cliente para tornar isso ainda mais fácil no futuro.

Nós observamos progresso na funcionalidade dos nossos filtros de Spam nas últimas duas semanas. Notamos menos emails legítimos sendo capturados pelo filtro de Spam, e as reclamações dos clientes estão diminuindo. Nosso parceiro de filtragem de Spam tem mais atualizações planejadas para melhorar suas capacidades, e continuamos nosso processo manual de safelisting. Esperamos atender às suas expectativas (e às nossas) muito em breve.

Melhorias Até Agora

Uma das primeiras melhorias que fizemos foi renovar completamente o hardware que usamos para o serviço de Email. A geração anterior de hardware de Email havia atingido o fim de sua vida útil prática, e tinha dificuldades para acompanhar o crescimento dos usuários de Email e a quantidade de armazenamento que eles consumiam. O novo hardware é mais rápido, fácil de manter e altamente escalável. Isso trouxe melhorias para a velocidade e estabilidade do nosso serviço de Email, além de menos erros para os clientes em seus clientes de Email.

Em seguida, enfrentamos o desafio dos emails de clientes rejeitados devido aos nossos servidores de email aparecerem em listas de bloqueio. O fato lamentável é que os spammers são implacáveis e usarão todos os métodos ao seu alcance — legais ou não — para enviar suas mensagens indesejadas. Isso inclui invadir as contas de email dos nossos clientes e usá-las para enviar spam. A atividade nessas contas comprometidas leva nossos servidores de correio a serem colocados em listas de bloqueio e, infelizmente, emails legítimos são frequentemente bloqueados como resultado.

Implementamos um serviço terceiro para filtrar e-mails de saída e rejeitar o envio de mensagens fraudulentas ou spam. Vimos imediatamente a reputação dos nossos servidores de e-mail melhorar, e a sua aparência em listas de bloqueio de e-mails agora é coisa do passado.

Este ano, fizemos a mudança do nosso sistema de webmail para utilizar o popular software de código aberto, Roundcube. Embora possa parecer uma simples mudança de software, houve muito trabalho para migrar os dados existentes do antigo sistema de webmail para o Roundcube. Aproveitamos também a oportunidade para modernizar a infraestrutura e o processo de implantação por trás dos bastidores, facilitando a operação no futuro. Quando tudo foi concluído, ganhamos um sistema de webmail mais eficiente com um design bonito e responsivo.

Planos Futuros

Temos vários outros projetos que queremos concluir para estabilizar e melhorar ainda mais a confiabilidade do nosso serviço de Email. O próximo projeto será uma mudança invisível para os usuários de email. Estaremos atualizando a arquitetura do nosso backend de email para que seja mais gerenciável e tolerante a falhas. Este não é um projeto empolgante do ponto de vista de “novas funcionalidades interessantes”, mas resultará em menos tempo de inatividade e erros para o serviço.

Olhando mais adiante, planejamos melhorar a capacidade de entrega de mensagens enviadas de nossas máquinas de hospedagem e de Email de clientes encaminhados para fora de nosso serviço. Esses serviços também são afetados por contas comprometidas, listas de bloqueio e spammers. Nosso objetivo é garantir que essas mensagens legítimas sejam entregues aos seus destinatários finais.

Temos muitas ideias para melhorar ainda mais a experiência de Email assim que superarmos esses projetos iniciais cruciais. Para citar alguns, queremos melhorar a experiência do usuário de Email em nosso controle, fornecer melhores opções para o manuseio de Spam em vez de simplesmente movê-lo para a pasta de spam e proporcionar uma melhor integração das funcionalidades no webmail.

A lista pode ser longa, mas estamos empolgados para construí-la!

Agradecemos sua paciência enquanto trabalhamos para melhorar continuamente nossa oferta de email na DreamHost. Por favor, não hesite em entrar em contato conosco para compartilhar seus pensamentos sobre o email — valorizamos muito seu feedback.