分类目录归档:反垃圾邮件

网易公司反垃圾邮件专访

  一、中国及国际反垃圾邮件产业的现状
  11月,互联网协会反垃圾邮件中心公布了第三季度的反垃圾调查报告。报告指出,2007年第三季度中国互联网电子邮件用户每周收到的垃圾邮件比例为55.85%,较上个季度的58.84%下降了2.99个百分点,并连续几个季度呈下降趋势。也就是说,07年我国的反垃圾邮件工作取得了一定的成效。
  据Sophos最新调查报告显示,今年第三季度,从中国发出或转发的垃圾邮件占全球垃圾邮件发送总量的4.9%,与今年第二季度相比下降了3.5个百分点,垃圾邮件数量排名也由全球第二位降至第三。美国仍是网络垃圾邮件发送量最大的国家,有超过四分之一的垃圾邮件来自美国。
  虽然在发垃圾领域取得了一定的成效,但我们也要清醒看到国内发垃圾邮件的形势仍然严峻。近日就发生了一则小插曲:国资委信息中心1月初发布了“国资委互联网邮件系统升级切换的通知”,通知中明确提到要对邮件系统进行升级切换,主要是为了解决原邮件系统中无防垃圾邮件功能的问题。
  二、针对目前的现状,网易在治理垃圾邮件方面做了什麽工作
  在2001年,垃圾邮件在全球电子邮件中的比重还只有5%。六年过去,情况发生了巨大变化,如上数据表明,国内的垃圾邮件比例已经接近6成,全球范围来看,这一比例还要高得多。近几年随着网络技术的快速发展,垃圾邮件的表现形势也呈现出多样化的趋势。网民数量的快速膨胀也引发了各类垃圾邮件数量的快速增长。
  网易作为中国互联网反垃圾邮件行业协会的发起人之一,同时也是电子邮件行业的排头兵,深刻认识到垃圾邮件对电子邮件产业的毒害和影响。为了保持电子邮件行业的良性发展,给网民提供优质的电子邮件服务,网易在发垃圾领域投入了大量的人力物力,成为了国内为数不多的自主研发反垃圾平台的邮件运营商。
  众多周知,反垃圾平台的优劣近几年,自主研发的威力也逐渐显现出来了。不但拥有自主知识产权,还能根据各类新型垃圾邮件特征快速有效地采取防范和打击措施。
  三、网易在发垃圾邮件领域采取了什么新技术
  1.采用了基于多个rbl dns查询的综合评分策略。
  网易目前与国际知名的几个rbl组织,包括spamhaus/surbl/uribl等组织都建立良好合作关系,并为其提供了在国内的公益性dns查询镜像服务。
  而在判定标准上,网易并不仅仅基于某一个单一的反垃圾策略,而是将一次邮件会话过程中所能提供的所有“证据”作为整体评价,包括了连接、频率、内容过滤等方方面面,最终按照系统制定以及用户自己的策略,来决定拒绝还是接收。
  以RBL为例:假如某个IP被spamhaus收录了,我们系统并未因此而拒绝此IP,但如果同时被spamhaus, surlbl, uibl等收录了,那么这封邮件被拒收的可能性就非常大。
  2.采用新技术应对图片垃圾邮件泛滥的情况。
  在2007年年中,从国外涌入了大量的图片垃圾邮件,单靠过往的技术无法有效抵御,因为传统的反垃圾技术对图片垃圾邮件无效,很难对其进行内容过滤。网易从发现图片垃圾邮件开始,便第一时间着手研发有针对性的反击技术。最终应用了图片指纹相似度技术、图片bayes技术及图片像素特征分析技术,有效地抵御了本次图片垃圾邮件狂潮,并为日后做好了充分的准备。
  前段时段,还曾出现过基于PDF格式,FLASH格式的垃圾邮件,都被网易通过有效、精准的技术手段拦截下来。
  3.建立了基于发送者信誉的海量数据库系统。
  网易长期坚持邮件服务提供商之间的互通互盈,但却并未因此而放松对垃圾邮件的监控。发送者信誉机制就是一种先进的思路,网易会动态评估独立IP和域名的历史发送情况,结合RFC标准的SPF发送者验证技术,建立不同的信誉值,纳入综合评分体系。
 4.建立了切实有效的用户反馈举报系统。
  任何单一的技术手段都无法实现100%的捕捉率和正确率,所以网易也坚持以用户为宗旨,设立用户反馈机制。在服务器对话中遇到问题,可以链接到WEB页面查明原因,也可以直接电话联系网易的 24小时客服系统。在WEB邮箱中,用户可以对漏进来的垃圾邮件或被误判的正常邮件进行申诉,反垃圾过滤系统能不断调整过滤策略,提高过滤效率,降低误判发生的几率。
  5.用户个性化反垃圾设置。
  网易邮箱正全力开发基于用户个性化的反垃圾系统,按照用户自己的使用习惯,历史行为,性格喜好来判断是否为垃圾邮件。为了提高用户级别的反垃圾质量,网易除了提供用户反馈渠道外,还提供精度更高的用户级别内容过滤策略。用户往来的邮件特征可以被系统收集,从而形成个性化的使用习惯;邮件系统会优先使用用户级的数据来进行过滤。
  例如某用户订阅了一份电子杂志,被系统误投入了垃圾箱,用户只需要简单地从垃圾箱移动到收件箱,就可以保证以后此类邮件都可以正常地进入到收件箱。另外,网易也提供了传统的用户黑白名单,以及可定制的反垃圾克星等。
  6.与各大邮件运营商建立了稳定良好的日常沟通联络。
  包括与GMAIL和AOL都建立了互相举报垃圾邮件的spam feedback系统。
  通过上述一系列的创新技术及反垃圾措施系统的智能学习和自我修正,目前网易反垃圾平台的病毒邮件过滤已接近100%,垃圾邮件正确捕获率达到99.95%,误判率仅有0.001% 。