随着时间的推移,所有在线发布商,无论其规模和利基,都会被某种形式的无效流量访问。虽然并非所有机器人都是坏的,但无效的流量来源可能会损害网站的声誉,并导致被谷歌、亚马逊和其他合作伙伴暂停。
无效流量对所有希望通过在其网站上出售空间来产生广告收入的发布商构成威胁。
本文深入探讨了不同类型的无效广告流量、导致无效流量的原因,以及发布商如何防止无效流量,以最大限度地降低广告客户的成本投资回报率,并保护自己免受欺诈。
什么是无效流量?
无效流量是网站上的点击和浏览的人为上涨,而这些点击和浏览并非来自对内容真正感兴趣的真实用户。
无效流量既是偶然发生的,也是出于欺诈目的。据谷歌称,它可能“包括由侵入性广告实施引起的意外点击、竞争广告商的欺诈性点击、广告僵尸网络等等。”
从广告商的角度来看,这些点击并没有带来真正的收入,使它们基本上没有价值。研究表明,由于广告欺诈和无效流量,发布商每年损失12.7亿美元,发布商需要知道如何识别和减少无效流量。
通常情况下,无效流量包括:
- 发布商自己在自己的网站和广告上产生的展示次数和点击次数
- 发布商采用自动化工具来增加展示次数
- 用来向网站发送垃圾邮件以窃取用户数据的机器人流量
媒体评级委员会与IAB一起,将无效流量分为两种类型:一般无效流量(GIVT)和复杂无效流量(SIVT)。
一般无效流量——GIVT
一般无效流量在后台运行,并扫描网站以获取信息。它不会模仿人类行为,也不会以欺诈为目的发送,因此被认为是最可接受和风险最小的无效流量形式。
一般无效流量的一些类型包括:
- 源自已知数据中心和搜索引擎的机器人、蜘蛛和其他爬虫
- 数据和品牌安全机器人
- 来自未知浏览器的流量
- 分析爬虫
- 无效的广告展示位置
尽管GIVT是非人类流量,但它通常在数字生态系统中发挥作用,无论是根据其提取的数据进行衡量还是改进。
也许最需要注意的是,GIVT不会人为地增加广告点击次数或展示次数。
复杂的无效流量——SIVT
复杂的无效流量(SIVT)是以恶意的方式创建的流量。在这两种无效流量中,复杂的无效流量在技术上涉及更多,因此更难识别。这种类型的无效流量难以检测,因为恶意行为者使用僵尸网络来模仿人类行为。SIVT通常需要先进的分析技术和协调一致的人工干预来检测欺诈性广告流量,并最终防止其人为地夸大点击量。
复杂的无效流量还包括不符合广告质量、广告投放和广告完整性标准的流量。
SIVT包括:
- 与网页和数字广告交互但不将自己声明为非人类的机器人流量
- 非法的替代流量
- 恶意软件
- Cookie填充
- 旨在操纵数据和统计数据的机器人
- 被黑客入侵的用户设备
- 虚假的位置数据
意外导致无效流量的3个主要原因
已收到Google通知其网站受到无效流量攻击的发布商属于以下两类之一:
- 无效流量的来源未知
- 发布商有意做一些事情来创造所产生的浏览
对于属于第一类的人来说,他们很可能完全不知道这种流量的来源。以下是导致发布商意外无效流量的三个主要原因。
过期和重定向的域名
一种常见的SEO做法是购买过期域名。然后,发布商要么将他们的网站重定向到过期的域名,要么建立一个新的域名以适应该域名的行业利基。
这种做法的好处包括:
- 接管一个仍然具有良好权威的域名
- 该网站可能仍有良好的反向链接
- 该域名与发布者的行业相似
- 该域名具有.edu或.org地址,赋予发布商更高级别的威信
当发布商购买过期域名时,他们的想法是,一旦设置了重定向,他们将获得现有反向链接、域名威信和排名的好处。
然而,这里的问题是,虽然发布商可能会在新网站上获得转移的访问,但他们不知道这些流量来自哪里以及为什么。
在将流量从过期域名转发到新网站时,发布者可能会向自己发送:
- 不需要的机器人和爬虫
- 寻找旧网站的访问者——导致高跳出率
- 来自Google的关于无效流量的警告
解决这个问题可能非常复杂,可能会掩盖首先重定向网站的潜在好处。
首先,网站所有者应该调查哪些过期域名转发到新网站。发布商可以通过检查服务器日志文件来做到这一点。
此外,如果有可用于重定向URL的Google Analytics(谷歌分析),发布商应该查看正在命中哪些重定向以及该流量来自何处。他们还可以设置域名转发,通过CDN或主机过滤掉机器人。
这将允许他们保持反向链接到位,同时防止机器人攻击。
遭受黑客攻击
机器人正在成为所有网络流量中越来越大的一部分。某些机器人是有帮助的,如搜索引擎机器人(GoogleBot)、监控机器人和SEO爬虫。但恶意机器人也在增加,从窃取内容的抓取工具到用于产生恶意访问和点击展示广告的点击机器人。事实上,Imperva的一项研究表明,在2019年,恶意机器人占所有网络流量的高达24.1%。
恶意机器人的最显着增长出现在那些破解凭据和填充凭据的程序中。
大量的DDoS攻击给网络带来了巨大的压力,在某些情况下,甚至可以完全摧毁它们。
网站所有者可以采取的避免其CMS被黑的最直接措施之一是更改默认登录URL。
例如:
www.mysite.com/admin变成www.mysite.com/guanliyuan159
把你的网站的管理员登录地址保留为默认值,几乎可以保证网站会被恶意的流量攻击。
一旦发布商更改了默认URL,任何试图入侵CMS的机器人都将被定向到404。
购买流量
虽然购买流量仍然受到希望增加点击量的网站所有者的欢迎,但它最终是一条死胡同。
购买的流量通常来自点击工厂,在那里,专门设计的软件或人力流量被分配来增加点击量和印象。虽然这在短期内似乎令人振奋,但在一天结束时,这对一个品牌或他们的收入来说绝不是好事。
相反,发布商应该寻求通过搜索引擎优化来增加人流量,并提供优质的内容和模范的用户体验。
这将确保广告商在涉及到线索和转换时获得价值,并乐于支付这样一个网站的声誉所带来的溢价。
如何发现和消除您网站上的无效流量(IVT)?
虽然无效流量可能对广告商和发布商都非常不利,但不幸的是,在谈到如何处理这些流量来源时,谷歌是相当模糊的。
话虽如此,他们的计划政策仍然非常严格,Google AdSense表示,如果他们观察到某个帐户的无效流量很高,他们可能会暂停或禁用该帐户以保护广告商和用户。此外,如果他们无法验证发布商流量的质量,他们可能会限制或禁用发布商的广告服务能力。
无效流量不仅会增加AdSense帐户被暂停的风险,还会增加广告客户的成本。此外,大量的非转化流量会使发布商的库存贬值。
为了开始识别和消除无效流量,发布商应首先过滤掉机器人,这可以通过使用谷歌分析来完成。方法是这样的:
- 登录到您的谷歌分析(Google Analytics)帐户
- 点击”管理“(Admin)按钮
- 导航到“视图”(View)选项卡,然后单击“视图设置”(View Settings)
- 向下滚动页面并选择“机器人过滤”(Bot Filtering)选项(如果未选中)。
- 最后,确保保存您的设置
需要注意的是,虽然Google Analytics在过滤不同类型的无效流量方面非常有效,但它并非万无一失的,也不能保证100%消除无效流量。
因此,发布商也必须遵循最佳做法:
- 永远不要点击自己的广告
- 遵循广告投放和展示位置的准则和政策
- 让第三方对流量进行验证
随着广告商越来越关注广告欺诈,发布商应确保他们能够抵御无效流量带来的威胁。
为了让所有相关人员获得最大的广告收入,发布商应不断监控他们的流量来源,并使用上述方法过滤IVT。
常见问题
网站如何检测和阻止无效流量?
通过Google Analytics检测和阻止无效流量:
以下是有助于检测Google Analytics的因素:
- 会话时间减少
- 浏览页数增加
- 每个会话的页面数量增加
- 明显增加或减少的跳出率
- 网页加载速度降低
Google Analytics可以轻松阻止无效流量。除此之外,您还可以遵循以下方法:
- 手动阻止无效的IP地址
- 使用机器人管理解决方案
- 使用reCAPTCHA
- 使用网络应用程序防火墙(WAF)
- 使用WordPress插件
- 使用IAB机器人列表
AdSense如何检测无效点击?
Google会检查广告的每次点击。Google拥有复杂的系统来识别有效的点击次数和展示次数。如果发现无效点击,Google会将其从报告和付款中删除。Adsense使用多种方法来检测无效点击:
有多个点击广告的访问者
从不同的人那里收到一两个点击是好事,但当你从一个人那里得到10多个广告点击时,谷歌就开始考虑并监控你的账户。
许多来自单一IP地址的网站访问者
如果一个IP地址被用来点击一个特定的广告,谷歌算法很容易发现这种活动。
来自同一推荐人的多次访问
Google AdSense会适当检查通过Bing、Yahoo、Google或任何其他方式访问的自然访问者。如果有许多来自同一推荐人的访问,谷歌认为这是垃圾访问。
来自您的IP地址的访问量和点击量
如果网站的流量和点击来自你自己的IP地址,Adsense不会考虑它,并将它们标记为欺诈性点击。