新闻分类
AppleBot是什么蜘蛛?
AppleBot这个名称大家应该比较熟悉吧,光看第一个单词就可以猜到这个苹果的蜘蛛,在多年前苹果就已经证实了AppleBot确实存在。
虽然AppleBot蜘蛛已经存在了很长时间了,但是它目前应该只要苹果设备上起作用(Siri 和 Spotlight 搜索),所以AppleBot蜘蛛对大多数网站可能同样没什么作用。
AppleBot蜘蛛有用吗?
AppleBot虽然算不上垃圾蜘蛛,但它对我们的网站确实没什么用,至少目前是这样的。
AppleBot蜘蛛可以屏蔽吗?
AppleBot蜘蛛是还是比较守规矩的,抓取量也不是很大(从去年开始有所增加),所以我们完全可以忽略AppleBot蜘蛛,虽然它不会给我们的网站带来什么实质作用,但也没什么坏处。
如果你觉得AppleBot蜘蛛对你的网站性能产生的影响,比如网站打开速度变慢,那么可以尝试屏蔽。
AppleBot蜘蛛屏蔽方法如下:
在你的网站robot.txt文件中添加如下内容
User-agent: AppleBotDisallow: /
[超站]友情链接:
四季很好,只要有你,文娱排行榜:https://www.yaopaiming.com/
关注数据与安全,洞悉企业级服务市场:https://www.ijiandao.com/
关注网络尖刀微信公众号
随时掌握互联网精彩
随时掌握互联网精彩
赞助链接
排名
热点
搜索指数
- 1 总书记要求用好这把“戒尺” 4975728
- 2 以色列对伊朗发动导弹袭击 4993852
- 3 伊朗防空系统启动:夜色中拦截导弹 4828215
- 4 从消博会看消费新趋势 4742516
- 5 抗战烈士墓发现年轻女子照片 4664649
- 6 学生偷外卖被毒死?学校回应 4572093
- 7 北京一皇家级四合院4.5亿元起拍 4431636
- 8 以色列称提前通知美国将实施报复 4366808
- 9 养老保险断缴即清零?不实 4221748
- 10 以色列反击伊朗 黄金原油暴涨 4119413