网络爬虫活动增加,关于苹果将推出搜索引擎的猜测再现 -j9九游会登陆入口
it之家 8 月 28 日消息 多名开发者最近在他们的网站日志中看到苹果的网络爬虫 applebot 的活动增加,这再次引发了苹果可能计划推出一个成熟的搜索引擎的猜测。然而,更有可能的是,这些爬虫活动应该与苹果改善 siri 和 spotlight 搜索结果的工作有关。
数字营销洞察公司 coywolf 的创始人乔恩 - 亨肖 (jon henshaw)本周在一篇博客文章中称,applebot 已经开始每天定时抓取他的网站,这是他之前没有注意到的。而在 twitter 上,stack overflow 工程师 nick craver 和数字营销顾问 michael james field 也注意到最近几天 applebot 在他们所监管的网站上的抓取量激增。
和其他网络爬虫一样,applebot 也会扫描网络,根据几个因素来帮助确定搜索结果的排名,这些因素包括用户参与度、搜索词与网页主题和内容的相关性和匹配度、网页从其他网站获得的链接数量,以及网页的设计特点。
正如 henshaw 所指出的那样,苹果在 7 月份更新了 applebot 的支持文档,增加了新的细节。
- 增加了如何验证 applebot 的流量
- 扩充了 applebot 用户代理的细节,包括桌面版和移动版的区别
- 扩展的 robots.txt 规则
- 增加了一个部分,说明他们不仅仅是抓取 html,还可以渲染类似于 google 的页面。
- 增加了一个关于搜索排名和影响网络搜索结果排名的因素的部分。
鉴于苹果宣传自己是一家注重隐私的公司,没有像谷歌或 facebook 那样的广告或数据驱动的商业模式,因此不确定它是否会想走推出一个成熟的搜索引擎的道路。
至少从 2015 年开始,苹果要推出搜索引擎的传闻就出现了,当时苹果首次确认了其 applebot,并发布了一系列与搜索相关的工作招聘。
目前,applebot 可能仍然致力于改善 siri 和 spotlight 的搜索结果,正如苹果在其支持文件中所说的那样。it之家了解到,在 6 月份的 wwdc 主题演讲中,苹果表示,siri 可以提供的事实数量是三年前的 20 多倍。