华为自研搜索引擎:PetalBot 这个蜘蛛就是花瓣蜘蛛
853 人阅读 | 时间:2020年06月04日 10:56
阿里云服务器 | 腾讯云服务器 | 习梦云:高防云服务器 | ZJI:香港日本美国独服 |
LOCVPS服务周到 | HostKvm低调KVM VPS | 傲游主机:优质VPS | 80VPS:老牌VPS主机 |
搬瓦工:CN2 GIA线路 | CloudCone:性价比高 | Vultr:按小时计费VPS | VirMach:超级便宜 |
JustMySocks科学上网 | 好用的宝塔面板 | 洛杉矶QN机房官方VPS | 恒创:香港CN2服务器 |
查看日志发现很多带这个 字段的 UA compatible; PetalBot;+https://aspiegel.com/petalbot,然后打开那个URL发现,是华为的logo,然后回想起看到有说华为在搞搜索引擎的新闻,那看来这个玩意已经确实存在,不然我小网站也不能来这么多,跟今日头条爬虫一样,现在是它饥饿的时候疯狂爬数据,不知道这个只是针对海外被谷歌封锁的措施还是将来也会在国内再杀出一个搜索引擎。拭目以待吧。
评论专区