华为自研搜索引擎：PetalBot 这个蜘蛛就是花瓣蜘蛛

623 人阅读 | 时间：2020年06月04日 10:56

阿里云服务器	腾讯云服务器	习梦云：高防云服务器	ZJI：香港日本美国独服
LOCVPS服务周到	HostKvm低调KVM VPS	傲游主机：优质VPS	80VPS：老牌VPS主机
搬瓦工：CN2 GIA线路	CloudCone：性价比高	Vultr：按小时计费VPS	VirMach：超级便宜
JustMySocks科学上网	好用的宝塔面板	洛杉矶QN机房官方VPS	恒创：香港CN2服务器

查看日志发现很多带这个字段的 UA compatible; PetalBot;+https://aspiegel.com/petalbot，然后打开那个URL发现，是华为的logo，然后回想起看到有说华为在搞搜索引擎的新闻，那看来这个玩意已经确实存在，不然我小网站也不能来这么多，跟今日头条爬虫一样，现在是它饥饿的时候疯狂爬数据，不知道这个只是针对海外被谷歌封锁的措施还是将来也会在国内再杀出一个搜索引擎。拭目以待吧。