PetalBot 华为自主研发的搜索引擎

这几天一直在观察蜘蛛的抓取记录,发现了一个新奇的蜘蛛,叫做PetalBot,后来去查了一下资料才懂这是华为的搜索引擎,名为花瓣蜘蛛。

这个蜘蛛抓取量还是挺大的,小星的网站现在有八十篇文章左右,在加上标签,每天抓取URLs数有600多条。

现在花瓣搜索引擎貌似并没有官网入口,可能是在抓取阶段,正在发展初期,所以没必要去管它,让它慢慢抓取吧,也许以后还对网站有好处。

版权声明:转载请以超链接方式注明出处。
本文地址:https://www.wanzhuanmi.com/795.html

相关文章