PetalBot 华为自主研发的搜索引擎

这几天一直在观察蜘蛛的抓取记录,发现了一个新奇的蜘蛛,叫做PetalBot,后来去查了一下资料才懂这是华为的搜索引擎,名为花瓣蜘蛛。

这个蜘蛛抓取量还是挺大的,小星的网站现在有八十篇文章左右,在加上标签,每天抓取URLs数有600多条。

现在花瓣搜索引擎貌似并没有官网入口,可能是在抓取阶段,正在发展初期,所以没必要去管它,让它慢慢抓取吧,也许以后还对网站有好处。

相关推荐

买车的一些建议

买车主要目的是周末节假日出游、回老家,还有公司下半年可能搬迁,附近没有地铁,没有直达公交,但怕养车费用高,生活 ...