百度 | 神马 | 搜狗 | 技术文档 | 学习资料分享 - 记录帝国CMS及运维技术的点点滴滴
你的位置:首页 > 实用IT技术 » 正文

【SEO入门】MJ12bot是什么蜘蛛爬虫?

发布时间:2020-09-17

作品分类:SEO入门  干货  爬虫  网站  爬虫  蜘蛛  MJ12bot

MJ12bot是英国的一家老牌的搜索引擎营销网站Majestic的爬虫,他有专门的中文站,对外链查询等很多SEO数据查询提供数据支撑,做过外链的都知道,获取外链资源是一项基本能力,这个网站可以查询网站的外链资源数,不过很多公司看到日志里有这个MJ12bot蜘蛛,中文是选择直接屏蔽掉(MJ12bot是Majestic-12分布式搜索引擎的爬虫)

网站是这个zh.majestic.com

 

加入重生的SEO技术圈子,只分享最干的干货,不拖泥带水!三天发现没干货,可以退款!

Top