Discuz! 官方站

 找回密码
 立即注册

QQ登录

只需一步,快速开始

搜索
查看: 776|回复: 7

怎么增加蜘蛛爬虫的数量??

[复制链接]
发表于 2020-9-15 20:26:39 | 显示全部楼层 |阅读模式
  这里没调过。





Robots文件


User-agent: *
Allow: /

这个不是不限制抓取速度 还是 数量吗。。


多去搞些高质量友联?外链?

新站1个月。。每天更新10-20帖子。   每天最少5帖原创。。



本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有帐号?立即注册

x
发表于 2020-9-15 23:24:42 | 显示全部楼层
新站点,友联大忌。

增加蜘蛛爬虫的数量的方法:优质原创人见人爱帖子,越多越好。
回复

使用道具 举报

 楼主| 发表于 2020-9-16 01:46:49 | 显示全部楼层
allthebest 发表于 2020-9-15 23:24
新站点,友联大忌。

增加蜘蛛爬虫的数量的方法:优质原创人见人爱帖子,越多越好。

您有扣吗?发下?
回复

使用道具 举报

发表于 2020-9-16 01:49:01 | 显示全部楼层
Sam幽灵 发表于 2020-9-15 17:46
您有扣吗?发下?

有,但不用。
回复

使用道具 举报

 楼主| 发表于 2020-9-16 11:30:26 | 显示全部楼层

新站点,友联大忌。???
这个是说不能乱加 友联是吗?


原创帖子这个。。买插件?还是?
回复

使用道具 举报

发表于 2020-9-16 19:15:09 | 显示全部楼层
Sam幽灵 发表于 2020-9-16 03:30
新站点,友联大忌。???
这个是说不能乱加 友联是吗?

新站点,注册会员少;帖子少是通病。

要增长帖子,会员注册,停留越久越好,才有机会增长帖子。

乱七八糟交换友联,当游客点击友联访问其站点,发现比你的站点多帖子,别指望游客会回来,不回来,没人注册,何来帖子?

插件采集到你的站点;已非原创,一点用也没有。

论坛好玩,不代表能赚钱呢。
回复

使用道具 举报

 楼主| 发表于 2020-9-16 22:31:50 | 显示全部楼层
allthebest 发表于 2020-9-16 19:15
新站点,注册会员少;帖子少是通病。

要增长帖子,会员注册,停留越久越好,才有机会增长帖子。

不不不不。。不是为了赚钱- -
帖子更新不少。。百度抓取少。。

问个问题。
抓取频次上限调整 这个我没有设置过。
这个是不是不用管?默认就可以?
回复

使用道具 举报

发表于 2020-9-16 22:56:48 | 显示全部楼层
Sam幽灵 发表于 2020-9-16 14:31
不不不不。。不是为了赚钱- -
帖子更新不少。。百度抓取少。。

1、抓取频次是搜索引擎在单位时间内对网站服务器抓取的总次数,如果搜索引擎对站点的抓取频次过高,很有可能造成服务器不稳定,Baiduspider会根据网站内容更新频率和服务器压力等因素自动调整抓取频次   

2、Baiduspider会根据网站服务器压力自动进行抓取频次调整   

3、建议您慎重调节抓取频次上限值,如果抓取频次过小则会影响Baiduspider对网站的收录
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

腾讯云「工商注册服务」全新上线!全场低至10元起,一站搞定工商服务,让创业起步更轻松

小黑屋|Discuz! 官方站 ( 粤B2-20090059-165 )star

GMT+8, 2020-10-1 08:15

Powered by Discuz! X3.3

Copyright © 2001-2019 Tencent Cloud.

快速回复 返回顶部 返回列表