城市分站GEO重度低质同质化页面批量屏蔽完整方案

先明确4类重度低质页面判定标准,再分临时屏蔽(可后续整改复用)、永久清除(无修复价值)、批量目录拦截三套技术方案,配套后台批量筛选、站长平台提交、避坑规范,核心目标:快速降低站点低质页占比,洗掉“站群/批量模板”算法标记,加速权重恢复。

一、先界定:哪些属于「重度低质同质化页面」(屏蔽筛选标准)

满足任意一条判定为需屏蔽页面:

  1. 文本跨城重复度>50%,仅替换城市名称,无本地实拍、本地案例、本地FAQ;

  2. 纯薄内容页:有效正文<600字,70%为通用营销话术,无区域差异化信息;

  3. 空壳县城分站:上线3个月零流量、零询盘,无本地线下实体佐证;

  4. 违规模板页:堆砌底部全国城市词堆、全站循环跨城内链、NAP信息混乱;

  5. 纯AI批量生成无人工本地化改写,无实景、无本地客户案例。

二、三种屏蔽方案选型区分(按页面修复价值选择)

方案技术手段适用场景优缺点
临时屏蔽(推荐降权急救)meta noindex,follow页面有整改潜力,后续补齐本地素材可恢复收录爬虫仍抓取页面读取规则,不阻断站内权重传递,整改后直接去掉标签即可恢复索引
永久清除彻底屏蔽页面404删除+死链提交无修复价值、长期无素材、僵尸县城分站直接从索引清除,释放抓取预算,彻底消除低质页面基数
目录批量拦截robots Disallow 整区县目录批量批量无价值县城集群,短期内不运营一次性拦截整批页面抓取,节省抓取配额;缺点:无法传递内链权重

核心禁忌

禁止同时使用 noindex + canonical,搜索引擎指令冲突,会出现索引错乱、页面不收录异常; 禁止 noindex,nofollow,会切断站内权重流转,拖累整站权重,统一使用 noindex,follow

三、方案1:临时批量屏蔽(noindex标签,降权急救首选)

适合:重度同质化但后续计划补齐本地实拍、案例整改的城市页面,无需删页,快速降低低质页占比。

1. 页面头部统一添加标签(单页代码)

<meta name="robots" content="noindex,follow" />
  • noindex:禁止页面进入搜索/AI索引,不再参与排名、曝光;

  • follow:允许爬虫抓取页面内链,保证站点权重正常流转,不拖累全站。

2. GEO系统批量自动化部署(批量操作)

  1. 后台按筛选条件(重复度>50%、素材完整率0、零流量)批量勾选城市页面;

  2. 模板增加判断逻辑:低质页面自动输出noindex标签,优质本地页面不输出;

  3. 区分城市目录:区县低质站统一自动挂载标签,一二线核心优质站不受影响。

3. 生效与观测

  1. 爬虫下次抓取页面识别标签后,1–4周逐步从索引脱库;

  2. 每日查看百度资源平台索引量,低质页面持续减少,优质页面收录占比提升;

  3. 整改完成后,批量移除noindex标签,页面重新进入收录池。

4. AI大模型同步生效逻辑

豆包、文心爬虫读取noindex标签后,会将页面移出AI问答信源库,不再作为问答素材,同步消除AI侧低质标记。

四、方案2:永久彻底屏蔽(删除页面+404+死链提交,无修复价值页面)

适合:僵尸县城分站、完全无本地素材、无整改必要的空壳模板页,一次性清除,彻底释放抓取预算。

步骤1:批量删除页面,统一返回404状态码

  1. GEO后台批量勾选低质城市页面,执行删除,服务器统一返回标准404;

  2. 禁止返回200空白页、301跳转,必须真实404,否则死链提交不生效。

步骤2:导出全部待删除URL,制作死链文件

  1. 导出清单,生成 silian.txt,每行1条完整URL:

https://xxx.com/xx县/
https://xxx.com/yy县/
  1. 单文件≤5万条,小于10MB,存放网站根目录;

  2. 多批次拆分,避免单文件超限。

步骤3:百度搜索资源平台批量提交死链

  1. 进入【资源提交-死链提交】,上传txt/xml死链文件;

  2. 设置更新周期1天,提交后平台1周内批量清除索引;

  3. 同步在豆包AI站长后台提交失效页面清单,AI渠道同步清除收录。

补充:批量目录规则提交(大量区县统一删除)

若一整个区县集群全部低质,使用规则提交,匹配目录前缀一键屏蔽整批页面,无需逐条导出URL。

五、方案3:robots.txt目录批量拦截(整批低质区县短期关停)

适合:大批量县城分站,短期1–3个月不运营、暂不整改,一次性拦截爬虫抓取,节约抓取预算。

1. robots.txt新增拦截规则示例

# 拦截所有重度低质XX县分站目录
Disallow: /shanxi/county/
Disallow: /hubei/county/
# 放开核心优质地级市,不影响正常收录
Allow: /hubei/wuhan/
Allow: /hubei/yichang/

2. 关键注意事项

  1. Disallow仅阻止爬虫抓取,若页面此前已收录,不会自动脱库;需配合noindex或删除404才能彻底清除索引;

  2. 仅短期过渡使用,长期整改页面后必须删除Disallow规则,否则优质页面无法被抓取收录;

  3. 不要拦截主站、核心城市、sitemap、FAQ、案例栏目。

六、前置操作:批量筛选重度低质页面(自动化筛选流程)

  1. 相似度批量检测后台批量全站比对,导出重复度>50%城市页面清单,作为第一屏蔽批次;

  2. 素材完整性筛查筛选无本地实拍、无本地案例、本地FAQ条数<3的页面;

  3. 流量数据筛选统计近90天UV=0、无任何询盘的僵尸分站;

  4. NAP合规筛查同城市多套电话/地址、POI虚假匹配页面;

  5. 分批次屏蔽:先屏蔽重复度>70%重度页面,再处理50%–70%中度同质化页面,避免一次性大规模操作引发算法波动。

七、屏蔽后配套加速权重修复动作(必做)

  1. 清理站内跨城内链删除指向被屏蔽低质页面的全站批量内链,仅保留核心优质城市内部互链;

  2. sitemap剔除屏蔽页面修改XML站点地图,移除挂载noindex/已404删除的页面,防止爬虫持续分配抓取预算;

  3. 集中资源加权优质页面每周更新5–10个核心城市深度本地化原创内容,拉高全站优质内容占比,对冲低质页面带来的站点负面评分;

  4. 每日监控指标

  • 收录率逐步回升(目标≥80%);

  • 爬虫抓取成功率稳定≥90%;

  • 站长平台不再推送“低质批量模板内容”告警。

八、高频避坑要点

  1. 不要混用noindex与canonical:指令冲突,爬虫无法判断索引规则,页面既不收录也不传递权重;

  2. 不要用noindex,nofollow:阻断站内权重流转,整站抓取预算、排名持续下跌;

  3. 不要仅靠robots拦截不做noindex/404:已收录页面不会自动清除,依旧占用索引额度;

  4. 不要一次性屏蔽全站30%以上页面:大规模索引删除会触发站点信用二次扣分,分3批间隔7天操作;

  5. 屏蔽不代表永久放弃:使用noindex临时屏蔽的页面,补齐本地实拍、差异化FAQ、调整重复度至30%以内后,可移除标签恢复收录;

  6. AI渠道需同步处理:仅屏蔽百度页面,豆包、文心仍会读取低质内容,同步提交失效页面清单消除AI低质信源标记。

九、分场景落地执行流程

场景1:中度降权,大量同质化页面计划整改

  1. 批量筛选重复度50%–70%页面;

  2. 全站模板自动挂载 noindex,follow

  3. 分批次补齐本地素材、改写文案,达标后批量移除标签;

  4. 每周更新核心城市优质内容拉升站点评分。

场景2:重度K站,大量无价值县城僵尸分站

  1. 批量删除空壳页面,返回404;

  2. 导出URL制作死链文件,百度+豆包后台同步提交;

  3. robots拦截剩余低质区县目录,阻断无效抓取;

  4. 集中运营3–5个核心城市养站,加速权重恢复。