先做聚合页还是详情页,取决于需求之间是否共享同一套筛选意图,以及你能否为聚合页提供独立于详情页的增量信息。若多数查询只是同一批条目的不同排序或组合,聚合页优先;若每条查询对应不同主体、不同决策,详情页优先。用火车头采集器使用采集时,这个判断会直接决定标签怎么设、字段怎么落、后续能不能继续扩量。
很多人在小批量测试时发现,把几十条数据按关键词拼成一个聚合页,收录和点击都不错,于是直接放大到几千条。放大之后却出现两种例外:一是聚合页被当成重复内容,二是详情页被拆得过于零碎,每个页面都缺少足够信息支撑。这不是工具本身的问题,而是页面任务在规模化后暴露了边界。
在火车头采集器使用中,这个矛盾通常出现在两个环节:标签规则把不同意图的数据混进同一个聚合维度,或者详情页字段只抓了标题和正文,缺少区分主体的关键属性。样本阶段人工能兜住,规模化后人工兜不住,例外就集中出现。
解释一:需求共享筛选意图,聚合页优先。当用户查询集中在“某类条目的对比、排行、条件组合”,而这些查询可以用同一批字段过滤出来时,聚合页能承接多个长尾。成立条件是:聚合维度稳定,且聚合页能提供详情页没有的排序、对比或范围信息。
解释二:需求指向不同主体,详情页优先。当每个查询对应一个独立对象,用户要的是该对象的完整属性、使用条件或操作步骤时,强行聚合只会稀释信息。成立条件是:详情页字段足够支撑独立判断,且不同主体之间没有可复用的比较结构。
两种解释并不互斥。实际决策更像分层:先用聚合页承接筛选型需求,再用详情页承接主体型需求。关键是先确认你的采集数据里,哪些字段属于筛选维度,哪些字段属于主体属性。
可以从三个可观察的证据入手,不需要额外工具:
这里要注意,抓取量、索引量或某个统计归零,不能单独证明聚合页或详情页做对了。它们还可能来自抓取预算变化、页面质量调整、站点结构改动等合理解释。判断应回到页面任务是否匹配需求结构。
假设你要采集一批设备参数,查询里既有“某型号参数”,也有“某类设备对比”。若直接按型号做详情页,对比类查询没有落点;若直接按类别做聚合页,型号类查询又缺少完整属性。
可先做一步动作:在火车头采集器使用中,把字段分成两组,一组是主体标识(型号、名称),一组是筛选属性(功率、尺寸、适用条件)。然后按以下顺序处理:
这个动作的结果会直接影响下一步:如果聚合页能稳定承接筛选型查询,就继续扩筛选维度;如果详情页先获得稳定入口,就优先补主体属性,而不是急着加聚合页。这里的数字和结果均为假设,用于说明比较方法,不代表真实项目表现。
聚合页优先的做法,不适用于主体之间差异极大、无法用同一组字段比较的场景;详情页优先的做法,也不适用于查询高度同质、只是条件组合变化的场景。此外,当采集来源本身字段缺失严重时,无论先做哪种页面,都应先补字段,而不是先扩页面数量。
把 SEO 理解为改善用户获取内容与搜索引擎理解页面的过程,抓取、索引、排名是不同环节。先做聚合页还是详情页,本质是先决定页面任务,再决定火车头采集器使用中的字段和标签规则。字段定错,页面层级再漂亮也难以稳定扩量;字段定对,聚合和详情可以按需求结构逐步展开。