查看完整题解
参考回答
直接回答
给每个要收录的页面分配可访问的 URL,直接访问就能拿到相应内容。用有 href 的链接连接列表、分页和详情,让访问者与爬虫都能按路径导航。
讲清原理
JavaScript 可以让分页过程只更新列表,但浏览器刷新新地址时应由服务端正常处理。打开每个地址后,还要看到对应标题、状态码和规范地址。
例子与易错点
商品列表若有无限滚动,另外提供可链接的分页地址与对应列表。不要把所有页都指定为第一页的副本。按搜索服务的说明处理不需要收录的排序与过滤地址。
相关题 第 28 题、第 29 题、第 33 题。
掌握程度由你主动标记,阅读和收藏不会自动改变状态。