查看完整题解
参考回答
直接回答
关键内容只在脚本请求结束后才出现时,搜索服务得能访问页面、运行相关脚本并读到接口结果。Google 会进行 JavaScript 渲染,渲染、发现链接和最终收录仍是不同阶段。
讲清原理
如果爬虫只拿到一个空壳,或者内容等用户登录、点按钮才加载,渲染后的文档就可能缺少用户想搜到的正文。首页 URL 能搜到,也不能证明每篇内容有可独立发现的地址。
例子与易错点
公开文章页可在响应 HTML 中带上标题和正文,让脚本补收藏状态或评论交互。检查服务实际返回和搜索工具里的渲染结果是否都含关键文本。
相关题 第 30 题、第 31 题、第 32 题。
掌握程度由你主动标记,阅读和收藏不会自动改变状态。