返回首页

抓取

把目标页面/接口/文件的内容实际拿回本地的那个动作,是爬虫的第一步。

做什么会用到

  • 01做爬虫/数据同步:先 fetch 回来再解析
  • 02做 API 联调:浏览器里 fetch() 或后端 axios/requests 都是这个动作
  • 03做 AI 应用接外部知识(RAG):fetch 网页内容喂给模型
  • 04做 SSR/静态生成网站:构建时 fetch 接口数据生成页面
  • 05做完全离线的本地工具:用不到 fetch

想用它怎么问 AI

我要从【XXX 接口/网页】抓数据,用【JS / Python / Go】。请写一段带重试、超时、错误处理的 fetch 代码,再告诉我怎么处理分页和限流。

打个比方

像去仓库拿一整箱货,先不管里面是什么,先拿回来。