恒美微站
首页
关于我们
建站服务
主题模板
案例展示
资讯中心
联系我们
借助ai的第一次爬虫作品
首页
资讯中心
/
借助ai的第一次爬虫作品
借助ai的第一次爬虫作品
发布时间:2026/10/11 11:02:39
import requests# 目标网址以B站首页为例url https://www.bilibili.com/# 模拟浏览器的请求头防止被B站直接拦截返回403headers {User-Agent: (Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/120.0.0.0 Safari/537.36)}# 发送 GET 请求response requests.get(url, headersheaders)# 打印状态码和网页内容的前500个字符print(网页请求状态码:, response.status_code)print(网页源码片段:, response.text[:500])import requestsurl https://www.bilibili.com/headers {User-Agent: (Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/120.0.0.0 Safari/537.36)}response requests.get(url, headersheaders)print(网页请求状态码:, response.status_code)# 新增把抓下来的网页源码保存为一个本地网页文件with open(bili_home.html, w, encodingutf-8) as f:f.write(response.text)print(网页已经成功保存为本地文件啦)