Python爬虫实战教程：爬取牛客网刷题记录

1. 项目背景与需求分析

1.1 为什么爬取牛客网刷题记录？

牛客网（nowcoder.com）作为国内领先的在线编程学习和面试准备平台，聚合了大量的算法题和用户刷题记录。爬取用户刷题数据：

• 能帮助我们统计刷题情况，分析刷题效率
• 可辅助复盘历史刷题轨迹，指导学习策略
• 有助于个人或团队构建刷题数据分析系统

1.2 具体需求

• 自动登录牛客网账户（必须模拟登录）
• 爬取指定用户的刷题记录（题目名称、提交时间、结果等）
• 处理动态加载、分页、验证码等反爬障碍
• 最终将数据保存为Excel/CSV便于分析

---

2. 牛客网简介及刷题记录网页结构分析

2.1 牛客网用户登录流程

登录牛客网需要用户名和密码验证，并且存在滑动验证码、图形验证码等安全机制。登录后，服务器会返回带有登录态的Cookie，后续请求必须带上这些Cookie才算已登录。

2.2 刷题记录页面URL分析

例如某用户的刷题记录页面：

bash
复