Python爬虫实战案例——5行Python代码爬取3000+ 上市公司的信息(附源码)

Python爬虫实战案例——5行Python代码爬取3000+ 上市公司的信息(附源码)_第1张图片

大家好~今天分析一个爬虫小案例,小白或者爬虫入门的小伙伴推荐阅读!

前言

入门爬虫很容易,几行代码就可以,可以说是学习 Python 最简单的途径。

刚开始动手写爬虫,你只需要关注最核心的部分,也就是先成功抓到数据,其他的诸如:下载速度、存储方式、代码条理性等先不管,这样的代码简短易懂、容易上手,能够增强信心。

基本环境配置

  • 版本:Python3

  • 系统:Windows

  • 相关模块:pandas、csv

爬取目标网站

Python爬虫实战案例——5行Python代码爬取3000+ 上市公司的信息(附源码)_第2张图片

实现代码

import pandas as pdimport csvfor i in range(1,178):  # 爬取全部页    tb = pd.read_html('http://s.askci.com/stock/a/?reportTime=2017-12-31&pageNum=%s' % (str(i)))[3]     tb.to_csv(r'1.csv', mode='a', encoding='utf_8_sig', header=1, index=0)

3000+ 上市公司的信息,安安静静地躺在 Excel 中:

你可能感兴趣的:(python,chrome,开发语言,爬虫,pandas)