Question

使用python进行网页爬虫时，怎么才能有选择地读取内容

Answer 1

1. re匹配目标内容前后的特征值，比如多篇文章页面，都在一个<div id = "name"></div>标签中，那么写正则抓取这部分内容。

2. beautifulsoup有选择节点的方法，可以去看看手册，用beautifulsoup里面的方法，选择目标节点。