python文本爬虫求教
发布网友
发布时间：2022-04-23 01:14
共1个回答
热心网友
时间：2023-09-11 08:39
看你提问似乎你已经能够拿到所有章节的 url 了？那么直接提取章节正文就可以了
用 requests 和 pyquery 两个库：
第一步：构造网络请求，获得网页内容：
import requestsfrom pyquery import PyQuery as pq
r = requests.get("http://www.ccler.com/hlm/01/mydoc014.htm")
cont = r.content
第二步：解析网页内容：
简单粗暴的办法：text = pq(cont).text()
第一行就是标题，余下的就是正文。
