python3使用newspaper快速抓取任何新闻文章正文?

newspaper用于爬取各式各样的新闻网站

1,安装newspaper

pip install newspaper3k

2,直接上代码

from newspaper import Article
url = '你想要爬取的网站url' news = Article(url, language='zh')
news .download() #先下载 news .parse() #再解析
print(news.text) #新闻正文 print(news.title) #新闻标题 print(news.html) #未修改的原始HTML print(news.authors) #新闻作者 print(news.top_image) #本文的“最佳图像”的URL print(news.movies) #本文电影url print(news.keywords) #新闻关键词 print(news.summary) #从文章主体txt中生成的摘要
print(news.images) #本文中的所有图像url