爬虫无法下载附件,如何解决附件 URL 处理问题?

ID:20296 / 打印

爬虫无法下载附件,如何解决附件 url 处理问题?

爬虫附件下载问题解答

在给定的代码片段中,无法下载附件的原因可能是缺少对附件 url 的正确处理。代码中使用 download 函数下载附件,但未正确提取附件 url。

为了解决此问题,需要修改代码中的以下部分:

if '<a' in contents:  # 判断附件     fileUrls = re.findall(r'href="(.*?)"', contents, 0)     for fileUrl in fileUrls:         fileUrl = 'http://www.liyang.gov.cn/' + fileUrl         print(fileUrl)         download(fileUrl.split('/' + '[-1], fileUrl, path)  # 下载附件

修改后,代码可以正确提取附件 url 并完成下载附件操作。

上一篇: MySQL数据库插入数据时遇到“找不到字段”错误,如何解决?
下一篇: Python 将数据写入多个 MySQL 表时,第二个表始终报错,如何解决?

作者:admin @ 24资源网   2025-01-14

本站所有软件、源码、文章均有网友提供,如有侵权联系308410122@qq.com

与本文相关文章

发表评论:

◎欢迎参与讨论,请在这里发表您的看法、交流您的观点。