urllib 相关问题

Python模块提供了一个高级接口,用于通过万维网获取数据。 urllib2的前身。在Python 3中,urllib2和urllib已经重新组织并合并到urllib中。

用 Python 从许多 Google 搜索中抓取链接

我想抓取 Google 搜索中显示的 23000 次搜索中显示的第一个链接,并将它们附加到我正在使用的数据框中。这是我收到的错误: 回溯(最近一次调用最后一次): 弗...

回答 1 投票 0

尝试从图像 url 中抓取图像(使用 python urllib )但获取 html

我尝试从以下网址获取图像。 http://upic.me/i/fj/the_wonderful_mist_once_again_01.jpg 我可以右键单击并另存为,但是当我尝试使用 urlretrieve 时 导入你...

回答 2 投票 0

使用正则表达式通过从雅虎抓取股票来获取单行多个数据[已关闭]

导入urllib 进口重新 stock_symbols = ['aapl'、'间谍'、'goog'、'nflx'、'msft'] 对于范围内的 i(len(stocks_symbols)): htmlfile = urllib.urlopen("https://finance.yahoo.com/q?s=" +stocks_symbo...

回答 3 投票 0

如何用Python对网站进行截图?

我想截取 URL 的屏幕截图。比如说,当我打开一个网站 www.espncricinfo.com 时,我想截取该页面的屏幕截图并将其保存在本地。此保存的图像可以转换为...

回答 4 投票 0

python urllib,返回特定网址的空页面

我在处理 urllib 的特定链接时遇到问题。下面是我使用的代码示例: 从 urllib.request 导入请求,urlopen 进口再 网址=“” 请求 = 请求(网址) html_page = urlopen...

回答 3 投票 0

页面在浏览器中加载,但在 python requests 库中给出 404 错误

我见过类似的问题,但没有一个解决方案适合我的情况。我找到了一个链接,可让我下载包含 Tableau 仪表板中的数据的 csv 文件。当我在浏览器中打开此链接时,它

回答 1 投票 0

UnicodeWarning:Unicode 相等比较。如何替换 NavigableString 数据类型中的非标准字符?

我正在使用 BeautifulSoup 使用 Python 2.7 抓取一个网站。这是我的代码: # -*- 编码:utf-8 -*- 从 BeautifulSoup 导入 BeautifulSoup 导入urllib 导入 json url = 'http://www.website.com'

回答 1 投票 0

使用 Python Requests 下载后 PDF 已损坏

我需要使用python从这些链接之一下载文件,但下载后pdf将无法打开。 https://fnet.bmfbovespa.com.br/fnet/publico/exibirDocumento?id=693676 https://fnet.bmfbovespa...

回答 1 投票 0

如何从网页中仅获取纯文本

我正在尝试使用 urllib 和 bs4 访问网页的内容: 导入bs4 从 urllib.request 导入请求,urlopen url =“https://ar5iv.labs.arxiv.org/html/2309.10034” 请求 = 回复...

回答 1 投票 0

根据 URL 中的条件在 Streamlit 中导入 OneDrive 文件

我创建了一个应用程序,可以根据多个文件(> 200)中的数据为我和我的团队生成自动报告。在我的本地主机 Streamlit 应用程序上,我可以输入一些参数(年份,

回答 1 投票 0

Python 3.10.6 alembic postgresql 密码带有特殊字符

迁移/env.py: f = 打开(“/etc/config.json”,“r”) json_config = json.load(f) 配置=上下文.config 部分 = config.config_ini_section print(f"密码: {json_config['

回答 2 投票 0

Python 3:urllib.error.HTTPError:HTTP 错误 403:禁止

这个问题已经在这里被问过几次了,我已经阅读并尝试了大部分答案,但我还没有更接近解决方案。 当我在浏览器中手动输入 URL 时(我尝试过 Firefox、Edge ...

回答 1 投票 0

urllib2.HTTPError:HTTP 错误 403:禁止

我正在尝试使用 python 自动下载历史股票数据。我尝试打开的 URL 以 CSV 文件响应,但我无法使用 urllib2 打开。我尝试将用户代理更改为

回答 7 投票 0

python urllib.request.URLOpener 返回 301 响应

我试图从不允许机器人的网站下载材料。我可以设法通过这种方式将标头传递给请求: url = 'https://www.superdatascience.com/machine-learning/' 要求=你...

回答 1 投票 0

如何使用python从内网站点抓取URL数据?

我需要一个Python Warrior来帮助我(我是菜鸟)!我正在尝试使用模块 urllib 从内部网站点抓取某些数据。不过,由于这是我公司的网站,仅供员工使用...

回答 2 投票 0

urllib.error.HTTPError:HTTP 错误 400:错误请求 - Pytube

我的 pytube 下载程序最近突然停止工作并返回此错误: 回溯(最近一次调用最后一次): 文件“C:\Users\winte\Music\{Python#playlister}.py”,第 191 行,...

回答 1 投票 0

如何使用 python 3 抓取亚马逊

我正在尝试阅读给定产品的所有评论,这既是为了学习Python,也是为了一个项目,为了简化我的任务,我随机选择了一个产品来编码。 我想阅读的链接是A...

回答 4 投票 0

使用 python urllib 从 url 下载图像但收到 HTTP 错误 403: Forbidden

我想使用 python 模块“urllib.request”从 url 下载图像文件,该模块适用于某些网站(例如 mangastream.com),但不适用于另一个网站(mangadoom.co)接收错误“HTTP

回答 3 投票 0

IngestionTimestamp 包含 %3A 符号而不是分号

在我的 Azure Blob 存储中,我有一个名为 IngestionTimestamp 的 ISO 8601 格式的文件夹。但我想在时间部分加上分号。相反,我得到了 %3A 符号。 我尝试过使用 urllib...

回答 1 投票 0

用 Python 替换 URL 中的主机名的最简洁方法是什么?

在Python中,有一个标准库模块urllib.parse用于处理URL解析: >>> 导入 urllib.parse >>> urllib.parse.urlparse("https://127.0.0.1:6443")

回答 1 投票 0

© www.soinside.com 2019 - 2024. All rights reserved.