beautifulsoup 相关问题

Beautiful Soup是一个用于解析HTML / XML的Python包。此软件包的最新版本是版本4，导入为bs4。

使用分页表但没有下一步按钮来抓取网站

我正在尝试从此处分页表的前 3 页中抓取数据：https://www.fda.gov/safety/recalls-market-withdrawals-safety-alerts。到目前为止我只能从第一页获取数据...

python selenium-webdriver web-scraping beautifulsoup

回答 1 投票 0

如何使用Python和BeautifulSoup将<br>分隔的段落转换为多个段落？

一些 html 编写者在中使用，当使用 bs4 抓取它们时很难将它们分开。例子：第1部分第2部分第三部分第四部分 ...

html beautifulsoup

回答 1 投票 0

如何解析隐藏在JS脚本后面的HTML

FCC 有一个数据库，其中包含有关各种广播许可证的详细信息。许多许可证都有这样的页面这些页面（以及相关页面）上的大部分数据都可以很容易地抓取...

javascript python html web-scraping beautifulsoup

回答 1 投票 0

如何使用 BeautifulSoup 更改 HTML <div> 的类？

我正在使用Python和BeautifulSoup修改HTML文件，我可以更改标题的内容，但我找不到更改div类的方法。我的目标是转向：我正在使用Python和BeautifulSoup修改HTML文件，我可以更改标题的内容，但我找不到更改div类的方法。我的目标是转向： <div id="div1" class="blue_titles">test</div> 进入： <div id="div1" class="green_titles">test</div> 我查阅了文档，但无济于事。它可能就在我的脸上，但我找不到它。您可以简单地将新值分配给键class: from bs4 import BeautifulSoup soup = BeautifulSoup("""<div id="div1" class="blue_titles">test</div>""", "lxml") soup.find("div")['class'] = "green_titles" soup # <html><body><div class="green_titles" id="div1">test</div></body></html>

python html beautifulsoup

回答 1 投票 0

使用 BS4 和 python 抓取曼城网站

所以基本上，我想从 https://www.mancity.com/fixtures 网站中提取有关即将到来的比赛日期的所有文本，并将其放入列表中。问题是，我无法提取

python-3.x web-scraping beautifulsoup python-requests

回答 1 投票 0

为什么我在使用 bs4 和 lxml 时会收到额外的文本

我有 div 对象 20:17 ... 我有 div 对象 <div class="body"> <div class="pull_right date details" title="21.11.2024 20:17:23 UTC+07:00"> 20:17 </div> <div class="from_name"> Cheki_FNS </div> <div class="text"> Cash receipt received: from <strong>Komandor trading network</strong> (LLC "TS KOMANDOR") </div> </div> </div> 我使用下一个代码： with open("messages.html", "r", encoding="utf-8") as file: html_content = file.read() soup = BeautifulSoup(html_content, "xml") div_text = soup.find("div", class_="text") if div_text: print(div_text.get_text()) else: print("Error, class text not find") 我期待得到下一行 - “已收到现金收据：来自 Komandor 交易网络 (TS Komandor LLC)”，但我得到“20:17 Cheki_FNS 已收到现金收据：来自 Komandor 交易网络 (TS Komandor LLC)”科曼多有限责任公司）”。文本的某些部分超出了 div 对象的范围，这真的是一个问题吗？根据您的示例，您的选择是正确的，因此请确保您从文件中获得了准确的输入。您还应该检查以下几点：检查某些文件中是否存在另一个 <div>，其类别为 text 不要使用 xml 解析器，它是 HTML -> 概述解析器如果需要链接元素及其属性，可以使用css selectors from bs4 import BeautifulSoup soup = BeautifulSoup(html_content) print(soup.find("div", class_="text").get_text(strip=True)) print(soup.select_one("div.text").get_text(strip=True))

html web-scraping beautifulsoup

回答 1 投票 0

使用 bs4 和 lxml 时会收到额外的文本

我有 div 对象 20:17 ... 我有 div 对象 <div class="body"> <div class="pull_right date details" title="21.11.2024 20:17:23 UTC+07:00"> 20:17 </div> <div class="from_name"> Cheki_FNS </div> <div class="text"> Cash receipt received: from <strong>Komandor trading network</strong> (LLC "TS KOMANDOR") </div> </div> </div> 我使用下一个代码： with open("messages.html", "r", encoding="utf-8") as file: html_content = file.read() soup = BeautifulSoup(html_content, "xml") div_text = soup.find("div", class_="text") if div_text: print(div_text.get_text()) else: print("Error, class text not find") 我期待得到下一行 - “已收到现金收据：来自 Komandor 交易网络 (TS Komandor LLC)”，但我得到“20:17 Cheki_FNS 已收到现金收据：来自 Komandor 交易网络 (TS Komandor LLC)”科曼多有限责任公司）”。文本的某些部分超出了 div 对象的范围，这真的是一个问题吗？根据您的示例，您的选择是正确的，因此请确保您从文件中获得了准确的输入。您还应该检查以下几点：不要使用 xml 解析器，它是 HTML 可以使用CSS选择器从 bs4 导入 BeautifulSoup html_内容=''' <div class="pull_right date details" title="21.11.2024 20:17:23 UTC+07:00"> 20:17 <div class="from_name"> Cheki_FNS <div class="text"> 收到的现金收据：来自Komandor交易网络（有限责任公司“TS KOMANDOR”） </div> </div ''' 汤 = BeautifulSoup(html_content) print(soup.find("div", class_="text").get_text(strip=True)) print(soup.select_one("div.text").get_text(strip=True))

html beautifulsoup

回答 1 投票 0

使用网页抓取来检查商品是否有库存

我正在创建一个Python程序，它使用网络抓取来检查商品是否有库存。该代码是一个 Python 3.9 脚本，使用 Beautiful Soup 4 并请求抓取该项目的可用性。我...

python python-3.x web-scraping beautifulsoup

回答 4 投票 0

BeautifulSoup 未检测到 Divs

我正在尝试解析https://rateyourmusic.com/release/album/tyler-the-creator/igor/reviews/1/ 如果我将 html 文件本地下载到我的系统上，我可以访问具有 class_=review_body 的 div...

beautifulsoup html-parsing

回答 1 投票 0

如何抓取我想要的具体数据？

我正在第一次尝试数据抓取，但无法获取我想要的特定数据。最终，我想确定所有在