web-crawler 相关问题

我在使用带有无头chrome=115.0.5790.170的selenium时遇到问题，我有一张桌子和一个带有这个标签的td。我在无头 chrome=115.0.5790.170 中使用 selenium 时遇到问题，我有一张桌子和一个带有此标签的 td。 <a id="formSegundaViaFatura:dtListaSegundaViaFaturaDebitoPendente:0:j_idt64" href="#" class="ui-commandlink ui-widget" onclick="PrimeFaces.addSubmitParam('formSegundaViaFatura',{'formSegundaViaFatura:dtListaSegundaViaFaturaDebitoPendente:0:j_idt64':'formSegundaViaFatura:dtListaSegundaViaFaturaDebitoPendente:0:j_idt64'}).submit('formSegundaViaFatura');return false;">2 via</a> 此代码将在没有图形资源的虚拟机中运行，只有终端，这就是我需要无头的原因。但是当我尝试与发送 click() 的此元素进行特定交互时，会出现错误。 Message: element not interactable (Session info: headless chrome=115.0.5790.170) Stacktrace: 如果有人知道我如何避免这个错误并与这个元素交互，我将非常感激，因为这是使这个爬虫在无头模式下工作的最后一部分。如果您的问题是由使用 headless Chrome 引起的，那么您可以尝试使用 Chrome 的 newer 无头模式，该模式的激活方式如下： options.add_argument("--headless=chrome") 在完整的脚本中，看起来像这样： from selenium import webdriver from selenium.webdriver.chrome.service import Service service = Service() options = webdriver.ChromeOptions() options.add_argument("--headless=chrome") driver = webdriver.Chrome(service=service, options=options) # ... This is where you automate things... driver.quit() 您的自动化现在将在新的无头模式下获得与常规有头 Chrome 相同的结果。

selenium-webdriver selenium-chromedriver web-crawler google-chrome-headless

回答 1 投票 0

网络抓取 Instagram 时出现问题

def insta_searching(word): url = "https://www.instagram.com/explore/tags/" + str(word) 返回网址 def select_first(驱动程序): 首先 = driver.find_element_by_css_selector("div.

google-chrome selenium-webdriver webdriver web-crawler executable-path

回答 1 投票 0

为什么这个网站无法使用 Selenium + Python 正确加载 cookie？

我正在做一些网络抓取，实际上我的代码有问题。我想做的就是：进入网站 https://solucoes.receita.fazenda.gov.br/Servicos/cnpjreva/cnpjreva_solicitacao.asp 哇...

selenium-webdriver web-scraping cookies beautifulsoup web-crawler

回答 1 投票 0

我想用BeautifulSoup和Requests构建一个网络爬虫，我还需要实现一个我不知道如何编码的关键字系统

我是一个完全的初学者。我懂一点 Java，但仅此而已。从 bs4 导入 BeautifulSoup 从 pprint 导入 pprint url = 'https://jc.ne10.uol.com.br/economia' 数据 = requests.get(url) 我的...

python python-3.x web-scraping web-crawler

回答 2 投票 0

如何通过Python爬行从网站获取数据

如何通过Python爬行从网站获取数据项目介绍：对于我的工作项目。我需要从网站获取数据并在 Excel 文件或 csv 文件中显示结果。我如何从