curl 相关问题

cURL是一个库和命令行工具，用于使用各种协议（如HTTP，FTP和SFTP）传输数据。 cURL项目生成两个产品libcurl和cURL。无论使用哪种cURL产品，此标签都涵盖cURL的所有用法

通常，我希望输入一个 URL，然后将该 URL 处的图像导入到数据库中。这是一些让我很满意的代码，但也欢迎其他替代方案。如果我尝试将 $image 存储到

php image web-scraping curl

回答 1 投票 0

iam 尝试使用 php curl 开发内容抓取器，我需要从网址检索内容，例如：http://mashable.com/2011/10/31/google-reader-backlash-sharebros-petition/ 并存储它在 csv 文件中...

php web-scraping curl

回答 1 投票 0

使用 cURL 在单个脚本中发送 24-25 封电子邮件后，SendGrid v3 API 端点速度变慢

我有一个 PHP 脚本，每周使用 SendGrid v3 API 端点向客户发送一次电子邮件。目前，每周大约需要发送 90 - 120 封电子邮件。 ...

php email curl sendgrid-api-v3 sendgrid-templates

回答 1 投票 0

通过cURL发布json

我有一个大问题。我无法找到解决方案。数据通过 GET 通过表单提交。然后通过 AJAX 重新加载结果。我已经通过 cURL 尝试了所有可能的方法。服务器甚至...

php json curl

回答 1 投票 0

将图像从一个站点抓取到另一个站点

我是新来的，总体来说对网络开发还很陌生。我的背景是 3D 建模和设计，但我最近启动了一个项目，我认为该项目可能是 3D 社区的一个很好的资源。 ...

web-scraping curl beautifulsoup lxml

回答 2 投票 0

curl 无法获取网页内容，为什么？

我正在使用curl脚本来访问链接并获取其内容以进行进一步操作。以下是链接和curl脚本：我正在使用curl脚本来访问链接并获取其内容以进行进一步操作。以下是链接和curl脚本： <?php $url = 'http://criminaljustice.state.ny.us/cgi/internet/nsor/fortecgi?serviceName=WebNSOR&templateName=detail.htm&requestingHandler=WebNSORDetailHandler&ID=368343543'; //curl script to get content of given url $ch = curl_init(); // set the target url curl_setopt($ch, CURLOPT_URL,$url); // request as if Firefox curl_setopt($ch, CURLOPT_HTTPHEADER, Array("User-Agent: Mozilla/5.0 (Windows; U; Windows NT 5.1; en-US; rv:1.8.1.15) Gecko/20080623 Firefox/2.0.0.15") ); curl_setopt($ch, CURLOPT_NOBODY, false); curl_setopt($ch, CURLOPT_FOLLOWLOCATION, true); curl_setopt($ch, CURLOPT_RETURNTRANSFER, true); $result= curl_exec ($ch); curl_close ($ch); echo $result; ?> 但是网站并没有通过脚本排除它，它在结果中给用户带来异常，但如果我们通常将网址粘贴到浏览器中，它就可以完美地打开页面。请帮忙，我在这里做错了什么。感谢和问候我运行了以下程序/脚本，页面已正确下载。这很可能意味着您运行脚本的服务器无法到达“criminaljustice.state.ny.us”处的服务器。这要么是因为您的服务器配置错误，要么是他们的服务器明确阻止您，这是积极的屏幕抓取的常见结果。 <?php $url = 'http://criminaljustice.state.ny.us/cgi/internet/nsor/fortecgi?serviceName=WebNSOR&templateName=detail.htm&requestingHandler=WebNSORDetailHandler&ID=368343543'; $ch = curl_init(); curl_setopt($ch, CURLOPT_URL,$url); curl_setopt($ch, CURLOPT_HTTPHEADER, Array("User-Agent: Mozilla/5.0 (Windows; U; Windows NT 5.1; en-US; rv:1.8.1.15) Gecko/20080623 Firefox/2.0.0.15") ); curl_setopt($ch, CURLOPT_NOBODY, false); curl_setopt($ch, CURLOPT_FOLLOWLOCATION, true); curl_setopt($ch, CURLOPT_RETURNTRANSFER, true); $result= curl_exec ($ch); curl_close ($ch); echo $result; 其他故障排除提示 - 如果您对运行 PHP 脚本的计算机有 shell 访问权限，请运行以下命令 curl -I 'http://criminaljustice.state.ny.us/cgi/internet/nsor/fortecgi?serviceName=WebNSOR&templateName=detail.htm&requestingHandler=WebNSORDetailHandler&ID=368343543' 这将输出响应标头，其中可能包含一些有关请求失败原因的线索。对于用户代理，我认为你想使用 CURLOPT_USERAGENT 常量 curl_setopt($ch, CURLOPT_USERAGENT, "Mozilla/4.0 (compatible; MSIE 5.01; Windows NT 5.0)"); 我遇到了同样的问题，最终导致 followlocation 选项未设置。我认为默认情况下，curl 会将其设置为 true，但我想不会！？一旦我设置它，它就得到了完整的网站没有问题用户代理是否应该位于这样的数组中？我以前没见过这样做的。尝试仅使用纯字符串，即 curl_setopt($ch, CURLOPT_HTTPHEADER, 'User-Agent: Mozilla/5.0 (Windows; U; Windows NT 5.1; en-US; rv:1.8.1.15) Gecko/20080623 Firefox/2.0.0.15');

php web-scraping curl

回答 4 投票 0

提取 Google 搜索结果重定向

我读过几篇关于如何提取 Google 搜索结果 URL 的 stackoverflow 帖子，并使用 python、curl 和 beautifulsoup 编写了类似的实现。我的问题是，我怎样才能

python web-scraping curl beautifulsoup

回答 1 投票 0

如何使用 SIM800L (Firebase) 发送 PUT 请求

我正在使用 SIM800L 模块将温度数据发送到 Firebase 实时数据库。我能够使用 HTTPACTION AT 命令成功 POST 和 GET。我在实时数据中有一个条目...

http curl firebase-realtime-database put at-command

回答 2 投票 0

使用curl -sS安装composer https://getcomposer.org/installer | PHP命令

我一直在尝试使用以下命令在我的机器上安装 Composer 卷曲 -sS https://getcomposer.org/installer | php 命令，它给出以下错误： #!/usr/bin/env php 您的

ubuntu curl composer-php

回答 2 投票 0

在 PHP 中登录 Javascript

我一直在使用 PHP 为内部应用程序创建一个网络抓取工具，但其中一个页面有 JavaScript 登录，是否有任何方法可以像往常一样自动登录以抓取数据？（我是你...

javascript php web-scraping curl

回答 2 投票 0

在 php 中抓取大量页面的最快方法是什么？

我有一个数据聚合器，它依赖于抓取多个网站，并以用户可搜索的方式索引其信息。我需要能够每天抓取大量页面，...

php web-scraping curl curl-multi

回答 3 投票 0

如何制作一个curl命令，将上一个cmd命令的结果发送到domain/ip/webhook

我正在尝试用两个单独的命令组成一个简洁的命令。第一个命令将产生某种输出。我希望第二个命令是一个发送完整内容的curl命令...

windows curl cmd

回答 1 投票 0

通过 CURL 发布 JSON 并进行基本身份验证

我正在从命令行使用 Curl 来调试我正在开发的小型 Web API。 Web API 需要基本身份验证和 JSON 对象作为输入 (POST)。目前，这项基本认证工作...

json api http post curl

回答 3 投票 0

尽管没有人在侦听此端口，但为什么对本地主机的卷曲请求会被处理/阻塞？

我正在调查一个问题，即我无法在新安装的 Linux Ubuntu 22 计算机上通过暴露的端口 80 或 8080 连接到 docker 容器。相反，每个请求都会挂起。所以我重新启动了

linux ubuntu curl networking

回答 1 投票 0

通过curl API加载curl配置文件

我在 C++11 应用程序中使用 libcurl API。由于curl 有多个选项，我希望应用程序能够从配置文件加载所有选项。我看到命令行

c++ curl libcurl

回答 1 投票 0

将curl文件上传命令转换为C# httpclient

要上传抖音视频文档，请指定此curl命令。但是，我下面的代码（帖子正文中包含视频路径）看起来不是处理它的正确方法。最好的转换方式是什么

.net .net-core curl httpclient

回答 1 投票 0

find <> -exec curl ... 对于 ftp 文件上传，有 url 编码问题，对于带有随机字符的文件名

用例：我正在尝试将数据/所有内容从我的 Android 手机复制到同一 wifi 上的笔记本电脑，并维护目录结构。我知道有很多方法，但我喜欢这样做（如下）...

curl urlencode

回答 1 投票 0

C# .Net Framework 中 Gemini AI API 的 CURL 代码

我正在 c# .net 框架中开发一个关于使用 Google Gemini API 制作人工智能的窗口应用程序。我在 CURL 中阅读了 google gemini api 的文档超过 10 遍。在 ChatGPT 的帮助下，我写了......

c# .net curl artificial-intelligence google-gemini

回答 1 投票 0

如何通过curl（cmd/bat）下载私人pastebin粘贴

我想使用curl 通过批处理/cmd 文件下载我的私人粘贴。由于它是私有的，我必须使用我的 API 开发密钥登录，但这不起作用。输出是一些 HTML 代码。我已经试过了...

batch-file curl cmd paste pastebin

回答 1 投票 0

如何for循环CURL命令？

我正在使用 Watson 的 Speech-To-Text Lite 服务，并且我正在尝试找到一种方法来自动加载新音频文件进行转录。我对 Bash 很陌生，所以我不清楚更多

bash curl ibm-watson speech-to-text

回答 2 投票 0

curl 相关问题

最新问题