我如何从网站获取确切的URL?

问题描述 投票:0回答:1

我不确定如何确定问题的框架(也许是我找不到答案的原因,所以如果它是重复的问题,请告诉我),但我无法获得该网站的确切地址我要刮网站地址为“ https://www.nysar.com/find-a-realtor/”。我只想在Albany, NY中抓取信息。当我按纽约州奥尔巴尼的地址进行搜索时,我得到了新的搜索结果,但URL仍然相同。有什么办法可以找到详细的URL地址?预先谢谢!

url web-scraping
1个回答
0
投票

该页面是使用javascript动态加载的,因此,要查看搜索结果的来源,您必须进入浏览器的Developer工具并在Network / XHR下查找它。有很多信息about this, including here。这不是一个简单的概念,因此在尝试抓取此类网站之前,您应该对其进行研究。

无论如何,in this particular case, the data is extracted from here.

© www.soinside.com 2019 - 2024. All rights reserved.