我不确定如何确定问题的框架(也许是我找不到答案的原因,所以如果它是重复的问题,请告诉我),但我无法获得该网站的确切地址我要刮网站地址为“ https://www.nysar.com/find-a-realtor/”。我只想在Albany, NY
中抓取信息。当我按纽约州奥尔巴尼的地址进行搜索时,我得到了新的搜索结果,但URL仍然相同。有什么办法可以找到详细的URL地址?预先谢谢!
该页面是使用javascript动态加载的,因此,要查看搜索结果的来源,您必须进入浏览器的Developer工具并在Network / XHR下查找它。有很多信息about this, including here。这不是一个简单的概念,因此在尝试抓取此类网站之前,您应该对其进行研究。
无论如何,in this particular case, the data is extracted from here.