用于在特定网站中搜索的Java程序

Question

我想编写Java代码来解析某个网站。网站中的每个结果都显示在指定的URL中。我该如何开始？有没有好的图书馆可以使用？我能从您在这一领域的经验中受益吗？

Answer 1

搜索“网络搜寻器”，您会找到许多示例（例如Crawler4J或Crawler），以及如何解决此问题。

除了Java之外，在从网页上抓取内容时，您经常会Python脚使用Python-我不是Python专家，但似乎很适合完成任务。