Java-如何使用Firebug或任何Java库从URL获取HTML代码，包括其AJAX生成的代码

Abhijeet走在了正确的轨道上，但我将花时间解释浏览器如何处理网页，并帮助您理解为什么您的请求如此困难。

警告这很粗糙，为了简洁明了，我篡改了一些细节

浏览器连接到服务器并使用HTTP检索您请求的页面。下载该页面后，浏览器将搜索该页面中引用的任何其他资源并进行检索。然后，它执行从上到下找到的任何javascript，包括任何引用的脚本。这个javascript可以操作页面，但到目前为止，浏览器并不太关心页面的原始源代码，而是将其内化为DOM或文档对象模型。Javascript实际上只是在操作这个DOM，因为DOM只是一个树结构，不进行任何源代码操作。因此，firebug（或webkit检查器）实际上并没有显示源代码，而是显示DOM的当前状态的表示。

您的请求的问题是，您希望使用一个单独的系统来加载url，然后完成上面的整个过程，不幸的是，这需要您用Java实现整个javascript引擎。

然而，并没有失去一切。HTMLUnit（其他人提到过）是一个可用的无头浏览器，用Java编写，因此您可以将其集成到您的程序中。实际上，这样做超出了这个答案的范围，但主页在这里，API文档在这里。

实现这一点的唯一方法是探查所有GET/POST请求的内容。所以，启动Firebug&查看正在发出什么GET/POST请求。

然后您可以在Java代码中使用URLConnection类来实现这一点。

您也可以尝试使用像htmlunit这样的无头浏览器。