运行站点爬虫的java

Question

我正在用java编写一个网站爬虫，我想知道运行它最明智的方式是什么？换句话说，我是按照标准的web应用程序路线，将其放入web服务器并使用某种消息队列，还是忘记了容器，将其作为独立的java应用程序运行

这不是一个真正的网络爬虫，因为它只关心x个网站，但我想不断地在这些网站上循环（24小时），以确保我有最新的内容