无刷新网页抓取
我想从这个网站提取数据:http://webcharts.fxserver.com/pairs/activePairs.php?profile=CMSForexWebQuotes1-D
我用火狐浏览器的火bug工具找到了这个网址,并且通过urlopen和正则表达式从网页的HTML代码中提取了数据。但是我必须每秒都进行一次urlopen请求,以便更新HTML代码里的数据。
我想找一种方法,可以在一次请求中提取数据,而不需要刷新网页,也不需要每秒都进行一次urlopen请求……
看起来这个网页是用ajax技术写的,但我不太确定。
有没有办法在不每秒发送请求的情况下提取数据(而且不使用cURL)?
附注:我在StackOverflow上看过好几个类似的帖子,但没有一个真正解决了这个问题,尤其是没有使用cURL的情况。
谢谢大家的帮助。
编辑:使用urlopen时,我得到的是一个“冻结”的字符串,里面包含了某个固定时间的HTML代码。我需要每秒都进行一次urlopen请求,以便更新我需要的HTML代码和数据。