自动发送和接收来自HTML页面的数据

Question

我不知道该用哪个模块。 我有超过100个文件，我需要提交到下面的网页和检索结果。在

http://bip.weizmann.ac.il/oca-bin/lpccsu

如果我可以自动将文件发送到

'<'input type="file" name="filename"  size='30''>'

标记，然后接收返回的html，以便可以用正则表达式处理它。在

谢谢

编辑以查看示例输出，将radiobutton设置为CSU，并在“PDB entry”文本框中输入1eo8

Answer 1

@Anake这里有3个Pythonic包，它们提供了检索和解析的解决方案：

从他们的网站：

Beautiful Soup会解析您提供的任何内容，并为您执行树遍历操作。你可以告诉它“Find all links”，或“Find all the links of class externalLink”，或“Find all links which URL match”foo.com网站或者“找到有粗体文本的表标题，然后给我该文本。”1

在Andy Lester的Perl模块2之后，使用Python进行有状态编程式web浏览

Scrapy是一个快速的高级屏幕抓取和web爬行框架，用于抓取网站并从页面中提取结构化数据。它可以用于广泛的目的，从数据挖掘到监控和自动化测试。3