python网络爬虫

Ref:

http://blog.csdn.net/pleasecallmewhy/article/details/8922826

====

The plug-in for Firefox/Chrome to get web page content: 

Firefox corresponding to "firebug" plug-in. (Net --> All/XHR)

chrome corresponding to "chrome sniffer" plug-in. (Network --> All/XHR)

====

The following contents ref: 

http://www.ruanyifeng.com/blog/2008/06/firebug_tutorial.html

Firebug窗口概览

* Console标签： 主要使用javascript命令行操作，显示javascript错误信息，在底部的>>>提示符后，你可以自己键入javascript命令。

* HTML标签： 显示HTML源码，并且像DOM等级结构那样，每行之前有缩进。你可以选择显示或不显示某个子节点。

* CSS标签：浏览所有已经装入的样式表，可以当场对其修改。在Firebug窗口上部，"edit"命令的旁边，有一个本页面中所有样式表的下拉列表，你可以选择一个样式表进行浏览。

* Script标签： 显示javascript文件及其所在页面。在Firebug窗口上部，"inspect"命令的旁边，有一个本页面中所有Javascript文件的下拉列表，你可以选择一个进行浏览。你可以在javascript命令中，设置断点（breakpoint）及其出现的条件。

* DOM标签： 显示所有的页面对象和window物体的属性。因为在javascript中，所有变量都是window物体的属性，所以Firebug会显示所有变量和它们的值。

* Net标签：显示本页面涉及的所有下载，以及它们各自花费的时间，各自的HTTP请求头信息和服务器响应的头信息。XHR标签对AJAX调试很有用