devel/py-grab/pkg-descr

   1 Grab is a python web scraping framework. Grab provides tons of helpful methods
   2 to scrape web sites and to process the scraped content:
   3
   4  * Automatic cookies (session) support
   5  * HTTP and SOCKS proxy with and without authorization
   6  * Keep-Alive support
   7  * IDN support
   8  * Tools to work with web forms
   9  * Easy multipart file uploading
  10  * Flexible customization of HTTP requests
  11  * Automatic charset detection
  12  * Powerful API of extracting info from HTML documents with XPATH queries
  13  * Asynchronous API to make thousands of simultaneous queries. This part of
  14    library called Spider and it is too big to even list its features in this
  15    README.
  16  * Python 3 ready
  17
  18 WWW: http://grablib.org/