Python Tutorial - Google Scraper Thousands of URLs in Seconds

Опубликовано: 20 Апрель 2013
на канале: kholidfu

11,700

In this video, I will show you how to scrape thousands of google search results in a matter of seconds. The main script (retriever-multi.py) I've got from SO forum, then I built a simple script (reader.py) to parse the result using re and beautifulsoup module then print the result to the screen.

For this example I scrape 10 pages of google search result, each page contains 100 results.

Combined with good proxy management, you will have a powerful scraper in Python.

Смотрите видео Python Tutorial - Google Scraper Thousands of URLs in Seconds онлайн, длительностью часов минут секунд в хорошем качестве, которое загружено на канал kholidfu 20 Апрель 2013. Делитесь ссылкой на видео в социальных сетях, чтобы ваши подписчики и друзья так же посмотрели это видео. Данный видеоклип посмотрели 11,700 раз и оно понравилось 14 посетителям.

1,667,130

40 тыс