Скачать GScraper – бесплатный парсер Google.

Тема в разделе "Программы, скрипты", создана пользователем Gannicus, 4 янв 2014.

Метки:
  1. Gannicus

    Gannicus Свой

    Регистрация:
    2 янв 2014
    Сообщения:
    338
    Симпатии:
    665
    Давайте рассмотрим еще один бесплатный парсер выдачи Google GScraper. Парсер является лучшим в своем роде благодаря высокой скорости парсинга, возможности настраивать парсер под различные нужды, ну и конечно бесплатности.

    После запуска парсера мы видим три вкладки «Proxy», «Options» и «Scrape» в которых можно задать соответствующие настройки (ввести прокси-лист, задать таймаут, максимальное количество потоков, указать файл для экспорта результатов парсинга, получить тайтлы спарсенных URL и т.д.). Оставим эти настройки по умолчанию. Прокси использовать не будем. При длительном парсинге без прокси конечно не обойтись, поэтому если будете парсить много и долго запасайтесь рабочими прокси.

    Давайте для примера спарсим сайты, построенные на движке DLE для последующей регистрации на них.

    Переходим на вкладку «Scrape» и вводим признаки DLE и ключевое слово для парсинга: Footprint(s) — «index.php?do=register», Keywords – “регистрация”. Жмем «Start scrape»

    Для просмотра ссылок зарегистрируйтесь или авторизуйтесь на сайте.


    Как видите, за 13 секунд парсер нашел 739 URL. Теперь давайте очистим результаты от дубликатов, нам необходимо удалить дубликаты доменов. Для этого выбираем «Remove duplicate domain» и жмем «Do». В результате осталось 385 сайтов. Теперь таким же образом определим PR оставшихся сайтов, количество страниц в индексе Google и тайтлы страниц выбирая соответствующие опции и нажимая «Do».

    [​IMG]
    Как видите, некоторые сайты из выдачи не являются сайтами DLE, например можно увидеть форум Аваста. Это потому, что на странице форума, скорее всего, обсуждаются признаки DLE и среди них «index.php?do=register». Поэтому если будете парсить сайты DLE, лучше воспользуйтесь таким запросом: «inurl:»index.php?do=lostpassword» пароль».


    Теперь можно сохранить полученные результаты (только ссылки или полностью все колонки).

    Скачать GScraper можно с :
     
    Отзыв После ознакомления с продуктом «GScraper – бесплатный парсер Google.» оставьте свой отзыв о нём в данной теме.
    Последнее редактирование модератором: 31 авг 2015
    ptah и marina201118 нравится это.
  2. toxasag

    toxasag Забанен

    Регистрация:
    22 апр 2014
    Сообщения:
    14
    Симпатии:
    0
    У гугла есть адвордс директор, вроде нормально все парсит
     
  3. content8

    content8 Новичок

    Регистрация:
    3 июн 2014
    Сообщения:
    6
    Симпатии:
    0
    интересная штука, надо бы поискать и скачать
     
  4. ptah

    ptah Юзер

    Регистрация:
    24 апр 2015
    Сообщения:
    38
    Симпатии:
    25
    удивительно,но парсер сработал по запросу из описания
     
  5. tigerchester

    tigerchester Игрок Юзер

    Регистрация:
    29 ноя 2014
    Сообщения:
    30
    Симпатии:
    32
    Мне нужно собрать только домены сайтов, по определнной деятельности, и которые работают в определенной стране. Эта программа может это сделать?
     
Загрузка...
Похожие темы - GScraper бесплатный парсер
  1. MIG
    Ответов:
    0
    Просмотров:
    143
  2. MIG
    Ответов:
    1
    Просмотров:
    91
  3. k0resh
    Ответов:
    3
    Просмотров:
    389
  4. Барби
    Ответов:
    7
    Просмотров:
    628
  5. Gatsby
    Ответов:
    3
    Просмотров:
    694
  6. Gatsby
    Ответов:
    0
    Просмотров:
    467
  7. Gatsby
    Ответов:
    1
    Просмотров:
    642