Блог по программированию в среде Delphi

Поиск по блогу

Есть идея по созданию интересной программы?

Опиши тут и я по возможности постараюсь это реализовать специально для тебя! Без $ ))

вторник, 15 марта 2011 г.

WordUnit 1.0 Программа для сбора поисковой выдачи


Утилита для поиска сайтов по ключевым словам в поисковых системах GOOGLE, YANDEX, RAMBLER (хотя последним даже и не пользуюсь ни когда)) ну и бог с ним) и сохранения их в таблицу, из таблицы в файл, а дальше куда душа пожелает!
Программа получает выдачу поисковиков по запросам, которые можно сделать в конструкторе, форма конструктора идентична их онлайн версиям, так, что проблем возникнуть не должно с построением запроса.


Скрины конструкторов:









Так, что сначала добавляем запросы, регулируем глубину поиска (т.е количество страниц в поисковике), таймаут между запросами(если активирован сбор информации о PR и ТИЦ  он не учитывается, потому как на сбор этой информации уходит тоже время)) ) после чего кнопкой "Старт", запускаем сбор данных. Результаты работы программы будут выводиться в таблицу в которой их можно отсортировать или удалить ненужные, так же таблицу, как с результатами так и с запросами можно сохранить и открыть с помощью любого текстового редактора. Кто умеет пользоваться Excel тот и там сможет таблички посмотреть и сделать отсев по критериям. Так же можно выполнить проверку PR'a и ТИЦ'a в ходе сбора сайтов по интересующим вас запросам.
Программа работает в 3 потока (по одному на каждый поисковый сервер) так, что чередуйте запросы по серверам(пример: GOOGLE, YANDEX, RAMBLER,GOOGLE, YANDEX, RAMBLER), иначе какой нибудь из них из-за высокой "вашей" активности может, вас забанить на  некоторое время.
Программу можно использовать и для сбора сайтов с жирным PR'ом и ТИЦ'ом, но уже тематически отфильтрованным и не придется раскошеливаться на покупку подобных баз.

Программа конечно не супер быстрая, но с учетом, того что можно сразу написать много заданий, этот минус становиться незаметным))
Внешний вид программы с двумя запросами


Пробуйте, если есть идеи по дополнительному функционалу пишите постараюсь сделать.

Программу или программку можно скачать отсюда Download

13 комментариев:

  1. Отличная программа! То что нужно для раскрутки сайтов!

    ОтветитьУдалить
  2. чет не пашет она ... или может делаю что не так. ....

    ОтветитьУдалить
  3. поисковики просто меняют иногда страницу выдачи и по этому возникают такие проблемы.
    если нужна программа, могу допилить

    ОтветитьУдалить
  4. А как же конструктор-то запустить?

    ОтветитьУдалить
  5. правой клавишей на таблице запросы нажмите.
    времени много прошло так что может программа и не работать. если что пишите

    ОтветитьУдалить
  6. Еще занимаетесь этой программой? Как с вами можно связаться?

    ОтветитьУдалить
    Ответы
    1. Контакты справа от поста ниже друзей блога.
      пишите.

      Удалить
  7. Не могу скачать, ссылка нерабочая - "Закончился срок хранения файла. Файл удален с сервиса.".

    ОтветитьУдалить
    Ответы
    1. народ не качал вот и удалили(

      Удалить
    2. Если не сложно, перезалейте пожалуйста. Буду вдвойне благодарен, если поделитесь исходником т.к. выдача поисковиков изменилась (хотел что-то подобное на Lazarus для личных нужд написать, ну и с общественностью заодно поделиться).

      Удалить
    3. несложно вот прога + исходники
      https://drive.google.com/file/d/0ByL8x9zF0ZVZUlR1cV9LRWJwNFk/edit?usp=sharing

      работает частично(
      + требует доработки некоторого функционала

      Удалить
    4. не за что. если что пишите в скайп

      https://lh3.googleusercontent.com/-SVxz7VTUook/UDMpFTKqkwI/AAAAAAAAAbk/42ZG3FpXv78/s125-p-k/icq.png

      Удалить