TOBBOT - многофункциональный инструмент вебмастера (Free)

TOBBOT - это попытка сделать универсальный инструмент для автоматизации различных сетевых задач.
Программа бесплатная, имеет базовый набор модулей и простое API для расширения функционала.



Базовым набором модулей можно воспользоваться сразу же после скачивания:

1. выбрать модуль
   
2. настроить задание
   
3. запустить действие

Количество модулей будет постоянно расти и со временем появятся модули для выполнения всех популярных задач. Текущий список модулей:



Изменять/создавать новые модули можно используя встроенные API функции:

• ... вставить код из указанного файла,
  
• SAVE выполнить промежуточное сохранение данных,
  
• STOP остановить выполнение действия,
  
• DONE задание выполнено успешно,
  
• UNDONE задание не может быть выполнено,
  
• REDIRECT вкл./выкл. авто переход по цепочке редиректов,
  
• REFERER вкл./выкл. авто смену реферера,
  
• CAPTCHA распознать капчу через выбранный OCR сервис,
  
• GOTO перейти к указанной метке,
  
• LABEL задать метку,
  
• LOG добавить запись в лог,
  
• PAUSE выдержать паузу,
  
• SCRIPT выполнить указанный JavaScript код,
  
• URL_ENCODE закодировать параметры в адресе страницы,
  
• URL_HEAD выполнить HEAD запрос к странице,
  
• URL_GET выполнить GET запрос к странице,
  
• URL_POST выполнить POST запрос к странице,
  
• PARSE найти текст на странице,
  
• VAR_ADD добавить временные переменные,
  
• VAR_SET задать переменной указанное значение,
  
• VAR_SET_RANDOM задать переменной случайное значение из указанного списка.

Писать модули просто! Вот так выглядит код модуля URL Parse Title:

Код:

URL_GET   row_url PARSE   row_title, http_content, "(?ims)title.*?>(.*?)<.*?title"

При этом писать модули на TOBBOT быстрее, проще и дешевле, чем писать программы с нуля:

• Программа портативная, кроссплатформенная и не требует установки.
  
• Система профилей позволяет одновременно запускать любое количество копий.
  
• Рабочие данные хранятся в удобной таблице (CSV файл), а код модулей выполняется многопоточно, с/без прокси, с передачей нужного реферера, обработкой кук и др.
  

Скачать TOBBOT можно по одноименному адресу TOBBOT.COM
Для запуска программы вам потребуется виртуальная машина Java


Бесплатно проконсультирую по Email / ICQ / Skype и, конечно же, в данной ветке форума

Вышел TOBBOT 0.4.0


Новые модули:

• Accounts Hostinger - регистрация фрихостов на панели Hostinger.ru;
  
• URL Find Text (RegExp) - поиск текста на странице (через регулярное выражение);
  
• URL Find Text (Simple) - поиск текста на странице (от строки A, до строки B).

Новые сабмодули (упрощают написание основных модулей):

• Mail.ru find email - поиск нужного email в папках Входящие / Спам;
  
• Recaptcha decode - распознование капчи Recaptcha (новая версия).

API функции:

• Новая функция COOKIE - добавляет новую запись в менеджер Cookie;
  
• Новая функция COOKIE_CLEAR - удаляет все записи в менеджере Cookie;
  
• Изменения в работе функции SCRIPT: переменные, объявленные в функции SCRIPT, теперь доступны и после ее завершения;
  
• Функции VAR_SET и PARSE переименованы в VAR и VAR_RE соответственно. Старые имена функций временно можно использовать как синонимы. Изменения проведены с целью улучшения читабельности кода.

• Если у вас установлена устаревшая версия Java, то вы можете скачать последнюю версию с официального сайта.
  
• Если вы изучили API и желаете оказывать платные услуги по написанию новых модулей, то свяжитесь со мной и я добавлю ваши контакты на сайте программы.

Вышел TOBBOT 0.5.1

Добавлен модуль Add URL Google, теперь есть адурилки в Bing, Yandex и Google.

Новая API функция FUNCDONE - позволяет отключать обработку функции DONE. Функция может быть полезна при вставке кода из других модулей.

Реализована возможность однострочной записи API функций, что заметно повысило читабельность кода модулей. Примеры различного оформления кода модуля URL Parse Title:

1) многострочная запись

Код: [развернуть]

URL_GET     row_url VAR_RE     row_title     http_content     "(?is)<title>(.*?)</title>"

2) однострочная запись

Код: [развернуть]

URL_GET    row_url VAR_RE    row_title, http_content, "(?is)<title>(.*?)</title>"

Это программа для постинга? Типа хрумера или как?

Нет, это более универсальный продукт. Можно делать парсеры, регеры, постеры, голосовалки и т.п. вещи. Можно сделать и постер в форумы, но конечно же не такой мощный как хрумер.

Вышел TOBBOT 0.7.0


Новая API функция VAR_COOKIE - присваивает указанной переменной значение cookie для указанной страницы.


Новые модули:

• Accounts FreeWebHostingArea - регистрация фрихостинг аккаунтов на панели FreeWHA.com (10 доменов);
  
• SE Index Checker - проверка индексации доменов/страниц в поисковых системах Яндекс, Google и Bing;
  
• SMS from AFreeSMS - отправка SMS сообщений в любую страну мира (автор модуля Alex G).

Появился человек (Alex G), готовый оказывать платные услуги по написанию модулей к программе:
689545275 sansalex@mail.ru


И наконец-то, появилась первая версия хелпа к программе TOBBOT

Вышел TOBBOT 0.8.0

Оптимизированы аглоритмы программы - скорость выросла min в 5 раз!

Добавлены API функции:

• ROW - добавляет новую строку в таблицу.
  Что позволяет "наращивать" файл задания прямо во время выполнения дейтсвия. Например, для модуля парсинга Google Suggest можно добавлять найденые кеи для осуществления более глубокого парсинга.
  
• VAR_FILE - считывает содержимое указанного файла в указанную переменную;
  
• URL_POST_MULTIPART - выполняет POST запрос вида multipart/form-data на указанный адрес с указанными параметрами.
  Совместное использование этой функци и функции VAR_FILE позволяет писать модули настройки профилей: загрузка фото, аватара и других файлов.
  

Вышел TOBBOT 0.9.0

Добавлены API функции для работы с файлами FILE (запись) и VAR_FILE (чтение).
Добавлены API функции для работы с кодировками CHARSET, CHARSET_CLEAR, VAR_CHARSET.
API функция URL_ENCODE переименована в VAR_URL и стала более "интеллектуальной" (прощает ошибки разработчиков).

Подробнее про API функции программы можно узнать в справочнике разработчика.

Появилась страница с информацией о спонсорах программы
Приглашаю всех принять посильное участие в развитии проекта!

Вышел TOBBOT 0.10.0

Добавлена API функция POST_JSON, которая позволяет выполнить POST/JSON запрос на указанный адрес. Сформировать тело запроса можно с ипользованием функции SCRIPT.

Код:

SCRIPT     data = JSON.stringify({'id': 25, 'params': {'age': 30, 'first name': 'John', 'last name': 'Doe'}}); URL_POST_JSON     "http://example.com/update.php", data

В API функцию FILE добавлена возможность указать параметры записи в файл. Теперь можно добавлять запись не только в новый файл, но и в уже существующий.

Код:

FILE    "D:/new.txt", data, "a"

В главное меню программы добавлена команда File > Open As, которая позволяет открывать рабочие файлы других модулей.

Добавлены новые бесплатные и премиум модули:

• Domain Names Availability - проверка статуса доменов: свободен / зарегистрирован через сервис GoDaddy.
  
• $ Yandex Last20 Keywords - парсинг прямого эфира Яндекса (фильтр по кею, запись в файл).
  
• $ Yandex Metrika Open Stats - поиск открых статистик Яндекс.Метрика.
  

Обновляемся, не стесняемся

Вышел TOBBOT 1.0.0

1) Программа и ее модули теперь разделены и скачиваются отдельно. Для обновления модулей не нужно обновлять программу.
2) Добавлена поддержка прокси требующих авторизацию.
3) Улучшена обработка Set-Cookie заголовков в ответе сервера.
4) Улучшена работа с Unicode данными.
5) Добавлена возможность работы с Unicode доменами, например: окна.рф, авто.com.
6) В API функции URL_HEAD и URL_GET добавлена возможность указывать множество параметров. В этом случае адресом страницы будет результат объеденения всех указанных параметров.
7) В API функцию VAR_RE добавлен 4-ый (необязательный) параметр, для формирования значения.
8) Добавлена API функция VAR_PROXY, которая позволяет узнать текущие настройки прокси.
9) Добавлена API функция PROXY, которая позволяет сменить/октлючить прокси в ходе выполнения задания. Таким образом можно осуществлять привязку аккаунтов к определенным IP-адресам.
10) Новый модуль $ Accounts Wordpress.com.
11) Модуль Yandex Metrika Open Stats стал бесплатным.

Срочно в номер! Вышел TOBBOT 1.1.0

Наиболее важные перемены:

• Изменен формат записи логов: лог пишется в файл, а статистика логов в таблицу Action > Log Stats...
  
• Устранена утечка памяти при работе с большим объемом данных: проверка 4.8м ру доменов одним заданием больше не проблема.
  

Новые бесплатные модули:

• Proxy Parser - парсинг прокси в файл: ip, порт.
  
• Socks Proxy Checker - проверка SOCKS прокси: ip, время, скорость.
  

Обновляемся, не сомневаемся

Последние новости:

• новый адаптивный дизайн сайта;
  
• новый раздел справочника: FAQ;
  
• все модули программы прошли ревизию - все работает!

Новые бесплатные модули

Accounts MailRu - регистрация email аккаунтов на Mail.ru (4 домена);
SE Backlinks Index Checker - проверка индексации ссылок в Bing, Google и Яндекс (проверка через кеш страниц).

Последние новости:

• Выбирать профиль настроек при запуске программы теперь обязательно.
  
• Добавлена функция включения/выключения EXCEPTION, которая позволяют включить/выключить остановку выполения задания в случае возникновения ошибки.
  
• Добавлена функция PROXY_NEXT, которая позволяет переключиться на следующий прокси из списка.
  
• В функции GOTO добавлен параметр {направление}, который позволяет указать направление поиска метки: "-" искать вверх, "+" искать вниз.
  
• В функцию VAR_CAPTCHA добавлен необязательный параметр {comment}, который позволяет оставить примечание для работника по правильному распознаывнию капчи.
  
• В функции FILE исправлена ошибка записи в файл.
  
• Обновлен модуль Common Files и другие модули, которые используют этот модуль в своей работе.
  
• Модули проверки индексации в поисковых системах разделены на 3 модуля:
  
  SE Check Index (Backlinks)
  SE Check Index (Domains)
  SE Check Index (Pages)
  
  Важно! Не забывайте удалять старые и ненужные версии модулей, чтобы избежать путаницы.
  

Добавлена функция SESSION: разрешает/запрещает потоку использовать текущую сессию (cookie + proxy) при работе над следующим заданием.
Добавлена функция VAR_SESSION: позволяет узнать кол-во выполненых заданий через текущую сессию.

Появилась новая версия модуля Add URL Yandex.
В работе модуля использованы функции конроля сессии, что позволило сократить расходы на капчу и увеличить скорость.

Новая версия программы TOBBOT 1.5.1

- Улучшен интерфейс программы.

- Протестирована совместимость программы TOBBOT с программой TOR. Чтобы запустить программу через TOR укажите в настройках прокси Settings > Proxy следующий адрес: 127.0.0.1:9150.

- В API функциях основные изменения связаны с уточнением кодировок чтения / записи, указанием типа переменных и работе с Cookie:

Код:

// загрузить бинарный файл с аватаркой используя кодировку BASE64 CHARSET    "BASE64" VAR_FILE    file_avatar, "D:/avatar.png" TYPE_FILE    file_avatar, "BASE64", "avatar.png" // отправить POST запрос на сервер (загрузить аватарку) в кодировке Windows-1251 CHARSET    "Windows-1251" URL_POST_MULTIPART    "http://example.com/configure.php"     "name", "Иванов Иван"     "avatar", file_avatar     "Submit", "Изменить аватар"

Поздравляю всех вебмастеров с Новым годом и Рождеством!

Мгновенной индексации,
Отсутствия фильтрации,
Высокой конвертации,
За счет автоматизации!


Вышла версия TOBBOT 1.6.1

• Добавлены API функции HEADER и HEADER_DELETE, которые позволяют изменять заголовки HTTP запросов.
  
• Добавлены API функции для работы с файлами и директориями: DIR, DIR_DELETE, FILE_DELETE, VAR_FILE_SIZE.
  
• Добавлен бесплатный модуль Download File для массового скачивания файлов по ссылкам на них.
  
• Добавлен бесплатный модуль Accounts Yandex для регистрации и проверки аккаунтов Яндекс.
  
• Доработан бесплатный модуль Add URL Yandex.
  

Также опубликован план развития программы на 2016 год.
Ваша помощь и предложения приветствуются!

Вышла версия TOBBOT 1.7.1



Упрощен интерфейс. Удалено назойливое окно "Work stopped Is everything ok?"

Добавлена API функция URL_REQUEST: позволяет выполнить запрос с любым методом: GET, POST, PUT, DELETE и др. Функция жизненно необходима при работе с RESTful сервисами работающими на AngularJS и аналогах.

Добавлены новые бесплатные модули:

• LiveInternet Rating Parser - собрать БД сайтов рейтинга LiveInternet.
  
• Google Suggests Parser - собрать поисковые подсказки для кейвордов (с подстановками).
  
• Google Translate Files - автоматически перевести тектовые файлы (любого размера!) на другой язык.
  

Спасибо пользователю SZ, за разрешение вынести модули в общий доступ

Вышла версия TOBBOT 2.0.0

Прощай GOTO, здравствуй полноценный синтаксис современных языков программирования: циклы, функции, исключения и др.

1. Можно использовать язык JavaScript (стандарт ECMAScript 5.1);
   
2. Можно использовать язык Java (Java 8);
   
3. Можно использовать объект T. для доступа к методам бота, например: T.addLog("Привет!").
   

Добавлено пространство глобальнных переменных:

• T.getGlobalObject(String key) - получить значение / объект;
  
• T.setGlobalObject(String key, Object object) - установить значение / объект.
  

Добавлена возможность синхронизации потоков при выполнении действия:

• T.lock() - заблокировать доступ остальным потокам;
  
• T.unlock - разрешить доступ остальным потокам.
  

Добавлены короткие синонимы для вызова наиболее популярных методов:

• T.log() для T.addLog();
  
• T.get() для T.getRowValue();
  
• T.set() для T.setRowValue() и другие методы.
  

Немного изменен интерфейс пользователя:

• В окне массового редактирования строк добавлена кнопка Path, для указания пути к файлу / файлам;
  
• Изменен интерфейс окна уведомлений / ошибок.
  

Часть бесплатных модулей уже перенесены на новую версию.

-----
С днем вебмастера, друзья!
TOBBOT 2.0.0 это мой вам подарок сегодня. Пользуйтесь на здоровье

с виду приличный функционал, надо будет потестить

Вышла новая версия TOBBOT 2.1.3

• Исправлены ошибки предыдущих версий.
  
• Добавлена возможнось использования сторонних Java библиотек: JavaMail, Apache POI и т.д.
  Просто добавьте интересующие вас библиотеки (JAR файлы) в директорию libs/ программы.
  
• Все модули протестированы и приведены в рабочее состояние:
  Accounts Yandex - авторегистрация Яндекс аккаунтов;
  Yandex Parser - парсер выдачи Яндекса;
  Yandex Add URL - отправка запроса на добавление страницы в индекс Яндекса;
  Yandex Del URL - отправка запроса на удаление страницы (код 404) из индекса Яндекса;
  Bing Add URL - отправка запроса на добавление страницы в индекс Bing;
  Download Files - загрузка файлов по указанным ссылкам.