Отчет о разработке XRumer 7.0 Elite за ноябрь

XRumer

  • В патче подготовлен новый модуль взаимодействия с плагинами; проведены тесты в условиях недоступности основных серверов
  • Продолжены работы над капчами с блогов + дополнительно продолжена работа с форумами и досками
  • Внесены коррективы в xmessages.txt и xas.txt
  • В патче исправлена критическая погрешность, запущен финальный тест
  • Продолжены работы над капчами с блогов
  • Внесенны коррективы в ряд инструментов
  • В фильтре повторных ссылок добавлена возможность фильтрации зеркал (нередки ситуации, когда десятки абсолютно различных доменов являются зеркалами одного и того же форума, что влечёт за собой лишние действия программы)
  • Продолжены работы над капчами с блогов
  • Для распознавания ReCaptcha подобраны оптимальные параметры; начата работа над отдельной защитой данного модуля от копирования сторонними разработчиками; дальнейшие результаты работ над модулем распознавания ReCaptcha публично не афишируются
  • Подключен модуль для DLL
  • Продолжены работы над капчами с блогов и над ReCaptcha; запущен процесс автоподбора оптимальных параметров
  • Подключен дополнительный модуль для обхода Java-защит
  • Внесены поправки в обработке текстовых защит
  • Поправлены погрешности в интерфейсе
  • Продолжены работы над капчами с блогов и над ReCaptcha (получены первые приемлемые результаты)
  • Скорректированы погрешности в патче, запущен тест на стабильность
  • Продолжены работы над капчами с блогов и над ReCaptcha; в список ToDo добавлено дополнительно 2 новых типа капчи, используемых в блогах
  • Доработан модуль упрощённого редактирования и проверки синтаксиса xmessages.txt и других файлов логики хрумера
  • Исправлены несколько погрешностей в алгоритме генерации отчётов
  • Продолжены работы над капчами с блогов и над ReCaptcha
  • Создан модуль упрощённого редактирования и проверки синтаксиса xmessages.txt и других файлов логики хрумера
  • Скорректирована работа с движком Drupal
  • Продолжены работы над капчами с блогов и над ReCaptcha; реализована возможность многопоточного распознавания капчи
  • Оптимизирован инструмент приведения ссылок к индексу, логика инструмента вынесена во внешний текстовый файл
  • XRumer обучен дополнительно 3-м новым движкам блогов
  • Скорректирован алгоритм фильтрации дублей, также внесены поправки в общую логику обработки ссылок
  • Подготовлена доп.функция для патча
  • Продолжены работы над капчами с блогов и над ReCaptha
  • Поправлена обработка нестандартных графических и текстовых защит
  • Продолжены работы над капчами с блогов и над ReCaptha
  • Реализована поддержка пользовательских модификаций
  • Продолжены работы над капчами с блогов и над ReCaptha
  • Написано ТЗ и профинансированы работы для спец.модуля для взаимодействия с внешними DLL, расширения возможностей SDK и поддержки многоядерных систем
  • Написано ТЗ и профинансированы работы над вспомогательной программой для тестирования пробиваемости
  • Продолжены работы над капчами с блогов и над ReCaptha
  • Усовершенствован инструмент для тестирования внешних DLL-файлов для распознавания капчи - TestDLL (более подробная статистика, анализ средней скорости распознавания, проверка "испорченных" DLL, анализ возможных утечек памяти), что существенно ускорит процесс разработки модулей распознавания; обновлённый файл включён в бесплатный SDK 1.3, и может использоваться также сторонними разработчиками
  • Продолжены работы над ReCaptcha и капчами, используемыми в блогах
  • Сделан ряд мелких поправок и улучшений XRumer

Hrefer

  • Внесены исправления в компоненты интерфейса
  • Поправлен парсинг BoardReader
  • Оптимизирована процедура фильтрации по блек-листу (xblack.txt), её работа ускорена в сотни раз, благодаря чему теперь подключение объёмных блек-листов не затормаживает процесс парсинга
  • Поправлен парсинг Yahoo и Yandex
  • Обновлён xblack.txt (блек-лист)
  • Исправлен парсинг Yahoo (с опциями "link:", "linkdomain:", "site:")
  • Внесены мелкие поправки в интерфейсе
  • Программа отправлена на финальное тестирование
  • Внесены коррективы в соответствии с результатами тестирования
  • "Domains mask" удалён из интерфейса опций, т.к. теперь данные маски можно задать через Sieve-Filter, см. выше - однако возможность фильтрации по доменным маскам сохранена, через редактирование xdomains.txt
  • Возвращена возможность "Browse" по двойному клику в таблице потоков
  • Усовершенствован мониторинг загрузки
  • Исправлена ошибка "I/O Error 105"
  • Скорректирована работа проксичекера - исправлена фильтрация дублей
  • Реализовано логирование отчёта проверки прокси/сокс, благодаря данному отчёту возможно отбирать только те ресурсы, на которых высокое процентное содержание рабочих прокси/сокс
  • Поправлена работа с редактированием Additive Words
  • Скорректировано действие кнопки "Clear"
  • Версия 3.2 закачана на сайт
  • Создана возможность сохранения и очистки списков прокси/сокс по блек-листу
  • Поправлена работа с Yahoo
  • Дополнительные настройки проверки прокси вынесены в интерфейс
  • Поправлена работа с Rambler-ом
  • Добавлен инструмент мониторинга статистики по поисковым системам, для оптимизации процесса парсинга
  • Продокументирован файл MakeToIndex.ini
  • Обновлён googlehost.txt
  • Скорректирована обработка Google Mobile, Board Reader
  • Скорректирован мониторинг проверки прокси
  • Выявлена погрешность, возникающая при очень частом запуске проверки прокси/сокс; запущен отладочный тест для устранения данной погрешности
  • Добавлена возможность в Additive Words автоматического варьирования по доменным зонам (для Google, через "site:..."), а также добавления чисел в качестве вариаторов
  • Исправлена ещё одна небольшая погрешность в мониторинге проверки прокси/сокс
  • Список доменных зон для авто-варьирования вынесен во внешний файл, произведена фильтрация доменных зон, которые в 99% случаев дают нулевой результат
  • Ряд инструкция для данной версии отправлен на перевод для англоязычной аудитории
  • Проведён спец.тест отдельным инструментом, благодаря которому выявлены и скорректированы погрешности в MakeToIndex.ini
  • Дополнены справочные материалы

SocPlugin 1.6 (Odnoklassniki + VKontakte)

  • Добавлена возможность автодобавления в поклонники на VKontakte
  • Внесены исправления в работе с Odnoklassniki
  • Оптимизирован ряд процедур
  • Проведены всесторонние тесты работы с Odnoklassniki, выявлен и частично исправлен ряд погрешностей
  • Добавлена возможность подробного мониторинга исходящих/входящих пакетов (для отладки и др. вспомогательных целей), соответствующая опция добавлена в опции интерфейса
  • Повышена вероятность успешного приглашения в группы на VKontakte
  • Добавлена защита от превышения лимитов при инвайтинге в группы
  • Реализован автовыбор групп через шедулер
  • Скорректировано определение количества фотографий в анетах на VKontakte
  • В этот и предыдущие 3е суток проведены работы над коррекцией алгоритма распознавания капчи VKontakte (сама капча не изменилась, но немного изменился метод зашумления, что значительно ухудшило распознаваемость)
  • Благодаря анализу конкурирующего софта, в сотни раз ускорена рассылка персональных сообщений на VKontakte
  • Доработан инструмент проведения статистики по собранным анкетам
  • Скачан тестовый пакет капчи VKontakte (она была немного видоизменена) и запущено обучение с автокорректировкой
  • Добавлен инструмент проведения статистики по собранным анкетам для более эффективного таргетинга
  • скорректирована работа фильтра анкет: если анкета не существует/заблокирована, то априори помечается на удаление
  • Внесены коррективы в соответствии с новой защитой на VKontakte
  • Проведено масштабное тестирование работы с соц.сетью Odnoklassniki
  • Внесены поправки в работу шедулера
  • Приобретён конкурирующий софт для анализа и использования некоторых методик, ускоряющих работу с соц.сетями
  • Также подготовлены справочные материалы
  • Проведены работы над коррекцией алгоритма распознавания капчи VKontakte
  • Исправлено автоприглашение в группы на Odnoklassniki
  • Поправлена общая логика работы с группами на Odnoklassniki

Прочее

  • Проведены подготовительные работы на серверах авторизации
  • Результатом работы последних 3-х дней стало полное обновление источников HTTP-прокси и SOCKS (было проанализировано более 20 тысяч ресурсов), в результате чего количество анонимных прокси и сокс увеличено в разы, при прежней скорости проверки; обновлённые списки доступны для скачивания
  • Продолжены работы над капчами с блогов и над ReCaptcha
  • Проведены работы над внутренними функциями основного сервера, результат продублирован на резервных серверах
  • Подготовлен новый сервер для тех.поддержки, повышена безопасность

Читайте также: