Перспективы развития Xrumer на 2020 год. И новый XEvil 5.0

Кстати, в апреле 2020 вышло много свежих практических статей и видео по Xrumer и его компонентам — XEvil, Socplugin, Hrefer.

А ниже — официальное сообщение от BotmasterLabs (разработчика мощнейшего программного комплекса Xrumer):

С начала этого года наша команда активно работает над рядом нововведений, а также над подготовкой нового XEvil 5.0, и в этом топике хотелось бы в общих чертах обозначить наши планы на текущий год — в первую очередь, для внесения ясности: что именно и когда именно (приблизительно) появится в этом году.

Новый XEvil 5.0

 
Ключевым, и самым главным преимуществом XEvil 5.0 перед XEvil 4.0 будет глубокая оптимизация распознавание РеКапчи-2: как уже сообщалось ранее, с начала этого года мы начали работу над безбраузерным механизмом обработки РеКапчи-2 на основе собственного JS-решения, которое позволит снизить нагрузку на CPU и расход памяти как минимум в 10-20 раз — и как следствие, значительно повысить потолок потоков для работы с ReCaptcha-2: на «среднем» железе будет возможна работа в 200-300 потоков, на более мощном — в 500 и более потоков. При этом, после данного нововведения, бóльшую нагрузку будет давать уже механизм распознавания самих изображений РеКапчи-2, а не «тяжелая» обработка кликов по этим картинкам — так как поток обрабатываемых изображений в единицу времени станет больше. Это — первый этап, над которым идёт работа прямо сейчас.

Первая бета-версия XEvil 5.0 (где реализован именно этот функционал 1-го этапа) станет доступна ориентировочно в мае, или позже. Механизм раннего доступа к XEvil 5.0 будет похожим на получение доступа к XEvil 4.0 — и более детально информация по этому вопросу будет опубликована в ближайшие дни. Напомню: ни о какой отдельной покупке XEvil 5.0 речи не идёт, потребуется лишь внесение абон.платы наперёд на определенный срок — то есть это та плата, которая и так и так будет сделана при использовании нашего софта.

Следующий этап (предположительно июль — август) — расширение возможностей распознавания обычных капч. Модуль обработки изображений планируется вынести в отдельный 64-битный модуль (похожая процедура уже была сделана в XRumer-e), что значительно снизит расход ресурсов, и как следствие — повысит стабильность работы. Благодаря данной «разгрузке», появится возможность расширить спектр подгружаемых нейросетей — и будут добавлены нейросеть с чувствительностью к регистру букв, а также кириллическая нейросеть. Плюс — отдельно, доп.нейросети под обновлённые капчи Bing, Rambler и ряд других.

На третьем этапе — будет внедрена поддержка GPU, и как следствие, владельцы видеокарт NVidia с технологией CUDA смогут дополнительно повысить производительность XEvil-а на порядки, за счёт переключения обработки нейросетей с CPU на GPU. Помимо этого — будет повышена эргономика и информативность интерфейса, оптимизирован прочий функционал.

И, само собой, до выхода первой бета-версии XEvil 5.0, должен состояться общий релиз XEvil 4.0 — эта версия наконец станет доступной всем владельцам лицензии Стандарт и Бизнес, без какой-то дополнительной оплаты.

 
Один из главных недостатков в использовании нашего комплекса на сегодня — это необходимость запуска XRumer для работы с XEvil и SocPlugin, даже тем, кому XRumer совершенно не требуется. Это связано с исторически сложившимся механизмом защиты нашего комплекса от взлома, где вся защита завязана на XRumer. Она показала свою высокую надёжность — по сей день нигде в сети невозможно найти ни взломанную полную версию XEvil, ни XRumer (версии за последние 5 лет), и тем не менее — требует полной перестройки. В первую очередь — для возможности запускать и использовать XEvil отдельно от XRumer.

Уже сейчас ведётся работа над подготовкой облачного решения для авторизации нашего софта, и первые варианты обновлённой авторизации должны быть готовы к лету. Перед стартом софта будет требоваться запуск отдельного мини-приложения (Launcher), через которое также будут автоматически скачиваться и устанавливаться обновления, что также повысит удобство использования.

Ещё один плюс этого нововведения — повышение стабильности и независимость от работы наших серверов, т.к. облачное решение априори надёжнее зависимости от одного-двух серверов. Также будет упразднена привязка к железу (этот механизм устарел и сильно мешает использованию XRumer-а при меняющемся конфигурации железа) — но, в то же время, будет внедрён контроль сессий, который позволит пресекать попытки перепродажи/передачи софта в третьи руки, и несанкционированного совместного использования.

Новый XRumer

Как показал опыт использования краудсорс-платформы для обучения новым тексткапчам (логические антибот-вопросы — «Назовите столицу Британии» и т.п., используемые на трастовых форумах), новый подход очень эффективен: в прошлом году нам удалось повысить эффективность XRumer-а на порядки. Разумеется, эффект этот недолговечный, ведь администраторы популярных ресурсов меняют тексткапчи почти сразу же, когда на их ресурсы идёт поток спама. Тем не менее, на несколько месяцев такое обновление даёт очень хорошую прибавку в отдаче от софта — и это 100% оправдано, ведь 1 бэклинк с трастового ресурса ценится выше, чем 1000 бэклинков с переспамленных.

В прошлом большом обновлении — XRumer 19 — софт через новую краудсорс-платформу был обучен 45.000 тексткапчам. Теперь же мы собрали материал на более чем 80.000 тексткапч, и он продолжает пополняться. Всё, что остаётся сделать, это обучить им. Однако это очень недешёвый процесс (на обучение объёма в 45.000 у нас ушло летом 2019-го более 7000 USD), и кроме того — небыстрый (те, кто участвовал в наших конкурсах по обучению тексткапчам, хорошо помнят — что для поиска ответа на очередной вопрос может уйти до 10-20 минут, изучения Википедии и других источников).

Поэтому, не исключено, что мы организуем своего рода крауд-фандинг для ускорения обучения новым тексткапчам, и участники смогут получить улучшенную версию раньше. Такой подход нам предложили несколько активных пользователей XRumer, и можно сбалансировать это так, чтобы в выигрыше были и те, кто участвует в крауд-фандинге, и остальные тоже не оказались обделёнными

Помимо этого, буквально в последние дни, мы начали экспериментальную работу над автоматическим обучением XRumer-а новым тексткапчам «на лету». Как это работает: оказалось, что ответы более чем на 70-80% тексткапч вполне можно найти в Yandex/Google. Самой сложной задачей здесь является обнаружение правильного ответа в выдаче: недостаточно просто взять первый результат выдачи, или заголовок Википедии, это в большинстве случаев даст ошибку. То есть алгоритмически это почти нерешаемая задача. Однако последний опыт работы с нейросетями показывает, что эта задача вполне решаема — через особую конфигурацию нейросети, в которой в качестве подкрепляющей будет готовая лингвистическая нейросеть, а также другие вводные параметры. Такой подход уже к концу текущего года позволит повысить отдачу от XRumer на порядки, и фактически вдохнёт новую жизнь в этот инструмент 🙂

Применение нейросетей в логике XRumer и SocPlugin

Как многие уже успели заметить, мы всё больше внимания уделяем нейросетевому программированию, как самому перспективному направлению на ближайшие годы. Этот опыт может быть применён и в смежных задачах, помимо распознавания капч, например:

— генерация «осмысленных» комментариев в XRumer (по аналогии с «Антиспамом», но ещё более человекоподобно)
— фильтрация целевых профилей в SocPlugin, например по внешности на фото
— и другие направления

Прочие обновления

Разумеется, помимо этого будут обновляться и другие инструменты нашего комплекса, в частности уже в ближайшие 1-2 недели состоится обновление Hrefer-а, помимо очередных обновлений XRumer-а, XEvil-а, и SocPlugin-а.

Работа в кризисный период

Наш мир вступил в кульминационный этап глобальной перестройки экономики — и это коснётся (уже коснулось) абсолютно всех. Претерпят значительные изменения торговые цепочки, экономические и политические отношения. Для тех, кто «в теме», это не должно быть сюрпризом — так как о грядущем экономическом коллапсе предупреждали абсолютно все эксперты в 2019-м году, включая самых оптимистически настроенных. Бояться этого не нужно, т.к. на смену старому придёт новое, гораздо более интересное.

Нашу онлайн сферу это затронет наименьшим образом — ведь мы с вами уже работаем в «новой» экономической парадигме, сами того ещё не осознавая. Хотя разного рода «серые» и «чёрные» схемы продолжат терять свою актуальность — по всем фронтам продолжат закручивать гайки против отмывания средств, многократно снизятся возможности у биржевых игроков и многих других «работников», ремесло которых ещё вчера казалось нормальным.

Перестраивайте свой бизнес в более «белые» и полезные обществу направления, помогайте родным и близким, кого коснулся кризис больше всего.

Сейчас, когда очень многие потеряют работу, неплохой альтернативой может стать заработок онлайн — и вырастет актуальность онлайн-курсов, менторства, реферальных схем. Набирайте учеников, показывайте им новый путь и новые возможности — но, пожалуйста, пусть это будут не умирающие дорвеи и дышащее на ладан чёрное SEO, а гораздо более перспективные и полезные направления 🙂

Здоровья вам и успехов!»

 
Ну и берите Xrumer прямо сейчас (со скидкой, материалами, бонусами, базами, бесплатным первичным обучением) и изучайте его! Это мощнейший софт, и изучить его — не так быстро.