Завершающее добавление в ПЗЯ, чтобы было удобнее контролировать прогрев профиля и использовать его в последующих "проектах".
Теперь можно использовать время прогрева профиля как условие для запуска задачи ПЗЯ.
Логика работы.
При создании профиля в его данных сохраняется дата начала его работы.
Дальше вы греете профиль, и когда условие в ПЗЯ по времени прогрева начинает соответствовать - включается задача ПЗЯ.
Профиль отрабатывает и по триггеру (нужно выставить соответствующий чекбокс) время его прогрева "обнуляется", то есть назначается текущая дата.
В результате профиль снова можно прогревать уже для другого проекта, пока он не станет соответствовать условию другого ПЗЯ.
Please open Telegram to view this post
VIEW IN TELEGRAM
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥6💊3👍2
В настройки профилей добавлен выбор алгоритма подбора профилей:
🔸Дата последней работы - старый алгоритм, когда берется профиль наиболее не работающий по last_date_work
🔸 Смешанный - новый алгоритм, когда подбираются профили наиболее не работающие, но с разными датами создания.
Настройка действует только для базы postgre и не видна при выборе локальной базы.
По умолчанию - алгоритм старого типа
Please open Telegram to view this post
VIEW IN TELEGRAM
👍5
Добавлена возможность отключить решение смарткаптчи. Если активировать чекбокс отключения решения - несмотря на то, что выставлены сервисы решения смарткаптчи - они будут игнорироваться.
Также, при включенном чекбоксе будет учитываться, что вы выбрали в настройке "Что делать, если превышено количество решений": Ничего, закрыть поток, Закрыть поток и удалить профиль.
Чекбокс распространяет свое влияние на любую задачу.
По умолчанию отключено.
Please open Telegram to view this post
VIEW IN TELEGRAM
👍5
Большое обновление в задаче "Смотреть Youtube"
- фиксы с версткой и логикой.
- Также добавлена возможность прогревать на конкурентах профили до, между, и после просмотра целевых роликов.
Для этого достаточно указать список с ссылками на ролики конкурентов в формате url,time (в секундах). Пример:
https://www.youtube.com/watch?v=_H-NcD1rniI,100
Please open Telegram to view this post
VIEW IN TELEGRAM
👍9
В задачу "Посетить поиск Yandex" добавлена возможность получать запросы для поиска через пользовательский api.
Указывайте ссылку (пример: myapi.ru/?project=1) на ваш апи, и Монстро отправит запрос на api с параметром "&pid=" id профиля (пример: myapi.ru/?project=1&pid=4823992 ), а в ответ должен получить поисковый запрос и код региона через запятую, если таковой необходим (пример: купить слона,213)
❗️Ссылка на api должна заканчиваться каким либо параметром (каким - не важно) - myapi.ru/?project=1
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥4👍3🤔2
Для удобства формирования блеклиста в настройках браузера в лог теперь выводится ссылка и текст ссылки, по которой будет производен клик при просмотре страницы. Именно часть этого текста можно использовать в виде запретов в блеклисте.
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥9👍2
Please open Telegram to view this post
VIEW IN TELEGRAM
Исправлено взятие следующей прокси при нерабочей прокси.
Также добавлена возможность установить количество таких ошибок. По умолчанию - 10 ошибок.
Please open Telegram to view this post
VIEW IN TELEGRAM
👍1
833 - Восемьсот тридцать три.
Такое вот количество разных настроек в Монстро на момент версии 27.2.167. Чекбоксы, списки, поля ввода, выбор файлов, папок и т.п. - 833 штук. Только ПЗЯ - 59 настроек, а в настройках профилей - 80.
Уже страшно заглядывать в ваши пожелания to do листа🙈
Надеемся теперь понятно, почему так сложно написать "мануал" в проекте с таким количеством настроек, которые к тому же постоянно добавляются.
Настоящий Монстро😱
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥14👍5⚡1
Оптимизация количества соединений с базой постгресс.
Теперь активных соединений с БД будет меньше.
Please open Telegram to view this post
VIEW IN TELEGRAM
👍6🔥4❤🔥1
PF.xml
918.7 KB
Данный конфиг рекомендуется минимально изменять под свои нужды - только в тех настройках, где будут комментарии. Настройки для одного проекта (сайта)
За что отвечает конфиг:
1. Создание профилей в группе Group1, и поддержка, чтобы в этой группе было не более и не менее 400 профилей.
1. Прокачка профиля 3-4 раза в сутки в течении 4 суток в поиске
2. 100 переходов в сутки на целевой сайт для ПФ
3. После работы с ПФ профиль переносится в группу "Отработка" и у него обнуляется дата прогрева.
Если нужно больше переходов на целевой сайт, то меняете такие настройки:
👉Настройки профилей Лимит профилей, за который нельзя выходить = (Количество переходов в сутки ПФ)* (Количество дней прогрева)
👉В ПЗЯ количество переходов из поиска в час = (Количество переходов в сутки ПФ)/24. Также настройка Если прогрет более... (в часах) = (Количество дней прогрева)*24
❗️Для задачи "посетить поиск яндекса" укажите свой список тематических запросов. Не используйте запросы с торговыми словами "купить/продать", и т.п., а также те, которые вызывают каптчу - особенно непосредственно те, которые будете использовать в ПЗЯ. К тематическим запросам добавьте "общие" - новости региона, где живут раки, как починить стиралку и т.п. В общем, снизьте к минимуму возникновение каптчи.
❗️В ПЗЯ поисковые запросы сформируйте так, чтобы, благодаря уточняющим допзапросам (включая домен сайта в конце) ваш сайт так или иначе был найден на первой странице выдачи поиска. Если у вас это не выходит - отложите накрутку и займитесь СЕО.
❗️Если, согласно вашим настройкам, вам кажется, что все работает медленно - увеличьте количество потоков. Для 100 переходов из поиска ПФ в сутки на ваш сайт достаточно 2 потоков. 1 поток работает примерно 5 минут, то есть может прогревать до 10 профилей в час. 2-х потоков достаточно, чтобы через 4 суток подготовить первую партию 100 переходов для ПФ и постоянно греть до 400 профилей.
Please open Telegram to view this post
VIEW IN TELEGRAM
❤8🔥6👍4
Для улучшения раздела работы с каптчей необходимо выяснить популярность сервисов. Какими сервисами вы пользуетесь?
Anonymous Poll
8%
antigate
30%
rucaptcha
2%
2captcha
18%
xevil
2%
capmonster
39%
CaptchaGuru
1%
captchasniper
5%
Atlantic
21%
White-Captcha
44%
Capsola
👉В задачу прогрева через topsbor добавлена глубина серфа внутри страниц.
👉Изменена работа с каптчами.
Теперь все сервисы решения каптч вынесены в единое поле выбора, для последующих улучшений этого раздела.
❗️Из важного! Монстро-сервис и xevil больше не решают рекаптчу. Вместо этого рекаптчу может решать сервис каптчагуру. Благодаря этим изменениям мы избавились от модуля, который существенно снижал анонимность.
❗️Если выбранный в списке сервис не решает смарткаптчу - он будет просто пропущен в алгоритме. Аналогично и для текстовых каптч - если сервис не может решать текстовую каптчу, то он будет пропущен и перейдет дальше по списку.
Список текущих сервисов и что решают:
monstro - текст
white-captcha - смарткаптча
capsola - смарткаптча, пазлкаптча
captchaguru - смарткаптча, пазлкаптча, рекаптча
atlantic - смарткаптча
rucaptcha - текст, смарткаптча
xevil - текст
antigate - текст
В дальнейшем возможности сервисов будут расширены.
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥11👍4💊2
RuCaptcha теперь решает смарткаптчу. Тариф 70 рублей за 1000 решений.
Также в Лог-инфо выведен баланс рукаптчи и количество использований.
Особенность этого метода - неважно что там Яндекс меняет в своих картинках и насколько каптча сложная.
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥8👍3
Для задачи "Смотреть Youtube" введена активность задачи, а так же возможность выбирать глубину поиска ролика.
Please open Telegram to view this post
VIEW IN TELEGRAM
👍2👏2🔥1
В ПЗЯ появилась новая возможность для работы с ключами - "Хранить ключи со спинтаксом". Она необязательная, и даже сложноватая в понимании, но не менее полезная, чем другие.
Если вы не пользуетесь спинтаксом - рандомизацией данных в запросах типа {ключ1|ключ2|ключь3}, то можете пропустить эту новость.
Суть это надстройки - либо мы храним ключи полностью, как есть у нас в файле (со спинтаксом), либо в базе храним уже результат этого спинтакса.
Если хранить со спинтаксом - вне зависимости, какой из рандомных элементов отработал, эта строка с запросами будет считаться отработавшей. Соответственно и частота на все рандомные запросы будет общей. Пример: сайт.ru, {key1|key2|key3},1 - переход отработает всего 1 раз в сутки, вне зависимости какой из ключей выпадет.
Если хранить без спинтакса (как и раньше), то в базу запишется только отработавший запрос/домен/параметр. И только по нему будет идти проверка частоты ключа. Пример: сайт.ru, {key1|key2|key3},1 - в данном случае все 3 ключа отработают по разу в сутки.
"Хранение со спинтаксом" по умолчанию отключено (то есть ПЗЯ работает, как обычно)
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥5👍1🤓1
Введен новый параметр для задачи ПЗЯ - "Уточняющие ключи рандомом"
Если отметить галкой этот чекбокс, то допключи в запросе будут подставлять случайным образом.
Пример:
сайт.сом,ключ1|ключ2|ключ3,1
Если параметр активирован, то ключ2 и ключ 3 будут подставляться случайно.
ключ1 ключ2 ключ3
или
ключ1 ключ3 ключ2
Если параметр не активирован, то ключи будут подставляться по порядку: ключ1 ключ2 ключ3
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥3👍2
Всем доброе утро. Итак, мы наконец запускаем обещанный сервис централизованного управления Monstro!
Впереди еще много работы, как с клиентом, так и вебинтерфейсом, но базовые задумки мы реализовали и заложили платформу для дальнейшего развития.
Что реализовано на данный момент:
1. Собственная система лицензий, которая позволяет гибко управлять доступами: покупать отдельные ключи в рамках одного аккаунта, добавлять или удалять количество привязок в ключ с автоматическим продлением срока действия. Это позволяет передавать ключи вашим клиентам или сотрудникам без доступа к аккаунту и контролировать уже выдаваемые вами лицензии другим пользователям.
2. Контроль над работой всех копий Монстро с разбивкой по серверам: удаление, версия копии, время работы, количество потоков, успешно, ошибок
3. Бот в телеграме. Через бота можно отслеживать статус всех серверов, узнать баланс или получить информацию о ключевых ресурсах проекта.
4. Возможность включать/отключать уведомления в телеграм о статусе работы копий, если по каким то причинам перестают работать, окончание лицензий и пр.
5. Система платежей для пополнения баланса. Теперь не нужно, в большинстве случаев, ждать когда продлят лицензию/ключ - вы можете это делать через кабинет сами. Также видна история платежей.
На данный момент запущен тестовый-подготовительный этап, чтобы плавно все могли перейти на новую систему. Через две недели мы все должны полностью перейти на централизованное управление.
Новые пользователи будут сразу проходить регистрацию в monstro.ru
Что нами планируется в будущем:
Реферальная система
Перенос логики и настроек Монстро в кабинет - самый долгий и сложный процесс.
Управление конфигами
Управление физически из кабинета обновлением, развертыванием, запуском, остановкой и перезапуском копий на серверах.
Статистика работы копий и задач.
Техническая поддержка и управление серверами через бота
Чтобы не торопясь перейти на новую систему мы скоро подготовим для вас мануал.
Please open Telegram to view this post
VIEW IN TELEGRAM
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥38🙏3👍2