⚠️🛠Monstro 26.2.465
Переработана система учета ключей Яндекса в связи с тем, что старая логика строилась при отсутствии многих фич Монстро, которые уже введены за последний год.
- исчезли чекбоксы учитывать частотность и брать новые ключи. В них больше нет необходимости, да и путали только вас. Частотность отключить теперь нельзя. Учитывается всегда.
+ появилась новая вкладка лога - Я.лог. В этом логе показывается работа с ключами, если включен тех лог. Эта работа тоже переделана и теперь гораздо читабельнее и понятнее.
+ исправлен баг с таймзоной серверов. Теперь если таймзона разная между клиент-сервером и базой, то ключ рассчитываются корректно.
Теперь, если ключа в базе нет - он будет сразу отправлен в очередь, и добавлен в БД будет только тогда, когда профиль его возьмет в работу.
⚠️Если нужно ограничить количество отработавших ключей в сутки - теперь можно использовать как лимит самой задачи, так и лимит успешных выполнений потоков, которые будут растянуты на сутки. В старой логике этого не было, поэтому мы ввели чекбоксы, которые теперь удалены.
Переработана система учета ключей Яндекса в связи с тем, что старая логика строилась при отсутствии многих фич Монстро, которые уже введены за последний год.
- исчезли чекбоксы учитывать частотность и брать новые ключи. В них больше нет необходимости, да и путали только вас. Частотность отключить теперь нельзя. Учитывается всегда.
+ появилась новая вкладка лога - Я.лог. В этом логе показывается работа с ключами, если включен тех лог. Эта работа тоже переделана и теперь гораздо читабельнее и понятнее.
+ исправлен баг с таймзоной серверов. Теперь если таймзона разная между клиент-сервером и базой, то ключ рассчитываются корректно.
Теперь, если ключа в базе нет - он будет сразу отправлен в очередь, и добавлен в БД будет только тогда, когда профиль его возьмет в работу.
⚠️Если нужно ограничить количество отработавших ключей в сутки - теперь можно использовать как лимит самой задачи, так и лимит успешных выполнений потоков, которые будут растянуты на сутки. В старой логике этого не было, поэтому мы ввели чекбоксы, которые теперь удалены.
😢6👍3❤1
⚠️Пояснительная бригада.
1. Хватит пялиться в очередь запросов и думать, что если в очереди пишет 0 (ноль), то это плохо и нужно долбить техподдержку.
2. Очередь запросов увеличивается, если ваши потоки не успевают обработать эту самую очередь. Вот это уже так себе. Хотя зависит от целей. Это значение выводится скорее для того, чтобы понять, стоит ли еще потоков прибавить побольше, чтобы эта очередь как раз не скапливалась.
3. Очередь запросов пополняется только теми запросами, которые ГОТОВЫ работать. В вкладке результатов Я.лог (если включить тех лог) выводится информация о периоде работы каждого взятого ключа из вашего файла.
4. Если ключа нет в вашей базе данных, то ключ добавится в эту самую очередь. Если поток его возьмет в работу - будет написано об этом, а также что этот ключ был добавлен в базу.
5. Если ключ уже был в БД, значит у него сохранилось время последней его работы. Тогда проверяется текущее время со временем его последней работы. Если периодичность ключа соответствует текущей дате - ключ будет ДОБАВЛЕН В ОЧЕРЕДЬ. Если ключ не готов - НЕ будет его в очереди.
6. Каждый ключ, который берется уже в работу, сохраняет в БД текущее время, чтобы потом было понятно, когда его снова брать в работу.
1. Хватит пялиться в очередь запросов и думать, что если в очереди пишет 0 (ноль), то это плохо и нужно долбить техподдержку.
2. Очередь запросов увеличивается, если ваши потоки не успевают обработать эту самую очередь. Вот это уже так себе. Хотя зависит от целей. Это значение выводится скорее для того, чтобы понять, стоит ли еще потоков прибавить побольше, чтобы эта очередь как раз не скапливалась.
3. Очередь запросов пополняется только теми запросами, которые ГОТОВЫ работать. В вкладке результатов Я.лог (если включить тех лог) выводится информация о периоде работы каждого взятого ключа из вашего файла.
4. Если ключа нет в вашей базе данных, то ключ добавится в эту самую очередь. Если поток его возьмет в работу - будет написано об этом, а также что этот ключ был добавлен в базу.
5. Если ключ уже был в БД, значит у него сохранилось время последней его работы. Тогда проверяется текущее время со временем его последней работы. Если периодичность ключа соответствует текущей дате - ключ будет ДОБАВЛЕН В ОЧЕРЕДЬ. Если ключ не готов - НЕ будет его в очереди.
6. Каждый ключ, который берется уже в работу, сохраняет в БД текущее время, чтобы потом было понятно, когда его снова брать в работу.
❤6👍4😁1
⚠️MonstroTest 26.2.478
Улучшена работа подбора ключей для ПЗЯ.
Учитывая сложность всего интерфейса Монстро и понимание работы, внедрена система подбора ключей, которая нивелирует эти проблемы.
Теперь алгоритм не только проверяет время последней работы ключа и его частоту, но и перед тем как это сделать "взвешивает" частоты всех ключей, и в зависимости от веса берет случайный ключ из списка с таким расчетом, чтобы ключи, которые имеют более высокую частоту по отношению к другим, заходили в работу с бОльшим шансом, чем низкочастотные.
Это дает высокочастотникам работать чаще даже тогда, когда в общем списке еще миллион низкочастотников.
Также это исправляет ситуацию распределения низкочастотных по времени, так как высокочастотные просто на просто будут быстрее идти в работу и только изредка низкочастотным давать работать.
Улучшена работа подбора ключей для ПЗЯ.
Учитывая сложность всего интерфейса Монстро и понимание работы, внедрена система подбора ключей, которая нивелирует эти проблемы.
Теперь алгоритм не только проверяет время последней работы ключа и его частоту, но и перед тем как это сделать "взвешивает" частоты всех ключей, и в зависимости от веса берет случайный ключ из списка с таким расчетом, чтобы ключи, которые имеют более высокую частоту по отношению к другим, заходили в работу с бОльшим шансом, чем низкочастотные.
Это дает высокочастотникам работать чаще даже тогда, когда в общем списке еще миллион низкочастотников.
Также это исправляет ситуацию распределения низкочастотных по времени, так как высокочастотные просто на просто будут быстрее идти в работу и только изредка низкочастотным давать работать.
🔥18❤1👍1
⚠️Monstro 26.2.481
- исправлен баг с удалением профиля при превышении лимит ошибок каптчи
+ проведен анализ работы смарткаптчи и еще больше снижена нагрузка при ее решении.
- исправлен баг с удалением профиля при превышении лимит ошибок каптчи
+ проведен анализ работы смарткаптчи и еще больше снижена нагрузка при ее решении.
🔥9👍1
⚠️Monstro 26.2.490
- Фиксы загрузки страниц. Работа с каптчей (новой еще нет). Переработано, улучшено.
+ Прокси: Появилась возможность добавлять списки проксей в зависимости от устройства - Microsoft Windows, Android, iPhone. Если в отпечатке будет найден тег - прокси применится именно из этого списка. Если не найден - используются классические настройки.
+ Внедрили свой сервис определения ip прокси, ускорив подключение
+ Посетить сайт: Теперь вы можете для каждой ссылки формировать конкретные рефы, разделяя их знаком |. Примеры:
site.ru/stranica.html|vk.com - подставит реф vk.com
site.ru/stranica.html|{vk.com|ok.ru} - подставит случайный реф vk.com или ok.ru
- Фиксы загрузки страниц. Работа с каптчей (новой еще нет). Переработано, улучшено.
+ Прокси: Появилась возможность добавлять списки проксей в зависимости от устройства - Microsoft Windows, Android, iPhone. Если в отпечатке будет найден тег - прокси применится именно из этого списка. Если не найден - используются классические настройки.
+ Внедрили свой сервис определения ip прокси, ускорив подключение
+ Посетить сайт: Теперь вы можете для каждой ссылки формировать конкретные рефы, разделяя их знаком |. Примеры:
site.ru/stranica.html|vk.com - подставит реф vk.com
site.ru/stranica.html|{vk.com|ok.ru} - подставит случайный реф vk.com или ok.ru
🔥6👍3👏1
⚠️Monstro 26.2.493
- фикс интерфейса (убрано по умолчанию "удаление профиля", если ошибок решения каптчи много)
- важное обновление для ПЗЯ. Первое - очередь теперь не собирается, а пополняется только по мере необходимости. Второе - исходя из этого нагрузка расчетов теперь будет небольшой. Третье - соответственно низкочастотные не будут сразу лезть в очередь всей оравой.
- фикс интерфейса (убрано по умолчанию "удаление профиля", если ошибок решения каптчи много)
- важное обновление для ПЗЯ. Первое - очередь теперь не собирается, а пополняется только по мере необходимости. Второе - исходя из этого нагрузка расчетов теперь будет небольшой. Третье - соответственно низкочастотные не будут сразу лезть в очередь всей оравой.
⚠️ Товарищи и коллеги просим вас за технической помощью и консультациям обращаться на корпоративный аккаунт @monstrohelp
Не надо писать в личку кому то конкретно из команды Монстро - возможно он то как раз занят каким-то делами, а вы ждете и ждете от него ответ. Обращайтесь именно к https://news.1rj.ru/str/monstrohelp , так как там скорее получить ответ, ведь им может заняться тот, кто сейчас свободен или более компетентный.
Не надо писать в личку кому то конкретно из команды Монстро - возможно он то как раз занят каким-то делами, а вы ждете и ждете от него ответ. Обращайтесь именно к https://news.1rj.ru/str/monstrohelp , так как там скорее получить ответ, ведь им может заняться тот, кто сейчас свободен или более компетентный.
Telegram
Monstro
👍8😱1
⚠️Monstro 26.2.500
Мы долго, шли, шли и наконец пришли.
Благодаря фидбекам, последним обновлениям и тестам, наконец то удалось впихнуть невпихуемое в Монстро - упрощенную работу с ключами запросов ПЗЯ.
В типы работы программы добавился еще один выбор - "Учитывать частотность ключей ПЗЯ"
Теперь для работы ПЗЯ и файла ключей достаточно выбрать максимальное количество потоков, которое допустимо для нагрузки вашего сервера, и выбрать этот тип работы потоков. Всякие суточные лимиты задачи ПЗЯ стоит выключить.
Монстро будет заранее просчитывать суммарную суточную норму ключей, исходя из этого рассчитывать лимиты выполнений запросов, а также регулировать количество потоков.
⚠️Данный выбор работает только, если используется файл с запросами.
Мы долго, шли, шли и наконец пришли.
Благодаря фидбекам, последним обновлениям и тестам, наконец то удалось впихнуть невпихуемое в Монстро - упрощенную работу с ключами запросов ПЗЯ.
В типы работы программы добавился еще один выбор - "Учитывать частотность ключей ПЗЯ"
Теперь для работы ПЗЯ и файла ключей достаточно выбрать максимальное количество потоков, которое допустимо для нагрузки вашего сервера, и выбрать этот тип работы потоков. Всякие суточные лимиты задачи ПЗЯ стоит выключить.
Монстро будет заранее просчитывать суммарную суточную норму ключей, исходя из этого рассчитывать лимиты выполнений запросов, а также регулировать количество потоков.
⚠️Данный выбор работает только, если используется файл с запросами.
👍13🔥6
⚠️Monstro 26.2.514
Срочно пришлось переделывать задачу "ПЗЯ". Выброшено много старого кода двухлетней давности и улучшена логика.
Улучшена работа с каптчами в задаче.
Также починили вход через ya.ru и дзен.
Срочно пришлось переделывать задачу "ПЗЯ". Выброшено много старого кода двухлетней давности и улучшена логика.
Улучшена работа с каптчами в задаче.
Также починили вход через ya.ru и дзен.
👍21🔥1
⚠️Monstro 26.2.521
Улучшенная работа ручного ввода запроса в ПЗЯ
Улучшенная работа ручного ввода запроса в ПЗЯ
🔥3❤1
⚠️Monstro 26.2.527
С этой версии у вас появилась возможность на лету менять версию браузера - меняет только у браузера, а не происходит замена всего отпечатка. Учтите, что браузер профиля должен соответствовать версии браузера, на которую вы хотите сменить. Если вы указали брать профили с IOS Сафари, то логично полагать, что версия от хрома будет не очень умным вариантом.
С этой версии у вас появилась возможность на лету менять версию браузера - меняет только у браузера, а не происходит замена всего отпечатка. Учтите, что браузер профиля должен соответствовать версии браузера, на которую вы хотите сменить. Если вы указали брать профили с IOS Сафари, то логично полагать, что версия от хрома будет не очень умным вариантом.
👍9
⚠️🛠Monstro 26.2.533
- добавили логирование ошибок прокси при получении внешнего ip адреса.
- если ip адрес не удалось получить даже с многократной попытки прокси не принимается и поток будет закрыт.
- пофиксили частое обновление смарткаптчи (новый метод быстрее отрабатывал, чем получали координаты новой картинки смарткаптчи)
- добавили логирование ошибок прокси при получении внешнего ip адреса.
- если ip адрес не удалось получить даже с многократной попытки прокси не принимается и поток будет закрыт.
- пофиксили частое обновление смарткаптчи (новый метод быстрее отрабатывал, чем получали координаты новой картинки смарткаптчи)
⚠️🛠Monstro 26.2.535
Сегодня полдня работа проводилась наговно -проксях, чтобы отловить многие проблемы.
- Рефакторинг методов подгрузки страниц после клика, включая глючный чекбокс каптчи - более менее заставили эту тварь шевелиться.
- Доработка работы со смарткапчей с учетом слайдера, который стал вылазить даже между смарткаптчами.
Сегодня полдня работа проводилась на
- Рефакторинг методов подгрузки страниц после клика, включая глючный чекбокс каптчи - более менее заставили эту тварь шевелиться.
- Доработка работы со смарткапчей с учетом слайдера, который стал вылазить даже между смарткаптчами.
👍14🔥5
⚠️🛠Monstro 26.2.553
В тесном сотрудничестве с сервисом https://topsbor.com удалось создать свой собственный сервис определения ip прокси и его местоположения для корректной работы прокси.
Теперь логика в этой версии такова:
Идет попытка подключиться стандартным методом BAS, и если попытка неудачная, то переходим на подключение через собственный сервис. Если и эта попытка неудачная, то дается 10 секунд на случай реконнекта прокси и снова пытаемся подключиться.
Если ничего не помогло - вам стоит сменить прокси.
В тесном сотрудничестве с сервисом https://topsbor.com удалось создать свой собственный сервис определения ip прокси и его местоположения для корректной работы прокси.
Теперь логика в этой версии такова:
Идет попытка подключиться стандартным методом BAS, и если попытка неудачная, то переходим на подключение через собственный сервис. Если и эта попытка неудачная, то дается 10 секунд на случай реконнекта прокси и снова пытаемся подключиться.
Если ничего не помогло - вам стоит сменить прокси.
🔥11👍2
⚠️ Немного информации
Андрей больше поддержку не ведет. От слова совсем. Даже в приватном чате не пишите ему и не надейтесь, что ответит. Это очень вредит разработке, да и в целом иногда нужно отдыхать всем. Есть официальный контакт Монстро и приватный чат, где могут дать совет или помочь ваши коллеги.
Суббота и воскресенье - выходной. Сегодня последний раз, когда в выходные было обновление. Но по понедельникам они будут чаще всего.
Андрей больше поддержку не ведет. От слова совсем. Даже в приватном чате не пишите ему и не надейтесь, что ответит. Это очень вредит разработке, да и в целом иногда нужно отдыхать всем. Есть официальный контакт Монстро и приватный чат, где могут дать совет или помочь ваши коллеги.
Суббота и воскресенье - выходной. Сегодня последний раз, когда в выходные было обновление. Но по понедельникам они будут чаще всего.
👍13💩3
Коллеги, завтра, 07.11 будет обновления движка до 26.4.0 и 119 версии хром. Во избежании потерь настроек, сохраните конфиги и перезагрузите сервера сегодня. Завтра обновление лучше устанавливать как и все крупные обновы, сначала перезапускаете одну копию, для загрузки нового ядра, потом по очереди все остальные
❤7👍6😱2
⚠️Monstro 26.4.0
Перешли на 26.4.0 версию BrowserAutomationStudio с 119.0.6045.106 версией Chrome.
Исправлена утечка памяти при использовании HTTP-клиента.
Исправлена утечка памяти при закрытии браузера с действием сброса.
HTTP-клиент был обновлен.
libcurl был обновлен до версии 8.3.0.0.
openssl был обновлен до версии 3.0.11.
Добавлена поддержка brotli.
Добавлена поддержка HTTP/2
Включено решение рекаптчи google и улучшена версия сервера Монстро решения каптч.
Заново написана задача "создание Google аккаунта" и доработана "Авторизовать профиль"
В задаче "Авторизовать профиль" для гугла введена возможность подтверждать телефон и смс при проверке личности. Работает фича только, если не было каптчи. Если до этого появлялась каптча гугла - значит профиль 100% заблокирован и плата за номер с смс будет просто пустой тратой. Также в этой задаче можно устанавливать аватары для профилей, предложенные Google.
Важное обновление для этих задач. Теперь в профиле поля accоunts хранится в Json формате данные о регистрациях и авторизаций в гугле - логин, пароль, резервная почта, телефон и даже прокси. Скоро туда добавятся все сервисы регистраций - яндекс, ютуб, майл и т.п.
Чтобы снизить шанс разлогина или бана задача "Смотреть Ютуб" теперь использует прокси, которое сохранено при регистрации или авторизации гугл аккаунта.
Доработка задач и тестирование проводилось на генерации десктоп отпечатков Windows Chrome c версией 119.0.6045.106. Использование мобильных отпечатков или других версий браузера в этих задачах не рекомендуется.
Перешли на 26.4.0 версию BrowserAutomationStudio с 119.0.6045.106 версией Chrome.
Исправлена утечка памяти при использовании HTTP-клиента.
Исправлена утечка памяти при закрытии браузера с действием сброса.
HTTP-клиент был обновлен.
libcurl был обновлен до версии 8.3.0.0.
openssl был обновлен до версии 3.0.11.
Добавлена поддержка brotli.
Добавлена поддержка HTTP/2
Включено решение рекаптчи google и улучшена версия сервера Монстро решения каптч.
Заново написана задача "создание Google аккаунта" и доработана "Авторизовать профиль"
В задаче "Авторизовать профиль" для гугла введена возможность подтверждать телефон и смс при проверке личности. Работает фича только, если не было каптчи. Если до этого появлялась каптча гугла - значит профиль 100% заблокирован и плата за номер с смс будет просто пустой тратой. Также в этой задаче можно устанавливать аватары для профилей, предложенные Google.
Важное обновление для этих задач. Теперь в профиле поля accоunts хранится в Json формате данные о регистрациях и авторизаций в гугле - логин, пароль, резервная почта, телефон и даже прокси. Скоро туда добавятся все сервисы регистраций - яндекс, ютуб, майл и т.п.
Чтобы снизить шанс разлогина или бана задача "Смотреть Ютуб" теперь использует прокси, которое сохранено при регистрации или авторизации гугл аккаунта.
Доработка задач и тестирование проводилось на генерации десктоп отпечатков Windows Chrome c версией 119.0.6045.106. Использование мобильных отпечатков или других версий браузера в этих задачах не рекомендуется.
🔥6