Рекомендации по прокси, серфингу и железу при работе с софтом.
Актуальная версия программы https://t.me/sphereABC/608
Парсер https://t.me/c/1373635003/74913/81975 от Монстро
Так же есть парсер, предоставленный нашим клиентом и пул сайтов https://t.me/c/1373635003/115573
Апи для прокачки профилей. Комабайн от Topsbor https://t.me/topsbor_bot. При регистрации по ссылке бонус на баланс 3000 рублей
Файл для генераций ключей для задачи ПЗЯ https://t.me/c/1373635003/74913/111130
Тестовый калькулятор расчета потоков прокачки и ПФ https://t.me/c/1373635003/74913/85884
Демо версия https://t.me/monstrotraf/41
мобилки есть у https://ltespace.com/monstro при регистрации по ссылке скидка 5%
За ipv6 высокого качества, а так же мобилками, резидентами и сервера к t.me/rodionpilot
Так же для прокачки и прогрева можно использовать ipv6 с ротацией https://proxy4you.ru/ (при регистрации по ссылке скидка 5%)или https://proxymania.ru/ для разбавления пула IP. Важно, оба провайдера режут скорость на пул IP, поэтому нужно использовать 2 и более провайдеров, а так же брать разные пулы, что бы не было потерь в производительности. У провайдеров есть локации как в РФ, так и в США и ЕС
Либо ipv4 https://proxy.house/ порты от 10 рублей
Для тех кто работает в не по РФ есть шикарные мобильные прокси от https://proxylte.com/. От 25$ за безлимитный мобильный порт 200 tcp на порт
Недорогой и качественный сервис аренды сервера под базу данных PostgreSQL
Сервис для решения новой каптчи https://capsola.space/
Дата центр с качественными серверами powervps.net Ryzen 5 3600, 64 GB RAM, 2×480 GB NVMe (базовая цена) – 55.00 USD за месяц, на +\- 100 потоков
файл с предложением нового функционала https://t.me/c/1373635003/74915/87580
Рекомендации по прокси, железу и и другим расходникам тут
Общие настройки #
Название копии #
которое в шапке главной странице, будет отображаться тут для удобства администрирования, так же можно добавлять название группы или чего угодно
Строка потоки #
отображает количество одновременно запущенных браузеров в программе. Рекомендуемое значение 1-2 потока на 1 общую прокси или 7-12 потоков на одну приватную прокси (без отключения картинок). На серверных прокси 1 порт 1 поток
Пауза между стартом потоков #
оптимизационная настройка для балансировки нагрузки на железа, сделана для работы на слабых серверах или домашних ПК, если видите фризы – увеличиваете, дефолт 0 для серверов типа Ryzen 5, аналогов и мощнее
Скорость запуска потоков #
Еще одна настройка оптимизации, но уже для серверов типа Ryzen 5, аналогов и мощнее, если вы видите что загрузили сервер, но цп не упирается в потолок, а в браузерах пустые вкладки – меняйте скорость в большую строну, это ускорит запуск потоков
Количество выполнений #
Есть 4 варианта работы с программой
- Бесконечная работа – софт работает без пауз до перезагрузки
- Количество выполнений, софт выполнит заданное количество заданий и остановится
- Количество выполнений в сутки, к примеру вам нужно 10 действий алгоритма за 24 часа, софт равномерно их размажет на 24 часа, не останавливаясь, на следующие сутки цикл возобновится. При расчете времени выполнения в лог будет выводится строка с ожиданием ресурса
- Учитывать частотность ПЗЯ – бот будет самостоятельно регулировать потоки в рамках 24 часов (и в заданном лимите потоков) чтобы все ключи из задания были отработаны
Планировщик потоков #
Опция позволяет Монстро запускать и стартовать в определенное время
к примеру, если вы хотите чтобы софт работал исключительно днем, ставите галки напротив временных отметок, при которых программа встанет на паузу
Максимальное время потоков пока тестовая опция, лучше не менять значение
2. Настройка прокси #
Примеры формата прокси слева от графы добавления ip:port@login:pass, если у вас протокол socks, то формат прокси для программы должен быть такой socks5://ip:port@login:pass
Отправлять запрос в конце потока – опция сделана для реконекта (смены ip прокси) в конце потока, чтобы новый поток начал работу с новым ip
Время на подключение рекомендуемое 5 сек, если слабые прокси-можно увеличить
Исключение из списка работает только в рамках сессии (до перезапуска софта)
Проверять дубль внешнего ip – надстройка сделана для того, чтобы исключить совпадение внешнего ip адреса в рамках заданного промежутка времени
Опция игнорирования ошибки прокси создана для того, чтобы в случае падения внешнего сервера определения ip адреса у вас не простаивала работа
В опции проверки дубля внешнего IP внедрены тонкие настройки которые позволяют либо проверять ip для всех копий, относительно текущей, либо проверять в целом дубль ип в рамках работы софта, так же можно опционально взять следующую прокси при обнаружении дубля
Для работы с яндексом и гуглом, а так же регистрацией и авторизацией аккаунтов необходимо использовать прокси. Для прокачки и прогрева профилей можно использовать прокси ipv4 или IPV6, для работы с ПФ, накрутки просмотров роликов и статей необходимо использовать мобильные либо резидентские прокси.
Почему именно мобильные или резидентские прокси?
Одновременно под одним ip может сидеть несколько тысяч пользователей
Их невозможно занести в черные списки
Смена ip адреса происходит в промежутке заданном вами промежутке, как правило, от 5 до 10 минут
Имеют разные отпечатки
Стоит обратить внимание, на то, что без запретов картинок и скриптов 1 приватная мобильная прокси тянет до 10 потоков монстро, 1 общая прокси – 1, в некоторых случаях 2 потока. Если у вас не работает софт, не открываются сайты или что-либо ещё, первым делом попробуйте запустить программу без прокси, это поможет решить 70-80% проблем.
В строку загрузить список прокси необходимо подставить файл с прокси в указанном формате. По умолчанию программа будет брать каждую прокси 1 раз для каждого потока, но если у вас, к примеру, только 2 приватных прокси, и вы хотите чтобы все 20 потоков работало сразу, идёте во вкладку продвинутые и меняете цифру 1 на пропорционально необходимую
⚠️Монстро 26.2.219
Введена возможность при совпадении дубликатов ip прокси отсылать запрос на смену прокси, вместо перехода на следующую. Аналог отправки запроса при завершении потока.
мобилки есть у https://ltespace.com/monstro
для прокачки и прогрева можно использовать ipv6 с ротацией https://proxy4you.ru/
Либо ipv4 https://proxy.house/ порты от 10 рублей
Быстрое подключение к прокси #
Создан новый алгоритм работы с прокси, учитывая последние возникшие проблемы с операторами и подключением через BAS.
Надстройка отправлять запрос после завершения потока #
сделана для того, чтобы вы могли перезапустить прокси (изменить внешний ip) после завершения потока.
Строка сколько времени выделить на проверку прокси #
отвечает за проверку прокси на внешний Ip перед стартом потока.
⚠Совет по настройкам прокси:
Для того, чтобы плохие прокси (даже если они ваши собственные) исключить на время, если они не работают, и заодно следить за их состоянием, то включите галочку “Исключить из списка неработающие прокси”.
Чекбокс “Удалить нерабочую ссылку также из файла” нужно обязательно отключить. Далее включаем в верхнем меню Настройки->Продвинутые настройки, и настраиваем параметр “перегружать периодически”, как показано на скриншоте.
Такие настройки, будут исключать нерабочие прокси во время работы и каждый час восстанавливать список прокси из файла.
В результате, через заданное время вы будете обновлять свои нерабочие прокси, если вдруг они восстановились, но максимально эффективно работать только с рабочими.
База данных #
Если у вас 1 сервер и небольшие потребности в количестве профилей то, в целом, локальной базы данных, которая идёт из коробки вам будет достаточно.
Если у вас не один сервер, то для оптимизации работы лучше использовать внешнюю базу данных
Недорогой и качественный сервис аренды сервера под базу данных PostgreSQL
Сама база там ставится одной кнопкой, а для подключения к софту нужно использовать только эти данные:
Либо если хотите использовать свои мощности, можно поставить готовую сборку, которая разворачивает бд в рамках сервера https://t.me/sphereABC/405
Для экспорта рабочей БД из Монго в Постгрес нужно действовать по следующему алгоритму
- Далее запускаем Монстро на создание профилей с ПОДКЛЮЧЕННОЙ базой Постгрес на создание профилей. Буквально на одну минуту чтобы софт создал в базе нужные таблицы
В настройках БД выбираем основную бд локальную и вписываем данные от бд постгрес
Важно, перед портированием нужно на БД постгрес запустить создание профилей, что сот создал соответсвующие таблицы
А в настрйоках профилей ставим чекбокс переноса во внешнюю бд и в другую группу соответсвенно
Настройки браузера #
Настройки частоты работы браузера #
частота работы браузера минимально ограничена на 10 кадрах в секунду – это минимальное рекомендованное значение для прокачки или прогрева профилей, для ПФ рекомендуется от 30
% уменьшения разрешения браузера не рекомендуется делать больше 50% при прокачке или прогреве (только если отпечатки не генерация!!!), в копиях с ПФ лучше снизить до 0
Так же в копиях с пф лучше не отключать звук
- Опция работы без видеокарты предполагает улучшения производительности при отрисовке браузера на серверах без видеокарты. Не рекомендуется включать при заходах на целевой сайт
- Опции компонентов и SafeBrowsing внедрены для улучшения качества профилей в Гугл
Запрет запросов по содержанию (прилагается рекомендуемый) #
помогает как снизить нагрузку на процессор, так и на прокси, уменьшив количество tcp соединений отключением картинок, видео, и других скриптов, которые загружаются вместе со страницей (надстройка больше подходит для продвинутых пользователей)
Скликивать объекты при просмотре страниц #
Опция склика объектов при просмотре помогает закрывать большинство всплывающих попапов, так же вы можете расширить этот перечень добавив свой список селекторов как искать селектора в бас показано на этом видео BrowserAutomationStudio. Урок #2. Селекторы. Поиск элементов. Парсер ленты twitter.
Blacklist #
помогает регулировать поведение бота в работе потока на любом сайте путём запрета кликов по ссылкам, к примеру, вам не нужно что бы бот кликал на целевом сайте на иконки соцсетей или на карту или на ассистента, вы заходите на сайт, ищите ссылки или части ссылок итих элементов, по которым хотите запретить клик, добавляете их в файл и вносите в программу
Просмотре страниц до подвала #
довольно удобная надстройка, помогает показать метрике, что сайт докручен до конца (пользователь заинтересовался им.) Конечная координата по дефолту 99999-подвал, регулируйте +/- под свои значения, если это необходимо
Опция смены языковых настроек подменяет язык браузера в юзераенте #
Опция смены координат помогает раскидать ваших ботов, если вы, к примеру, работаете с одной фермы, достаточно оказать одну или несколько координат вашего города\локации и выставить радиус разброса подмены координат, для яндекса пока лучше не использовать
Настройки профилей #
Группа хранения профилей #
меняете справа список на строку и можно писать рандомное название группы, для удобства администрирования.
Все эти группы будут храниться в базе данных, как и все профили (физические отсутствуют в принципе)
Возможность появилась через генерацию строк. Генерация строк позволяет сделать, как список групп, которые будут браться каждым потоком случайно, так и выставить шанс каждой группе – чем больше одной группы в списке, тем выше шанс, что она выпадет.
Создавать новые профили. #
При таких настройках все потоки будут создавать новые профиля пока в заданной группе не накопиться 10000 профилей, либо при уменьшении заданного количества профилей. Т.е. каждый новый поток при открытии будет создавать профиль и выполнять задачи из алгоритма. По достижению лимита создание прекратиться и будет выпоняться только алгоритм работы. При открытии каждого потока софт будет проверять соответствие лимита профилей профилей с выставленными настройками, если профилей будет меньше, чем выставленно лимитом будет создаваться новый профиль при соостветсвии шансу создания.
Если профилей больше чем лимит, удалятся они не будут
⚠️Монстро 26.2.137
Расширены возможности работы с группами профилей. Теперь вы можете назначать несколько групп, как для взятия профиля, так и для переноса.
Возможность появилась через генерацию строк. Генерация строк позволяет сделать, как список групп, которые будут браться каждым потоком случайно, так и выставить шанс каждой группе – чем больше одной группы в списке, тем выше шанс, что она выпадет.
Также для работы с базой постгресс вы можете добавлять свои условия для выборки профилей. Например добавить folder=’метка’ и вы получите профили с меткой “метка1”. А если вставить “folder” NOT IN (‘метка1’), то из выборки будут исключены профили с меткой “метка1”. Для информации – метки хранятся в поле folder. Так же вы можете добавить туда любые правильные sql запросы для выборки.
Если в одной из групп не будет найден профиль по критериям, будет проверена следующая группа. Между проверками ожидание в 30 секунд все равно остается.
Очистка временных профилей для оптимизации работы с жесткими дисками #
Ввели настройку очистки временных профилей, которые должны удаляться, но не удаляются и забивают жесткий диск. Удаление происходит раз в час, чтобы не нагружать систему.
Фильтр профилей #
Данная настройка позволяет регулировать не только тип профилей, которые идут в работу, но и фильтровать их во возрасту, количеству кук или доменов, дате последней работы или авторизации в яндексе или гугле
Подстановка кук при создании профилей #
Реализована возможность при создании новых профилей импортировать в них кукис netscape формата.
Можно не покупать аккаунты, а скупать сразу кукис – созданный профиль будет уже “авторизован”.
Если список закончится – программа остановится (будет ждать завершения всех потоков)
Пост работа с профилями #
Шанс удаления профиля после отработки #
% удаления профиля из бд в конце потока
перенос в другую группу #
можете использовать если профиля вам нужны для других проектов, либо складывайте их в архив
Вырезание перфект канваса позволит снизить нагрузку на бд и на железо, софт вырежет канвас у профиля при взятии его в работу. Если профили ранее были сделаны через отпечатки баса
галка переноса из одной базы в другую как раз и позволяет переносить профиля из локальной базы в базу ПГ или для миграции профилей из одной базы ПГ в другую
Работа с метками #
Еще один фильтр упрощающий работу с разными проектами в рамках одной группы. Метка может присваиваться профилю для создания алгоритма работы при прокачке по интересам для каждого сайта по отдельности в рамках одной групп
Работа с логом #
Для отслеживания багов необходимо включать технический и тестовы лог, для отслеживания периодов работы ключа лог расчета ключей Яндекс. Технически лога теперь 2. В основном выводятся основные парменетры работающей копии, а во вкладке результы-лог можно наблюдать работу каждого потока обособленно
в главный выведена информация о количестве капч и баланс сервисов их решения, а так же сервис для прокачки профилей TopSbor.com
Так же если ваши прокси недостаточно стабильны, то в самом низу будет информация о колличесве неудачных к ним подключенией
В лог так же выводится информация о количестве доступных профилей, согласно выставленным фильтрам в настройках профилей, фильтры профилей, выставленные в других задачах тут не учитываются.
Фильтры выставленные в задачах ПЗЯ и задачах прокачки\прогрева, фильтруют профиля после основного фильтра на соответствие заданным критериям в заданной задаче
Работа с отпечатками #
Откуда брать отпечатки. #
В текущей сборке предусмотрено 5 вариантов
Бесплатная база отпечатков от баблософт, может генерить только Microsoft Windows, Chrome, ваш файл, ключ Фингерпринт, ваша ссылка или генерация в монстро
По первым трем надеюсь все понятно. Последний вариант, – Монстро сам генерит отпечатки, рекомендуемые настройки дефолтные, генерация на данный момент только Chrome
ВАЖНО. При использовании отпечатков из генерации не использовать сжатие браузера, так как сам себе отпечаток и так маленький
В этом и всех остальных случаях тип создания отпечатка регулируется тегами, прописанными через запятую без пробела, либо готовыми шаблонами
⚠️Монстро 26.2.3
Всем известно, что база официальных фингеров имеет большинство windows хром отпечатков, и если указывать *, чтобы получать различные устройства, то к сожалению будем получать в основном именно windows. И это проблема. Чтобы получить половину десктопа и половину мобильных, например, придется заранее создавать нужное их количество.
Чтобы решить эту проблему мы ввели очень полезную фичу для тех, кто хочет создать профили с определенным процентом тех или иных видов отпечатков. Теперь можно указать разные теги.
Естественно работает только для тех, кто имеет ключ фингепринтсвитчера или генерации.
Чтобы указать список разных тегов, надо разделить их символом #
Примеры:
Microsoft Windows,Chrome#Mobile
Desktop#Mobile
В данных примерах будут создавать профили с 50% шансом десктопа и мобильными.
Если вы хотите разные шансы, то просто увеличивайте количество нужных тегов. Например:
Desktop#Mobile#Mobile#Mobile – Десктоп 25% шанс, а у мобильных 75% шанс.
Пример тегов вы можете посмотреть тут https://fingerprints.bablosoft.com/#testing
⚠️Монстро 26.2.32
Вернулась возможность проверять версию отпечатка и “освежать” его. Работает только при включенном выборе фингерпринт ключа.
Небольшие изменения по снижению нагрузок.
Заменять каждый раз отпечаток #
при включенной опции каждый поток при взятии профиля будет менять отпечаток, используйте, если это вам необходимо.
⚠️Монстро 26.1.23
В этой версии капитально переработана работа с отпечатками.
⚠️Также добавлена возможность автоматически обновлять отпечатки, причем той же платформы и браузера, на более свежие. Главное указать минимально допустимую версию браузера, при которой будет смена на более свежий отпечаток.
⚠️ Учитывайте, если вы берете отпечатки без указания браузера или системы, то указав, к примеру, 115 версию для хрома, а будет взят Айфон, то с большой вероятностью такой отпечаток будет изменен на новый, так как система версий у айфонов отличается. Хотя это и не является особой проблемой.
Если указать 1000 (тыща), то, можно предполагать, что отпечатки будет менять у любых профилей.
⚠️Монстро 26.2.135
Переделана работа получения отпечатка. Теперь есть возможность получать отпечатки без перфектканваса, что делало их в 10 раз больше, и соответственно влияло и на производительность серверов.
Выбирайте старую версию и будет у вас база данных весить в 10 раз меньше.
На вопрос – но это же “палево”? До новых версий БАСа как бы работали с этими отпечатками, а на новых версиях лучше не стало. Так что под большим вопросом необходимость в этом перфектканвасе.
⚠️Работает только с новыми отпечатками, полученными через ключ фингерпринта.
⚠️Вырезка перфектканваса в полученных ранее отпечатках уже запланирована.
PS Последние тесты показывают, что и с перфектканвасом показывает 100% уникальность отпечатка. Выбор за вами – возможно старая версия отпечатков позволит и больше потоков запускать.
При написании мануала ядро обновлено до 117 версии Хрома, однако, нет тестов, подтверждающих что для яндекса нельзя использовать более новые версии хрома, даже при устаревшей версии ядра
Настройки антикапчи #
⚠️Монстро 26.2.161
В связи с тем, что настройки по борьбе с каптчами все растут и растут, было решено вынести их в отдельный раздел.
для работы со смарткапчей яндекса и используются 3 интегрированных сервиса, для более точного решения рекомендуем использовать как минимум 2 сервиса решения, т.е. если капча не будет решена одним из сервисов – софт будет использовать второй сервис для решения
так же для чистки скомпроментированных профилей, выведен чекбокс для работы с профилем у которых каптч больше заданного вами лимита
Алгоритм задач #
Монстро – самый гибкий инструмент из всех на рынке. Настроить его можно абсолютно под любую задачу.
Чтобы составить свой алгоритм копии перетаскивайте в верхнее окно задачи, выполнение алгоритма работает сверху вниз
После переноса станут доступны настройки каждой задачи.
Задача посетить сайт #
Задача посетить сайт может служить для прогрева по сайтам, прокачки профилей, посещения целевого сайта с подстановкой рефера (делать соцсигналы).
Все настройки довольно понятны, сверху вниз:
Активность задачи – день/ночь, 24/7, либо в %, т.е задача может отработать, а может и нет
Минимальное и максимальное число сайтов, к примеру ставите минимум 1 максимум 10 и бот в каждом потоке будет посещать от 1 до 10 сайтов (рандом)
Минимальное и максимальное время просмотра – время просмотра каждой страницы сайта в потоке, по которым гуляет бот. Мои рекомендации для прокачки и прогрева выставлять время от 25 секунд,
Минимальная и максимальная глубина просмотра – количество ссылок, который бот прокликает на сайте в открытом потоке. Для прокачки и прогрева рекомендую ставить глубину от 2, на целевом сайте от 3.
Надстройкой скликивать элементы можно указать боту какие элементы прокликивать на сайте и с каким шансом. К примеру вы хотите чтобы бот кликал по рекламе на сайте или по иконке социальных сетей, вписывайте необходимые селекторы в файл (каждый с новой строки) и бот в конце потока будет по ним кликать с заданным шансом.
Шанс перехода по реферальной ссылке имитирует переходы на заданный сайт с подставнокой рефера, типа переход с другого сайта.
Рассмотрим пример.
Вы хотите чтобы ваш сайт посещали боты из соцсетей с глубиной на вашем сайте от 3 до 6, временем на каждой странице от 45 до 120 секунд, а в конце потока с шансом кликали по рекламе на сайте, контактах, корзине или ещё чём либо (вставлять селекторы строкой), то вам понадобятся вот такие настройки
Регистрация в ПС #
Пол по самостоятельному выбору или рандом
Заполнение профиля город фото и адрес даёт некое преимущество в сроке жизни аккаунта (до разлогинивания, так как регистрация идёт без смс), но и увеличивает время на регистрацию, на +- 30 секунд, ну и в зависимости от скорости прокси.
Город один можно вписать или добавить фалом
Надстройка удаления профиля в случае неудачной регистрации будет полностью стирать профиль если был непрогруз или неудачная регистрация, ставьте галку, если уверены что это вам необходимо.
Количество ошибок напрямую влияет на % успешных регистраций исли вы вдруг захотите с 1 прокси в 10 потоков начать регистрировать профиля, яндекс будет усложнять капчу и % разгадывания уменьшится, в таком случае нужно повышать колличество допустимых ошибок до нужного значения, если вы планируете регистрировать профили в 1 поток, то 1-2 попыток будет достаточно.
Авторизация профилей #
Если у вас есть готовый файл с аккаунтами яндекса, гугла или мэил ру, вы можете ими авторизовать ваши прокаченные профиля, воспользовавшись сервисом авторизации.
Обратите внимание, что софт авторизуя аккаунт мэил ру, с помощью него же авторизуется и в сервисах яндекса, что повышает траст профиля в глазах яндекса.
Надстройка включать ручной режим если просит номер телефона переведет программу в режим ручного управления для введения всех необходимых данных самостоятельно.
Надстройка завершит поток при неудачной регистрации может быть вами использована к примеру:
– если вы хотите создать отдельную папку с авторизованными профилями, то есть вы с нача в настройках профилирования указали переносить профиль в конце потока из папки А в паку Б, а в задаче авторизации произошла ошибка и профиль не был авторизован, задача завершится, в работу возьмется новый профиль, а незалогиненный останется в старой папке для повторного использования.
Прокачка профилей: #
Прокачивать удобнее всего задачей прогрев профиля
Есть небольшой дефолтный пул сайтов, но лучше собрать свой при помощи парсера, свой имеется в виду как пул сайтов так и запросов. Так же парсером можно собирать сайты под IPV6.
На скрине рекомендуемые настройки
Прогрев ТОП Сбор #
Чтобы не собирать пачки сайтов, потом фильтровать их по доступу к ipv6, либо по интересам был создан многофункциональный комбайн с помощью которого можно довольно качественно прокачивать профиля. С тарифами и функционалом можно ознакомиться тут
Прогрев по интересам #
Для экономии времени и ресурсов, а так же оптимизации прокачки была введена задача прогрев по интересам от Быдлокодер API. С полной версией можно ознакомится тут: @yandex_bots
При помощи данной задачи можно выбрать пул сайтов для прокачки соответсвующий долгосрочным интересам пользователей в вашей тематике сайта, что делает профилей более качественными в алгоритмах ПС
Поисковый запрос Yandex #
В последнем обновлении задача поисковый запрос Яндекс претерпела изменения в дизайне, однобоко логика работы осталась прежней
Накрутка ПФ с помощью задачи поисковый запрос Yandex
После того, как профиля прокачались, набрались интересов, короче говоря превратились в настоящих пользователей, можно приступать к накрутке поведенческих факторов через поиск яндекс.
Основная задача ПФ – поднятие вашего сайта в ранжировании выдачи яндекса и захода в ТОП. Хочу обратить внимание, что ПФ – лишь один из факторов ранжирования сайта, на одном ПФ сайт не только не закрепится в ТОП, но и не зайдёт туда, если нет СЕО, ссылочной массы, соцсигналов и тому подобное. Каждый варится тут по своему, но общие понятия у всех смежные.
Программа принимает ключи списком, как показан на примере слева
– количество заходов по этому ключу в день, ВАЖНО. не стоит наливать 100 запросов в день по ключу, если у него частотка 1000 в месяц. Много не есть хорошо, и вероятнее всего яндекс отфильтрует эти заходы как накрутку. Рекомендуется наливать не более 30% от месячной частотки, исходя из гео запроса.
Касательно работы с частоткой в софте:
Теперь в строчке запросов можно указывать не только частоту в сутки ключа, но и дополнительно указать на какой период это частота распространяется. Сперва пишется частота ключа (сколько раз максимально он может отработать за период), потом ставим точку, и число периода (измеряется в сутках)
На скрине показан пример:
site.ru;ключ|уточнение;1.2;&lr=213
Где частота ключа показана числами 1 и 2, разделенные точкой. Это означает, что ключ отработает 1 раз в два дня. После частоты точку ставить не обязательно, но тогда софт посчитает, что период равен суткам.
Еще примеры:
1 – 1 раз в сутки
5 – 5 раз в сутки
2.1 – 2 раза в сутки
10.2 – 10 раз за двое суток
1.30 – 1 раз в месяц.
❗️Также, теперь ключи распределяются по периоду, указанному в частоте ключа.
Если в лог выводится ожидаю ресурс поиска ключей то либо ключи закончились, либо период их работы еще не наступил.
Подробный расчет периода работы каждого ключа доступен третьей вкладке результатов, предварительно в настройках логирования нужно включить вывод ключей Яндекс поиска
⚠️Монстро 24.9.93
В задачу поисковый запрос введена новая возможность, искать не по одному домену в запросе, а по нескольким.
Теперь вы можете через разделитель | указать неограниченное количество доменов или страниц для поиска в выдаче.
Первый домен – ключевой. По нему идет поиск лимита суточных запросов (если это важно).
Остальные домены поочередно проверяются в выдаче – найдено ли совпадение.
Сейчас если ключевой домен найден, то вне зависимости на какой позиции он найден – скликнут будет именно он.
Если он не найден, но будут совпадения по другим доменам, то скликнута будет самая лучшая позиция из этих доменов.
&lr=2 (Питер) – то самое гео выдачи по которому вы планируете поднимать свой сайт. Если гео проксей совпадает с гео планируемой накрутки параметр lr можно не проставлять. Так же теперь вместо lr можно писать название города
Собирать ключи проще всего с помощью Google Docs, с последующей выгрузкой в CSV.
Надстройка добавлять к запросу домен #
Опция помогает найти сайт в выдаче если он не доступен по ключу, например по ключу самый лучший сайт ваш сайт не был найден, тогда программа автоматически подставит в запрос домен вашего сайта, а пожеланию, переведет его в кирилицу
Однако лучше изначально использовать формат задания с уточнением
сайт,запрос|уточнение,10,&lr=213
может быть как бренд так и адрес или номер телефона, такой запрос будет лучше продвигать целевой сайт
Шанс клика #
⚠️Монстро 24.9.115
Появилась возможность в задаче “Поисковый запрос Яндекс” выставлять шанс клика, в зависимости от позиции сайта
Оптимизация работы с не найденными ключами #
Для оптимизации работы с ключами в последнем обновлении были введены и расширенны функционалы у параметров закрытия потока при ошибке или отсутствии ключа в поиске, а так же добавлен возврат ключа в расчетный период при ошибка из скриншота выше
Режимы совпадения сайта в выдаче #
⚠️Monstro 25.1.135
Добавлена новая настройка в задаче “Поисковый запрос Яндекс”
Решает проблему поиска искомого сайта в доменах выдачи поиска, как в строгом совпадении, так и частичном.
К примеру, если вам не требуются переходы по доменам третьего и выше уровней, то ставите – строгое совпадение. Если вы допускаете переходы не только на домен второго уровня, но и на третий – то ставьте частичное.
Пример:
yandex.ru, поисковая система yandex
Если указать частичное совпадение, то совпадения будут на всех поддоменах:
yandex.ru
video.yandex.ru
map.yandex.ru и т.п.
По умолчанию стоит “строгое”, что соответствует режиму работы в предыдущей версии
В способы поиска страницы добавлено «Смешанное» – в домене можно указать по какому типу можно работать (строгому или частичному)
Смешанное: если в домене указан любой протокол (например https), то будет поиск по строгому совпадению, если протокола нет – по частичному)
Доп фильтр в ПФ #
Для работы в одной копии прокачки и ПФ были введены доп параметры фильтрации профиля для взятия в роботу для задачи ПФ
К примеру у вас идет прокачка на прокси ipv4, а на ПФ вам нужен заход с лте или резидентов, в таком случае вы можете добавить отдельный список прокси для задачи ПФ
Так же вы можете поставить необходимое количество заходов в день через ПЗЯ на ваши сайты используя рандомный диапазон в опции суточное количество переходов
Фильтр профилей в задаче ПЗЯ – не основной и не учитывается при взятии профиля в работу, а проверяет на соответствие взятого изначально профиля для работы задачи ПЗЯ. Таким образом вы можете в логе видеть информацию о несоответствии взятого в работу профиля задаче ПЗЯ
К примеру, в настройках профилей у вас вовсе нет фильтров для работы, а в задаче ПЗЯ вы поставили фильтр от 100 доменов и от 10 дней возраста профиля, софт берет в работу профиль по дате последней его работы в базе данных и проверяет его на соответствие заданным фильтрам, если профиль подходит-стартует задача, если нет- пропускается.
Рекомендации по серфингу #
Время на сайте и глубина просмотра.
После того как бот нашёл ваш сайт в выдаче, он переходит на него и начинает активно просматривать. Рекомендуемое время просмотра каждой страницы сайта от 45 секунд с глубиной от 2, или как на скриншоте ниже:
Хочу обратить внимание на то, что все сайты абсолютно разные, отличаются своими селекторами и элементами, иногда, такое случается, бот может часто уходить с сайта раньше заданного, нажимая на значки социальных сетей, либо затупливая на ссылках типа #. Если такое случается, понаблюдайте за поведением, и в случае обнаружения таких селекторов и ссылок, добавьте их в Blacklist. который мы рассматривали выше.
Максимальная глубина поиска.
Этой настройкой регулируются глубина поиска вашего сайта в выдаче. В очередной раз хочу обратить внимание на то, что поведение наших ботов должно быть максимально естественным, зачастую пользователи не ищет дальше 3-й страницы, хоть и программой можно находить запросы, находящиеся на 10 странице выдачи, рекомендую установить глубину не выше 5
перенос по триггеру #
Для удобства в задачу “Поисковый запрос Yandex” добавлены триггеры переноса профиля.
Top 1 – если сайт найден на первом месте
Find – если в принципе найден в поиске
Not find – если при поиске не найден.
⚠️Обязательно отключить перенос профиля в настройках профилей!
В данный момент можно по тригеру также удалять профиль при соответсвии тригера. Как удаление так и перенос будут в конце потока
Оптимизация получения ключей #
⚠️Монстро 24.9.85
В поисковом запросе Яндекс (для ПФ) можно теперь выбирать, каким образом получать списки запросов.
Раньше вы указывали лишь уже сформированные запросы в файле или в строке.
Теперь, используя ваш собственный веб сервер, можно управлять этими запросами – контролировать и выдавать нужные вам запросы (формат получаемых данных не изменился).
Для этого выбирайте тип “Ссылки”
И в списках запросов просто указывайте ссылку на ваш сервер. Монстро сделает запрос, получит от вас данные (текущий запрос для работы) и отдаст его в работу.
Если ответ придет пустым – поток будет ждать 60 секунд и снов запросит данные.
Также, вы можете отправлять на свой сервер переменные:
[[PROFILE_ID]] – уникальный номер текущего профиля
[[SERVERNAME]] – имя работающей копии
[[THREAD]] – номер потока, который отправляет запрос
Пример:
https://вашсайт.com/?server=[[SERVERNAME]]&thread=[[THREAD]]&profile=[[PROFILE_ID]]
В данной ссылке Монстро подменит эти переменные текущими значениями, и отправит запрос на ваш скрипт.
Если сервер отдаст ответ «DELETEPROFILE», то будет удален текущий профиль из базы и поток остановлен с сообщением “Поток завершен по команде DELETEPROFILE”
Что касается ошибок в софте и их быстрого решения без участия поддержки, можно использовать этот кратки мануал
Ошибки Монстро или на портале monstro.wiki
ПФ Быстрый страт с работой из одной папки
Быстрый запуск пф. #
Для того чтобы в кратчайшие сроки запустить накрутку ПФ на вашем сервере необходимо скачать архив с подготовленными копиями Монстро
https://t.me/monstrotraf #
Настройки нужно загружать исключительно на чистую копию!
Так же к сборке не будет никакой инструкции. Это сделано из-за того, что большинство новых пользователей игнорируют прочтение мануала и приступают сразу к работе, вследствие чего у меня разрывается личка от шаблонных вопросов, ответы на которые в 90% случаев полностью отпадают после прочтения мануала.
Поэтому, завариваем чай, листаем вверх и попутно чекаем настройки.
Инструкция к парсеру:
В данный момент работа парсера ограничена исключительно мобильными проксями, на всех других типах прокси стабильность не гарантируется ввиду низкого шанса прохождения яндекс капчи.
На приватки вешаем до 4-х потоков, на общие до 2-х, иначе много капчи
прокси можно брать тут https://ltespace.com/monstro
Количество потоков, диапазон от 1 до 100
чем больше потоков -тем быстрее парсин, принцип дефолтного распределения прокси на поток такое же как в моснтро 1 порт 1 поток, поэтому либо лезем в расширенные и меняем количество одновременных использований или дублируем пул прокси пропорционально количеству потоков
Файл со списком ключей – добавляете ключи (ТХТ UTF-8) по которым софт спарсит сайты и поместит их в файл, который нужно подставить в следующей строке (пустой)
Проверка сайта на ipv6 временно не работает
В последней строке вставляете ключ от https://capsola.space/
и для запуска нажимаете ОК
