Оно ругается

Начал вынимать сетап с сервера для паблика. Писать пояснения, какие-то инструкции. Все мы любим делать чего-то поменьше, но чтобы результат был. Желательно, чтобы результат сразу оказался на кошельке. Нажал пару кнопок и пошел выбирать Макларен.

По пути обнаружил, что база парсинга выросла до 80к строк, а из тех 15 тысяч ранее отобранных начали попадаться доноры посложнее. Всего пройдено почти 18млн сайтов. Восемнадцать, Карл, миллионов сайтов. Агенты жрут больше токенов, а результата нет. Заодно по уже опубликованным данным вылезли явные косяки, типа анкор = название сайта в 100% случаев. Нелогично, неестественно и отдает дешевым спамом. Вдобавок постоянно находятся новые движки. Господи, на каком говне только не делают сайты. Дрюпал, тильда, mybb, smf, джанга, бустрап старых версий и какие-то конструкторы из разряда «собери крутой сайт, даже если ты не айтишник». Православный WP, конечно же, тоже в достатке. При этом большая часть потенциальных доноров вполне активна и имеет хорошие метрики для последующего буста сайта. Нет, есть, конечно, площадки, вызывающие интерес и уважение, но присосаться к ним сложно. И это не те проекты с анимациями, крутыми шрифтами и модными 3D-дизайнами.

Вношу правки, докидываю больше проксей, чиню скрипты капчи, верификации, докупаю почты. В какой-то момент клод начал указывать на явные дыры безопасности в найденных донорах. Говорит, что легко можно наебнуть без палева воспользоваться уязвимостями этих ресурсов, и он готов дать решение. Заманчиво, но мы здесь не за этим. Не так давно я уговаривал его просто начать регистрироваться без меня, тут он уже прямо указывает на открытые админки (привет WP), индексируемые бэкапы, открытые API-ключи, архивы логов и прочие вещи, которые в приличном обществе не принято показывать. А потом «ой нас взломали корейские хакеры», «мои персональные данные слили». Буээ.

Ладно. К этому вернемся при необходимости. Задачи другие.

Накинул еще жестких правил на тему анкоров. Чтобы агент подхватывал связки бренд + хвост, общие ключи, прямые адреса. В общем, разбавлял картину естественностью. Спамить так спамить красиво. Добавил больше правил для фильтрации доноров, увеличил тайминги работы с одним ресурсом, подгрузил чекер IP-шки, чтобы не палиться на ресурсах в одной сети с одной машины. Запустил новый тест. Сейчас 540 размещений на 5 сайтов, 346 из которых частично можно считать браком из-за однотипного анкора. Продолжаю наблюдать на новом тесте.

ПС: На скрине комментарии клода. Запрещает делиться самым интересным, но пока и рано.

ППС: Еще полезности, нужно же кроме букв чего-то дать. Просто опиши иишке свою задачу и скинь сайт с просьбой подобрать инструменты, и он их найдет. Большая часть бесплатная.

https://open-awesome.com — удобная навигация по ресурсам с прошлого поста.

https://awesome-selfhosted.net — тысячи self-hosted аналогов платных сервисов.

https://github.com/public-apis/public-apis — огромная гора бесплатных апи.

#soft