coddie2d

Примерно вот такую версию сайта мы должны были поставить в середине января ещё, теперь блок с PogChamp'ами уже не актуален :(

Новости по сайту:

1. С неожиданными падениями сайта разобрался, причина была в незакрывавшемся соединении: я считал соединения с базой данных после минуты ожидания ответа по дефолту закрытыми / оборванными, но в некоторых случаях это было не так. Сейчас осталось разобраться только с "ожидаемыми" падениями из-за нехватки памяти на сервере)

2. За прошедший месяц я обработал сессии и роли зрителей по почти всем стримерам за 2020 год, осталось их только вывести, и на сайте будет плюс-минус актуальная инфа о зрителях не только по Братишкину и Эвелону, а ещё по паре десятков других стримеров.

3. На сайте начал писать админку и способ управления "архивом" стримеров - появилась сводная таблица, в которую можно по запросу получить статистику по количеству новостей по стримеру, обработанных сессий, сообщений в чате, количеству записанных у нас банов и так далее. В будущем челы из нашей команды получат доступ к этой таблице и смогут заполнять отдельные поля без привлечения меня.

Плохие новости:
Мы так и не сделали страницу с ПогЧампами, пока проходил челлендж на новый ПогЧамп каждый день. Точнее страница была готова, но мы её не зарелизили в нужное время из-за того, что я до сих пор не обновил оформление главной страницы. Хотел на неё вывести полезную инфу, но никак не сделаю.

Блин, один из подписчиков группы в лс задал вопрос, а я даже не знаю что ответить.

Спрашивает, мол почему зарубежом чел так спокойно н-ворды говорит на стриме. И кидает клип xQcOW, где тот вообще на расслабоне играет и даже чат ничего похожего на намек о запретке не спамит после двух повторений (как у нас осуждаю в опасных моментах).

Может кто из вас смотрит зарубежных и проясните, как там бан-ворды работают? Или мб я слышу неправильно и это вообще не н-ворд, а какое-то другое слово?

А ещё у нас блин сайт регулярно падает, надо срочно переезжать на более мощный сервер. И это тоже сложный процесс из-за опять же этого огромного объёма таблиц.

Выше на первом скриншоте текущий набросок структуры бота, а на втором скриншоте попытка сегментировать 37гб таблицу со старыми сообщениями в кучу подразделов по 4-5гб, разбив по времени сообщения в чате.

С таблицами всё ну ооочень медленно получается, это сегментирование уже 3 дня непрерывно идёт. Это всё надо было продумывать в самом начале при проектировании таблицы, но кто ж знал, что всё до такой степени разрастётся.

Я, если что, не пропал, засел с двумя вещами:

1) Переписываю старого бота, который следит за онлайном зрителей с Node.js на Джаву, с последней больше опыта и там будет не костыль на костыле, а плюс-минус нормальное многопоточное приложение. Это позволит сохранять онлайн не 60 топовых стримеров, а мониторить вообще все ру-трансляции, которые онлайн на Твиче каждую минуту. Пытаюсь с самого начала заниматься норм оптимизацией с расчётом на увеличение нагрузки (начинаю с сохранения топ-100 стримов по онлайну и планирую дойти до топ-300).

2) Оптимизирую базы данных. Их текущий объём, когда отдельные таблицы уже состоят из 200 млн+ записей, а с новым ботом будут разрастаться в десятки раз быстрее, нужно как-то контролировать и архивировать. Чтобы в актуальном доступе оставались только последние данные, а всё старое убиралось из таблицы, дабы не мешать.
Если кто шарит - то собираюсь решать проблему с помощью сегментирования таблиц (partition в MySQL), старые сегменты собираюсь извлекать из работающей бд в бэкапы.

Можете пока попроверять страницы выше и откомментить, если там что не так.

А мы тут ещё пару вещей хотим допилить, и после этого статья про обновление выйдет, как в прошлый раз. Ну здесь она конечно покороче будет, не так много чего расписать можно.

Вот инсайдиком вам страницы следующих стримеров, зрителей которых только что закончил анализировать.

К сожалению, инфа получается не совсем по чистому вотчтайму, как мы выяснили в комментах к посту о предыдущей обнове. Скорее всего из-за того, что некоторое время бот пытался собирать время "активного онлайна", когда зритель писал что-то в чат. Но всё равно относительно активности других челов можно себя посравнивать.

https://streaminside.ru/streamers/mokrivskyi
https://streaminside.ru/streamers/modestal
https://streaminside.ru/streamers/jesusavgn

Да, кстати, по поводу этого скрина выше - нам его уже дней 5 закидывают, объясню почему мы его не постили.

Прямо такого же текста в правилах Твича нет, они написаны более официальным языком и гораздо более развёрнуты. Этот скрин - лишь трактовка этих правил одним из сайтов о Твиче, причём трактовка достаточно "байтерская", ситуации намеренно утрированы, и вряд ли всё будет именно так.

То есть по факту, если все правила воспринимать по всей строгости, то ничего из выше-перечисленного действительно не стоит делать. Но это не стоило делать и раньше. В правилах Твича уже давно присутствует запрет на хейт-спич (и в правилах не было оговорено, в каких случаях его можно было использовать), да и явно нарушать правила Твича вне платформы партнёр тоже не должен.

Сейчас просто Твич более подробно расписал, что конкретно он подразумевает под разжиганием ненависти, притеснением и домогательствами. Раньше это естественно всё также было запрещено.

Подытожу: скрин не с сайта Твича, он не то чтобы полностью фейк, но никто ещё не знает, как конкретно будут работать правила после 22 января. Это лишь одно из предположений, причём достаточно "пессимистичное".

p.s. Написал пост, потому что скриншот выше расходится активно по комментам и каналам стримеров. И сомнения в правдивости содержимого видел только на канале Оляши.

Что думаете ? Кому не лень прочитайте

И да, добавил обсуждение к постам, можете предлагать какие-то обновления для сайта или каких стримеров по вашему мнению стоит добавить в первую очередь. Может чуть позже сделаю голосование.

Мы планируем анализировать топ зрителей у новых 3 стримеров каждые несколько дней. Сейчас на сайте только Братишкин и Эвелон, но мы собирали инфу о 20-30 за 2020 год.

Бонусом в телеге расскажу про ещё одну страницу, которую забыл упомянуть в статьях.

Страница сквадов и конкретного сквада - мы добавили на сайт 19 объединений стримеров, в каждом из которых можно посмотреть список участников и дату создания.

https://streaminside.ru/squads
https://streaminside.ru/squads/89squad

📄 Пост про изменения в группе, наш сайт и его функционал

Хочу с вами поделиться несколькими вещами, над которыми мы сейчас работаем в группе помимо новостей. У нас периодически появляются разные идеи, до каких-то руки доходят, до каких-то не очень.

Если вкратце - на сайт добавлено около 10 разных фишек и страниц, в статье можете посмотреть со скриншотами как это выглядит:
— Страница со списком из 370 стримеров;
— Страницы конкретных стримеров;
— Страницы зрителей Твича;
— Сервис по скачиванию клипов с Твича;
— Сервис, чтобы узнать дату подписки на канал стримера на Твиче;
— Лайв-счётчик подписчиков каналов на Twitch и Youtube;
— Статистика групп стримеров Вконтакте;
— Страница для поиска новостей группы по тегам.

В группе ВК вероятно будет меньше рекламы сейчас, но скоро появится понемногу в телеграм-канале.

Подробнее в статье по ссылке.

Ещё в ближайшее время статья про сайт будет, я уже который день безвылазно с ним сижу.

Могу инсайдиком предложить вам пока оценить две страницы:

• https://streaminside.ru/streamers
Список с топом стримеров, в который мы включим не только стримеров с Твича, но и с Ютуба и других платформ.

• https://streaminside.ru/streamers/bratishkinoff
Обработал даты подписки и суммарное время просмотра у зрителей Братишкина за 2020 год (как раньше делал с Эвелоном). Список банов только пока ещё туда не добавил, скоро будет, а вот с клипами вкладку не получится сделать - Вова их удалил спонтанно, и у нас не осталось архива 😢

Пост выше для репоста в ленту сообщества, как предисловие перед публикацией с этой новой рубрикой.

Рубрика с творчеством зрителей в сфере стриминга 🎨

Хочу рассказать о нашей идее периодически искать среди подписчиков и активных зрителей Твича творческих людей, и публиковать в ленту стрим инсайда работы.

Идея не новая - стримеры оценивали работы аудитории в конкурсах, да и другие группы ВК похожим занимались, но мы всё же хотим пробовать разнообразить контент и развиваться в смежных направлениях, поэтому помимо сайта (про который кстати тоже будет скоро пост) ищем ещё и новые интересные рубрики.

Оговорюсь сразу и о нашей мотивации - основная цель не получить какую-то материальную выгоду и это будет не столько рекламой, сколько попыткой найти и мотивировать творческих людей. Группа получит в перспективе от этого другую выгоду, если эти творческие люди начнут делать больше контента, которым мы сможем тоже делиться. Конечно, я не исключаю и платных интеграций такого формата в будущем, но ближайшие посты чисто по моей инициативе.

Мы уже постили комикс одной девушки, и фидбек был не очень. Однако я надеюсь, что регулярный формат сможет найти своих читателей, которые будут давать аргументированную критику по делу и поддерживать начинающих контент-мейкеров.

Помните, что в большинстве случаев это для авторов лишь хобби и они такие же зрители, как и Вы 🙏

О, вроде периодически поднимается и грузится, можете зайти оценить тоже, раз уж его на стриме показали

Вот по каналу Эвелона:
https://streaminside.ru/streamers/Evelone192/viewers