Data Science Links

Связь Django и PostgreSQL внутри Docker
Как начинающий разработчик хочу поделиться своим решением проблемы, с которой столкнулся и не нашел готового решения в интернете. Мой подход может не быть оптимальным, но может быть полезен другим новичкам.
https://habr.com/ru/articles/729610/

Разница между регуляризацией L1 и L2
Здесь обсуждаются два типа регуляризованных регрессионных моделей: гребенчатая регрессия (регуляризация L2) и регрессия Лассо (регуляризация L1).
https://www.kdnuggets.com/2022/08/differ…

Лучшая модель машинного обучения для разреженных данных
Разреженные данные относятся к наборам данных со многими функциями с нулевыми значениями. Это может вызвать проблемы в разных областях, особенно в машинном обучении.
https://www.kdnuggets.com/2023/04/best-m…

Изучение показателей неконтролируемого обучения
Неконтролируемое обучение — это ветвь машинного обучения, в которой модели изучают шаблоны на основе доступных данных, а не на основе фактической метки. Мы позволяем алгоритму придумывать ответы.
https://www.kdnuggets.com/2023/04/explor…

Что такое статистическое искажение?
Асимметрия измеряет асимметрию распределения. Если распределение смещено либо влево, либо вправо — это означает, что оно перекошено. Он показывает, как данное распределение отличается от нормального распределения, которое, как известно, имеет нулевую асимметрию.
https://www.kdnuggets.com/2022/11/statis…

Понимание компромисса смещения и дисперсии за 3 минуты
Эта статья представляет собой рецензию доклада о освещении машинного обучения, интуитивно объясняющего важную концепцию науки о данных за 3 минуты.
https://www.kdnuggets.com/2020/09/unders…

Метрики расстояний: Евклидово, Манхэттенское, Минковского
Если вы знакомы с машинным обучением, вы знаете, что точки данных в наборе данных и впоследствии спроектированные функции — это все точки (или векторы) в n-мерном пространстве.
https://www.kdnuggets.com/2023/03/distan…

Часть 2. Перевод нейронной сети на базе Keras LSTM на работу с матричными операциями
В первой части была переведена обученная модель полносвязной сети на базе Keras на работу с матричными вычислениями. Модель разработана для новостного агрегатора с целью фильтрации нежелательных новостей.
https://habr.com/ru/articles/723792/

Как научить Наивного Байеса давать персональные рекомендации
Подход, о котором я расскажу, позволяет расширить функциональные возможности метода Наивного Байеса благодаря использованию весовых коэффициентов для различных групп признаков объекта датасета .
https://habr.com/ru/articles/728802/

Пора забывать GridSearch — встречайте ProgressiveGridSearch. Фракталы в ML, постепенно увеличиваем разрешение
Здравствуйте, я придумал как подбирать гиперпараметры бескомпромиссно лучше GridSearch’а. Нужно лишь изменить порядок вычислений.
https://habr.com/ru/articles/726222/

Автоматическое построение плоской панорамы
В этой статье представлен простой алгоритм автоматического сшивания нескольких фотографий в плоское (иногда называют перспективное) панорамное изображение (planar/perspective panoramic image). Статья содержит код на языкеPythonс использованием библиотекиOpenCV.
https://habr.com/ru/articles/708986/

Что делают биоинформатики
Биоинформатика — это область знаний, в которой компьютерные методы и информационные технологии анализа данных применяются для интерпретации биологических явлений, связанных с биомолекулами.
https://habr.com/ru/articles/727442

Пишем приложение на Python для интерактивной визуализации графов с NetworkX, Plotly и Dash
Говорят, хорошая визуализация данных лучше тысячи слов о них, и с этим трудно спорить.
https://habr.com/ru/articles/728256/

Business Intelligence и бизнес-аналитика: стратегия, этапы, процессы и инструменты
Все бизнесы работают с данными — информацией, генерируемой множеством внутренних и внешних источников компании. Эти каналы данных служат органами чувств руководства, предоставляя ему информацию о том, что происходит с бизнесом и рынком.
https://habr.com/ru/articles/714910/

Как создать переводчик, который переводит лучше, чем Google Translate
Помню, как еще в школе на Basic я писал программу-переводчик. И это было то время, когда ты сам составлял словарь, зашивал перевод каждого слова, а затем разбивал строки на слова и переводил каждое слово в отдельности.
https://habr.com/ru/articles/689580/

Ассоциативная память без нейросетей + генерация текста
Когда‑то давно ко мне пришла идея реализовать алгоритм основанный на цепочках символов. Этот алгоритм выделяет в тексте несколько последовательностей символов, и таким образом производит его анализ. Этот алгоритм в какой‑то мере похож на метод построения N‑грамной модели, разница лишь в том, что он строит последовательности символов переменной длины.
https://habr.com/ru/articles/726030/

Основные инструменты для работы в Data Engineering: введение для начинающих Data Engineer'ов
Я занимаю должность Data Engineer в компании, которая специализируется на разработке мобильных игр. В этой статье я хочу поделиться информацией об основных инструментах, которые я использую в своей работе с данными, и рассказать о каждом из них подробнее.
https://habr.com/ru/articles/727560/

Производительность и стабильность Knime на слабых компьютерах
Наступают времена, когда офисному сотруднику недостаточно знать Word и Excel в качестве минимального обязательного базиса программных продуктов. No‑code/Low‑code платформы и продукты — вот что незаметно становится обязательным для владения каждым.
https://habr.com/ru/articles/728204/

Выборка Томпсона со смешанным эффектом
Contextual bandit — это популярная платформа для онлайн-обучения действиям в условиях неопределенности. На практике количество действий огромно, и их ожидаемые вознаграждения коррелируют. В этой работе мы представляем общую структуру для фиксации таких корреляций
https://www.amazon.science/publications/…

Создание визуальной поисковой системы — часть 1: исследование данных
В этой статье мы объясним один из методов создания визуальной поисковой системы. Мы будем использовать набор данных Caltech 101, который содержит изображения обычных объектов, используемых в повседневной жизни.
https://www.kdnuggets.com/2022/02/buildi…