Just Python

Yellowbrick для визуального анализа и диагностики

Yellowbrick — набор средств визуального анализа и диагностики, предназначенных для облегчения машинного обучения с помощью scikit-learn.

Основной объект API библиотеки Visualizer представляет собой средство оценки scikit-learn, которое учится на данных. «Визуализаторы» изучают данные, создавая визуальное представление рабочего процесса выбора модели.

Ссылочка на доку

#theory // Just Python

DeepFace для распознавания лиц

Deepface — легкий фреймворк для распознавания лиц и анализа атрибутов лица (возраст, пол, эмоции и раса) для Python.

Ссылочка на доку

#theory // Just Python

SciKit-Image для обработки изображений

SciKit-Image — коллекция алгоритмов для обработки изображений, основанная на NumPy, scipy.ndimage и ряде других библиотек, обеспечивающая универсальный набор процедур обработки изображений в Python.

Ссылочка на доку

#theory // Just Python

YOLOv8 для компьютерного зрения

YOLOv8 — самый совершенный (на сегодня) и производительный представитель семейства моделей обнаружения объектов YOLO.

Предназначен для таких задач CV, как обнаружение объектов, сегментация экземпляров и классификация изображений.

Ссылочка на доку

#theory // Just Python

PaddleOCR для оптического распознавания символов

PaddleOCR — многоязычные наборы инструментов OCR на основе DL-фреймворка PaddlePaddle.

Поддержка обучения и развертывания на серверных, мобильных, встроенных устройствах и IoT

Ссылочка на доку

#theory // Just Python

Chainer для построения и обучения нейронных сетей

Мощный и гибкий инструмент Python для построения и обучения глубоких нейронных сетей. Библиотека Chainer была разработана японской компанией Preferred Networks.

Ссылочка на доку

#theory // Just Python

PyCaret для машинного обучения

Это библиотека с открытым исходным кодом, и она была создана для машинного обучения. Она предлагает функции, которые помогают упростить и автоматизировать программы машинного обучения.

Несмотря на наличие небольшой кривой обучения, PyCaret относительно прост в использовании.

Ссылочка на доку

#theory // Just Python

Seaborn для визуализации данных

Аналогично Matplotlib, Seaborn – это библиотека, которая была создана для построения графиков и визуализации данных. По сути, эта библиотека была основана на самой Matplotlib, хотя она также включает в себя некоторые структуры данных Pandas.

Seaborn имеет высокоуровневый интерфейс с огромным количеством функций, которые позволяют пользователям создавать не просто точные, но и информативные статистические графики.

Ссылочка на доку

#theory // Just Python

Matplotlib для визуализации данных

Matplotlib – это расширение SciPy, и оно было создано для визуализации данных в силу того, того, что она используется для создания диаграмм и графиков. Matplotlib может работать со сложными моделями данных, которые выводит Pandas, и со структурами данных, которые создает NumPy.

У Matplotlib есть ограничение – она может создавать только 2D-графики.

Ссылочка на доку

#theory // Just Python

TensorFlow Learn для глубокого обучения

TensorFlow – это библиотека с открытым исходным кодом, которая первоначально была разработана исследователями из Google.

Ее специализация - дифференцируемое программирование, но основная цель ее создания – это машинное и глубокое обучение, а также другие рабочие нагрузки в прогнозной и статистической аналитике.

Ссылочка на доку

#theory // Just Python

SciKit-Learn для разработки алгоритмов машинного обучения

SciKit-Learn основан на Numpy и SciPy и прежде был известен как Sklearn. Это бесплатная библиотека Python, и она очень часто воспринимается как расширение библиотеки SciPy. SciKit-Learn была создана специально с целью разработки алгоритмов машинного обучения и моделирования данных.

Для многих SciKit-Learn – это одна из лучших библиотек Python, а все из-за ее последовательного, простого и интуитивно понятного интерфейса.

Ссылочка на доку

#theory // Just Python

Asyncio для работы с асинхронным кодом

Разработчики Python по всему миру используют библиотеку asyncio для написания параллельного кода с помощью синтаксиса async/await.

Библиотека asyncio больше всего подходит для кода, который связан с вводом-выводом, а также для высокоуровневого структурированного сетевого кода.

Ссылочка на доку

#theory // Just Python

concurrent.futures для одновременного выполнения операций

Эта библиотека предназначена для одновременного выполнения операций, как в многопоточности.

Я отправляю 100 запросов GET на URL-адрес и получаю ответ. Процесс медленный и утомительный, так как интерпретатор ждёт, пока не вернется каждый запрос, и это то, что вы получаете, когда используете циклы.

Гораздо разумнее использовать параллелизм и задействовать все ядра на вашем компьютере. Библиотека concurrent.futures позволяет это сделать.

Ссылочка на доку

#theory // Just Python

logging для расширенных операций с файлами

Модуль позволяет регистрировать сообщения с различными приоритетами и временными метками в пользовательском формате.

Ссылочка на доку

#theory // Just Python

shutil для расширенных операций с файлами

Модуль для расширенных операций с файлами.

С помощью Shutil вы можете копировать, перемещать, удалять, архивировать или выполнять любые операции с файлами, которые вы обычно выполняете в проводнике или в терминале.

Ссылочка на доку

#theory // Just Python

pickle для быстрого и эффективного хранения

Точно так же, как размеры наборов данных становятся всё больше и больше, растут и наши потребности в их более быстром и эффективном хранении. Одной из альтернатив плоским CSV-файлам, которые поставляются с вашей установкой Python, является формат файла pickle.

На самом деле он примерно в 80 раз быстрее CSV при вводе-выводе и занимает меньше памяти.

Ссылочка на доку

#theory // Just Python

secrets для генерации случайных чисел и символов

Хотя реализовать свои собственные функции кодирования сообщений может быть очень весело, они, вероятно, не будут соответствовать тем же стандартам, что и проверенные в боевых условиях функции в библиотеке secrets.

Там вы найдёте всё необходимое для генерации случайных чисел и символов для самых сложных паролей, токенов безопасности и связанных с ними секретов.

Ссылочка на доку

#theory // Just Python

sqlite3 для специалистов по данным и инженеров

К радости специалистов по данным и инженеров, Python поставляется со встроенной поддержкой баз данных и SQL через библиотеку sqlite3.

Просто подключитесь к любой базе данных (или создайте её) с помощью объекта подключения и запускайте SQL-запросы.

Ссылочка на доку

#theory // Just Python

pathlib для работы с системными путями

Модуль Python os, мягко говоря, отстой… К счастью, разработчики ядра Python услышали крики миллионов и представили библиотеку pathlib в Python 3.4. Она обеспечивает удобный объектно-ориентированный подход к системным путям.

Она также очень старается решить все проблемы, связанные с системой путей Windows

Ссылочка на доку

#theory // Just Python

glob для удобной работы с файлами

Для пользователей, которым нравится сопоставление шаблонов в стиле Unix, библиотека glob должна чувствовать себя как дома.

glob содержит все необходимые функции для работы с несколькими файлами одновременно без головной боли.

Ссылочка на доку

#theory // Just Python