Простой Python | Программирование

#юмор

Работа с бинарными файлами

В отличие от текстовых файлов, бинарные нельзя интерпретировать как символы. Необходимо использовать специальные режимы: rb(read binary) и wb (write binary). Метод .read() вернет объект типа bytes – последовательность байтов.

Во втором примере продемонстрировано, как можно скопировать любой бинарный файл. А большие файлы лучше читать блоками, чтобы не перезагружать память (смотри последний пример).

#практика

Именные кортежи namedtuple

namedtuple – это удобный способ создать неизменяемый класс-объект, у которого есть имена для полей, а не только индексы. Благодаря данному видео ты узнаешь, как пользоваться namedtuple.

👀Смотреть видео

#видео

Pandas: Лучшие методы

В данной статье автор рассказывает, какие методы лучше всего помогут тебе с первичной обработкой больших данных. А в комментариях под этим постом ты можешь поделиться своими лайфхаками!

👉Читать статью

#статьи

#юмор

Работа с кодировками

При открытии текстового файла Python должен понять, в какой кодировке сохранен текст. Если кодировка указана неверно, могут появится ошибки чтения. По умолчанию системная кодировка – UTF-8, но до сих пор встречаются старые кодировки.

Лучше всего указывать кодировку явно, как показано на первом примере. В противном случае если файл не в UTF-8, возникнет ошибка UnicodeDecodeError. Кодировку можно определять с помощью библиотеки chardet.

#практика

Словарь defaultdict

У модуля collections есть специальный тип словаря defaultdict. Это почти то же самое, что обычный dict, только у него есть значение по умолчанию для новых ключей. Для чего это нужно – узнаешь из видеоматериала.

👀Смотреть видео

#видео

Практический гайд по Alignment

При работе с LLM тебе жизненно необходим Alignment. Это метод дообучения, он делает ответы полезными, безопасными и соответствующими твоим намерениям. В данной статье автор рассказывает, какие методы применяются в современных моделях и как их адаптировать под себя.

👉Читать статью

#статьи

Работаем с файлами: Чтение данных

Python предлагает несколько способов чтения файлов. Самый простой – read(). Он читает сразу все данные. Он подойдет для небольших файлов, но если вес больше 2 ГБ, работает неэффективно.

Также есть readline(). Он построчно считывает информацию. Это особенно полезно при анализе логов. Третий вариант работает аналогично, просто выглядит более читабельно.

А если тебе необходимо работать с большими данными, воспользуйся read(size). Ты можешь указать размер информации, который необходимо получить.

#практика

Класс Enum

В Python есть специальный модуль enum, который позволяет создавать перечисления. Они нужны, когда у тебя есть набор именованных констант. Как пользоваться перечислениями – узнаешь из этого видео.

👀Смотреть видео

#видео

#юмор

PostgreSQL: Как освободить память без удаления данных?

В данной статье автор рассказывает, как он смог освободить 20 ГБ в PostgreSQL без удаления данных. Если кратко, делается это с помощью чистки bloat, пересобиранием таблицы и использованием частичных индексов.

👉Читать статью

#статьи

Работаем с файлами: Основы

В Python встроен простой API для работы с файлами. Для открытия используется функция open(). Необходимо указать, в каком режиме мы открываем файл. Из основных есть режим чтения (r), записи (w), дозаписи (а), а также бинарный (b). Также можно указать кодировку с помощью encoding.

Файл нужно всегда закрывать, иначе будет утечка ресурсов! Можно закрыть при помощи f.close(), либо конструкцией with. Эта конструкция автоматически закрывает файл, даже если внутри блока произойдет ошибка.

#практика

#юмор

Класс Counter

Класс Counter из модуля collections позволяет автоматически подсчитывать количество каждого элемента в итерируемом объекте. Для чего это нужно – узнаешь из видео туториала.

👀Смотреть видео

#видео

#юмор

PySpark: Что такое UDTF?

UDTF (User-Defined Table Function) — это функция, которая на вход получает одну строку (или набор строк), а на выходе может вернуть несколько строк (таблицу). Для чего это нужно – узнаешь из этой статьи.

👉Читать статью

#статьи

Класс ChainMap

ChainMap позволяет объединять несколько словарей в цепочку. Сначала ищутся ключи по порядку словарей в цепочке. Запись и удаление происходят только в первый словарь. Делимся видео, где автор демонстрирует применение ChainMap на практике.

👀Смотреть видео

#видео

#юмор

Как быстро читать Excel?

В данной статье автор тестирует различные инструменты для считывания данных Excel. Ты узнаешь, чем лучше всего пользоваться: pandas, openpyxl, Tablib, DuckDB или LibreOffice.

👉Читать статью

#статьи