📓 Записки программера

Интересный кейс использования Claude, ради которого я собственно и купил подписку на него - было интересно справиться ли.

Задача - есть бинарный файл закрытого формата, который надо расковырять и понять что там и как. Я просто загрузил кусок этого файла в промпт (оригинальные файлы больше 300 МБ) и написал "у меня есть бинарный файл, который хранит данные с датчика (или нескольких датчиков), можешь поресечить этот формат и попробовать в нём разобраться?"

При этом я практически на 100% уверен, что Claude не мог обучиться ранее на этом файле никак (т.е. его разрабы не делали формат этого файла через нейронку, потому что сама железяка очень очень новая, буквально месяца два ей).

За 10 минуты работы - claude его проанализировал и разложил по полочкам ВЕСЬ формат файла, с определением длины каждой записи, включая примеры графиков по данным из файла и замечания по невыясненным байтам. Он даже нашёл байт с CRC для каждой записи.

После чего ещо мне стало ещё более интересно и я провёл пару итераций с подсказками - потому что я знаю от чего этот файл и какие данные там примерно могут быть - я его для начала просто открыл в Audacity как raw файл, чтобы посмотреть грубым взглядом на него. Осталось ещё выяснить что означают несколько байт в каждой записи, но тут похоже тараканы связанные с железякой, надо смотреть этот файл с оригинальным софтом, который пока недоступен. #ai

Некоторое время назад мне пришлось делать одну штуку, которая скрапила контент с пары сайтов, которые этому активно сопротивлялись (включая как раз анализ JA3). Потому что прошареные сайты не просто детектят ботов, но даже стоит проверка TLS fingerprint (что это браузер, а не условный HttpClient). И вот этот инструмент в своё время мне бы сильно помог :)
#tools

ClickHouse.Facades - zero-ORM .NET package for managing ClickHouse migrations and organizing raw SQL through structured database contexts. Makes it easy to separate concerns across features, services, or tables. Built on ClickHouse.Driver (ClickHouse.Client for version < 3.0.0) and tested in production.

Кажется полезная штука, потому что сейчас миграции у нас написаны ручками. И по случайному стечению обстоятельств они выглядят почти так как они в этом проекте :)))

#dotnet

Ещё один визуальный отображатель планов запросов #Postgres #tools

Будьте внимательны со старыми ключами и обязательно строго ограничивайте их API-шками

а то получиться как тут - чела выхлопали на $82к (reddit)

Вообще, я сторонник того чтобы на фронт не вытаскивать НИКАКИХ ключей :)) и как минимум ставить rate limiter per user/per ip на endpointы, которые потенциально могут использовать внешние сервисы.

Забавный проект https://github.com/tsoniclang/tsonic
#dotnet #ts

.net 10 на Raspberry PI, надо попробовать :) #dotnet

Интересный аналог Postman попался в очередной раз на глаза и я потратил минут 15-20 на предмет потыкать - Bruno. Есть версия open source. Выглядит оч похоже на postman, коллекции его читает тоже и умеет наверное всё то же самое что postman, включая HTTP(S), gRPC, GraphQL и WebSocket.

Очень удобно, то что Generate Docs наружу выдаёт ровно ОДИН .html файл со всей коллекцией.

Возможно я всё таки выкину postman и заменю его на Bruno. #tools

Очень старый (1992-й год), но по прежнему в большинстве своём актуальный мануал по UI-дизайну от Apple. Да, кое-где он уже мало коррелирует с современным UI-интерфейсом Apple :)) Но вообще там описаны очевидные (не для всех) вещи как делать хороший UI-дизайн. Разве что про тач-экран там нет. Оригинал PDF на 400+ страниц. #howto #ui

Замена оперсурсным self-hosted (github) штук типа uptime-robot, даже в телегу умеет слать сообщения. #tools

Интересная статья про то как технически устроено OpenAI. tldr: один инстанс Postgres на запись и 50 read реплик. Тяжело конечно добавлять колонки в таблицы в таком виде... Поэтому If a new feature requires additional tables, they must be in alternative sharded systems such as Azure CosmosDB rather than PostgreSQL. Но всё равно впечатляет. #howto

AWS Lambda теперь поддерживает .net 10 рантайм и file-based apps. #dotnet #aws

Inside NVIDIA GPUs: Anatomy of high performance matmul kernels - интересная статья про кишки GPU, CUDA и специфику выполняемых операций в нём. #howto #cuda #gpt

Забавная штуковина - A TypeScript interpreter and compiler, featuring tree-walking interpretation and ahead-of-time compilation to .NET IL - github. #dotnet

Может быть полезно, когда делаешь камменты в коде с описанием чего-нибудь и надо нарисовать диаграмму. Никакого отношения к электрическим схемам оно не имеет, просто можно в браузере рисовать диаграммы а потом копипастить текстом с псевдографикой в комментарии в коде. Исходники на гитхабе #tools

Flowery.NET (github) - UI-либа для Avalonia, выглядит вроде бы неплохо, надо потыкать на традиционные узкие места, которые ВСЕГДА встречаются в UI-либах: загрузка файлов, календарь, грид и (опционально) scheduler в виде день/неделя/месяц (в этой либе его нет) #avalonia #dotnet

Я тут время от времени ищу инфу как устроен #Starlink внутри (ну интересно же как это работает) и нашёл статью - A Large-Scale IPv6-Based Measurement of the Starlink Network, оказывается они достаточно активно используют IPv6 (в т.ч. для маршрутизации). Жаль, что режим station pseudo-bridge в mikrotik не работает с IPv6.

Да, у меня тарелка и роутер стоят на улице, а я сидя в доме принимаю сигнал по wifi в микротик в station pseudo-bridge, к которому проводом подключен комп. #howto

pg_clickhouse - интересная штука для интеграции Clickhouse и Postgres с туториалом. #clickhouse #postgres

Наконец-то SQL приблизили к его изначальной задаче - чтобы кухарки аналитики могли сами писать запросы в базу: PostgreSQL AI Query Extension 😄 #postgres

В продолжение годовой давности поста - с упакованным в WASM Postgres есть и почти полноценный playground (github) для того, чтобы его потыкать - прямая ссылка на playground #postgres

upd в камментах добавили ещё один вариант: https://postgresql.dbfor.dev