Big Data AI

🌟 Redpanda — платформа для потоковой передачи данных

Совместима с API Kafka. В 10 раз быстрее. Никакого ZooKeeper. Никаких JVM

— brew install redpanda-data/tap/redpanda && rpk container start
(rpk скачать можно тут)

Redpanda спроектирована для полной загрузки быстрых накопителей данных, таких как SSD или NVMe-устройства, а также на использование преимуществ многоядерных процессоров и компьютеров с большим объемом оперативной памяти. Это позволяет достичь максимальной производительности при обработке значительных объемов данных и запросов.

🖥 GitHub
🟡 Доки
🟡 Другой взгляд на Redpanda

@DevOPSitsec

⚡️ Google just dropped Code Gemma 1.1 7B IT 🔥

СЮРПРИЗ: Google только что выпустила Code Gemma 1.1 7B IT 🔥

Модели постепенно становятся все совершеннее в генерации кода .

Значительный прогресс достигнут для C#, Go, Python 🐍

Вместе с версией 7B они также выпустили обновленную базовую модель 2B.

Наслаждайтесь!

• 7B: https://huggingface.co/google/codegemma-1.1-7b-it
• 2B: https://huggingface.co/google/codegemma-1.1-2b
• Report: https://storage.googleapis.com/deepmind-media/gemma/codegemma_report.pdf

@ai_machinelearning_big_data

🌟 В Google Фото можно будет улучшать видео по клику

Недавно Google Фото анонсировала AI-инструмент для редактирования фотографий Magic Editor, который был доступен только на последних смартфонах Pixel.
Теперь же Google Фото доступен на большем числе устройств Android, Chromebook и iOS, а скоро в нём появится новая опция для редактирования видео.

@bigdatai

⚡️ Тинькофф разбор заданий на стажировку!

▪Видео
▪Задачи

@bigdatai

☁️ OpenDAC

Исследователи из GeorgiaTech опубликовали крупнейший датасет и новую SOTA модель для исследования прямого захвата воздуха, это — ключевой процесс для борьбы с изменением климата ☺️

https://open-dac.github.io/

@bigdatai

⭐️ Data Science разбор реальной задачи с собеседования. Прогнозирование оттока клиентов.

▪Смотреть
▪Данные
▪Ноутбук

@machinelearning_ru

🧍‍♂ NVIDIA представляет TeSMo!!

Это новый метод создания движений с учетом заданный сцены, управляемый текстом, который позволяет создавать реалистичные и разнообразные взаимодействия человека и различных объектов.

TeSMo генерирует реалистичную ориентацию в пространстве, позволяет задавать положение тела и позы.

• Model
• Paper

@bigdatai

⚡️ YandexART обновился до версии 1.3 и перешел на латентную диффузию

Рассказали, чем латентная диффузия отличается от каскадной и что еще изменилось в новой версии нейросети.

▪️ Статья

@bigdatai

⚡️Open Interface

Инструмент, который позволяет управлять любым компьютером через LLM.

Способен автоматически выполнять действия, эмулируя ввод с клавиатуры и мыши.

Корректирует курс, отправляя текущий снимок экрана в LLM при необходимости.

Подробное руководство по установке представлено для MacOS, Linux и Windows.

▪ Github

@bigdatai

🌐 AutoCrawler: Интеллектуальный веб-агент для парсинга.

AutoCrawler - крутой фреймворк, который использует иерархическую структуру HTML для разбора веб страниц

https://arxiv.org/abs/2404.12753

@bigdatai

▶️Meta бросила вызов ChatGPT — все сервисы компании получили «самого умного» ИИ-помощника

🟡Совсем недавно Meta представила не только новое поколение собственных языковых моделей Llama 3, но и подключила их к поисковым строкам своих основных приложений — Facebook, Messenger, Instagram и WhatsApp, пусть и не во всех странах. Кроме того, компания запустила отдельный сайт для своего чат-бота, meta.ai.

🟡Meta AI запустили ещё в прошлом году, и он по-прежнему поддерживает лишь английский язык, однако работает во многих странах, включая Австралию, Канаду, Гану, Ямайку, Малави, Новую Зеландию, Нигерию, Пакистан, Сингапур, Южную Африку, Уганду, Замбию и Зимбабве.
Среди новых функций Meta AI — возможность попросить ИИ найти определённую информацию в Google и Bing. Разработчики не просто ускорили генерацию изображений с помощью Meta AI, но и наделили ИИ возможностью анимировать картинки, а также улучшили функцию размещения текста на генерируемых изображениях.

🟡Стремясь как можно сильнее расширить присутствие ИИ в своих продуктах, Meta добавила его не только в поисковые строки, но и в индивидуальные и групповые чаты, и даже в ленты приложений. Например, увидев в ленте Facebook фотографию северного сияния можно спросить ИИ, когда лучше отправиться в Исландию, чтобы наблюдать его своими глазами. Помимо этого, Meta AI добавили в умные очки Ray-Ban, вскоре он появится и в VR-гарнитуре Meta Quest.

📎 Подробнее

@bigdatai

🔥 Анонс альфа-релиза torch tune от Pytorch!

torchtune - это библиотека, созданная на базе PyTorch для файнтюнинга LLM.

Она сочетает в себе функции файнтюнинга, которые можно использовать, экономя память. Они легко интегрируются в ваши любимые инструменты.

Начните файнтюнить уже сегодня!

▪Github
▪Анонс

@bigdatai

🤗 Основы квантования: Новый краткий курс, созданный в сотрудничестве DeepLearning.AI
с Hugging

Узнайте, как сжать модели с открытым исходным кодом с помощью метода квантования, чтобы сделать их более быстрыми и доступными.

https://www.deeplearning.ai/short-courses/quantization-fundamentals-with-hugging-face/

@bigdatai

🔥Adobe объявила о выпуске ИИ-редактора для Premiere Pro.

На видео продемонстрированы возможности модели Adobe Firefly. В ближайшее время в Premiere Pro появится новая вкладка Generative, предлагающая следующие функции:

🔸Добавление объектов — это позволит выделить область на сцене и указать, что именно должно быть добавлено туда. Необходимые объекты будут автоматически сгенерированы на выбранном месте.
🔸Удаление объектов — помимо добавления, теперь можно также удалять объекты. Процесс выделения объектов выглядит очень просто, и следы удаленных объектов не остаются.
🔸Расширение контента — функция Generative Extend позволит увеличить длительность ваших видеороликов, чтобы достичь нужной продолжительности.

Все эти нововведения появятся в Premiere Pro "позже в этом году". Кроме того, программа будет поддерживать интеграцию с другими видеомоделями (Pika, Runway и, возможно, Sora от OpenAI).

https://www.adobe.com/products/premiere/ai-video-editing.html

@bigdatai

🔥 Крутая Шпаргалка по языку Julia

Если вы хотите узнать, чем синтаксис Julia отличается от пайтоновского, то эта шпаргалка — отличный материал для быстрого изучения.

Содержит информацию об использовании:
▪️пакетов;
▪️операторов;
▪️векторов;
▪️разных функций;
▪️датафреймов.

OmniFusion 1.1 представляет собой гибридную LLM, способную взаимодействовать с изображениями.

В дополнение к стандартному текстовому диалогу, OmniFusion 1.1 может отвечать на вопросы, основанные на изображениях. Например, она способна анализировать рукописные задачи, интерпретировать карты или предоставлять рецепты на основе фотографий продуктов.

Эта модель построена на базе Mistral, однако легко заменяема другими языковыми моделями.

Разработчики обеспечили доступ к модели как для некоммерческого, так и для коммерческого использования.

Модель доступна на платформе Hugging Face.

https://github.com/AIRI-Institute/OmniFusion

@bigdatai