🤖 AI нашел, а доказывать тебе.
Наткнулся на пост Бретта Шейверса (Brett Shavers), который зацепил. Если ты в DFIR и хоть как-то приглядываешься к AI - читать обязательно.
Если коротко: он собрал AI-ready машину, поднял локальную LLM, прогнал ее по тестовым данным и CTF. А результат его удивил и испугал одновременно.
⚡️ Что реально круто
Скорость. Модель пробегает данные, суммаризирует, группирует, вытаскивает аномалии - быстрее, чем человек руками. Бретт прямо говорит: кто делает вид, что эта штука не изменит DFIR, тот обманывает сам себя. И тут он прав.
☠️ А вот где засада
Как только он ушел от широкого обзора данных к вопросам уже по сути расследования, на естественном языке - посыпались фейлы. И фейлы не тупые, а правдоподобные.
Он специально скармливал модели плохие промпты и тянул ее к неверным выводам. Ответы он знал заранее, так что видел, где она врет. И она не подвела - уверенно шла в неправильную сторону, выдавая связные, убедительные ответы.
Вся проблема в том, что LLM заточена быть "helpful" и удобной, а не правдивой. Она дает тебе "ответ" и будет его защищать, даже когда он мимо.
С обычной автоматизацией (карвинг, фильтрация) ты на автомате идешь перепроверять, потому что данные сами по себе - еще не вывод. А LLM подает готовый вывод на блюде. Вот здесь и начинается опасность для дела и для карьеры.
🧠 Главная мысль
Знаешь дело, доказательную базу и пределы данных - AI разгонит тебя. Не знаешь, как примерно должен выглядеть правильный ответ - никогда не поймешь, повел он тебя верно, ошибся или просто подыграл, чтобы ты почувствовал себя умнее.
Это не "AI плохой". Это про порядок: сначала форензика, потом AI. Инструмент работает только в руках того, кто сам понимает, к чему он должен прийти.
📌 Что забрать в работу
• Не отдавай LLM решения по расследованию. Используй для ускорения там, где контекст у тебя уже в голове.
• Любой вывод модели - это гипотеза, а не факт. Подтверждай артефактами.
• Не можешь объяснить, почему AI прав - значит, в casework это тащить нельзя.
• Качай investigative mindset вне зависимости от тулзов. Инструменты меняются, данные меняются, AI меняется. Базовый навык - нет.
🔗 https://www.brettshavers.com/brett-s-blog/entry/forensics-first-ai-second
🐦⬛ DFIR Father
Post #64
538
- 🔥 9