Test Engineering Notes

📚Книжкове літо 2024

#books #testing #learning

Сьогодні я хотів би поділитись з вами кращими книжками, що я встиг прочитати влітку.

Тестування

📕Advanced Testing of Systems-of-Systems - Volume 1: Theoretical Aspects та Volume 2: Practical Aspects - цікаві книги про те, як підходити до тестування складних систем (що складаються з інших складних систем). Багато практичних прикладів, але друга частина мені здалася навіть більш теоретичною ніж перша. Корисне є, але якщо ви читали багато тест менеджерської літератури та здавали екзамен ISTQB Test Manager - нового буде мало.

📔Artificial Intelligence and Software Testing: Building systems you can trust - невеличка, але вкрай корисна книга про те, як тестувати недетерміновані системи - на прикладі AI та ML. Можна провести деякі паралелі із блокчейном. Книжка тільки розкриває цю тему та дає базові знання - то ж не треба очікувати якихось чарівних "таблеток".

Навчання

📘Make It Stick: The Science of Successful Learning - книжка про те, що сучасне навчання не є ефективним, а існують кращі науково доведені способи як це робити. Книга хороша, але остання третина - чергове повторення попереднього матеріалу та інтервʼю з тими, хто користувався способами, що пропонують автори.

📗Ultralearning - книжка від Scott H. Young, що пройшов 4-річну програму MIT з computer science - за 1 рік! В книзі автор розповідає про свій метод (по факту набір з відомих методів). 20% книги трохи водянисті, але решта - мені сподобалась.

📙Building a Second Brain - так як веду нотатки, користуюся Obsidian та методом PARA - цю книжку рано чи пізно треба було почитати. Книга за авторством Tiago Forte, який метод PARA й створив. В ній автор більш глибоко розкриває метод, наводить безліч прикладів та й взагалі багато пише про те, чому нотатки в сучасному світі вкрай необхідні.

А що ви прочитали цього літа?

Як Uber тестує платежі в продакшені, що значить бути контекстно-орієнтованим тестувальником, проблеми безпеки LLM-систем та автоматизація з Playwright — це та багато іншого читайте у новому QA-дайджесті 👉 https://dou.ua/goto/fqtI

#Digest

💼 Чим відрізняються джуніори від сіньйорів?

#career

Натрапив на таке порівняння в книзі "Coding Career Handbook".

👨‍💻Кодинг

- Джуніори колекціонують рішення. Сіньйори колекціонують паттерни
- Джуніори пишуть робочий код. Сіньйори підтримують код у робочому стані
- Джуніори виробляють фічі. Сіньйори дають бізнес результати
- Джуніори виправляють помилки тільки-но їх створили. Сіньйори створюють інструменти, щоб запобігати помилкам
- Джуніори пишуть тести, бо так треба. Сіньйори пишуть тести, бо бачили, що буває, коли тести не писати
- Джуніори ненавидять технічний борг. Сіньйори вже писали код, що став боргом (та знають, коли можна так лишити, а коли треба мігрувати)
- Джуніори люблять підхід DRY. Сіньйори уникають поспішних абстракцій
- Джуніори намагаються написати найкращий код з першого разу. Сіньйори розуміють, що код читають, переміщують, копіюють та видаляють частіше, ніж пишуть
- Джуніори вміють користуватись інструментами. Сіньйори знають коли інструментами не користуватись

👩‍🎓Навчання

- Джуніори роблять одноразові сайд-проєкти. Сіньйори користуються сайд проєктами кожного дня
- Джуніори вчаться знаходити правильні відповіді. Сіньйори вчаться задавати правильні питання
- Джуніори знають, що їм потрібно знати. Сіньйори знають, що їм потрібно не знати
- Джуніори засвоюють досвід інших. Сіньйори черпають досвід з власного болю та базових принципів
- Джуніори можуть мати тверді переконання. Сіньйори змушені були змінити свої переконання
- Джуніори питають себе, як зазнають невдач. Сіньйори знають, що треба виділити більше часу та спробувати знову
- Джуніори - в курсі новин. Сіньйори - в курсі трендів
- Джуніори уникають помилок. Сіньйори допустили їх усі - та знають як відновитись

🖖Поведінка

- Джуніори шукають найкращі підходи. Сіньйори люблять достатньо хороші підходи
- Джуніори повинні часто говорити "Так". Сіньйори повинні більше говорити "Ні"
- Джуніори жаліються на open-source. Сіньйори знають, що open-source працює завдяки тим, хто пише код, а не жаліється
- Джуніори вирішують проблеми. Сіньйори вивляють проблеми, ще до того, як вони стануть проблемами
- Джуніори знають як створювати. Сіньйори знають, коли треба купувати
- Джуніори порівнюють досвід розробника. Сіньйори шукають приховані витрати
- Джуніори залишають коментарі. Сіньйори надають контекст

🤲 Команда

- Джуніори працюють в командах. Сіньйори знають, коли та як працювати з іншними командами
- Джуніори плекають свій результат. Сіньйори плекають результат команди
- Джуніори повинні заслужити довіру. Сіньйори викликають довіру
- Джуніори шукають наставників. Сіньйори вміють вчитися в колег
- Джуніори працюють над самовдосконаленням. Сіньйори працюють над покращенням команди, через навчання, наставництво та лідерство

Проблема ораклів або чому тестувальника не просто замінити

#testing

Всім привіт. Сьогодні хочу поділитись експериментальним міні-подкастом.

В короткому епізоді я розповім про те, що таке проблема ораклів та як вона впливає на роботу сучасних тест-інженерів.

Як вам такий формат?

⚡️ Епізод 38: Де тестувальник розбирається з метриками

Метрики в тестуванні... Хтось вимірює їх, у когось метрик може й взагалі немає. Але що таке метрики, чи потрібні вони взагалі? Які метрики ми можемо назвати точно шкідливими? Велику й дійсно невичерпну розмову про метрики починають сьогодні Артем та Олександр в цьому епізоді подкасту.

Дивитись та слухати:

🔸 Youtube
🔹 Spotify
🔸 Apple

❗️❗️❗️Для тих, хто хоче підтримати наш подкаст, крім Buy Me a Coffee, зʼявилася нова нова можливість - зробити підписку через Mono!

За різні підписки ви зможете отримати доступ до закритого чату подкасту, отримувати нові епізоди до самого виходу, а також є можливість присутності під час запису 😏

#testingminutes | @a_grygorenko | Test Engineering Notes

Behavior Driven Chaos with AWS Fault Injection Simulator

#testing #python #chaos

Якщо ваша інфраструктура на AWS та маєте бажання перевірити стійкість системи - можна застосувати підхід хаос інжинірингу.
Більше про підхід можна почитати тут.

Amazon випустив окремий інструмент для таких цілей - AWS Fault Injection Simulator.

Подивитись приклад на Python (та навіть з BDD!!!):

git clone https://github.com/aws-samples/aws-fis-behaviour-driven-chaos.git

Топ 10 вразливостей LLM систем

#security #ai #llm

Організація OWASP, яка відома своїми списками вразливостей для веб й мобільних застосунків, нещодавно випустила список вразливостей для сучасних LLM систем, типу ChatGPT.

Можна навіть скачати в PDF.

Дуже цікаво дивитись як методи зламу еволюціонують разом із технологіями.

Чотири стадії компетенції

#learning

Коли ми вчимося новому, ми так чи інакше проходимо через чотири стадії компетенції.

Стадія 1 - Несвідома Некомпетентність

Ви не знаєте того, що не знаєте. Ви тільки почали вивчати тему.

Щоб прогресувати, треба запитати себе - "Чого саме мені потрібно навчитися?". Зробити дослідження теми, спробувати знайти вже готові роадмапи навчання чи програми з потрібного предмету в університетах.

Стадія 2 - Свідома Некомпетентність

На цьому етапі ви вже усвідомлюєте те, що ви багато чого не знаєте (свою поточну некомпетентність). Якщо у вас вже багато років досвіду - ви можете зіштовхнутись з синдромом самозванця - бо він починає свою дію саме на цій стадії.

Як рухатись вперед? Встановіть конкретні цілі навчання, дивіться на проєкти в якості прикладів, шукайте ментора всередині компанії чи деінде.

Стадія 3 - Свідома Компетентність

Ви вже набули необхідних знань та навичок, але треба продовжувати ці навички свідомо закріплювати на практиці. Плюс - треба думати, як ви можете застосувати ці знання в різних контекстах.

Для розвитку - задайте собі питання - "Як я можу застосувати навички в інших, більш складних ситуаціях?"

Стадія 4 - Несвідома Компетентність

Рівень експерта, коли ви виконуєте роботу та застосовуєте навички автоматично. Як-от їзда на велосипеді чи швидкий набір тексту на клавіатурі.

Щоб прогресувати, на цій стадії треба постійне навчання та практика.

І ще одне!

По мірі того, як ви будете переходити зі стадії до стадії - ви можете стикнутись із Парадоксом Експерта. Що це? Чим більше ви вивчаєте та заглиблюєтесь у тему, тим більше ви бачите нових тем, які треба вчити. Наче провалюєтесь в кролячу нору з оповідань про Алісу. А далі - знову нападає синдром самозванця разом із невпевненістю у своїх силах.

Як нейтралізувати цю проблему? Визнайте, що не знати чогось - це абсолютно нормально та є частиною зростання. Записуйте цікаві теми для поглибленого вивчення, слідкуйте за власним прогресом, шукайте зворотній звʼязок від людей, чия думка важлива для Вас.

P.S. Це придумав не я, це вже відомо із середини минулого століття.

⚡️ Епізод 37: Де тестувальник пробує менторити

Олександр та Артем обговорюють що таке менторинг, чим він відрізняється від інших активностей передачі знань та як стати хорошим ментором.

Дивитись та слухати:
🔸 Youtube
🔹 Spotify
🔸 Apple

А ще ви можете підтримати наш подкаст будь - яким донатом на Buy Me a Coffee ☕️

Окрім того, за різні підписки ви зможете отримати доступ до закритого чату подкасту, отримувати нові епізоди до самого виходу, а також є можливість присутності під час запису 😏

#testingminutes | @a_grygorenko | Test Engineering Notes

⚡️ Епізод 36: Де тестувальник шукає баги в мисленні

Ми шукаємо помилки в софті кожного дня. Але помилки можуть бути ще й в ... нашому мисленні. Якими бувають помилки мислення та як їх віднайти - Артем та Олександр розповідають в цьому епізоді.

Дивитись та слухати:
🔸 Youtube
🔹 Spotify
🔸 Apple

А ще ви можете підтримати наш подкаст будь - яким донатом на Buy Me a Coffee ☕️

Окрім того, за різні підписки ви зможете отримати доступ до закритого чату подкасту, отримувати нові епізоди до самого виходу, а також є можливість присутності під час запису 😏

#testingminutes | @a_grygorenko | Test Engineering Notes

Готові стати QA Leader? 💡
Запрошую на четвертий потік с̶у̶в̶о̶р̶о̶г̶о̶ групового менторства QA-Lead, де ви дізнаєтеся все про цю посаду та отримаєте інструменти для успішного вирішення завдань після підвищення.

Що у програмі?
- Допрацьована програма після трьох потоків, відшліфована і покриває все, про що ви писали у відгуках 🔥
- Практика на реальних кейсах
- Інтенсивні домашні завдання: підготуйтеся витратити від 10 годин на тиждень
- Запрошені експерти: майстри з надання фідбеку, ораторського мистецтва та найму
- Щотижнева рефлексія, групові мастермайнди та індивідуальні сесії

Які новинки підготував для вас цього разу:
- додатковий формат, що дозволить самостійно навчатися (пожиттєвий доступ і коштує дешевше, що приємно 😉)
- з'явилися туторіали по інструментах
- деталізована програма
- гнучка оплата частинами від 4-х банків
- а ще такі топові сертифікати для випускників, які неможливо ховати у шухляді
- залишилися питання? Пишіть одразу мені @artem_grygorenko

📅 Старт: 16 вересня

Як потрапити на навчання?
Приєднуйтеся в бот - тут буду розказувати активно і багато про новинки на навчанні, оновлену програму, знижки й покажу новий сайт 😉Тут вже можна забронювати місце на курс.

P.S. Ціна раннього бронювання діє тільки до кінця серпня! 👀

Карʼєрні супер здібності, що допоможуть у важкі часи

#testing #career

У часи постійних скорочень та тижнів (місяців) пошуку роботи, в голові постійно виникають одні й ті ж питання:

- Шо я роблю не так?
- Чому я не можу знайти роботу?
- Чи цінні мої навички?

Звичайно, ситуації в кожного різні та не схожі на інших. Але й в них можна знайти дещо спільне.
Ми часто забуваємо (та забиваємо) декілька важливих навичок, які можуть нам допомогти у пошуку роботи.
Що це?

Вміння навчатися

Щоб підвищити шанси в пошуку роботи - треба навчитися вчитися новому. Таке навчання може мати різні форми - від опанування окремого інструменту до навчання нових підходів та процесів в нових для вас доменах.

Найголовніше тут бути відкритим до нових підходів, навчатись швидко, міксувати нові знання з уже наявними. Але ще більш важливо - вміти діставати потрібну вивчену інформацію своєчасно. (Цьому вмінню, нажаль, майже не навчають на курсах чи в університетах. Але про це - в окремому пості).

Вміння адаптуватись

Буває неймовірно важко визнати, що ваші навички застаріли та стали непотрібні роботодавцям. В такі момент стане у нагоді вміння адаптуватись до нових правил та нового ринку.

Вивчайте вимоги до вакансій, визначайте ваші пробіли в знаннях (чи інструментах), робіть аналіз зворотній звʼязок після співбесід.
А далі - заповнюйте пробіли та закріпляйте вивчене на практиці (домашніх навчальних проєктах). Це - єдиний можливий шлях на сучасному ринку праці.

Не думайте, що навички, які ви здобули 5-10-20 років тому так само потрібні зараз.
Більшість з них потребують постійної практики, а може - й заміни.

АйТі постійно змінюється. То ж нам треба змінюватись разом із ним.

⚡️ Episode 35: The one where the test engineer searches for testability with Rob Meaney

Testability. Здається, що цей термін дуже простий та зрозумілий. Багато хто говорить про це, але дуже мало хто знає точно, що таке testability та як конкретно покращувати цю властивість у софті. Тому ми з Артемом звернулися про допомогу до Rob Meaney, який знає про testability дуже багато (навіть книжку про це написав).

Випуск буде корисним як починаючим тестувальникам, так і прокачаним сіньйорам. Рекомендуємо до перегляду.

Дивитись та слухати:
🔸 Youtube
🔹 Spotify
🔸 Apple

А ще ви можете підтримати наш подкаст будь - яким донатом на Buy Me a Coffee ☕️

Окрім того, за різні підписки ви зможете отримати доступ до закритого чату подкасту, отримувати нові епізоди до самого виходу, а також є можливість присутності під час запису 😏

#testingminutes | @a_grygorenko | Test Engineering Notes

Корисні "трюки" в Python

#python #tricks

Сьогодні дозвольте поділитись прикладами трюків з книги "Python One-Liners".
Користуйтесь ними для навчання, або будьте готові отримати шось подібне на співбесіді (зустрічав таке).

1. У вас є строка з багатьма рядками. Перетворіть її на масив масивів слів в кожному рядку, якщо слово має більше трьох літер.

text = '''Call me Ishmael. Some years ago - never mind how long precisely - having  
little or no money in my purse, and nothing particular to interest me  
on shore, I thought I would sail about a little and see the watery part  
of the world. It is a way I have of driving off the spleen, and regulating  
the circulation. - Moby Dick'''

Очікуваний результат:

[['Call', 'Ishmael.', 'Some', 'years', 'never', 'mind', 'long', 'precisely', 'having'], ['little', 'money', 'purse,', 'nothing', 'particular', 'interest'], ['shore,', 'thought', 'would', 'sail', 'about', 'little', 'watery', 'part'], ['world.', 'have', 'driving', 'spleen,', 'regulating'], ['circulation.', 'Moby', 'Dick']]

Рішення:

w = [[x for x in line.split() if len(x)>3] for line in text.split('\n')]

2. Прочитайте файл, видаліть для кожного строки непотрібні пробіли та збережіть це все в лист.

Рішення:

print([line.strip() for line in open("readFile.py")])

3. Маючи словник з даними щодо компаній та заробітних плат співробітників, поверніть список компаній, що платять менше ніж 9$ на годину.

companies = {  
    'CoolCompany' : {'Alice' : 33, 'Bob' : 28, 'Frank' : 29},  
    'CheapCompany' : {'Ann' : 4, 'Lee' : 9, 'Chrisi' : 7},  
    'SosoCompany' : {'Esther' : 38, 'Cole' : 8, 'Paris' : 18}
} 

Рішення:

illegal = [x for x in companies if any(y<9 for y in companies[x].values())]

P.S. Трюки корисні, коли ви та ваші колеги розумієте як вони працюють.

Куди рости в тестуванні?

#testing #career

Сьогодні хочу поділитись невеликою схемою можливих карʼєрних шляхів, яку я створював для однієї з минулих доповідей.

Як бачите, варіантів розвитку вистачає.
Все залежить від того, що вам подобається та не подобається робити.
Все залежить від компанії та карʼєрних можливостей в ній.

Плюс, шлях може бути не обовʼязково лінійно вгору. Можна пробувати різні варіанти та переходити з гілки на гілку.
На цю тему рекомендую гарну статтю - Deltas to the Global Maxima: Better Career Conversations

А який ваш шлях?

Коли треба сконцентруватись на написанні коду, але й зручні інструменти в IDE не хочеш відключати.

⚡️ Епізод 34: Де тестувальник залишається технічним без вміння писати код

Дуже часто тестувальників оцінюють лише за вмінням написати код. Вмієш - крутий, не вмієш - ганьба тобі! Але сьогодні в епізоді Артем та Олександр покажуть декілька прикладів, як можна бути технічним спеціалістом (майже) без вміння читати та писати код.

Дивитись та слухати:
🔸 Youtube
🔹 Spotify
🔸 Apple

А ще ви можете підтримати наш подкаст будь - яким донатом на Buy Me a Coffee ☕️

Окрім того, за різні підписки ви зможете отримати доступ до закритого чату подкасту, отримувати нові епізоди до самого виходу, а також є можливість присутності під час запису 😏

#testingminutes | @a_grygorenko | Test Engineering Notes

Test Engineering Notes — Vol. 16

Як провести bug bash в компанії та чи можливо протестувати все в межах спринта, історія створення Git та як працюють SQL-запити, як планувати свою карʼєру та брати максимум від 1-1 зустрічей та багато інших цікавих тем читайте в новому дайджесті від Олександра Романова 👉 https://dou.ua/goto/2EmP

How SQL Query works? SQL Query Execution Order for Tech Interview

#engineering #howitworks #interview

Поки я тут трохи зайнятий поточними робочими тасками. регресією та всяким іншим - пропоную поглянути на цікавезну статтю про те, як працюють SQL запити "під капотом".

По-перше - це цікаво.
По-друге - дехто може задати щось подібне на співбесіді - то ж ви зможете відповісти на базовому рівні на таке питання.

🛠 Про інженерну роботу в часи розквіту AI 🦾

#engineering

Глобальний ІТ ринок змінився.

Вже не буде так, як в раніше, коли до IT брали людей без освіти та диплому, без мотивації, лишень з невеличким бажанням щось там програмувати (й непереборним бажанням мати багато-багато грошей). Вимоги стають жорсткішими, промоушен - складнішим.

AI прискорює та полегшує роботу кваліфікованих інженерів. Разом із тим - AI робить неефективних інженерів дуже вразливими до звільнень.

Кент Бек у своєму твіті минулого року підкреслив цей факт. Він заявив, що ChatGPT зробив 90% наших навичок вартими 0$, але збільшив цінність інших 10%. (Але яких саме - Кент не розголошує).

В світі AI виживуть інженери - професіонали, які прагнуть розвиватись, адаптуватись та рости.
Успіху досягнуть навіть вже не T-shape, а M-shape спеціалісти - ті, що можуть швидко вчитись та розбиратись навіть в тих дисциплінах "які поза межами зони відповідальності".

Будьте готовими до нового порядку речей.
Вчіться. Вже. Зараз. 🧑‍🎓