Мир сегодня с "Юрий Подоляка"

Труха⚡️Україна

देखना

Николаевский Ванёк

देखना

Труха⚡️Україна

देखना

Николаевский Ванёк

देखना

Лёха в Short’ах Long’ует

देखना

QAMania

प्रौद्योगिकी

Ламповий блог про тестування, пишемо про те, що нам цікаво та власний досвід.
А ще в нас є
🌐 https://qamania.org
📺 https://youtube.com/@QAMania

TGlist रेटिंग

प्रकारसार्वजनिक

सत्यापन

असत्यापित

विश्वसनीयता

अविश्वसनीय

स्थानУкраїна

भाषाअन्य

चैनल निर्माण की तिथिAug 13, 2024

TGlist में जोड़ा गया

Jul 06, 2023

मैं चैनल का मालिक हूँ

बदलावों का इतिहास

संलग्न समूह

QAMania Discuss

प्रौद्योगिकी

टेलीग्राम चैनल QAMania का आंकड़ा

विवरण

सदस्य

4 373

24 घंटों

10%सप्ताह

10%महीना

190.4%

उद्धरण सूचकांक

0

उल्लेख2चैनलों पर शेयर0चैनलों पर उल्लेख2

प्रति पोस्ट औसत दृश्य

581

12 घंटों7380%24 घंटों5810%48 घंटों6210%

सगाई (ER)

3.44%

रिपोस्ट7टिप्पणियाँ0प्रतिक्रियाएँ13

सगाई दर (ERR)

0%

24 घंटों0%सप्ताह0%महीना0%

प्रति विज्ञापन पोस्ट औसत दृश्य

675

1 घंटा365.33%1 - 4 घंटे39658.67%4 - 24 घंटे24336%

विवरण

हमारे बॉट को चैनल में जोड़ें और इस चैनल की दर्शक संख्या जानें।

24 घंटों में कुल पोस्ट

0

डायनेमिक्स

समूह "QAMania" में नवीनतम पोस्ट

सभी पोस्ट

07.03.202509:11

Метатести для LLM або хто потестить тести
#ai #bugseverywhere

Всіх давно вже цікавить питання: коли ж AI замінить нас на роботі. І надто це питання цікавить розробників. Проте в конструктивному руслі: "коли AI почне фіксити нудні баги замість нас, а ми нарешті зможемо ~~продовжувати їх створювати~~ більше творити?".
Для відповіді на це питання існують різні методології оцінювання ефективності LLM на реальних задачах, зокрема от й на задачах по багфіксу. Одна з найвідоміших - SWE-bench.
Якщо коротко, то SWE-bench - це набір даних, який перевіряє здатність AI агентів автоматично виправляти реальні баги на GitHub. 2,294 GitHub issues з 12 популярних Python репозиторіїв та unit тести для перевірки багфіксів - дозволяють отримати конкретну числову оцінку для того чи іншого поєднання агента та LLM.
Наприклад найспроможніший агент на даний момент на "Verified" наборі - AI Programming Agent від Weights & Biases, який спромігся пофіксити 64,6% багів.

Але є одне але. А що там з тестами, тобто з багами?
Іншими словами: а чи перевіряв хтось, крім авторів SWE-bench релевантність цього датасету, на якому оцінюють здатність LLM агентів фіксити реальні баги?

Такі дослідники знайшлись. Й перевірили SWE-bench датасет на відповідність поставленій задачі.
Жодним чином не піддаючи сумніву важливість цього бенчу і йому подібних - лише вказуючи й пропонуючи можливості покращення методології оцінки LLM агентів.

TL;DR
Автори дослідження з'ясували що більшість "успішних" патчів для GitHub issues з SWE-bench набору - насправді сильно під питанням, бо третина з цих issues містила правильний фікс в коментарях до issue, ще третина мали трохи неадекватні тести для того щоб перевірити фікс, тобто тести зеленіли не тому що проблему було реально пофікшено, а тому що в пулреквесті містився код на якому тести зеленіють :) Таким чином дві третини "фіксів" від LLM coding assistants дуже під питанням.
Потім автори дослідження ще упоролись й дослідили чи входять потенційно фікси від цих issue в дані, на яких міг навчатись LLM, переробили тестовий датасет таким чином щоб були тільки GitHub issues створені точно пізніше ніж зріз навчання LLM - і тоді ефективність фіксів дропнулась взагалі до лічених відсотків: у найкращої моделі на той момент, chatGPT 4o - з 18,8% на "Full" датасеті до 3,83%!

Висновки:
Забавно що тести це баги, але не дуже забавно те що тести з багами :)
Або іншими словами: тестові дані - наше всьо, і від їх якості залежить якість результатів, які ми хочемо і можемо отримати від LLM.
Щодо фіксу реальних багів - поки що "такоє"..

Якщо когось прям от сильно зацікавило, то ось додаткові посилання:
1) сама стаття: link
2) відео на ютубчику з розбором статті: link

А у вас як? Що ви фіксите за допомогою LLM?
Діліться в коментах! Всім справді цікаво!

01.03.202511:40

#звіт за РЕБ

Привіт друзі! Новини останнього дня, м'яко кажучи, погані. Руки опускаються.
Тож, щоб трохи нас всіх розкрутити, хочу відзвітувати по збору на РЕБ!
Ми тримаємось, бо ми є один в одного!

Пристрій було замовлено, доставлено і вчора протестовано хлопцями. За що вам всім велика подяка. 🇺🇦

से पुनः पोस्ट किया:

DOU

24.02.202512:14

У третю річницю повномасштабної війни ми запускаємо “Меморіал IT-спільноти”. Це проєкт DOU, де ми вшановуємо загиблих айтівців у російсько-українській війні. Тут зібрані короткі біографії військових, які віддали життя за Україну, а також цивільних, які загинули від рук росіян. Нехай ніхто не буде забутий.

Дякуємо агенції Artycoders за розробку і дизайн проєкту.

05.02.202514:57

🗣 Сороміцька співбесіда і пріоритети

Привіт друзі! Настав час розказати вам про співбесіду, за яку мені було реально соромно, але яка допомогла мені чіткіше визначити свої пріоритети пошуку роботи.

У вільний час я іноді пишу код не тільки на Python, але й на JS/TS - чи то просто з цікавості, коли прочитав про якусь прикольну бібліотеку, чи, щоб PoC зробити для порівняння. Тож, коли я почав шукати роботу, я написав створив собі новий проєкт у VS Code і переписав свої автотести для домашнього проєкту з Python на TS. І оскільки було не складно, я вирішив розширити свій пошук не тільки тест менеджментом і автоматизацією на Python, а ще й на JS.
І навіть отримав кілька запрошень на співбесіди! Одну навіть пройшов. Що ж могло піти не так?

Запросили мене на співбесіду в одну велику компанію, на мітинг прийшло кілька хлопців, які знали, хто я, а я знав одного з них. Тож отримав до себе заздалегідь дуже гарне ставлення. Вони запропонували мені live-coding сессію, я почав писати код. І тільки тут я зрозумів, що я взагалі нічого не знаю про TS, а все, що було написано раніше - працює суто випадково 😄 Задачі, що хлопці питали - прості для них, виявились невирішуваними для мене. З підказками я зробив одну, скіпнув другу, але, оскільки ставлення до мене було дуже хороше, мене всіляко підбадьорювали ❤️ і пропонували написати ще кілька прикладів.
І ось, зробивши третю задачу, запускаю код і він не працює через синтаксичну помилку. Але VS Code не може сказати, де саме вона, тому що рішення було написани в найкращих традиціях JS/TS і код закінчувався чимось типу )))})})}}))}}} Кілька разів безуспішно його зарефакторивши, ми всі разом вирішили, що простіше ресетнути задачу і написати її з нуля - тільки тоді вона запрацювала. Але саме в цей момент я усвідомив, що мені це не подобається і я точно не хочу наступний рік колупати дужки.

Тож я зробив те єдине, що могло покращити цю співбесіду - попросив пробачення за витрачений час; подякував хлопцям за чудову співбесіду і нереальний рівень довіри та підтримки; і завершив її. Після чого відмінив всі подальші інтерв'ю по JS/TS і прибрав ці мови з пошукових фільтрів.

Дуже вдячний, що в результаті я чітко зміг побачити для себе не просто те, що я хочу робити з задоволенням а й те, чого я точно робити не хочу:)

А які у вас були фейли на співбесідах?

03.02.202507:32

❗️ Збираю статистику по layoff’ам

Привіт друзі! Я почав активно готуватись до пітчингу доповіді до DOU DAY 2025, де планую, поміж іншим, розказати свою історію скорочення і пошуку роботи. Але одна моя історія — нудна і не показова (буде типова помилка того, хто вижив).

Коротка версія:

🟢мене скоротили влітку, я цього зовсім не очікував, але мав актуальне резюме і орієнтувався в ринку
🟠Спланував пошук роботи, намагаючись спочатку отримати найцікавішу і найприбутковішу, надавши собі на це 3 місяці, після чого мав знизити планку
🟢Активно розсилав СV через майданчики пошуку роботи, LinkedIn та напряму в компанії зі списку топ-50
🟠До кожного інтерв’ю готувався, читаючи уважно вакансію і гуглячи всі невідомі слова (і вичитуючи власне резюме)
🟢До інтерв’ю ставився як до рівнозначної бесіди — не тільки компанія обирає мене, але і я компанію. Як результат, деякі інтерв’ю завершував раніше, бо розумів, що я заслабкий і не пройду, чи компанія мені не підходить
🟠Мав портфоліо на github + блог — докази моєї професійної діяльності
🟢Знайшов роботу за 2 місяці

Тож я подумав, а що як дізнатись у вас — якщо вас скоротили, як це сталось і коли, де, як ви шукали нову роботу?

Оскільки в Інтернеті я часто бачу, що люди шукають роботу — аналітика і best practices можуть стати дуже корисним підґрунтям для наших колег, хто шукає роботу просто зараз.

Приділіть, будь ласка, 5 хв вашого часу і заповніть опитування. А якщо вам є що розказати про ваш лейофф і пошук роботи — діліться в коментарях. І перешліть опитування вашим друзям та знайомим, якщо їх теж скоротили.

➡️➡️➡️ forms.gle/3v9jobgCix5Tw5LAA 👈👈👈

31.01.202510:04

Привіт, сьогодні з порцією мотивації здобути нові управлінські скіли!
У суворого @a_grygorenko відкрито запис на лютневий потік "Шлях до QA Leader" - йти всім, хто хоче вирости з інженера в гарного лідера QA команди.

Тобі це треба? Так, якщо:
- хочеш стати QA Lead, але не знаєш з чого почати;
- вже працюєш лідом і хочеш структурувати знання;
- нещодавно став лідом і потрібна підтримка експерта та колег зі схожими проблемами.

Що в програмі:
✨ Реальні кейси та ситуації з практики;
✨ Фокус на soft skills та people management;
✨ Підтримка ментора та спільноти;
✨ Перевірені інструменти та методики;
✨ Практика переговорів та фідбеку;
✨ Персональний план розвитку.

📅 Старт: 17 лютого

💎 До кінця січня діють знижки раннього бронювання:
Базовий - $900 (замість $1000)
Просунутий - $1200 (замість $1500)
Бронь місця - $200 (фіксує ціну з знижкою)

Можна оплатити частинами або через компанію👌

Залишились питання або готові почати?
Пиши в Telegram: @artem_grygorenko
Та шукай на сайті: grygorenko.tech

30.01.202517:36

🙊 Про співбесіди

Привіт друзі! Буквально минулого тижня провели співбесіду з Попелюхою і мені пригадалось, як я сам проходив співбесіди цього літа, коли шукав нову роботу. Хотів цікаві історії притримати до наступного випуску подкасту, але не зрозуміло, коли він буде, тож нема чого тягнути. Тим паче, що за пів року деякі деталі трохи забулись.

Почну з технічної співбесіди в компанії nCube, з якою я наразі співпрацюю. Вона для мене - еталонний приклад важливості портфоліо. Оскільки шукали автоматизатора, то хотіли подивитись на мої навички написання коду. Тому я відкрив свій Github і ми передивились ті проєкти, якими я пишаюсь найбільше: код, документація, юніт тести. І цього виявилось більш ніж достатньо, щоб справити приємне враження.

Коли я про це згадую в розмовах, мені дорікають - "гарно вам, автоматизаторам, а що робити простим мануальщикам?" Для вас маю 3 поради:
1️⃣ Починайте вчити і використовувати в роботі, для рутинних задач, будь-яку скриптову мову: python, JS, bash. В 2025 - це must have.
2️⃣ Заведіть портфоліо з прикладами результатів вашої роботи мануальним тестувальником - тест дизайни, тест плани, баги. Не скачані з інтернету і не згенеровані ШІ, а такі, як ви робите кожного дня (чи їх ідеальні версії у вакуумі)
3️⃣ Пишіть - чи навіть блог заведіть, як маєте час і натхнення. Але почати можна хоча б з постів в LinkedIn або статті на DOU. "Був у мене такий цікавий кейс на роботі, ось так ми його вирішили" - це ж буквально case study вашої роботи + документування та аналіз результатів 😉

Для прикладу надаю приклад портфоліо - ще колись давно в Інфопульсі попросили зробити приклад для замовника - https://github.com/infopulse/Test-Documentation-Examples

❗️ Дякую, що дочитали! Наразі триває мій збір на РЕБ для 18 ОМБР - деталі в закріпленому пості. Дякую ❤️

27.01.202517:24

📣 Благодійний воркшоп з API тестування

Привіт друзі! Згідно статистики, 77% тестувальників практикують тестування web застосунків, при цьому API тестують менше 20%
Ця статистика дає відповідь на моє ж питання – чому на останньому Dev Challenge учасникам так важко далось просте завдання з тестування API.

Але на разі, я бачу не проблему, а можливість навчитись новому!

Хочу провести благодійний воркшоп з API тестування.
📆 Коли: 11 та 13 лютого, з 19:00 до 21:00

💰 Це платно? Так, моя мета - зібрати на РЕБ для 18 ОБМП. Мінімальний донат - 1000 грн. Серед всіх учасників розіграємо подарунок/подарунки (ще працюю над цим).

ℹ️ Про що воркшоп? Детальний план за посиланням 👇

🤔 Для кого? Для всіх!

➡️➡️ https://qamania.org/blog/workshop-02/ ⬅️⬅️
➿➿➿➿➿➿➿➿➿➿➿➿➿➿➿➿➿➿
Також буду вдячний всім, хто може просто задонатити і поширити ❤️

На РЕБ для 18 ОБМП

🎯 Ціль: 320 000 ₴

🔗Посилання на банку
https://send.monobank.ua/jar/5DQKg3Ybpz

💳Номер картки банки
4441 1111 2088 9278

21.01.202515:36

Аналітика зарплат QA, зима 2025

Привіт друзі! Якщо ви ще не бачили - на DOU вийшла свіжа аналітика доходів QA

Дуже дякую всім, хто заповнив своєчасно анкету і рекомендую ознайомитись з результатами самостійно.

Що було цікаво мені?
💰 Основна метрика - ЗП. Хотілось би, щоб було краще. Але радію, що поки не стає в рази гірше
⏳ Я невпинно віддаляюсь від медіани віку тестувальників. Добре, що поміж нас з'являються молоді і скілові інженери, але не хочу усвідомлювати себе старим 😅
📄 Краще мати ISTQB сертифікат, ніж не мати! Я пропонував це питання і тепер маю доказ, що ті, хто мають достатньо знань і навичок для отримання сертифікату і заробляють більше!
📬 Postman'ом користується 17% тест інженерів. Я здивований, що так мало. Але це пояснює посередні роботи по API тестуванню в Postman на останньому Dev Challenge. Більшість банально його не використовує. Якщо ви теж не користуєтесь - чим ви тестуєте API і чи тестуєте взагалі? Це при тому, що 77% тестувальників, за статистикою займаються тестуванням web. Як так?

upd
А ще пишуть, що 76% тестерів пишуть тест кейси. Мені здається, що це не правда. От ви - пишете?

19.01.202515:34

Посміхаєтесь багам? 😂

16.01.202514:12

🕑 Співбесіда з Попелюхою

Привіт друзі! Вже за кілька годин буду буду проводити співбесіду з Наталкою на позицію Senior Manual QA. Ми домовились, що все буде по чесному - я підготувався, як до будь-якого іншого інтерв'ю, питання не шарив. Валити не буду, але й піддаватись теж - все проведу точно так, як будь-яке комерційне інтерв'ю.
Після цього надам розгорнутий фідбек і ми обговоримо саме інтерв'ю зі спільнотою. Тож приєднуйтесь - буде весело і цікаво!

https://www.youtube.com/live/xrzYLeJXddA

14.01.202508:03

⚙️ Management -> Engineering - downgrade? part 2

Привіт друзі! Продовжую описувати власний досвід про перехід з менеджерської посади на інженерну.

Взагалі, ми навіть на подкасті з Ромою і Наталкою обговорювали, що часто-густо, менеджмент, це дорога в один кінець - технології так швидко розвиваються, що як тільки перестаєш працювати з ними напряму, одразу втрачаєш навичку. Це дійсно правда. Втягнутись в ритм щоденної розробки мені було надзвичайно складно. Мої перші PR-и містили більше зауважень і коментів, ніж змін, які я зробив 😸

Перші місяці я відчував шалений тиск зі сторони отого мерзенного Льоші-менеджера-хеда-практики, що запланував вже покрити автотестами все, а я тільки-но прочитав всю документацію і розібрався з енвами. Але на противагу я маю дуже гарний і дорослий колектив і менеджмент, що не тисне, дає стільки часу освоїтись, скільки потрібно і завжди радий допомогти порадою ❤️

Але я й не переставав повністю займатись інженерією - постійно писав пет-проєкти, робив PoC на нові технології, робив невеликі курси по автоматизації та перформансу, пишучи і переписуючи код багато разів. І це гарно спрацювало. За майже пів року роботи AQA інженером, я не тільки почав гарно писати код, та ще й опанував bash і докер на рівні, на якому ніколи й не планував його знати 😅

Яку б роботу вам не підкинули - продовжуйте приділяти час саме тому, що вам подобається робити - кодити, тестувати, писати доки. І тоді вам буде легше адаптуватись до нових задач і нової роботи.

Далі буде!

मीडिया सामग्री तक पहुँच नहीं हो सकी

09.01.202507:59

Management -> Engineering - downgrade?

Привіт друзі! З початком роботи в новій компанії та новій ролі, щось зовсім закинув наш блог. Але поступово розгріб справи і набрався мотивації щось писати, і може навіть відео якісь запишу :)

І чом би не почати з моїх вражень від переходу в нову компанії на нову позицію. В голові купа думок, тож не лякайтесь, що все не вміщу в один пост.

Перш за все - нова компанія! Хто мене хоч трохи знає - я працюю в ІТ більше 15 років і весь цей час працював з компанією Infopulse. Люди, з якими я провів вагому частину свого дорослого життя - сформували мене як спеціаліста, передали мені свої цінності, поділились знаннями і досвідом. Багато хто, як от Міша, стали моїми найліпшими друзями ❤️
Тому мені міняти роботу, сталий ритм життя і коло спілкування було ой як не просто. Але я радий, що в нас в Україні дуже багато класних спеціалістів і компаній! Коли я підключився на перше інтерв'ю з рекрутером nCube - після перших же хвилин зрозумів, що ми маємо спільні цінності і мені буде комфортно працювати з ними. "Наша компанія активно допомагає ЗСУ, не працює з руснею і не толерує русню" 🔥 А сама вакансія - робота з ШІ на пайтоні - просто всі зірки зійшлись!

Тож зараз я працюю просто AQA Engineering і задоволений! Уявіть собі - в мене 1 мітинг на день на 5 хв, а далі купа роботи, яку я можу сам вибрати і пріоритезувати. Безперечний плюс!

Але якщо ви думали, в кого більше вільного часу - в менеджера чи в інженера, мій досвід наочно демонструє - зараз часу писати в блог в мене не вистачає 😅 Але може то я просто розлінився

Думки поки що закінчились, але далі буде!

मीडिया सामग्री तक पहुँच नहीं हो सकी

से पुनः पोस्ट किया:

Попелюха | QA 👾

08.01.202520:34

Такееее для вас готую…

В новому році я з двох ніг вриваюсь в ютюби, буду заливати вже відзнятий курс по шарпам, тематичні відосики для QA, і головне…

Мені рівно не сиділось і я придумала собі в канал нову рубрику з кодовою назвою «Обнять і плакать», але з офіційною «Спаси і ctrl+S».
Суть цієї чудесної рубрики в тому, що за 12 місяців МЕНЕ проінтервʼювають 12 поважних і шанованих в світі ІТ спеціалістів.

Питання будуть для мене сюрпризом, хоча я звісно буду готуватись, але позоритись перед вами в прямому ефірі я буду знатно:)

І ось він анонс: 16.01, в четвер, записуйте собі в календарики що о 19:00 Олексій Остапов відкриє цю рубрику і перевірить мене на відповідність сеньйорності на позицію Manual 😉

Всіх запрошую на публічний допит Попелюхи 👾
Посилання скину за день до, і зможете знайти як трансляцію в Ютюбі

05.01.202520:42

🎄 Підсумки 2024 року?
#новорічне

Привіт друзі! Багато разів писав і переписував ці підсумки року. Бо важко підібрати слова, щоб передати всі думки і почуття 😵‍💫

Якщо сформулювати коротко - це був капець який важкий рік для всіх. З одного боку - всі, хто його пережили - вже молодці. Хоч в резюме додавай ачівку. З іншого боку - майбутнє страшне і невизначене, як ніколи раніше.

На фоні всіх існуючих проблем в буквально у всіх сферах життя дуже легко зневіритись і опустити руки:
⚠️ проблеми на фронті
⚠️ беззаконня в тилу
⚠️ влада, яка за 3 роки вторгнення може забезпечити міністерства потужної єдності та плани переможної потужності, але не може купити і поставити літаючи дрони
⚠️ скорочення в ІТ
⚠️ падіння економіки та інфляція

Говард Лавкрафт з його хтонічним жахом нервово курить в стороні 🚬

Саме тому я вважаю правильним дати нашій спільноті промінчик надії.
✅ По-перше, в нас є ми - спільнота QAMania, DOU, KOLO, IT - ми тут, ми живемо і працюємо! Минулого року я був щасливий спілкуватись із вами на кожній відвіданій офф-лайн події!
✅ По-друге, в кожного є родичі та друзі - хто в складі ЗСУ, незважаючи ні на що продовжує захищати нас! Одна думка про них не дає зневіритись!

Минулого року я проаналізував виписки, щоб зрозуміти об'єм донатів і прямих закупок для своїх друзів. Цього року я зробив так само і нарахував 💸 830 тисяч грн власних коштів. А разом зі зборами, які ми проводили в нашому блозі, ця сума сягає більше мільйона! Пишаюсь вами ❤️

Можна скільки завгодно класти хуями владу за неефективність та бездіяльність, але якщо моєму рідному 18 батальйону морської піхоти треба РЕБ на вчора, то я можу щось з цим робити і я роблю.
Я пишу це не щоб похизуватись, а щоб показати - скільки б в твітері не писали "всьо пропало" - разом ми можемо багато! Ми не одні! Волонтерство і донати все ще важливі! Вони рятують життя і вбивають окупантів!

Будьмо сильними в цьому році!
Слава Україні! 🇺🇦

मीडिया सामग्री तक पहुँच नहीं हो सकी

सभी पोस्ट