Analityk & Architekt w erze AI Sprawozdanie z konferencji

1 / 15 · Blok I · praca analityka i architekta

Jak AI zmieni sposób prowadzenia analizy i projektowania systemów IT

prof. Andrzej Sobczak · Szkoła Główna Handlowa, Liderzy.AI

Prelekcja: Poza horyzont - czyli jak AI zmieni sposób prowadzenia analizy i projektowania systemów IT

„Za dwa lata kandydat na analityka lub architekta bez własnego portfolio agentów będzie na rozmowie kwalifikacyjnej traktowany dokładnie tak, jak dziś programista bez GitHuba.”

Tradycyjne metodyki inżynierii systemów i klasyczne SDLC właśnie tracą rację bytu. Wkraczamy w erę systemów wieloagentowych, które zmienią sposób, w jaki zbieramy wymagania i projektujemy architekturę rozwiązań IT. W artykule:

• dlaczego globalni liderzy generują już ponad 70% kodu maszynowo,
• jak działa Wirtualne Biuro Analizy i Architektury (VBA), w którym system wieloagentowy stworzył 13 artefaktów architektonicznych i wprowadził do Sparx Enterprise Architect ponad 1200 elementów i relacji,
• pytanie Jana Marii Kowalskiego o rolę Analityka i Architekta w nowym procesie wytwórczym.

2 / 15 · Blok I · praca analityka i architekta

AI zrobi dokładnie to, co opiszesz. I właśnie w tym tkwi problem

Robert Buda · Senior IT Manager - AI / Senior GenAI Product Owner, mBank

Prelekcja: AI zrobi to, co opiszesz. Niekoniecznie to, czego potrzebujesz

„Największym ryzykiem nie jest to, że AI się pomyli. Każdy system ma prawo się pomylić. Największym ryzykiem jest projektowanie architektury tak, jakby AI miało się NIE pomylić.”

Czasem wystarczą trzy „ify”. Zamiast opowiadać, jak AI zmieni świat, Robert mówił o tym, na co zwrócić uwagę, kiedy projekt z AI ma trafić na produkcję. Dwie historie warte zapamiętania:

• model odczytał ze skanu datę i wpisał do bazy rok 3057,
• zespół przez trzy miesiące analizował proces, który miał obsługiwać agent AI - a na końcu okazało się, że wystarczą trzy „ify”.

3 / 15 · Blok I · praca analityka i architekta

Nikt już nie czeka na Twoje wymagania!

Paweł Cyzman · Ekspert ds. analizy biznesowej, KRUK

Prelekcja: Nikt już nie czeka na Twoje wymagania!

Paweł nie pisze już sam. Jego praca polega na tym, żeby kierować asystentami, którzy robią powtarzalną robotę.

Trzeci odcinek serii podsumowującej konferencję „Analityk & Architekt w erze AI” - wystąpienie Pawła Cyzmana z KRUK o tym, że analityk nie pracuje już sam, a jego zadaniem jest orkiestracja, nie pisanie. Całość w artykule.

4 / 15 · Blok I · praca analityka i architekta

Dobre AI zaczyna się na długo przed AI

Beata Brzosko i Anna Sędek · Product Ownerka i Senior Business Analyst, Nationale-Nederlanden

Prelekcja: Jak pozyskiwać wymagania dla rozwiązań AI? Case study od procesu AS-IS do pierwszych testów

„W projektach AI nie ma klasycznych, sztywnych wymagań. Są hipotezy i założenia.”

Klient zgłasza pobyt w szpitalu i w załączniku przesyła zdjęcie z wakacji. Bardzo konkretne wdrożenie AI w obsłudze dokumentacji medycznej - i historia o tym, że przez pierwszy kwartał nie było tam żadnego AI. Była „nudna standaryzacja”, BPMN i tabela wymagań.

• jak przekonać zarząd, który chce AI na wczoraj, do rzetelnego przygotowania procesu,
• jak przekonać ubezpieczyciela, w którym wszystko musiało działać w 100%, do rozwiązania, które działa w 80%.

5 / 15 · Blok I · praca analityka i architekta

Koniec z polowaniem na wiedzę. Jak AI bazujące na danych usprawnia pracę architekta

Alicja Dragan i Michał Grzybowski · Leroy Merlin Polska

Prelekcja: Koniec z polowaniem na wiedzę. Jak AI bazujące na danych usprawnia pracę architekta

„Nie pytajmy: czy AI zastąpi architekta? Zapytajmy: ile żmudnego polowania na wiedzę możemy architektowi odebrać?”

600 stron wiki, 750 bloków architektonicznych, 5 000 komponentów i 1 500 integracji - tak wygląda codzienność architektów w Leroy Merlin. Zamiast polować na wiedzę, zbudowali czterech asystentów AI.

• asystent odradza technologię ze statusem „Hold”, a gdy nie ma danych, nie zgaduje - wskazuje, kogo zapytać,
• lekcja: „RAG nie naprawia wiedzy organizacji. Pozwala po prostu szybciej z niej korzystać”.

6 / 15 · Blok II · od architektury do kodu

Skoro development przestał być wąskim gardłem, to co nim jest dziś?

Matylda Wawrzak-Rajtar i Adam Dąbrowski · Orange Polska

Prelekcja: Skoro development przestał być wąskim gardłem, to co nim jest dziś?

„Agent bez uprawnień i integracji jest jak genialny stażysta pierwszego dnia w korporacji. Bardzo mądry, ale bez dostępu do systemów nic nie zrobi.”

Programista z AI pracuje 5 razy szybciej - a nagrodą jest 5 razy więcej zadań. AI pisze kod w 2 dni zamiast 2 tygodni, a potem ten kod czeka 3 tygodnie na wdrożenie.

• porównanie do portów z lat 50.: statki pływały coraz szybciej, ale i tak stały w porcie, bo dokerzy rozładowywali je ręcznie,
• AI to szybki statek, a nasze firmy to zakorkowane porty.

7 / 15 · Blok II · od architektury do kodu

Specyfikacja, która łączy role: od kontekstu produktu do kodu i agentów AI

Kamil Cieślik · Chapter Leader & Solution Architect, Erste Bank Polska

Prelekcja: Specyfikacja, która łączy role: od kontekstu produktu do kodu i agentów AI

„Musimy się zabrać za rzeczy, za które od dawna chcieliśmy się zabrać, ale nigdy nie mieliśmy na to czasu. Teraz w końcu jest właściwy moment. Jesteśmy pod ścianą.”

Parę miesięcy, a czasem rok - tyle zajmuje dobremu analitykowi wdrożenie się w proces kredytu gotówkowego. AI zmusza nas wreszcie do pracy u podstaw: „W końcu jest właściwy moment. Jesteśmy pod ścianą”.

• specyfikacja w Markdownie, trzymana w repozytorium i podzielona na poziomy: od biznesu po kod,
• graf wiedzy, dzięki któremu zapytania do modelu są 3,3 razy tańsze przy 100% trafności.

8 / 15 · Blok II · od architektury do kodu

Vibe architecting, czyli szybka droga do pięknego chaosu

Anna Maria Bober i Filip Małecki · Axpo Polska

Prelekcja: Vibe architecting - szybka droga do pięknego chaosu

„Mieliśmy kopię zapasową: cztery głowy to cztery cache’e. Tylko każdy cache trochę co innego pamięta.”

Ten sam prompt, powtórzony kilka razy, dał cztery różne architektury - za każdym razem z pełnym przekonaniem. Zespół Axpo nazwał to „efektem nastolatka”, a decyzje AI bez udziału architekta: vibe architectingiem.

• Zgredek - agent AI, który rozbił 1140 wymagań na 5460 aspektów i złożył z nich ok. 160 klocków architektury,
• w 95% testów wskazywał ten sam komponent, a gdy brakowało reguł, pytał człowieka. Każdą decyzję można dziś odtworzyć.

9 / 15 · Blok II · od architektury do kodu

AI nie zaprojektuje architektury, której nie może przeczytać

Piotr Lechnio · Żabka Future / Żabka Group

Prelekcja: AI nie zaprojektuje architektury, której nie może przeczytać - architektura jako kod, C4 i zasada „pilot, not autopilot”

„AI nie zabiera architektowi pracy. Zabiera mu to, co nigdy nie było architekturą.”

Pusta plansza sudoku ma prawie 7 tryliardów poprawnych rozwiązań, a żeby zostało jedno, wystarczy wpisać 17 cyfr. Te 17 cyfr to decyzje architekta - bez nich AI poda każdą odpowiedź i żadna nie będzie właściwa.

• architektura jako kod w modelu C4 - kompilator wyłapał w diagramie serwis, który w ogóle nie istniał,
• Architect Cockpit: AI zadaje pytania architektowi, a jest jeden przycisk, którego nigdy nie może nacisnąć - MERGE.

10 / 15 · Blok II · od architektury do kodu

AI projektuje AI - jak Agentic Development zmienia sposób budowy systemów opartych na LLM-ach

Maciej Papiewski · AI Engineer, LUX MED

Prelekcja: AI projektuje AI - jak Agentic Development zmienia sposób budowy systemów opartych na LLM-ach

„Wejście na produkcję jest dopiero pierwszym krokiem.”

W zwykłym IT wdrożenie zamyka projekt. W systemach z modelem językowym produkcja jest „przemnożona razy milion”: dziwne PDF-y, faktury z kwotą przekreśloną długopisem, nowy klient generujący dokumenty po swojemu. Zbiór testowy tego nie przewidzi.

• ewaluacje zamiast testów - to one kształtują architekturę,
• pierwsze wdrożenie dla jednej osoby, która wie, że nie może ufać systemowi,
• szukanie 2-5% nietypowych przypadków, które odpowiadają za 80% błędów.

11 / 15 · Blok II · od architektury do kodu

AI jako nowa warstwa procesu SDLC

Kamil Reszka · Kierownik Zespołu Rozwiązań IT, Benefit Systems

Prelekcja: AI jako nowa warstwa procesu SDLC

„AI w SDLC nie unieważnia kompetencji. Ono sprawia, że przesuwa się środek ciężkości pracy.”

Biznes poprosił o kalkulator prowizji w aplikacji. Analityczka zapytała: „A po co?”. Okazało się, że kierownik chce tylko zobaczyć, z czego składa się prowizja i ile wynosi na końcu - zamiast tygodni programowania wystarczyło jedno proste zestawienie.

• AI pomogło nie dlatego, że coś napisało, ale dlatego, że pomogło przygotować dobre pytania,
• zasada: AI przygotowuje materiał, ale ocenia go zawsze człowiek.

12 / 15 · Blok III · AI na produkcji

Czego potrzebujemy, a nie co zbudujemy

Mateusz Myczko · LUX MED

Prelekcja: Wspólne potrzeby biznesowe w analizie i architekturze z wykorzystaniem AI

„Czego potrzebujemy?” a nie „co zbudujemy?”

Sprzedaż chce szybciej finalizować współpracę, zakupy - sprawniej obsługiwać dokumenty, prawnicy - prostszej akceptacji, HR - porządku w teczce pracownika. A tak naprawdę wszyscy chcą podpisywać dokumenty cyfrowo. Mateusz pokazał, jak AI pomaga wyłapać taką wspólną potrzebę, zanim firma zbuduje cztery różne systemy.

• sześć pytań o wymagania: rezultat, zdolność, proces, system, informacja, kontrola,
• repozytorium architektury mówi, co wiemy o organizacji, a AI - co wynika z połączenia tych informacji,
• AI obniża koszt poznawczy analizy, ale nie zmniejsza odpowiedzialności analityka i architekta.

13 / 15 · Blok III · AI na produkcji

Gorset czy egzoszkielet? Agenci AI w projekcie, którego nie wolno zepsuć

Marta Wołkowska i Marcin Dybowski · Roche

Prelekcja: Od wymagań po kod w gorsecie GxP: jak analityk i architekt na co dzień współpracują z agentami AI w walidowanym projekcie w branży farmaceutycznej

„Z dokumentalistów staliśmy się weryfikatorami.”

Formalną dokumentację i sprawdzanie spójności przejął agent, a przy człowieku zostało to, czego AI nie zrobi: relacje, czytanie między wierszami i ostateczny podpis. Bo w farmacji tłumaczenie „model mi nie powiedział” to prosta droga do kłopotów.

• zamiast nowych ludzi zespół „zatrudnił” agentów jako dodatkowe konie w zaprzęgu,
• co się stało, kiedy w połowie projektu zmienił się zakres,
• współpraca z compliance - i jak dostarczyć system cztery razy szybciej niż zwykle.

14 / 15 · Blok III · AI na produkcji

Po co agentom AI czarna skrzynka

Piotr Ratajski · Head of AI Factory - AI Center of Excellence, Alior Bank

Prelekcja: Od monitoringu do dowodu - AI Watch Tower jako instrument pomiaru doświadczenia i użyteczności agentów

„Obserwowalność to nie nadzór nad ludźmi. To czarna skrzynka, dzięki której błąd nie powtórzy się drugi raz.”

Operatorka sztabu kryzysowego pyta system AI o ewakuację. Dostaje 187 słów i punkt zbiórki na parkingu, który jest pod wodą. Zapis przebiegu w AI Watch Tower pokazał, że winny nie był model ani prompt, tylko nieaktualny plan w bazie wiedzy jednego agenta.

• dokładność to jeszcze nie użyteczność - pięć person w sztabie, pięć definicji dobrej odpowiedzi,
• sędzia AI ocenia każdą rozmowę, a ludzie sprawdzają sędziego: zgodność z ocenami ludzi wzrosła z 68% do 83%,
• spadek wyniku dla którejkolwiek persony powyżej progu automatycznie blokuje wdrożenie nowego promptu.

15 / 15 · Blok III · AI na produkcji

Trzy tygodnie, jedna osoba i agent dla dziennikarzy śledczych

Maciej Obarski · TVN Warner Bros. Discovery

Prelekcja: JEDD, czyli agent dla dziennikarzy śledczych - studium przypadku

„Odpowiedzialność prawna i etyczna nigdy nie przechodzi na agenta.”

Trzy tygodnie i jedna osoba - tyle zajęło zbudowanie Dżeda, agenta, który pomagał dziennikarzom śledczym TVN w pracy z aktami sprawy Epsteina, a potem z polskimi rejestrami publicznymi. Dziennikarze piszą do niego przez komunikatory, jak do kolegi z redakcji.

• piramida pracy: mechaniczną oddajemy AI, analityczną wspieramy, intuicyjnej i empatycznej nie ruszamy,
• wartości newsroomu wbudowane przed pierwszym użyciem: źródło przy każdym zdaniu, dokumenty pierwotne, sprawdzanie tezy od drugiej strony,
• koszty od 1 do 120 dolarów dziennie - i rekord 600 dolarów w jedną noc.