Mentionsy Mentionsy
Wittenberg rozmawia o technologiach
Wittenberg rozmawia o technologiach

Kiedy AI zastąpi pisarzy?

27.09.2024 ·31 min 46 s · 11 rozdziałów

Czy Chat GPT będzie w stanie wygenerować książki najlepszych polskich pisarzy? Jeszcze długo nie. Ale sztuczna inteligencja może lepiej pisać po polsku. Jak ją do tego zmusić? W podkaście „Wittenberg rozmawia o technologiach” wyjaśnia Pamela Krzypkowska z Ministerstwa Cyfryzacji Hosted on Acast. See acast.com/privacy for more information.

3:40 · Generowanie treści przez modele językowe 1

No właśnie, wiemy już czym jest ten model, a teraz co on tak naprawdę zjadł? Czym on się nakarmił? Takie modele językowe duże, jak tutaj na przykład pokazałaś Chata, one uczą się na bardzo dużej ilości danych z internetu, czyli danych tekstowych, od takich forum jak potencjalnie Reddit, Twitter, X, przepraszam. To jest niesamowite, co? Że to już tam rok temu zmienili nazwę i dalej w tekstach ja piszę X, dawniej Twitter, bo nikt nie rozumie. Symbol dawniej Prince, to też było takie a propos właśnie różnych osób zmieniających swoje nazwy albo firm barwy, ale właśnie one uczą się na dużej ilości tekstów z różnych miejsc, to od razu nie są teraz tylko akademickie, nie są tylko książki Jakuba Żulczyka czy treści akademickie, ale są także posty, generalnie wszystko co może się w internecie znaleźć.

7:43 · Problem halucynacji w modelach językowych 2

Ale to jest super ciekawe co powiedziałaś o tym koncepcie prawdy, bo teraz myślę sobie, że co, że w przyszłości jak masz taki zbiór treningowy tych tam danych pobranych z internetu, no to wygrywają te, których jest najwięcej? I jak tam jest mnóstwo wiedzy, która jest bezużyteczna, zła, dezinformacja albo po prostu głupoty, to on tak będzie odpowiadał? Będzie odpowiadał to, co jest najbardziej statystycznie prawdopodobne, a jeżeli tego znalazł najwięcej, to tak odpowie. A jak Elon Musk ma taki model językowy grog, którego jeszcze w Polsce nie ma, ale on jest chyba szkolony na Twitterze, to znaczy, że to, czego jest najwięcej na Twitterze, to jest najwięcej też tam? Też jakby tutaj, jeżeli używamy takiego zamkniętego modelu, to tak, to on będzie generował tylko to, co ma w swoich bebechach.

Ale możemy też, są też metody tak zwanego jakby, jak się nazywa, grounding, czyli że bierzesz swoje dane i jakby ten model językowy tylko służy jako przetwórca informacji. I to są najlepsze sposoby użycia tego modelu, bo on nie jest twoim dżinem do prawdy, bo on tym nie jest i nie będzie. I nie powinniśmy go traktować jako takiego dżina z lampy, który wam powie, co się będzie działo. Tylko one umieją język, więc jeżeli dasz mu prawdziwe informacje, to on je może przetworzyć. Ale on nie jest w stanie wam powiedzieć prawdy, bo jego prawda to jest, tak jak mówisz, Twitter X, Internet czy cokolwiek innego tam się znajdzie. A czemu on po prostu nie może powiedzieć, wiesz co, nie wiem tego? O, i to jest też kolejne bardzo dobre pytanie. De facto może, jeżeli odkryje, że zakończenie zdania, to znaczy dalsza kontynuacja, wszystkie opcje są mało prawdopodobne, no to wtedy możemy założyć, że jeżeli prawdopodobieństwo każdej odpowiedzi jest stosunkowo niskie, to może powinien odpowiedzieć nie.

Pokazano wszystkie 3 dopasowania. Transkrypcja generowana automatycznie i niesprawdzana ręcznie — może zawierać błędy.