Chatgpt: čet-bot kojeg je razvio OpenAI

Napravljen je na temelju OpenAI GPT-3 i GPT-4 porodice velikih jezičkih modela, a dotjeran je i fino podešen pomoću nadziranog i podržanog mašinskog učenja.

ChatGPT
Originalni autor(i)	OpenAI
Prvo izdanje	30. novembar 2022; prije 16 mjeseci (2022-11-30)
Veb-sajt	chat.openai.com

ChatGPT je predstavljen kao prototip 30. novembra 2022. i brzo je dostigao popularnost zbog svojih detaljnih i artikulisanih odgovora u raznim domenama znanja. Njegova neujednačena činjenična preciznost je ipak označena kao značajna mana. Nakon predstavljanja ChatGPT-a, OpenAI je dostigao vrijednost od 29 milijardi američkih dolara.

Jedna od glavnih karakteristika je davanje prirodnih odgovora na postavljenja pitanje i generiranje programskog koda, članaka, pjesama, priča ili otklanjanje grešaka u kodu.

Izvorna verzija ChatGPT-a bazirana je na verziji GPT-3.5. Verzija bazirana na GPT-4, najnovijem OpenAI modelu, objavljena je 14. marta 2023. i dostupna je za plaćene pretplatnike.

ChatGPT je član porodice jezičnih modela generativno predtreniranih transformatora (engleski: Generative pre-trained transformer - GPT). Prilagođen je nad poboljšanom verzijom OpenAI GPT-3, poznatom kao GPT 3.5, putem procesa finog podešavanja.

Proces finog podešavanja koristio je i nadzirano učenje i podržano učenje u procesu nazvanom podržano učenje uz ljudske povratne informacije (engleski: reinforcement learning from human feedback - RLHF). Oba pristupa koriste ljudske trenere kako bi poboljšali performanse modela. U slučaju nadziranog učenja, modelu su dostavljeni razgovori u kojima su treneri imali ulogu korisnika i asistenta. U podržanom učenju, ljudski treneri su prvo rangirali odgovore koje je model stvorio u prethodnom razgovoru. Ti su rangovi korišteni za stvaranje "modela nagrade" kojim se model dodatno fino podešavao korištenjem nekoliko iteracija PPO-a (engleski: Proximal Policy Optimization).

ChatGPT je u početku koristio superkompjutersku infrastrukturu Microsoft Azure, pokretanu pomoću NVIDIA grafičkih procesora, koju je Microsoft izgradio posebno za OpenAI, a koja je navodno koštala "stotine miliona dolara". Nakon uspjeha ChatGPT-a, Microsoft je 2023. značajno nadogradio OpenAI infrastrukturu.

OpenAI prikuplja podatke od korisnika ChatGPT-a kako bi dalje trenirao i prilagođavao uslugu. Korisnici mogu glasati za ili protiv odgovora koje dobiju od ChatGPT-a i popuniti tekstualno polje s dodatnim povratnim informacijama.

• Turingov test
• Virtuelni asistent

• ChatGPT OpenAI^{[mrtav link]}