Google mi je rekao da je Bard postao bolji. Ali čak ni AI ne vjeruje u to

Jedan od najveće najave Google I/O bilo je predstavljanje PaLM 2, Googleovog najnovijeg i najnaprednijeg modela velikog jezika (LLM). Prelaskom na PaLM 2, Google je tvrdio da će Bard imati poboljšane mogućnosti logike, matematike i kodiranja.

Danas je bilo vrijeme da te sposobnosti stavimo na test.

Također:Testirao sam Google Bardove najnovije vještine kodiranja. Nije dobro prošlo...opet

Od Google Bard više nema liste čekanja, da biste dobili pristup, sve što trebate učiniti je posjetiti Google Bardovu stranicu i prijaviti se na svoj osobni Gmail račun.

Kad sam to učinio, bio sam spreman početi tražiti.

Prva primjetna promjena bila je ta da je Bard imao opciju mračnog načina rada, jednu od značajki koju je Google otkrio na I/O-u, a koja je trebala pomoći u smanjenju naprezanja očiju prilikom korištenja chatbota. Ovo je bio pozitivan znak.

Također: Kako sada koristiti Google Bard

Sljedeće, došlo je vrijeme da potvrdimo najveću nadogradnju chatbota, PaLM 2. Kako bih osobno provjerio nadogradnje, pitao sam chatbot "Pod kojim LLM-om radiš?". Odgovor je bio iznenađujući.

Unatoč Googleovoj najavi na Google I/O, Bard mi je rekao da još uvijek radi na LaMDA.

Radim pod jezičnim modelom Google AI LaMDA. LaMDA je kratica za "Jezični model za aplikacije dijaloga".

Kad sam nakon tog odgovora upitao: "Mislio sam da radite na PaLM 2", naišao sam na sličan odgovor.

Ispričavam se zbog zabune. Još uvijek sam u razvoju i još ne mogu raditi na PaLM 2.

Halucinira li chatbot i daje li netočne odgovore kao što je to bilo u prošlosti? Ili možda chatbot još nije prebačen na PaLM 2, kao Google je jučer objavio? Obratio sam se Googleu da mi nešto pojasni, ali odgovor mi je ostavio onoliko pitanja koliko sam imao za početak.

"LLM (uključujući Barda) mogu halucinirati i predstavljati netočne informacije kao činjenice", rekao je Googleov glasnogovornik.

Također:Svaka glavna značajka umjetne inteligencije najavljena na Google I/O 2023

Bardova nesposobnost da točno kaže na kojem LLM radi mogla bi jednostavno biti halucinacija. Međutim, jedan od najvećih ciljeva korištenja naprednijeg LLM-a za Barda bio je smanjiti broj halucinacija koje su se javljale.

Unatoč tome koliko Google tvrdi da je PaLM 2 napredan, čini se da Barda i dalje muče problemi iz prošlosti, uključujući ograničene mogućnosti kodiranja. Možda je Google precijenio mogućnosti PaLM 2.