Gemini ci ha presi in giro: i benchmark e il video sono... #1196

Ciao Internet su Ciao Internet con Matteo Flora del 08.12.2023

Copertina del video: Gemini ci ha presi in giro: i benchmark e il video sono... #1196

In questa Puntata

Google Gemini: una rivoluzione o solo fumo negli occhi? Scopri le verità nascoste dietro il nuovo modello linguistico.
Google ha recentemente presentato Gemini, il suo nuovo modello linguistico di grandi dimensioni, con promesse di prestazioni eccezionali. Tuttavia, un'analisi approfondita rivela che molte delle affermazioni fatte nei comunicati stampa e nei video promozionali sono fuorvianti. I benchmark presentati mostrano risultati apparentemente straordinari rispetto a GPT-4, ma le condizioni di test non erano paragonabili. Gemini è stato testato con un numero significativamente maggiore di passaggi di "Chain of Thoughts" rispetto a GPT-4, alterando i risultati a favore di Google. Inoltre, le versioni di GPT utilizzate per il confronto non erano le più recenti, mettendo in discussione l'integrità dei risultati.

Il video di presentazione di Gemini, che mostra capacità avanzate come il riconoscimento di giochi come "Rock Paper Scissors", è stato criticato per essere ingannevole. Le dimostrazioni non erano interazioni in tempo reale, ma piuttosto montaggi di risposte pre-registrate e guidate da istruzioni specifiche. Questa mancanza di trasparenza mette in discussione l'affidabilità del modello e solleva dubbi sull'approccio di Google nel promuovere la sua tecnologia.

La scelta di Google di presentare Gemini in questo modo potrebbe riflettere una pressione crescente per competere con OpenAI e altre aziende leader nel campo dell'intelligenza artificiale. Tuttavia, l'uso di strategie pubblicitarie discutibili rischia di danneggiare la reputazione dell'azienda e di alienare utenti e investitori. La trasparenza e l'onestà dovrebbero essere al centro delle comunicazioni aziendali, specialmente in un settore in rapida evoluzione come quello dell'IA.