I nuovi chatbot di intelligenza artificiale delle GPU RTX sono buoni? Scoprilo in questo articolo di ENBLE.

Nvidia si sta lanciando nella creazione del proprio chatbot di intelligenza artificiale utilizzando le capacità delle GPU RTX - un'impegnativa impresa promettente che potrebbe ancora richiedere alcuni miglioramenti.

@img

È arrivato il momento di chattare con la tua scheda grafica! Nvidia sta introducendo una nuova e emozionante funzionalità chiamata Chat with RTX, un chatbot AI locale che sfrutta la potenza della tua GPU Nvidia per eseguire un modello AI. Finalmente, il tuo PC può mostrare il suo muscolo dedicato all’hardware AI! Ma cosa significa esattamente per te? Approfondiamo e esploriamo i dettagli di questa nuova tecnologia.

Incontra Chat with RTX

La prima domanda che ci viene in mente è come Chat with RTX differisce dagli altri chatbot AI come ChatGPT. Beh, Chat with RTX è un modello di linguaggio di grandi dimensioni (LLM) locale che utilizza modelli compatibili TensorRT-LLM, come Mistral e Llama 2, direttamente sul tuo PC. Invece di affidarsi al calcolo basato su cloud, l’elaborazione effettiva avviene localmente sulla tua affidabile scheda grafica. Ma aspetta, c’è di più! Per unirti alla festa di Chat with RTX, avrai bisogno di una GPU Nvidia RTX della serie 30 o 40 con almeno 8 GB di VRAM. Quindi, è il momento di verificare se il tuo PC può reggere il caldo.

Una delle caratteristiche distintive di Chat with RTX è la sua capacità di lavorare con i tuoi dati. Puoi compilare una cartella piena di documenti specifici e indirizzare Chat with RTX nella loro direzione, consentendo al modello di AI di fornire risposte più dettagliate e specifiche basate sui tuoi contenuti unici. Dì addio a quelle risposte generiche e dì ciao alle informazioni personalizzate! È come avere il tuo assistente AI personale, ma senza i costi pesanti del server.

Chat with RTX risponde a una domanda sull'interpolazione dei frame. Immagine: Jacob Roach / ENBLE

Ma funziona davvero? La risposta breve è sì! Gli utenti che hanno testato Chat with RTX hanno riferito risultati impressionanti. Alcuni hanno caricato articoli di ricerca su DLSS 3 di Nvidia, FSR 2 di AMD e XeSS di Intel e hanno posto domande specifiche sulle loro differenze. Per loro sorpresa, Chat with RTX è stato in grado di estrarre e presentare risposte dettagliate basate sugli effettivi articoli di ricerca. È riuscito persino a scomporre il complesso gergo accademico in informazioni facilmente comprensibili. Parlare di un genio virtuale!

Ma c’è un problema. Chat with RTX ha anche alcuni svantaggi. Come accennato in precedenza, avrai bisogno di un PC potente con una GPU Nvidia compatibile e molta VRAM. Inoltre, l’applicazione stessa richiede circa 100 GB di spazio libero sul disco, assicurati quindi di avere spazio sufficiente. È sempre una questione di equilibrio tra potenza e spazio su disco!

Allucinazioni

Nessun strumento AI è perfetto e Chat with RTX non fa eccezione. A volte possono verificarsi incertezze e risposte errate, causando situazioni strane. Ad esempio, il modello potrebbe erroneamente collegare Counter-Strike 2 a DLSS 3, fornendo informazioni errate. Questo è dovuto ai pregiudizi presenti nel piccolo dataset su cui si basa Chat with RTX. È un promemoria che anche modelli AI sofisticati possono commettere occasionali errori.

Chat with RTX risponde a una domanda su Counter-Strike 2. Immagine: Jacob Roach / ENBLE

Un’altra peculiarità è che Chat with RTX a volte risponde a domande che non dovrebbe. Mentre la maggior parte dei chatbot AI riconoscerebbe la mancanza di informazioni in tali casi, Chat with RTX ci sorprende cercando di fornire una risposta. Ad esempio, quando gli viene chiesto come fare un nodo alle scarpe utilizzando i dati predefiniti, offre effettivamente istruzioni passo passo. Non è chiaro da dove Chat with RTX ottenga queste informazioni aggiuntive, ma aggiunge un interessante colpo di scena speculativo alla conversazione.

L’incidente di YouTube

Una delle caratteristiche distintive di Chat with RTX è la sua capacità di leggere ed analizzare le trascrizioni dei video di YouTube. Tuttavia, questa funzionalità presenta le sue sfide. Anche dopo aver avviato una nuova sessione, Chat with RTX potrebbe ricordare i video precedentemente collegati, il che può causare confusione. Nvidia riconosce questo problema e consiglia agli utenti di eliminare manualmente le trascrizioni se vogliono iniziare da zero.

Chat with RTX risponde a una domanda su un video di YouTube. Immagine: Jacob Roach / ENBLE

In un caso, un utente ha collegato un video di Magic: The Gathering dal canale YouTube Commander at Home, per poi passare a un’intervista con il CEO di Nvidia, Jensen Huang. Nonostante la ricostruzione del database e l’avvio di una nuova sessione, Chat with RTX ha insistito nel rispondere alle domande sul video di Commander at Home, ignorando completamente il nuovo link al video. È un buon promemoria che i modelli di intelligenza artificiale possono talvolta trattenere informazioni che non dovrebbero. Ricordati di tenere d’occhio quelle trascrizioni di YouTube!

Scopri l’Utilità

Quindi, Chat with RTX è un prezioso aggiornamento per il tuo arsenale di intelligenza artificiale? L’utilità di questo strumento dipende principalmente dalle tue esigenze specifiche. I chatbot basati su cloud come ChatGPT offrono una gamma più ampia di informazioni accessibili, rendendoli ideali in molti scenari. Tuttavia, se hai una grande collezione di documenti o una serie di video di YouTube da analizzare, Chat with RTX brilla permettendoti di sfruttare la potenza del tuo PC locale. Assicurati solo di accettare i suoi stravizi e limitazioni, come qualsiasi buon compagno di intelligenza artificiale.

Chat with RTX risponde a una domanda su un video di YouTube. Immagine: Jacob Roach / ENBLE

In ultima analisi, Chat with RTX funge da demo per il potenziale dei modelli di intelligenza artificiale locali. Nvidia spera che gli sviluppatori si ispirino a questa tecnologia ed esplorino le proprie app di intelligenza artificiale locali. Quindi, mentre rifletti sull’utilità di Chat with RTX, tieni d’occhio il futuro dell’IA e come può rivoluzionare la tua esperienza su PC.

E ricorda, il potere è nelle tue mani! Inizia a chattare con la tua GPU Nvidia e lascia che le conversazioni dell’IA abbiano inizio!


💡 Domande e Risposte

D: Ci sono requisiti specifici per utilizzare Chat with RTX?

R: Sì, per utilizzare Chat with RTX, hai bisogno di una GPU Nvidia RTX della serie 30 o 40 con almeno 8 GB di VRAM. Assicurati quindi che il tuo PC soddisfi queste specifiche prima di immergerti nel mondo delle chat dell’IA!