Avevo bisogno di un meccanico. Ecco come ChatGPT Plus mi ha aiutato a evitare di leggere le recensioni online

Ho usato ChatGPT Plus per evitare di leggere le recensioni online e trovare un meccanico.

Trovare un buon meccanico per auto è difficile. Potrebbe l’IA aiutarmi a trovarne uno? Valeva la pena provare.

Prima, una nota sullo strumento che ho utilizzato: ci sono alcune differenze tra la versione gratuita di ChatGPT disponibile pubblicamente e il servizio a pagamento di $20 al mese, ChatGPT Plus. Oltre al fatto che ChatGPT Plus è basato sul modello GPT-4, le differenze più significative che ho riscontrato riguardano la disponibilità di Code Interpreter (che offre molte analisi interessanti) e i plugin di ChatGPT.

Inoltre: I 10 migliori plugin di ChatGPT al momento

I plugin sono una sorta di cambiamento di gioco perché consentono – tra le molte altre cose – a ChatGPT di fare magie utilizzando i dati attuali disponibili sul web. Senza i plugin, tutto ciò che ChatGPT sa termina nel 2021. Per questo progetto, ho utilizzato il plugin WebPilot.

Riguardo all’auto: la nostra Ford di 13 anni ha raggiunto il punto in cui ha bisogno di molti lavori. È un’auto fantastica e speriamo di poterla utilizzare per molti anni ancora, il che significa che ogni tanto ha bisogno di qualche attenzione.

Non volevamo portarla dal concessionario, ma preferivamo trovare un meccanico in città. Ho usato ChatGPT Plus per aiutarmi a identificare la persona a cui alla fine abbiamo portato la nostra auto. Si tratta di un uomo che non possiede un cellulare e rifiuta di usare l’email. (Quindi è chiaramente una persona molto più felice e intelligente di te o di me.)

Per proteggere la sua identità, così come per ripetere l’esperimento, ho deciso di eseguire le stesse ricerche utilizzando Melbourne, Florida, una città dall’altra parte del paese, come esempio.

Inoltre: 7 suggerimenti avanzati per la scrittura di prompt di ChatGPT che devi conoscere

Il piano era semplice: far analizzare a ChatGPT le recensioni di Yelp e Google per scoprire quale meccanico è più gradito dai residenti locali.

Con ChatGPT Plus, è necessario abilitare i plugin all’inizio di una sessione. Quindi, per iniziare, ho abilitato WebPilot.

Una piccola nota: in precedenza, ho cercato di far analizzare a ChatGPT contemporaneamente le recensioni di Yelp e Google e l’IA si confondeva sempre. Quindi, per questa dimostrazione, sto separando queste query. (E comunque si perde un po’ per strada.)

Inoltre: Come questa semplice modifica al prompt di ChatGPT può migliorare i tuoi contenuti generati dall’IA

Ecco il mio primo prompt:

Usa WebPilot per analizzare le recensioni di Yelp dei negozi di riparazione auto locali a Melbourne, Florida. Riunisci i risultati delle recensioni e fammi sapere quali officine di riparazione, in base al valore medio delle recensioni e al numero di recensioni, offrono il più alto livello di soddisfazione del cliente. Non includere concessionari auto o officine di riparazione che fanno parte dei concessionari auto, e assicurati di restare esclusivamente a Melbourne.

Ho ricevuto una risposta piuttosto utile:

Poi ho detto a ChatGPT:

Fai lo stesso per le recensioni di Google.

Come puoi vedere, si è confusa, confondendo LA Fitness e Home Depot con i meccanici auto. Ho quindi cercato di farla ripetere la ricerca, ma le ho detto esplicitamente di sostituire Google con Yelp:

Fai la stessa cosa, ma utilizza le recensioni di Google invece delle recensioni di Yelp.

Questa volta è semplicemente fallita. Invece di cercare i risultati, mi ha spiegato come cercarli io stesso. A volte, quando l’IA si confonde, un prompt più completo può aiutare. Quindi gli ho dato il prompt originale che ho usato sopra, ma con “Google” al posto di “Yelp”:

Usa WebPilot per analizzare le recensioni di Google dei negozi di riparazione auto locali a Melbourne, Florida. Riunisci i risultati delle recensioni e fammi sapere quali officine di riparazione, in base al valore medio delle recensioni e al numero di recensioni, offrono il più alto livello di soddisfazione del cliente. Non includere concessionari auto o officine di riparazione che fanno parte dei concessionari auto, e assicurati di restare esclusivamente a Melbourne.

Come puoi vedere, ha funzionato. Successivamente, ho chiesto di effettuare un’analisi del sentiment:

Ora effettua un’analisi del sentiment su entrambi i gruppi di negozi basata sulle recensioni su Yelp e Google e classificali in base a come vengono valutati dai clienti, insieme a un breve riassunto descrittivo che rifletta la soddisfazione o la mancanza di soddisfazione complessiva dei clienti. Presenta i negozi in ordine di classifica complessiva, con il sentimento più positivo come primo negozio presentato.

Ciò non ha portato a una classifica aggregata. Ho deciso di aggiungere ulteriori specifiche alla mia richiesta. Ecco la richiesta che ha prodotto i migliori risultati:

Ora effettua un’analisi del sentiment su entrambi i gruppi di negozi basata sulle recensioni COMBINATE su Yelp e Google (CONTEGGIO DELLE RECENSIONI E NUMERO DI STELLE), NONCHÉ SU TUTTI I COMMENTI DEI CLIENTI, e classificali in base a come vengono valutati dai clienti complessivamente, insieme a un breve riassunto descrittivo che rifletta la soddisfazione o la mancanza di soddisfazione complessiva dei clienti.

Inoltre: Non siamo pronti per l’impatto dell’intelligenza artificiale generativa sulle elezioni

Le parole in maiuscolo sono parole che ho aggiunto per dare maggior chiarezza alla richiesta. Sono state scritte in maiuscolo affinché tu possa vedere le mie modifiche (ChatGPT non presta attenzione alle maiuscole). Ho anche modificato questa frase come mostrato in maiuscolo:

Presenta i primi cinque negozi in ordine di classifica complessiva SU YELP E GOOGLE, con il sentimento più positivo come primo negozio presentato.

I risultati erano molto più in linea con quello che volevo. Prima, ha presentato un rapporto dettagliato combinato:

Poi, come parte della stessa risposta, ha presentato una classifica complessiva.

Quando ho fatto questo qui, in loco, il negozio di riparazioni consigliato da ChatGPT Plus è quello a cui abbiamo portato la Ford. Finora, è stata un’esperienza molto soddisfacente. Tra le altre cose, qualcosa che un altro negozio aveva quotato come un costo superiore a $2.000 per la riparazione si è poi rivelato costare circa $250 con il meccanico consigliato dall’IA.

Inoltre: Questi sono i miei 5 strumenti AI preferiti per il lavoro

Ho fatto un ultimo passo, che non avevo provato prima. Come professore universitario, spesso ho detto ai miei studenti di mostrare il loro lavoro, per aiutarmi a comprendere come sono arrivati alle loro conclusioni. Ho fatto lo stesso con ChatGPT Plus. È stato interessante.

Mostra il tuo lavoro

In generale, sono molto incuriosito dalla possibilità di far aggregare dati di sentiment pubblico dall’IA. Ma è importante fare attenzione perché questi dati sono difficili da confermare. E, come abbiamo visto, l’IA perde regolarmente il filo, quindi non si sa mai quanto affidabili saranno le sue conclusioni.

Inoltre: Tutti vogliono un’IA responsabile, ma poche persone stanno facendo qualcosa a riguardo

Come esperimento, però, è stato divertente. E, fortunatamente per la nostra vecchia Ford, sta dando un buon risultato.


Puoi seguire gli aggiornamenti quotidiani del mio progetto sui social media. Assicurati di iscriverti alla mia newsletter settimanale di aggiornamento su Substack e seguirmi su Twitter a @DavidGewirtz, su Facebook su Facebook.com/DavidGewirtz, su Instagram su Instagram.com/DavidGewirtz e su YouTube su YouTube.com/DavidGewirtzTV.