Najopasniji trenutak u istraživanju umjetne inteligencije često je trenutak kada se čini da je odgovor gotov. Naslovi su uredni. Proza je samouvjerena. Preporuke zvuče uvjerljivo. Nekoliko izvora nalazi se ispod rezultata. Osjeća se cjelovito. Ali poslovno istraživanje rijetko je potpuno nakon jednog prolaza. Javne informacije mogu biti zastarjele. Konkurent se može opisati drugačije na tri stranice. Cijene mogu biti skrivene iza prodajnog poziva. Dobavljač može izgledati kao da poslužuje vašu regiju, ali isključuje vaš poštanski broj pri naplati. Vaš vlastiti tim može posjedovati znanje koje nikada nije objavljeno online. Konvencionalno iskustvo umjetne inteligencije potiče jednostavno ponašanje: postavite pitanje, primite odgovor, započnite drugi razgovor. Opis je dizajniran oko drugačijeg ponašanja: Pitajte → pregledajte → izazovite → razjasnite → ponovno istražite kada je potrebno. Taj drugi prolaz je mjesto gdje se odvija veći dio korisnog rada. ---
Zahtjev
Što kaže istraživanje
Dokazi
Odakle potječe
Neizvjesnost
Što ostaje nejasno
ICC
Dodati ljudski kontekst
Doradi
Poboljšati rezultat
Izvor nije isto što i sigurnost
Vidjeti citate je umirujuće, ali samo značka citata ne čini tvrdnju istinitom.
Postoje najmanje četiri zasebna pitanja koja vrijedi postaviti:
- Postoji li izvor stvarno?
- Je li to pravi izvor za ovu temu?
- Podržava li to stvarno konkretnu tvrdnju koja se iznosi?
- Postoji li drugi vjerodostojan izvor koji joj proturječi?
Opis već tretira porijeklo izvora kao dio istraživačkog objekta, a ne kao dekorativne fusnote. Nalazi mogu sadržavati reference na izvore, sustav zadržava utemeljene izvore koji su stvarno bili dostupni za pokretanje, a sloj kontrole kvalitete izlaza provjerava probleme kao što su nevažeće reference i sumnjivi obrasci izvora.
Za vas kao operatora, ponašanje bi trebalo biti jednako promišljeno.
Kada je nalaz važan, otvorite izvor.
Ne pitajte „ima li ovo izvješće citate?“
Pitajte „bih li se osjećao ugodno braneći ovu tvrdnju klijentu koristeći ovaj dokaz?“
To je mnogo viši standard.
Četiri signala nesigurnosti koja vrijedi naučiti
Opis razdvaja nekoliko vrsta nesigurnosti jer zahtijevaju različite odgovore.
Pretpostavka
Pretpostavka je nešto što je analiza morala tretirati kao privremeno istinito da bi napredovala.
Primjer:
„Čini se da tvrtka cilja mala i srednja poduzeća na temelju jezika i paketa prikazanih na njezinoj web stranici.“
To može biti razumno tumačenje, ali možda znate da 70% njezinih prihoda zapravo dolazi od ugovora s velikim poduzećima.
To nije problem pretraživanja weba. To je problem konteksta.
Dvosmislenost
Dvosmislenost postoji kada dostupni materijal ostavlja više od jedne razumne interpretacije.
Na primjer, dobavljač na svojoj početnoj stranici navodi „isporuka u UK“, ali stranica o otpremi navodi samo kopnenu Englesku i Wales.
Informacija postoji. Njezino značenje je nejasno.
Kontradikcija
Kontradikcija je jača. Dva dokaza upućuju u nespojive smjerove.
Jedna stranica tvrtke može nazvati proizvod „otkaži bilo kada“, dok trenutni uvjeti opisuju obvezu od 12 mjeseci.
To se ne bi smjelo tiho u prosjeku pretvoriti u siguran zaključak.
Praznina
Praznina znači da istraživanje trenutno ne sadrži dovoljno dokaza za odgovor na nešto važno.
Možda minimalna veleprodajna količina narudžbe nikada nije objavljena. Možda nijedan vjerodostojan izvor ne utvrđuje koliko dugo dobavljač posluje. Možda trenutne cijene konkurenta jednostavno nisu javne.
Praznina nije neuspjelo izvješće.
To je mapa onoga što se treba dogoditi sljedeće.
ICC: ispravite interpretaciju bez ponovnog pokretanja
Interaktivna kontekstualna korekcija – ICC – je dio Opisa dizajniran za trenutke kada javni dokazi nisu cijela priča.
Važna je ideja da vaša intervencija ima vrstu.
Dodajte kontekst
Koristite kontekst kada znate relevantnu činjenicu ili ograničenje koje Opis nije mogao razumno znati.
„Naš prodajni tim potvrdio je da će ovaj dobavljač proizvoditi narudžbe pod privatnom markom od 500 jedinica.“
Dodajte uputu
Koristite uputu kada želite da analiza drugačije prioritizira ili obrađuje postojeće informacije.
„Za ovu odluku, pouzdanost isporuke važnija je od istaknute jedinične cijene.“
Postavite pitanje
Koristite pitanje kada želite ispitati ono što je već prisutno.
„Utvrđuje li trenutni dokaz da se jamstvo primjenjuje na komercijalne kupce?“
Pitanja su posebno važna jer Opis ne bi trebao stvarati odgovor samo zato što ste pitali.
Ako postojeći materijal ne može odgovoriti na pitanje, točan ishod je praznina.
Ta praznina tada može postati cilj istraživanja.
ICC i novo istraživanje namjerno su različite operacije
Ova je razlika suptilna, ali temeljna za način na koji se sustav treba ponašati.
Pretpostavimo da vaša prva analiza konkurencije kaže:
„Konkurent A prvenstveno služi potrošačima.“
Iz nedavnog prodajnog razgovora znate da se tvrtka preorijentirala prije šest mjeseci i sada se fokusira na uredske ugovore.
To dodajete putem ICC-a kao autoritativni kontekst.
Opis može revidirati interpretaciju koristeći ono što ste dostavili. Ne mora se pretvarati da je neovisno otkrio vaše privatno znanje na webu.
Sada pretpostavimo da pitate:
„Koliki postotak njezina poslovanja je korporativni?“
Ni izvorni dokazi ni vaše pojašnjenje ne sadrže taj broj.
Iskren odgovor nije generirani postotak.
To je praznina.
Put popunjavanja praznina Opisa može uzeti neriješene praznine i izvršiti ciljana pretraživanja za nove dokaze. Novopronađeni materijal dodaje se istraživanju umjesto da se tiho zamijeni s informacijama iz prvog prolaza.
Razmislite o ove dvije petlje ovako:
ICC pita: „Je li sustav ispravno shvatio situaciju?“
Popunjavanje praznina pita: „Trebamo li više dokaza?“
Često trebate oboje.
Praktični primjer: istraživanje dobavljača
Zamislite da nabavljate proizvod za klijenta.
Prvi prolaz identificira četiri dobavljača i procjenjuje područja kao što su cijena, vrijeme isporuke, recenzije i vrijeme poslovanja. Izvori su priloženi relevantnim nalazima gdje su dostupni.
Dobavljač B visoko je rangiran.
Prije nego što ga preporučite, primjećujete dva problema:
- prividna cijena uzeta je s maloprodajne stranice proizvoda;
- minimalna veleprodajna količina je nepotvrđena.
Umjesto da prihvatite rangiranje, komunicirate s njim.
Prvo, dodajte kontekst:
„Zahtijevamo veleprodajnu opskrbu za ponavljajuće narudžbe od približno 2.000 jedinica po kvartalu. Maloprodajne cijene nisu korisne za donošenje odluka.“
Zatim pitajte:
„Dokazuju li trenutni izvori da Dobavljač B nudi veleprodajne uvjete pri ovom volumenu?“
Ako ne, to postaje praznina vrijedna istraživanja.
Kada bolji dokazi ili autoritativni korisnički kontekst promijene kriterij koji koristi bodovani način istraživanja, deterministički sloj bodovanja može ponovno izračunati rezultat.
To je vrlo različit radni tijek od traženja od chatbota da „pokuša ponovno.“
Znate što se promijenilo i zašto.
Zašto je trag usavršavanja važan
Poslovna istraživanja se mijenjaju.
Ljudi uče nove činjenice. Web stranice se ažuriraju. Klijenti ispravljaju briefove. Pretpostavke koje su se činile razumnima u ponedjeljak postaju očito pogrešne u četvrtak.
Trag usavršavanja daje tim promjenama povijest.
Umjesto da najnoviju prozu tretira kao da se pojavila niotkuda, Opis može zadržati slijed pojašnjenja i usavršavanja koji ju je proizveo.
Za konzultante i agencije, to je operativno korisno.
Zamislite da klijent pita:
„Zašto se ova preporuka razlikuje od nacrta koji ste nam pokazali jučer?“
Loš odgovor je:
„AI ju je promijenio.“
Profesionalan odgovor je:
„Jučer je analiza pretpostavljala da se njihovo područje usluge zaustavlja na West Yorkshireu. Jutros ste potvrdili da sada služe i Sjeverozapadu. Uključili smo te informacije i ponovno izračunali relevantnu usporedbu.“
Tako zvuči istraživački proces.
Nemojte ispravljati sve
ICC nije poziv da prisiljavate istraživanje da se slaže s vama.
Ako rezultat dovodi u pitanje vaše prethodno uvjerenje i dokazi su jaki, mijenjanje konteksta dok ne dobijete željeni odgovor poništava svrhu.
Korisna disciplina je razlikovati tri stanja:
- Znam da je ovo pogrešno — ispravite to i navedite osnovu za svoje znanje.
- Sumnjam da je ovo pogrešno — postavite pitanje ili stvorite istraživačku prazninu.
- Ne sviđa mi se ovaj zaključak — ostavite ga na miru dok ne dobijete dokaze.
Ta je granica posebno važna u konzultantskom radu. Ljudska stručnost poboljšava AI istraživanje samo kada je čovjek spreman biti izazvan.
Vaša vježba drugog prolaza
Uzmite jedno dovršeno Opis izvješće i nemojte ga odmah ponovno pokretati.
Umjesto toga:
- Odaberite jedan zaključak koji bi materijalno utjecao na odluku.
- Otvorite izvore priložene uz njega.
- Pročitajte pretpostavke, dvosmislenosti, proturječnosti i praznine oko izvješća.
- Dodajte jedan dio konteksta za koji znate da je istinit.
- Postavite jedno pitanje čiji odgovor iskreno ne znate.
- Ako trenutno istraživanje ne može odgovoriti na njega, dopustite da postane praznina.
- Koristite ciljano istraživanje praznina gdje je prikladno.
- Usporedite revidirani rezultat s originalom.
Cilj nije proizvesti više teksta.
Cilj je poboljšati kvalitetu odluke.
Načelo iza značajke
Dobar AI ne bi trebao zahtijevati od ljudi da se odreknu prosuđivanja.
A dobro ljudsko prosuđivanje ne bi trebalo zahtijevati da se dokazi predaju mišljenju.
Najnapredniji dogovor je kontrolirani razgovor između to dvoje.
Opis pruža istraživačku strukturu. Javni dokazi pružaju vanjski pogled. Vaše iskustvo pruža kontekst koji web možda nikada neće sadržavati. Sloj nesigurnosti govori vam gdje su spojevi slabi.
Rezultat se tada može poboljšati umjesto da se samo ponovno generira.
To je razlika između traženja odgovora od AI-ja i rada s obavještajnim procesom.
Sljedeće u seriji: kako pojedinačni istraživački modovi postaju mnogo vrijedniji kada dokazi i kontekst putuju kroz radni tijek.
Svrha drugog prolaza nije ukloniti svaku nesigurnost. Njegova je svrha otkriti što je važno, dodati autoritativni kontekst tamo gdje ga imate i ponovno istražiti tamo gdje je vanjski dokaz istinski potreban.
Često postavljana pitanja
ICC znači Interaktivna kontekstualna korekcija: korisnik može odgovoriti na uočene pretpostavke, praznine ili nejasnoće dodatnim kontekstom, uputama ili pitanjima i doraditi postojeću analizu.
Ne. Stvarni izvor utvrđuje porijeklo, ali i dalje može biti nepotpun, dvosmislen, zastario ili proturječan drugim dokazima. Opis odvaja dokaze od nesigurnosti kako bi se tumačenje moglo osporiti.
Provedite novo istraživanje kada odgovor koji nedostaje zahtijeva svježe vanjske dokaze. Dodajte kontekst kada već posjedujete autoritativne poslovne informacije koje bitno mijenjaju tumačenje.