HippoRAG: DI paieška bando mokytis iš žmogaus atminties

·


HippoRAG metodas DI paieškai su Amazon Bedrock ir Amazon Neptune

HippoRAG skamba kaip techninis terminas. Bet kai pažiūri praktiškai, čia yra labai žemiškas klausimas: kiek darbo darome rankomis tik todėl, kad niekas neprisėdo sutvarkyti proceso?

AWS aprašė HippoRAG metodą, kuris DI paiešką bando priartinti prie to, kaip žmogus jungia prisiminimus. Ne vien pagal vieną panašų sakinį. O per ryšius.

Man tokiose naujienose visada įsijungia mažas vidinis buhalteris. Ne tas, kuris skaičiuoja sąskaitas, o tas, kuris klausia: kiek tai kainuos, kas prižiūrės ir kur gali lūžti?

KAS NUTIKO

HippoRAG jungia Amazon Bedrock, Amazon Neptune grafų duomenų bazę ir personalizuotą PageRank. Idėja paprasta: dokumentuose rasti ne tik tekstinius panašumus, bet ir ryšius tarp sąvokų, įvykių bei faktų.

Man RAG dažnai primena stalčių su dokumentais. Paklausi klausimo, sistema ištraukia kelis lapus ir sako: štai, skaityk. Kartais pataiko. Kartais duoda lapą, kuriame yra tas pats žodis, bet visai ne ta mintis.

KODĖL TAI SVARBU

HippoRAG svarbus todėl, kad verslo klausimai retai būna tiesūs. Reikia jungti sutartis, klientus, datas, produktus, sprendimus ir ankstesnius atvejus. Paprasta vektorinė paieška ne visada pagauna šiuos ryšius.

DI jau nebe vien langelis, į kurį įmetame tekstą. Jis jungiasi prie įrankių, moka kviesti servisus, gali veikti keliais žingsniais ir pradeda liesti tikrus verslo pinigus. Čia romantika baigiasi. Prasideda tvarka.

KĄ TAI REIŠKIA VERSLUI

Verslui tai reiškia, kad DI žinių bazė turi būti daugiau nei dokumentų krūva. Jei norite geresnių atsakymų, reikia tvarkyti ryšius tarp duomenų.

  • žymėti svarbias sąvokas dokumentuose
  • jungti klientus, produktus ir sprendimus į grafą
  • testuoti paiešką su realiais klausimais
  • matuoti, ar DI randa teisingą šaltinį, ne tik gražiai atsako

Pavyzdys: konsultacijų įmonė gali jungti projektus, klientų problemas, naudotus sprendimus ir rezultatus. Tada DI randa ne tik dokumentą, bet ir panašų ankstesnį atvejį.

KUR PASISLĖPUSI RIZIKA

Rizika – pasistatyti labai gudrią paiešką ant netvarkingų duomenų. Tada turite brangų labirintą, kuriame DI vaikšto pasitikėdamas savimi.

Blogiausia DI klaida dažnai neatrodo kaip klaida. Ji ateina gražiai parašytu sakiniu, mandagiu tonu ir labai užtikrintu veidu. Todėl verslui reikia ne tik įrankių, bet ir įpročio tikrinti.

KĄ PASIDARYTI ŠIĄ SAVAITĘ

Išsirinkite vieną žinių bazę ir paklauskite: kokie ryšiai joje svarbūs? Klientas su projektu? Produktas su klaida? Sutartis su terminu?

Šaltinis: Amazon Web Services.

DUK

Kas yra HippoRAG?

Tai RAG metodas, kuris dokumentų paiešką papildo grafų ryšiais ir personalizuotu PageRank.

Kodėl neužtenka paprastos RAG paieškos?

Ji dažnai randa tekstinį panašumą, bet ne visus verslui svarbius ryšius.

Kam tai naudinga?

Komandoms, kurios turi daug dokumentų ir nori atsakymų pagal kontekstą, o ne tik raktažodžius.

Jei norite DI naudoti ne dėl mados, pradėkite nuo vieno proceso. Paimkite užduotį, kuri kartojasi kas savaitę, susirašykite žingsnius ir tik tada junkite įrankį. Daugiau praktinių DI taikymo pavyzdžių rasite MasterSprint.