Microsoft lisab tehisintellektile inimsarnaseid arutluskäike "mõtete algoritmi" kaudu – dekrüpteerige

Microsoft lisab tehisintellektile inimsarnaseid arutlusi "mõtete algoritmi" kaudu – dekrüpteerige

Tehnikahiiglane Microsoft on Avalikustas uus tehisintellekti koolitusmeetod nimega "Mõtete algoritm" (AoT), mille eesmärk on muuta suured keelemudelid, nagu ChatGPT, tõhusamaks ja nende arutlusvõimelt inimlikumaks.

Uus lähenemine on loomulik järgmine samm ettevõttele, kes on investeerinud palju tehisintellekti ja eriti OpenAI-sse – DALL-E, ChatGPT ja võimsa GPT keelemudeli loojatesse.

Microsoft ütleb, et AoT-tehnika on potentsiaalne mängumuutja, kuna avaldatud uurimistöö kohaselt "juhib see keelemudelit sujuvama probleemide lahendamise tee kaudu". See uudne lähenemisviis kasutab kontekstis õppimist, mis võimaldab mudelil süstemaatiliselt uurida erinevaid lahendusi organiseeritud viisil.

Tulemus? Kiirem ja vähem ressursimahukas probleemide lahendamine.

"Meie tehnika ületab varasemaid ühe päringu meetodeid ja on samaväärne hiljutise mitme päringu lähenemisviisiga, mis kasutab ulatuslikku puuotsingut," öeldakse dokumendis. "Intrigeerivalt näitavad meie tulemused, et mudeli juhendamine algoritmiga võib viia selleni, et jõudlus ületab algoritmi ennast."

Teadlased väidavad, et mudel saavutab parema "intuitsiooni", kui see tehnika optimeerib oma otsinguprotsessi.

Inimese-algoritmiline hübriid?

AoT-meetod käsitleb praeguste kontekstis õppimise tehnikate, näiteks "Mõtteahela" (CoT) lähenemisviisi, piiranguid. CoT pakub mõnikord valesid vaheetappe, samas kui AoT juhib mudelit usaldusväärsemate tulemuste saamiseks algoritmiliste näidete abil.

AoT ammutab inspiratsiooni nii inimestelt kui ka masinatelt, et parandada generatiivse AI mudeli jõudlust. Kuigi inimesed paistavad silma intuitiivse tunnetusega, on algoritmid tuntud oma organiseeritud ja põhjaliku uurimistöö poolest. Uurimistöös öeldakse, et Mõttealgoritmi eesmärk on "liita need kaks tahku, et suurendada LLM-ide arutlusvõimet".

Microsoft ütleb, et see hübriidtehnika võimaldab mudelil ületada inimese töömälu piirangud, võimaldades ideede põhjalikumat analüüsi.

Erinevalt CoT-i lineaarsest arutluskäigust või "Mõtetepuu" (ToT) tehnikast võimaldab AoT paindlikult kaaluda erinevaid alamprobleemide valikuid, säilitades tõhususe minimaalse viipaga. Samuti konkureerib see väliste puuotsingu tööriistadega, tasakaalustades tõhusalt kulusid ja arvutusi.

Mõtete algoritm versus muud AI arutlusmeetodid. Pilt: Microsoft

Üldiselt tähistab AoT nihet juhendatud õppimiselt otsinguprotsessi enda integreerimisele. Teadlased usuvad, et inseneride kiireks muutmiseks tehtud täpsustused võimaldavad mudelitel tõhusalt lahendada keerulisi reaalmaailma probleeme, vähendades samal ajal ka nende süsinikdioksiidi mõju.

Arvestades oma suuri tehisintellekti investeeringuid, näib Microsoft olevat hästi positsioneeritud AoT lisamiseks täiustatud süsteemidesse, nagu GPT-4. Kuigi keelemudelite õpetamine inimlikumal viisil "mõtlema" on keeruline, võib see olla muutlik.

Olge kursis krüptouudistega, saate oma postkasti igapäevaseid värskendusi.

Ajatempel:

Veel alates Avaldage lahti