Tree of Thoughts: l'LLM che ragiona esplorando rami alternativi
In una frase Princeton e DeepMind propongono Tree of Thoughts: l'LLM genera e valuta molteplici percorsi di ragionamento come un albero di ricerca, superando nettamente il Chain-of-Thought.
Il Chain-of-Thought (CoT) aiuta i modelli a ragionare step per step, come uno studente che mostra i calcoli. Ma ha un limite: sceglie sempre la prima strada che sembra giusta, senza mai tornare indietro se è sbagliata.
Tree of Thoughts risolve questo problema permettendo al modello di esplorare più percorsi contemporaneamente, come un albero con molti rami. Ad ogni passo valuta quale ramo è più promettente, potatura inclusa, e può tornare su passi precedenti se un ramo finisce in un vicolo cieco.
Su problemi che richiedono pianificazione e backtracking — come il gioco del 24 o il creative writing con vincoli precisi — ToT supera il CoT standard in modo netto, passando dal 4% al 74% di successo sul Game of 24.
Aziende
Princeton University, Google DeepMind
Tool
Tree of Thoughts, GPT-4
Tag
Fonti