Իրավագիտության մագիստրոսների թվացյալ «բանական մտածողության» հմտությունները՞, նոր հետազոտությունը բացահայտում է, որ դա ավելի շատ պատրանք է, քան ինտելեկտ։
Արդյո՞ք մենք գերագնահատում ենք այն, ինչ իրականում գիտեն խոշոր լեզվական մոդելները։
🧠 Իրավագիտության մագիստրոսներ. Հանճարներ, թե՞ «փխրուն միրաժ»։
Մենք անընդհատ զարմանում ենք, թե ինչի են ընդունակ մեծ լեզվական մոդելները (LLM)։
Նրանք գրում են պոեզիա, վրիպակազերծում են կոդը և ունենում են զարմանալիորեն համահունչ զրույցներ։
Սակայն նոր ուսումնասիրությունը անտեսում է աղմուկը՝ պնդելով, որ նրանց «տրամաբանական մտածողությունը» պարզապես փխրուն միրաժ է։
❓ Նրանք իսկապես մտածո՞ւմ են, թե՞ պարզապես բարդ կերպով կրկնում են սովորած օրինաչափությունները։
📊 Ուսումնասիրության հիմնական արդյունքները
- 🪓 Փխրուն դատողություն. երբ ձևակերպումը կամ խնդիրը փոխվում է, մոդելները հաճախ սխալվում են
- 📚 Տվյալներից կախվածություն. պատասխանների որակը ուղղակիորեն կապված է ուսուցման տվյալների բազմության հետ
- 🧩 Իրական հասկացողության բացակայություն. ակնհայտ «մտածողությունը» առաջադեմ օրինաչափությունների ճանաչում է
- 🌫 Միրաժի էֆեկտ. ակնհայտ «բանականությունը» թաքցնում է օրինաչափությունների պարզ վերարտադրությունը
🔍 Փորձի էությունը
[հղման տեքստ]-ի հետազոտողները անցկացրել են մի փորձ, որը արմատապես տարբերվում էր այն պայմաններից, որոնց ներքո մարզվել են հայտնի իրավաբանների իրավունքի մասնագետները։ Փոփոխությունները ներառում էին.
- Ամբողջովին խնդիրների նոր տեսակներ
- խնդիրների անսովոր ձևաչափեր
- մուտքագրման զգալիորեն ավելի երկար տվյալներ
Արդյունքը խիստ էր. մոդելները, որոնք նախկինում փայլուն արդյունքներ էին ցույց տվել թեստերում, սկսեցին տալ անիմաստ կամ սխալ պատասխաններ։
*«Մոդելները, կարծես, տրամաբանում են, բայց սա մակերեսային տրամաբանություն է, որը մեծապես կախված է մարզման տվյալներից», - նշել է ուսումնասիրության հեղինակներից մեկը։
⚖ Ինչ է սա նշանակում իրավագիտության մագիստրոսների ապագայի համար
Սա չի նշանակում, որ իրավագիտության մագիստրոսները անօգուտ են։
Դրանք հիանալի են.
- 📝 Տեքստի ամփոփման համար
- 🎨 Ստեղծագործական բովանդակության ստեղծման համար
Սակայն կարևոր է հասկանալ, որ նրանց «մտածողությունը» հիմնված է ոչ թե հասկացողության, այլ օրինաչափությունների ճանաչման և վերարտադրության վրա։
Սա նրանց խոցելի է դարձնում նույնիսկ ծանոթ պայմաններից փոքր շեղումների նկատմամբ։
🔮 Հեռանկար
Հետազոտողները կարծում են, որ LLM-ի ապագան կարող է կայանալ ավելի հզոր ճարտարապետությունների մշակման մեջ, որոնք կարող են գերազանցել պարզ օրինաչափությունների համապատասխանեցումը՝ գուցե խորհրդանշական արհեստական բանականության և այլ մեթոդների ինտեգրման միջոցով։
⚠ Մինչ այդ, LLM-ի հնարավորություններին պետք է վերաբերվել առողջ չափաբաժնով սկեպտիցիզմով։