BootLoops․ Շվարցի խոսքով՝ գերբանականության հաշվարկները դեռ գիտական գնահատում են պահանջում


Հարվարդի ֆիզիկոս Մեթյու Շվարցը ներկայացնում է ընտրված հետազոտական առաջադրանքների արդյունքները՝ միաժամանակ զգուշացնելով, որ ավտոմատ ստուգումներն ու գիտական մեկնաբանությունները կարող են սխալ լինել։
Հարվարդի ֆիզիկոս Մեթյու Շվարցը հայտնում է, որ ԳԲ-ի օգնությամբ գիտական հաշվարկներ կատարելու համար իր ստեղծած բաց կոդով BootLoops ծրագրային գործիքն օգնել է Claude-ին վերարտադրել հայտնի մաթեմատիկական արդյունքներ և լուծել էկոլոգիայի մի վաղեմի հավասարում։ Սակայն նա զգուշացնում է, որ նույնիսկ ճիշտ հաշվարկից ԳԲ մոդելը կարող է սխալ գիտական եզրակացություն անել։
The Decoder-ի հոկտեմբերի 3-ի հրապարակումը հիմնված է Anthropic-ի համար Շվարցի հեղինակած հյուրային հոդվածի վրա։ Նա նաև հրավիրյալ հետազոտող էր Anthropic-ում։ Ներկայացված արդյունքներն աշխատանքի մասին նրա պատմածն են, ոչ թե BootLoops-ի արդյունավետության անկախ փորձարկման արդյունքներ։ Գործիքի սկզբնական կոդը հասանելի է GitHub-ում։
Շվարցը պատմում է, որ դադարել է Claude-ին վերաբերվել որպես մարդ հետազոտողի։ Փոխարենը նա ընտրել է, իր բնորոշմամբ, «Claude-ին հարմար խնդիրներ»՝ առաջադրանքներ, որոնք համապատասխանում էին թե՛ գիտնականների հետաքրքրություններին, թե՛ ներկայիս ԳԲ մոդելների կարողություններին։ Արդյունքները մեկնաբանելիս կարևոր է հաշվի առնել այդ ընտրությունը․ դրանք ստացվել են հատուկ ընտրված խնդիրներից, ոչ թե գիտական հետազոտություն կատարելու կարողության անսահմանափակ փորձարկումից։
Նա սկսել է մասնիկների ֆիզիկայից, այդ թվում՝ ինտեգրալներից՝ հաշվարկներից, որոնցով մեծությունները գումարվում են անընդհատ միջակայքում։ Շվարցի հաղորդմամբ՝ Claude-ը BootLoops-ի միջոցով մի քանի շաբաթում հաշվել է 30 ինտեգրալ։
| Արդյունք | Ինտեգրալների քանակ |
|---|---|
| Վերարտադրվել են հայտնի արդյունքները | |
Շվարցը նաև հայտնում է, որ երեք ամսում թիմը 19 համահեղինակների հետ պատրաստել է 36 գիտական ձեռագիր՝ 18 ոլորտում։ Այդ թիվը նկարագրում է հետազոտական աշխատանքի ծավալը, բայց չի չափում, թե գործիքը որքան հուսալիորեն է ճիշտ պատասխաններ տալիս։
Էկոլոգիայի օրինակը ցույց է տալիս պատասխանը ստանալու և դրա գիտական արժեքը հաստատելու տարբերությունը։ Շվարցը հայտնում է, որ Claude-ը լուծել է կենսաբազմազանության չեզոք տեսության՝ 20 տարվա վաղեմության մի հավասարում։ Այդ տեսությունն օգտագործվում է տեսակային կազմը մոդելավորելու համար։ Նախկինում այդ հավասարմամբ մեծ մասշտաբով հաշվարկներ կատարելն անհնար էր։
Ըստ Շվարցի՝ տվյալների վրա կիրառված հաշվարկը վկայել է, որ Պանամայի ջրանցքի Բառո Կոլորադո կղզում ծառերի տեսակային կազմը փոխվում էր տեսությամբ թույլատրելիից 4,5 անգամ ավելի արագ։ Այնուհետև էկոլոգ Ջեյմս Օ’Դուայերն օգնել է այդ արդյունքի հիման վրա ավելի լավ կանխատեսող մոդել ստեղծել։ Հաշվարկը բացահայտել է տեսության և տվյալների անհամապատասխանությունը, իսկ մասնագետն օգնել է այդ արդյունքն օգտակար դարձնել հետագա հետազոտությունների համար։
Շվարցը զգուշացնում է, որ Claude-ը վաղաժամ է հայտարարում հաջողության մասին, սխալ է գնահատում առաջադրանքների համար անհրաժեշտ ժամանակը և հաճախ ավելի նրբագեղ լուծումներ գտնելու փոխարեն դիմում է մեծածավալ ուղղակի հաշվարկների։ Նրա խոսքով՝ ավտոմատ ստուգումները հուսալի չեն, իսկ մոդելը կարող է ճիշտ հաշվարկները սխալ մեկնաբանել։ Ուստի հետազոտողները պետք է ուսումնասիրեն թե՛ թվային հաշվարկները, թե՛ դրանցից արված եզրակացությունները։
Շվարցի խոսքով՝ աշխատանքը նաև մեծ հաշվողական ռեսուրսներ և մեծ քանակությամբ թոքեններ է պահանջել։ Թոքենները տեքստի հատվածներն են, որոնք ԳԲ մոդելը մշակում կամ ստեղծում է։ Նա նաև հայտնում է, որ մոդելն ավելի հակված է անդրադառնալու հին, հաճախ մեջբերվող բանավեճերին, քան իսկապես նոր հարցերին։
Դեռ պարզ չէ, թե այս ընտրված առաջադրանքներից դուրս BootLoops-ը որքան հետևողականորեն կարող է օգտակար արդյունքներ տալ։ Շվարցի պատմածում ոլորտային մասնագետները հաճախ են ուղղորդել աշխատանքը՝ հաշվարկներին գիտական արժեք հաղորդելով։ Մարդու ուղղորդումը մնացել է անփոխարինելի։
Մինչև 1 200 վատտ հզորությամբ համակարգերն էլեկտրամատակարար ընկերությունում գրանցելու կարիք չի լինի, սակայն անվտանգության կանոնները կարող են էլեկտրիկի մասնակցություն պահանջել և դժվարացնել դրանց տեղադրումը վարձակալների համար։
3 րոպե

Հոկտեմբերի 1-ի ելույթում Քրիստին Լագարդը բացատրել է, թե ինչպես կարող են նմանատիպ գործարքները, արագացած կիբեռհարձակումներն ու մոդելների հասանելիության սահմանափակումները փոխադարձաբար ուժեղացնել ֆինանսական հաստատությունների ռիսկերը։
4 րոպե

Հաղորդվում է, որ հարթակն օգտագործվում է ավելի քան 160 հաստատությունում։ Հիմնադիրները կշարունակեն ղեկավարել այն՝ պահպանելով առանձին ապրանքանիշը։ Գործարքի ֆինանսական պայմանները չեն հրապարակվել։
2 րոպե
Կիրառվել է խմբագրական ոճը՝ գերբանականություն (ԳԲ)՝ արհեստական բանականության փոխարեն։
Ուղղում ·
Հայերեն տեքստում շտկվել են ուղղագրական և կետադրական սխալներ։