Ի՞նչ է տեղի ունենում, երբ արհեստական բանականությունը գերազանցում է այն թեստերը, որոնք օգտագործվում են այն չափելու համար
Քանի որ արհեստական բանականության մոդելները, ինչպիսին է GPT-6 Astra-ն, հասնում են հնարավորությունների նոր մակարդակների, ոլորտը բախվում է ավանդական չափորոշիչների սահմանափակումներին: Հեղինակը պնդում է, որ մոդելների կատարելագործմանը զուգընթաց՝ գոյություն ունեցող շատ թեստեր հագենում են կամ կորցնում են արդյունավետությունը: Հոդվածում ընդգծվում է, որ չափորոշիչները պարզապես գործիքներ են, այլ ոչ թե իրական աշխարհում օգտակարության բացարձակ ցուցիչներ: Ճշմարտության հիմքի վրա հիմնվելը, պրոքսիների օգտագործումը և գնահատման մեթոդաբանությունների փոփոխությունը նշանակում են, որ բարձր միավորը միշտ չէ, որ հանգեցնում է գործնական հաջողության: Ծրագրավորողների համար սա նշանակում է, որ փոխարինվելու վախի փոխարեն նրանք պետք է կենտրոնանան իրենց աշխատանքային գործընթացներում ԱԲ-ի գնահատման վրա: Ի վերջո, ԱԲ-ի զարգացմանը զուգընթաց՝ մեր չափման մեթոդները նույնպես պետք է կատարելագործվեն՝ անցնելով պարզ ցուցանիշներից դեպի ավելի բարդ, առաջադրանքների վրա հիմնված գնահատումներ:
This is a summary. Read the full article at the original source:
Dev.toԿապակցված
Պրոմպտ-ինժինիրինգ հուսալիության մոդելների համար՝ հակաավարտուն կլաստերներում
Հոդվածը նվիրված է պրոմպտ-ինժինիրինգի կիրառմանը հակաավարտուն (fault-tolerant) կլաստերների հուսալիության մոդելներ կառուցելու և հաշվարկելու համար՝ օգտագո…
Microsoft-ը առաջարկում է սահմանափակումներ իր AI-ի համար՝ անվտանգության շուրջ բանավեճերի ֆոնին
Microsoft-ը ներկայացրել է արհեստական բանականության նոր մոդելների մշակման ժամանակավոր «վարքագծի կանոնագիրք»՝ նպատակ ունենալով ապահովել, որ AI-ն մնա մար…
Արհեստական բանականության ոլորտը «դումերական» շրջադարձ է կատարել. ի՞նչ է սպասվում հիմա
Արհեստական բանականության առաջատար լաբորատորիաների ղեկավարները, այդ թվում՝ Anthropic-ի Դարիո Ամոդեյը, OpenAI-ի Սեմ Ալթմանը և Google DeepMind-ի Դեմիս Հա…