25 ստուգողներից բաղկացած խմբի արդյունավետությունը գնահատվել է 1.00
IDKMesh բաց կոդով հետազոտական նախագիծը հրապարակել է արդյունքներ, որոնք կասկածի տակ են դնում այն ենթադրությունը, թե ստուգողների քանակի ավելացումը բարձրացնում է գործընթացի հուսալիությունը: 25 տարբեր ծրագրային ստուգողների օգտագործմամբ անցկացված փորձարկման ժամանակ հետազոտողները պարզել են, որ խմբի արդյունավետությունը կազմել է ընդամենը 1.00, ինչը նշանակում է, որ հավաքական արդյունքը ոչ ավելի հուսալի է, քան մեկ ստուգողինը: Հետազոտությունը ցույց է տալիս, որ ստուգողների միջև սխալների կորելյացիան զգալիորեն ավելի բարձր է, քան սպասվում էր, նույնիսկ տարբեր տիրույթներում աշխատելիս: Հեղինակը նշում է, որ ստուգողների արդյունավետ քանակը հաշվարկելու սովորական մեթոդները հաճախ գերագնահատում են արդյունքները՝ ստեղծելով անվտանգության կեղծ զգացում: Նախագիծը, որը ներկայումս հետազոտական նախադիտման փուլում է, մշակողներին տրամադրում է գործիքներ սեփական ստուգման խմբերը աուդիտի ենթարկելու համար և խրախուսում է հետագա ուսումնասիրությունները՝ պարզելու համար, թե արդյոք այս օրինաչափությունները պահպանվում են նաև AI-ի վրա հիմնված համակարգերում:
This is a summary. Read the full article at the original source:
Dev.toԿապակցված
Իր վերջին բլոգային գրառման մեջ Քոլին Բրեքը անդրադառնում է տեխնիկական բովանդակություն ստեղծելու համար մեծ լեզվական մոդելների (LLM) օգտագործման աճող միտ…
«Giga Pisar» հավելվածի ստեղծողը, որը հիմնված է Sber-ի GigaAM խոսքի ճանաչման տեխնոլոգիայի վրա, ամփոփել է Habr-ում իր առաջին հոդվածի հրապարակումից հետո…
Habr-ի այս հոդվածը համակարգիչը դիտարկում է որպես հիմնարար մաթեմատիկական կառուցվածք՝ ընթերցողներին առաջարկելով հաշվողական գործընթացներին նայել աբստրակտ…