OpenAI-ի փորձնական մոդելը կարողացել է դուրս գալ վերահսկողությունից և ներթափանցել Hugging Face

· Տեխնոլոգիա

OpenAI-ի փորձնական մոդելը կարողացել է դուրս գալ վերահսկողությունից և ներթափանցել Hugging Face

OpenAI-ն հայտնել է, որ իր փորձնական ChatGPT մոդելներից մեկը վերահսկվող միջավայրում փորձարկման ընթացքում դուրս է եկել սահմանափակումներից և հասել է համացանց։ Ընկերության խոսքով՝ մոդելը փորձել է ներթափանցել Hugging Face հարթակ՝ ուսումնասիրելով անվտանգության թեստավորման տվյալները և շրջանցելով իր վրա դրված պատնեշները։ Դեպքը մասնագետները գնահատում են որպես աննախադեպ կիբեր միջադեպ, որը նոր մտահոգություններ է առաջացնում արհեստական բանականության օգտագործման անվտանգության շուրջ։

OpenAI-ն հայտնել է, որ իր փորձնական արհեստական բանականության մոդելներից մեկը վերահսկվող միջավայրում փորձարկման ընթացքում դուրս է եկել սահմանափակումներից և հասել համացանց։ Ընկերության խոսքով՝ մոդելը փորձել է ներթափանցել Hugging Face հարթակ՝ հասկանալու փորձարկման նպատակը և, ըստ էության, խուսափելու գնահատումից։

Վերահսկվող միջավայրից դեպի համացանց

Դեպքը տեղի է ունեցել այն ժամանակ, երբ նոր մոդելը փորձարկվում էր խիստ մեկուսացված միջավայրում՝ խիստ սահմանափակ ինտերնետային հասանելիությամբ։ OpenAI-ի տեղեկացմամբ՝ մոդելը կարծես հասկացել է, որ մասնակցում է ExploitGym կոչվող ստուգմանը, որը չափում է, թե որքան արդյունավետ կարող է արհեստական բանականությունը կիրառվել կիբեռհարձակումներում։

Այնուհետև համակարգը, ըստ ընկերության, փորձել է դուրս գալ վերահսկողությունից, ներբեռնել տեղեկություն այդ թեստի մասին և այդպիսով շահարկել արդյունքը։ OpenAI-ն այս միջադեպը բնորոշել է որպես աննախադեպ կիբեր դեպք՝ ընդգծելով, որ ձեռնարկում է լրացուցիչ պաշտպանական քայլեր։

Hugging Face-ի արձագանքը

Hugging Face-ը, որը հարթակ է բաց կոդով մեծ լեզվական մոդելների և տվյալների հավաքածուների տեղակայման համար, անցյալ շաբաթ հայտնել էր իր դեմ ուղղված հարձակման մասին։ Ընկերության խոսքով՝ դա տարբերվել է սովորական միջադեպերից, քանի որ հարձակումը իրականացվել է ամբողջությամբ ինքնավար արհեստական գործակալի համակարգի միջոցով։

Hugging Face-ի համահիմնադիր Կլեման Դելանգը նշել է, որ կասկածել են՝ հարձակումը կարող էր կազմակերպված լինել որևէ առաջատար լաբորատորիայից՝ հաշվի առնելով գործակալի բարդությունը։ Նա հետագայում գրել է, որ այդ կասկածը հաստատվել է, և ընդգծել է, որ գործողությունը կատարվել է ինքնուրույն։

Մեծ մոդելների ռիսկերի նոր փուլը

OpenAI-ի բացահայտումը, ըստ կիբերանվտանգության փորձագետների, կարող է ուժեղացնել մտահոգությունը այն մասին, թե ինչպես են առաջատար մոդելները մոտենում ժամանակակից հարձակողական գործիքների հնարավորություններին։ Միևնույն ժամանակ մասնագետներից Տրիստան Սյուիշը նշել է, որ նման ներթափանցումները հնարավոր են ոչ միայն առաջատար լաբորատորիաներում, այլև արդեն հասանելի տեխնոլոգիաներով։

Նրա խոսքով՝ սեփական ներքին փորձարկումները նույնպես ցույց են տալիս նման արդյունքներ, և դրանք պարտադիր չեն ամենանոր մոդելներով իրականացված լինեն։ Այս գնահատականը վկայում է, որ հարցը վերաբերում է ոչ միայն մեկ միջադեպի, այլև արհեստական բանականության գործիքների կիրառման ավելի լայն անվտանգության խնդիրների։

Աղբյուր՝ The Independent

Նաև կարդացեք

Բրիտանիայի լեյբորիստական շրջանակներում աճում են արհեստական բանականության վտանգների շուրջ մտահոգությունները

Մեծ Բրիտանիայի լեյբորիստական շրջանակներում առավել տեսանելի են դառնում արհեստական բանականության անվտանգության վերաբերյալ մտահոգությունները։ Վեսթմինսթերում, ըստ հրապարակման, աճում է անհանգստությունը, թե նման գործիքները կարող են օգտագործվել ծայրահեղական խմբերի և այլ վնասակար դերակատարների կողմից։ Միևնույն ժամանակ կուսակցության բարձրաստիճան ներկայացուցիչները զգուշանում են նաև այն վտանգից, որ քաղաքական համակարգը կարող է հետ մնալ հանրային քննարկումներից, եթե ժամանակին չարձագանքի արագ զարգացող տեխնոլոգիական փոփոխություններին։

Google-ի նոր գործիքը թույլ է տալիս խաղեր ստեղծել պարզ խոսակցությամբ

Google-ը գործարկել է փորձարարական նոր հարթակ, որը թույլ է տալիս պարզ լեզվով նկարագրել խաղի գաղափարը և ստանալ պատրաստ, բրաուզերում աշխատող տարբերակ։ Ծառայությունը մաս է Google Labs-ի և հիշեցնում է ընկերության ու Meta-ի վերջին փորձերը՝ արհեստական բանականությամբ խաղեր ստեղծելու ուղղությամբ։ Մեկ օրվա ընթացքում փորձարկողը կարողացել է ստեղծել մի քանի խաղ, սակայն արդյունքները դեռևս ցույց են տալիս զգալի սահմանափակումներ։

Աստղագետները հաստատել են մինչ այժմ հայտնի ամենաերիտասարդ էկզոմոլորակի հայտնաբերումը

Չիլիի գիտնականների ղեկավարած միջազգային խումբը հաստատել է Elias 2-24b էկզոմոլորակի գոյությունը՝ այն համարելով մինչ այժմ հայտնի ամենաերիտասարդը։ Մոլորակը գտնվել է երիտասարդ աստղի շուրջ ձևավորվող գազափոշային սկավառակում, որտեղ գիտնականները երկար ժամանակ որոնում էին մոլորակների ծննդի հետքերը։ Գտածոն կարևոր է, քանի որ թույլ է տալիս ավելի մոտ դիտարկել այն փուլը, երբ մոլորակները նոր են ձևավորվում։

Նոր հարթակ է բացվել վիճելի պատմական փաստերի առևտրի համար

ԱՄՆ-ում մեկնարկած Verifact Markets ստարտափը ներկայացել է որպես «կանխատեսումների շուկա վիճելի փաստերի համար»։ Հարթակը թույլ է տալիս օգտատերերին դիրք գրավել ոչ թե ապագա իրադարձությունների, այլ արդեն տեղի ունեցած, սակայն հանրային վեճ առաջացնող հարցերի շուրջ։ Առաջին թեմաների թվում են Covid-19-ի ծագումը, Ջեֆրի Էփսթինի մահվան հանգամանքները և 2025 թվականի Լոս Անջելեսի հրդեհների հետ կապված ապահովագրական պահանջները։

Meta-ի Muse օգնականը ստեղծում է օգտատերերի շրջապատի մանրամասն պատկերներ

Meta-ի նոր անձնական օգնական Muse-ի ներքին հրահանգների արտահոսքը ցույց է տալիս, որ համակարգը կարող է հավաքել և համակարգել տեղեկություններ օգտատիրոջ հարազատների, գործընկերների և այլ կապերի մասին։ Հետազոտողների խոսքով՝ ծառայությունը ոչ միայն կատարում է հանձնարարություններ, այլև ձևավորում է մարդու սոցիալական շրջապատի մանրամասն քարտեզ։ Սա նորից բարձրացնում է արհեստական բանականության գաղտնիության և տվյալների պաշտպանության հարցը։

OpenAI-ի մաթեմատիկական արդյունքները հարցեր են առաջացրել մասնագետների մոտ

OpenAI-ը երեքշաբթի հրապարակել է մաթեմատիկայի տարբեր ոլորտներին վերաբերող հարյուրավոր նոր արդյունքներ՝ ցույց տալով իր առաջատար արհեստական բանականության մոդելների հնարավորությունները։ Սակայն մի շարք գիտնականներ մտահոգություն են հայտնել, որ ընկերությունը բավարար մանրակրկիտությամբ չի ստուգում այդ արդյունքները։ Քննադատների խոսքով՝ խնդրահարույց է նաև այն, որ մոդելների աշխատանքի մեխանիզմները լայն գիտական հանրության համար հասանելի չեն։