Cognition AI tərəfindən hazırlanmış və Devin adlı dünyanın ilk “süni intellekt proqram mühəndisi” işində olduqca pis görünür. Son qiymətləndirmələr göstərir ki, bu yeni nəsil mühəndis vəd edilən potensialdan çox uzaqda fəaliyyət göstərir. Sınaqlarda Devinin ona tapşırılan tapşırıqların yalnız 15 faizini uğurla yerinə yetirdiyi məlum olub.
2024-cü ilin mart ayında Cognition AI tərəfindən təqdim edilən Devin, proqram mühəndislərinə kömək etmək məqsədi daşıyan avtomatlaşdırma vasitəsi kimi hazırlanmışdır. 2024-cü ilin dekabr ayında aylıq 500 ABŞ dolları abunə haqqı ilə geniş ictimaiyyətə təqdim edilən Devin’in proqramların inkişafı və xətalarını aradan qaldırmaq kimi vəzifələri başdan sona avtonom şəkildə yerinə yetirə biləcəyi iddia edilir. Alət Slack vasitəsilə əmrlər qəbul edir və Docker əsaslı iş mühitində terminal, brauzer, kod redaktoru və planlaşdırıcı kimi alətlərlə işləyir.
Cognition AI-nin açıqlamasına görə, Devin; O, API inteqrasiyası, kodun nəzərdən keçirilməsi və infrastrukturun idarə edilməsi kimi vəzifələri yerinə yetirə bilər. Hətta onun DoorDash vasitəsilə yemək sifariş edə bildiyi dərəcədə “şəxsi köməkçi” kimi fəaliyyət göstərdiyi bildirilir. Answer.AI-dan üç məlumat alimi olan Hamel Husain, Isaac Flath və Cono Whitaker bu iddiaları yoxlamaq üçün bir sıra təcrübələr aparıblar. Devin ilə sınaqdan keçirilmiş 20 tapşırıqdan yalnız üçü uğurla yerinə yetirilib. Devinin tamamladığı tapşırıqlara məlumatların Notion verilənlər bazasından Google Sheets-ə köçürülməsi və planetar hərəkətləri izləyə bilən proqramın hazırlanması daxildir. Lakin daha mürəkkəb tapşırıqlarda Devin texniki çıxılmaz nöqtələrdə ilişib qalaraq və ya səhv həllər tapıb. Beləliklə, dünyanın ilk süni intellekt proqram mühəndisi işində uğursuz olaraq qiymətləndirilib.
