„Microsoft“ paleido vaizdo atpažinimo įrankį, kuris bando apibūdinti paveikslėlio turinį. Ši dirbtinio intelekto priemonė vis dar yra kūrimo stadijoje ir nuolat mokosi iš vartotojų įkeltų nuotraukų.

Kalbant apie tikslumą, kartais aprašymas yra gana tikslus, o kartais „CaptionBot“ siūlo aprašymus, kurie neturi nieko bendra su tuo, kas vaizduojama. Taip pat yra atvejų, kai programa iš viso negali pateikti aprašymo dėl savo apytikslės būsenos.

„Microsoft“ sukūrė „CaptionBot“, kad išmoktų daugiau patirties, tikėdamiesi, kad laikui bėgant jos antraštės taps tikslesnės. Kuo daugiau nuotraukų įkels vartotojai, tuo programa taps geresnė, nes „CaptionBot“ apibūdina save:

Aš suprantu bet kokio atvaizdo turinį ir pabandysiu jį apibūdinti taip pat, kaip ir bet kurį žmogų. Aš vis dar mokausi, todėl laikysiuosi prie jūsų nuotraukos, bet neturiu asmeninės informacijos.

„CaptionBot“ naudoja tris technologijas, kad apibūdintų tai, kas vaizduojama paveikslėlyje: „Microsoft“ kompiuterio vizija, emocijos ir „Bing“ vaizdas. „Computer Vision“ API iš vaizdų išskiria turtingą informaciją, norėdama klasifikuoti ir apdoroti vaizdinius duomenis, kartu identifikuodama ir ištraukdama tekstą iš vaizdo. Emocijų API, kaip rodo jos pavadinimas, analizuoja veidus, kad aptiktų įvairius jausmus, pradedant pykčiu, panieka, pasibjaurėjimu, baime, laime, neutralitetu, liūdesiu ir netikėtumu. „Bing Image“ internete ieško vaizdų.

Mes išbandėme „CaptionBot“, o rezultatai buvo tikslūs 50% atvejų. Pvz., Mes įkėlėme dvi nuotraukas: vienoje vaizduojama žaidimų pele, kitame - krūva kortelių. Abiem atvejais įrankis pasiūlė, kad tai yra mobilusis telefonas. Kita vertus, „CaptionBot“ tiksliai nustatė žmones ir veidus.

Matyt, „CaptionBot“ yra apsėstas mobiliųjų telefonų. Vienas „Twitter“ vartotojas pranešė apie programą, kad Michelle Obama yra mobilusis telefonas. Norėdami pamatyti daugiau „CaptionBot“ juokingų antraščių, peržiūrėkite šį „Twitter“ puslapį.

Taip pat čia galite išbandyti „CaptionBot“. Pabandykite: jūs padėsite įrankiui tobulėti, arba galėsite gerai juoktis!