8

У ниверситетът в Осака е разработил невронна мрежа, способна да реконструира образа, който човек гледа в момента. Анализирайки данни от функционален ядрено-магнитен резонанс, системата прецизно възпроизвежда не само формата, но и цветовете на обектите. Учените говорят за първата в света машина за четене на мисли.

Обхватът на приложенията на обещаващата технология на компютърното зрение е много широк: от общуване с парализирани хора до записване на сънища и изучаване на начина, по който различните животни възприемат света около себе си.

Японски изследователи са се възползвали от предимствата на Stable Diffusion - популярна програма за преобразуване на текст в реч. Тази невронна мрежа с отворен код е подобна по структура на други генеративни LLM (Large language models), като DALL-E2 на OpenAI (създател на ChatGPT) или Midjourney.

Тя се основава на дифузия - метод за машинно обучение, при който визуалният образ се генерира чрез последователни приближения. Всяка нова итерация се базира на друга текстова реплика.

Японците са добавили допълнителна стъпка на обучение към стандартната схема за Stable Diffusion. Така невронната мрежа сравнява данните за мозъчната активност на четирима участници в експеримента, на които са показани различни снимки с текстови описания на изображенията.

За начални сигнали били взети данни от функционален магнитен резонанс (fMRI), получени на мощни машини с индукция на магнитното поле 7 Тесла. Като записват потока от кислородни молекули, необходими за работата на невроните, тези устройства са в състояние да наблюдават кои области на мозъка, отговорни за определени чувства или емоции, са най-активни.

Във фазата на машинното обучение на участниците бяха показани десет хиляди изображения и системата събра генерираните в процеса на изследване модели на fMRI, които след това бяха декодирани от изкуствен интелект.

Анализирайки пиковете, регистрирани чрез fMRI в различни области на мозъка, учените откриват, че темпоралните лобове са отговорни за съдържанието на образите. Това е така наречената семантична зона. А тилната, където се намира зрителната кора, пресъздава размера и общото разположение на обектите.

Резултатите до голяма степен съответстват на хипотезата за два потока визуална информация, формулирана през 1983 г. от американския невропсихолог Мортимър Мишкин. Той предложи, че в мозъчната кора да има два анатомично и функционално различни канала за обработка на пространствена и предметна информация: "Къде?" и "Какво?".

При макаци резус Мишкин показа, че тилният (дорзален) канал "Къде?" е отговорен за възприемането на пространството, а темпоралният (вентрален) канал "Какво?", тясно свързан с паметта, е отговорен за разпознаването.

Японците са комбинирали визуална и семантична информация. Дифузионният алгоритъм е сравнявал наблюдаваните модели на невронна активност, формирани при разглеждане на снимки, с моделите в набора от данни за обучение. Сигналите от "визуалната" кортикална област са били използвани за изграждане на общ обем и перспектива. След това били свързани сигналите от семантичния декодер на сигнали и първичната картина, приличаща повече на смущение на телевизионния екран, постепенно придобила очертанията на разпознаваеми обекти.

Учените получиха около хиляда изображения, които съвпаднаха със смисъла и съдържанието на оригинала с точност до 80%. В повечето случаи изкуственият интелект дори пресъздава цветовата схема на оригиналното изображение.

"Представеният документ показа, че невронната мрежа Stable Diffusion може точно да реконструира изображения от сканирания с fMRI, а това ни позволява ефективно да четем мислите на хората", се отбелязва в резюмето.

"Показваме, че нашият метод, базиран на човешката мозъчна активност, може да реконструира изображения с достатъчна резолюция и висока семантична точност", уточняват японските изследователи.

Коментари 8
Кирилица:
Фонетична
Имате 2000 позволени символа

* Моля, коментирайте конкретната статия и използвайте кирилица! Не се толерират мнения с обидно или нецензурно съдържание, на верска или етническа основа, както и написани само с главни букви!

8 коментара
 
Обратно в сайта X

ДОСТЪП ЗА ЛОГНАТИ ПОТРЕБИТЕЛИ За да пишете, оценявате или докладвате коментари, моля логнете се в профила си.

  1. Запомни ме
забравена парола Полетата маркирани с * са задължителни
Полето Потребителско име не трябва да е празно.
Полето E-mail не трябва да е празно.
Полето Парола не трябва да е празно.
Полето Повторете паролата не трябва да е празно.
  1. Декларирам, че съм се запознал с Общите условия за ползване на услугите на Нетинфо.
Полетата маркирани с * са задължителни
<p>Паднали клони и отломки: Силна буря връхлетя Калифорния (СНИМКИ/ВИДЕО)</p>

Паднали клони и отломки: Силна буря връхлетя Калифорния

Свят Преди 7 минути

Падналият сняг доведе до по-ранно отваряне на ски курорти

Коронацията на Чарлз III е струвала 72 милиона британски лири

Коронацията на Чарлз III е струвала 72 милиона британски лири

Свят Преди 15 минути

Чарлз III беше коронясан в Уестминстърското абатство на церемония, на която присъстваха високопоставени гости от цял свят

<p>Села в Ловешко обезлюдяват заради липса на вода</p>

Жители на засегнатите от водната криза села обмислят да ги напуснат

България Преди 35 минути

Водната криза в Ловеч и областта се задълбочава, а, решенията не изглеждат близо

Руски удари в североизточната част на Украйна, има убити и ранени

Руски удари в североизточната част на Украйна, има убити и ранени

Свят Преди 46 минути

Град Суми, в близост до руската граница, беше ударен от "няколко мощни експлозии",

<p>Змийска доячка и професионална русалка: Абсурдните професии, които съществуват</p>

Змийска доячка и професионална русалка: Топ 12 абсурдните професии, чието съществуване е трудно за вярване

Любопитно Преди 49 минути

Въпреки че някои професии изглеждат абсурдни, те носят и ползи

Екшън в Пловдивско: Задържаха контрабандни цигари за 2 млн. лева

Екшън в Пловдивско: Задържаха контрабандни цигари за 2 млн. лева

България Преди 1 час

Арестувани са четирима души, сред които двама чужденци

<p>Нова номинация за главен прокурор в САЩ: Тръмп избра жена</p>

След оттеглянето на Мат Гейц: Тръмп избра Пам Бонди за главен прокурор в САЩ

Свят Преди 1 час

Бонди е бивш главен прокурор на Флорида и отдавнашен съюзник на Тръмп

Инвестиции в недвижими имоти отвъд “апартамент в София”

Инвестиции в недвижими имоти отвъд “апартамент в София”

Любопитно Преди 1 час

Как финансовите пазари могат да направят инвестициите в имоти по целия свят достъпни за всеки джоб

Костадинов: Няма да отменим кандидатурата ни за председател на НС

Костадинов: Няма да отменим кандидатурата ни за председател на НС

България Преди 1 час

Петър Петров е най-добрият кандидат, отбеляза лидерът на "Възраждане"

Меркел

Защо Меркел е била против членството на Украйна в НАТО

Свят Преди 1 час

Отговорна ли е политиката на Ангела Меркел спрямо Русия отчасти за войната в Украйна?

Четирима са номинираните за изгонване от Big Brother

Четирима са номинираните за изгонване от Big Brother

Любопитно Преди 2 часа

Зрителите ги спасят чрез гласуване в приложението на NOVA PLAY

Решаващ разговор за Шенген: Атанас Илков е на ключова визита в Будапеща

Решаващ разговор за Шенген: Атанас Илков е на ключова визита в Будапеща

България Преди 2 часа

Срещата е организирана от Унгарското председателство на Съвета на ЕС

Радев в Сингапур: Инвестирането в хората, образованието, иновациите е ключът към успеха

Радев в Сингапур: Инвестирането в хората, образованието, иновациите е ключът към успеха

Свят Преди 3 часа

Визитата на президента има за цел да стимулира развитието на двустранния диалог на най-високо политическо ниво

Дълга умора: Изтощението, което остава след COVID-19

Дълга умора: Изтощението, което остава след COVID-19

Свят Преди 3 часа

С пандемията на COVID-19 се появява и дългият COVID

<p>Ден на пирати, крале и президенти</p>

Ден на пирати, крале и президенти – 22 ноември в историята

Любопитно Преди 3 часа

Ден на възходи и падения, вижте какво се е случило на 22 ноември

<p>Внимание! Червен код за ураганен вятър в петък</p>

Внимание! Червен код за ураганен вятър в петък

България Преди 3 часа

Какво време ни очаква в края на седмицата