У ниверситетът в Осака е разработил невронна мрежа, способна да реконструира образа, който човек гледа в момента. Анализирайки данни от функционален ядрено-магнитен резонанс, системата прецизно възпроизвежда не само формата, но и цветовете на обектите. Учените говорят за първата в света машина за четене на мисли.

Обхватът на приложенията на обещаващата технология на компютърното зрение е много широк: от общуване с парализирани хора до записване на сънища и изучаване на начина, по който различните животни възприемат света около себе си.

Японски изследователи са се възползвали от предимствата на Stable Diffusion - популярна програма за преобразуване на текст в реч. Тази невронна мрежа с отворен код е подобна по структура на други генеративни LLM (Large language models), като DALL-E2 на OpenAI (създател на ChatGPT) или Midjourney.

Тя се основава на дифузия - метод за машинно обучение, при който визуалният образ се генерира чрез последователни приближения. Всяка нова итерация се базира на друга текстова реплика.

Японците са добавили допълнителна стъпка на обучение към стандартната схема за Stable Diffusion. Така невронната мрежа сравнява данните за мозъчната активност на четирима участници в експеримента, на които са показани различни снимки с текстови описания на изображенията.

За начални сигнали били взети данни от функционален магнитен резонанс (fMRI), получени на мощни машини с индукция на магнитното поле 7 Тесла. Като записват потока от кислородни молекули, необходими за работата на невроните, тези устройства са в състояние да наблюдават кои области на мозъка, отговорни за определени чувства или емоции, са най-активни.

Във фазата на машинното обучение на участниците бяха показани десет хиляди изображения и системата събра генерираните в процеса на изследване модели на fMRI, които след това бяха декодирани от изкуствен интелект.

Анализирайки пиковете, регистрирани чрез fMRI в различни области на мозъка, учените откриват, че темпоралните лобове са отговорни за съдържанието на образите. Това е така наречената семантична зона. А тилната, където се намира зрителната кора, пресъздава размера и общото разположение на обектите.

Резултатите до голяма степен съответстват на хипотезата за два потока визуална информация, формулирана през 1983 г. от американския невропсихолог Мортимър Мишкин. Той предложи, че в мозъчната кора да има два анатомично и функционално различни канала за обработка на пространствена и предметна информация: "Къде?" и "Какво?".

При макаци резус Мишкин показа, че тилният (дорзален) канал "Къде?" е отговорен за възприемането на пространството, а темпоралният (вентрален) канал "Какво?", тясно свързан с паметта, е отговорен за разпознаването.

Японците са комбинирали визуална и семантична информация. Дифузионният алгоритъм е сравнявал наблюдаваните модели на невронна активност, формирани при разглеждане на снимки, с моделите в набора от данни за обучение. Сигналите от "визуалната" кортикална област са били използвани за изграждане на общ обем и перспектива. След това били свързани сигналите от семантичния декодер на сигнали и първичната картина, приличаща повече на смущение на телевизионния екран, постепенно придобила очертанията на разпознаваеми обекти.

Учените получиха около хиляда изображения, които съвпаднаха със смисъла и съдържанието на оригинала с точност до 80%. В повечето случаи изкуственият интелект дори пресъздава цветовата схема на оригиналното изображение.

"Представеният документ показа, че невронната мрежа Stable Diffusion може точно да реконструира изображения от сканирания с fMRI, а това ни позволява ефективно да четем мислите на хората", се отбелязва в резюмето.

"Показваме, че нашият метод, базиран на човешката мозъчна активност, може да реконструира изображения с достатъчна резолюция и висока семантична точност", уточняват японските изследователи.

Когато си умен-дразнят те тъпите. Когато си тъп-умните. А когато не си се наспал-всичките.
Прочети целия
Обратно в сайта X

ДОСТЪП ЗА ЛОГНАТИ ПОТРЕБИТЕЛИ За да пишете, оценявате или докладвате коментари, моля логнете се в профила си.

  1. Запомни ме
забравена парола Полетата маркирани с * са задължителни
Полето Потребителско име не трябва да е празно.
Полето E-mail не трябва да е празно.
Полето Парола не трябва да е празно.
Полето Повторете паролата не трябва да е празно.
  1. Декларирам, че съм се запознал с Общите условия за ползване на услугите на Нетинфо.
Полетата маркирани с * са задължителни
Катастрофа в Старозагорско, загина 30-годишен мъж

Катастрофа в Старозагорско, загина 30-годишен мъж

България Преди 8 минути

Колата се е качила на тротоара и се е блъснала последователно в паркиран лек автомобил и крайпътно дърво

Кръщелникът на кралица Елизабет II почина на 79 години

Кръщелникът на кралица Елизабет II почина на 79 години

Свят Преди 13 минути

Лорд Чарлз О'Хейгън, служил като паж на Нейно Величество, почина след нараняване на главата

<p>Кошмарен круиз: Над 230 души се заразиха с норовирус</p>

Кошмарен круиз: Над 230 души се заразиха с норовирус

Свят Преди 1 час

Корабът е изолирал засегнатите и е приложил санитарни мерки за ограничаване на огнището

Гърция се готви за мощен удар на природата - извънредно предупреждение за проливни дъждове

Гърция се готви за мощен удар на природата - извънредно предупреждение за проливни дъждове

Свят Преди 1 час

Има предупреждение, че над страната ще се изсипят проливни дъждове, а лошото време няма намерение да отстъпва поне до края на седмицата

Нови правила за рецептите

Нови правила за рецептите

България Преди 1 час

Те създават реален риск от забавяне на обслужването в аптеките, предупредиха фармацевти

Международно злато и сребро за българско вино

Международно злато и сребро за българско вино

Любопитно Преди 1 час

Научете повече в статията

Намериха 34 кг кокаин в камион в района на "Дунав мост" при Видин

Намериха 34 кг кокаин в камион в района на "Дунав мост" при Видин

България Преди 1 час

Шофьорът е задържан, той е български гражданин

Снимката е илюстративна

Река Огоста заля пътя край "Попов мост"

България Преди 1 час

В село Говежда има подаден сигнал за наводнен приземен етаж от къща

<p>&quot;Страшен момент&quot; за Скалата - самолетът му&nbsp;аварира по време на полет</p>

Частният самолет на Дуейн "Скалата" Джонсън аварира - "Стисках палци да се приземим!"

Свят Преди 1 час

Частният самолет на звездата претърпя механичен проблем по време на полет

<p>Желязков: Това&nbsp;е опит да се вклини раздор между партиите в коалицията</p>

Желязков: Вотът на недоверие е опит да се вклини раздор между партиите в коалицията

България Преди 1 час

"Ние сме много по-устойчиви, за да не се подвеждаме по мотивите и предмета на дебата", посочи той

<p>Майка опита да продаде бебето си, за да плати готварски курс</p>

Майка опита да продаде бебето си, за да плати готварски курс

Свят Преди 1 час

Полицията е успяла да спаси малкото момченце

Наследство с неочакван бонус: Жена откри шокираща тайна в старата семейна къща

Наследство с неочакван бонус: Жена откри шокираща тайна в старата семейна къща

Любопитно Преди 2 часа

Когато новата собственичка пристигнала в наследената къща, тя я намерила заключена

Жени на фронта: Къде военната служба за дамите е задължителна?

Жени на фронта: Къде военната служба за дамите е задължителна?

Свят Преди 2 часа

Миналата седмица в Дания бе решено, че занапред военната служба ще е задължителна и за жените.

<p>Сенатор постави рекорд за най-дълга реч&nbsp;в Сената</p>

Сенатор постави рекорд с 25-часова реч в Сената: Символ на протест срещу Тръмп

Свят Преди 2 часа

Круз коментира, че речта е била сериозно физическо предизвикателство