8

У ниверситетът в Осака е разработил невронна мрежа, способна да реконструира образа, който човек гледа в момента. Анализирайки данни от функционален ядрено-магнитен резонанс, системата прецизно възпроизвежда не само формата, но и цветовете на обектите. Учените говорят за първата в света машина за четене на мисли.

Обхватът на приложенията на обещаващата технология на компютърното зрение е много широк: от общуване с парализирани хора до записване на сънища и изучаване на начина, по който различните животни възприемат света около себе си.

Японски изследователи са се възползвали от предимствата на Stable Diffusion - популярна програма за преобразуване на текст в реч. Тази невронна мрежа с отворен код е подобна по структура на други генеративни LLM (Large language models), като DALL-E2 на OpenAI (създател на ChatGPT) или Midjourney.

Тя се основава на дифузия - метод за машинно обучение, при който визуалният образ се генерира чрез последователни приближения. Всяка нова итерация се базира на друга текстова реплика.

Японците са добавили допълнителна стъпка на обучение към стандартната схема за Stable Diffusion. Така невронната мрежа сравнява данните за мозъчната активност на четирима участници в експеримента, на които са показани различни снимки с текстови описания на изображенията.

За начални сигнали били взети данни от функционален магнитен резонанс (fMRI), получени на мощни машини с индукция на магнитното поле 7 Тесла. Като записват потока от кислородни молекули, необходими за работата на невроните, тези устройства са в състояние да наблюдават кои области на мозъка, отговорни за определени чувства или емоции, са най-активни.

Във фазата на машинното обучение на участниците бяха показани десет хиляди изображения и системата събра генерираните в процеса на изследване модели на fMRI, които след това бяха декодирани от изкуствен интелект.

Анализирайки пиковете, регистрирани чрез fMRI в различни области на мозъка, учените откриват, че темпоралните лобове са отговорни за съдържанието на образите. Това е така наречената семантична зона. А тилната, където се намира зрителната кора, пресъздава размера и общото разположение на обектите.

Резултатите до голяма степен съответстват на хипотезата за два потока визуална информация, формулирана през 1983 г. от американския невропсихолог Мортимър Мишкин. Той предложи, че в мозъчната кора да има два анатомично и функционално различни канала за обработка на пространствена и предметна информация: "Къде?" и "Какво?".

При макаци резус Мишкин показа, че тилният (дорзален) канал "Къде?" е отговорен за възприемането на пространството, а темпоралният (вентрален) канал "Какво?", тясно свързан с паметта, е отговорен за разпознаването.

Японците са комбинирали визуална и семантична информация. Дифузионният алгоритъм е сравнявал наблюдаваните модели на невронна активност, формирани при разглеждане на снимки, с моделите в набора от данни за обучение. Сигналите от "визуалната" кортикална област са били използвани за изграждане на общ обем и перспектива. След това били свързани сигналите от семантичния декодер на сигнали и първичната картина, приличаща повече на смущение на телевизионния екран, постепенно придобила очертанията на разпознаваеми обекти.

Учените получиха около хиляда изображения, които съвпаднаха със смисъла и съдържанието на оригинала с точност до 80%. В повечето случаи изкуственият интелект дори пресъздава цветовата схема на оригиналното изображение.

"Представеният документ показа, че невронната мрежа Stable Diffusion може точно да реконструира изображения от сканирания с fMRI, а това ни позволява ефективно да четем мислите на хората", се отбелязва в резюмето.

"Показваме, че нашият метод, базиран на човешката мозъчна активност, може да реконструира изображения с достатъчна резолюция и висока семантична точност", уточняват японските изследователи.

Коментари 8
Кирилица:
Фонетична
Имате 2000 позволени символа

* Моля, коментирайте конкретната статия и използвайте кирилица! Не се толерират мнения с обидно или нецензурно съдържание, на верска или етническа основа, както и написани само с главни букви!

8 коментара
 
Обратно в сайта X

ДОСТЪП ЗА ЛОГНАТИ ПОТРЕБИТЕЛИ За да пишете, оценявате или докладвате коментари, моля логнете се в профила си.

  1. Запомни ме
забравена парола Полетата маркирани с * са задължителни
Полето Потребителско име не трябва да е празно.
Полето E-mail не трябва да е празно.
Полето Парола не трябва да е празно.
Полето Повторете паролата не трябва да е празно.
  1. Декларирам, че съм се запознал с Общите условия за ползване на услугите на Нетинфо.
Полетата маркирани с * са задължителни
Местните структури на "ДПС-Ново начало" към Кирил Петков: Ние не сме фантоми!

Местните структури на "ДПС-Ново начало" към Кирил Петков: Ние не сме фантоми!

България Преди 6 минути

Поддръжници на партията реагираха остро на изказване на съпредседателя на ПП-ДБ

Това са най-скъпите избори в историята на САЩ

Това са най-скъпите избори в историята на САЩ

Свят Преди 1 час

Предишният рекорд бе поставен през 2020 г.

"Правосъдие за всеки" с нов протест срещу избора на главен прокурор

"Правосъдие за всеки" с нов протест срещу избора на главен прокурор

България Преди 4 часа

Протестиращите се събраха пред Съдебната палата

България привика посланика на КНДР заради Украйна

България привика посланика на КНДР заради Украйна

България Преди 5 часа

Българската страна препотвърди позициите си

Пламен Димитров: Във Vivacom всеки ден ставаме все по-добри в името на клиента

Пламен Димитров: Във Vivacom всеки ден ставаме все по-добри в името на клиента

Любопитно Преди 6 часа

Старши мениджърът в отдел „Клиентско изживяване“ в телекома се включи в инициативата „Мениджър за един ден“ на Junior Achievement

КЗП с акция срещу фирмите за бързи кредити

КЗП с акция срещу фирмите за бързи кредити

България Преди 6 часа

Комисията дава срок от 14 дни те да сложат край на нелоялните практики

БСП: Ще инициираме подписки за касиране на изборите

БСП: Ще инициираме подписки за касиране на изборите

България Преди 7 часа

Гуцанов: С тази подписка искаме и събиране на подписи за сезиране на КС за връщане на правомощията на президента

<p>Вижте как Валенсия изчезва под море от кал (ВИДЕО)</p>

Вижте как Валенсия изчезва под море от кал по време на смъртоносните наводнения в Испания

Свят Преди 7 часа

В резултат на екстремното метеорологично явление загинаха над 200 души

Главчев: Ако президентът има забележки към Илков, може да поиска смяната му

Главчев: Ако президентът има забележки към Илков, може да поиска смяната му

България Преди 7 часа

Главчев припомни, че МВР и ДАНС са представили доклади

Австрия може съвсем скоро да пусне България в Шенген

Австрия може съвсем скоро да пусне България в Шенген

България Преди 7 часа

Пълноправното членство би могло да започне официално на 12 декември

а

Останки от делфин са открити на плажа в Ню Джърси

Свят Преди 7 часа

Месото на делфина е било напълно отстранено с чисти разрези от остър инструмент

"Възраждане" подписа жалба за касиране на вота, чака подкрепа

"Възраждане" подписа жалба за касиране на вота, чака подкрепа

България Преди 7 часа

Жалбата се подава от "Възраждане" като потърпевш

Погребаха актрисата Маги Смит на частна церемония в Ричмънд

Погребаха актрисата Маги Смит на частна церемония в Ричмънд

Свят Преди 7 часа

Маги Смит почина на 27 септември след продължително боледуване

Одобриха кандидатурата на Екатерина Захариева за еврокомисар

Одобриха кандидатурата на Екатерина Захариева за еврокомисар

Свят Преди 8 часа

Захариева ще отговаря за ресора "Стартъпи, проучвания и иновации"

Кметът Терзиев се усъмни в качеството на въздуха в София

Кметът Терзиев се усъмни в качеството на въздуха в София

България Преди 8 часа

Кметът Терзиев посочи, че миенето на улиците, почистването и окосяването са важни мерки

Снимката е илюстративна

Мълния уби футболист по време на мач

Свят Преди 8 часа

Ранени са четирима, като вратарят остава в критично състояние