Система синхронной регистрации мультимодальных данных у группы респондентов для анализа восприятия аудиовизуального контента
Închide
Articolul precedent
Articolul urmator
311 1
Ultima descărcare din IBN:
2020-09-27 17:19
Căutarea după subiecte
similare conform CZU
612.017:004 (1)
Fiziologie. Fiziologie umană și comparată (737)
Știința și tehnologia calculatoarelor. Calculatoare. Procesarea datelor (4280)
SM ISO690:2012
ДУЛИН, С., ЛУЖИН, А., МУСТАФИН, Ю.. Система синхронной регистрации мультимодальных данных у группы респондентов для анализа восприятия аудиовизуального контента. In: Neuroscience for medicine and psychology: XIV International interdisciplinary congress, 4-10 iunie 2018, Sudak, Crimeea. Moscova, Rusia: ООО “МАКС Пресс”, 2018, p. 191. ISBN 978-5-317-05830-2.
EXPORT metadate:
Google Scholar
Crossref
CERIF

DataCite
Dublin Core
Neuroscience for medicine and psychology 2018
Congresul "Neuroscience for medicine and psychology"
Sudak, Crimeea, Rusia, 4-10 iunie 2018

Система синхронной регистрации мультимодальных данных у группы респондентов для анализа восприятия аудиовизуального контента

System of multimodal synchronous data capture from respondents for audiovisual content analysis

CZU: 612.017:004

Pag. 191-191

Дулин С., Лужин А., Мустафин Ю.
 
ООО "Универс-Консалтинг", Москва
 
 
Disponibil în IBN: 29 aprilie 2020



Teza

В настоящее время сложилась тенденция к широкому использованию нейрофизиологических данных
вне стен научных лабораторий и медицинских учреждений, однако требования к качеству снимаемых
данных остаются высокими, несмотря на то, что замеры производятся в условиях, приближенных к
бытовым. Это выдвигает особые требования к используемому оборудованию, в том числе к его
миниатюрности, удобству в использовании, снижению уровня шумов и артефактов в сигнале и т.д.
Отдельной проблемой становится снятие мультимодальных данных одновременно с группы лиц,
участвующих совместно в каком-либо процессе, например, просмотре аудиовизуального контента.
Для решения указанных задач ООО «Унивенрс-Консалтинг» разработало аппаратно-программный
комплекс, обеспечивающий синхронное снятие нейрофизиологических данных с группы лиц и их пакетной
обработке, в том числе в режиме реального времени. В состав комплекса входит 25 персональных
комплектов оборудования для снятия и передачи мультимодальных данных и устройство приема и
обработки данных на базе персонального компьютера. Каждый персональный комплект состоит из
гарнитуры, обеспечивающей крепление и качественное прилегание к коже головы сухих электродов фирмы
Cognionics, специального, разработанного ООО НПКФ «Медиком МТД», усилителя ЭЭГ для работы с
сухими электродами (располагается на гарнитуре), датчиков для снятия фотоплетизмограммы (крепится на
ухо), ЭКГ и кожно-гальванической реакции. Снимаемые мультимодальные данные со всех персональных
комплектов оборудования синхронизируются и передаются по каналу Wi-Fi на устройство приема и
обработки данных, где происходит их синхронизация с предъявляемым аудиовизуальным контентом.
Такая конфигурация оборудования позволяет не только снимать и сохранять синхронизированные
данные для дальнейшей обработки, но и позволяет проводить определение некоторых показателей,
характеризующих психоэмоциональное состояние участников исследования (например, уровни внимания,
когнитивной нагрузки, эмоциональной вовлеченности и валентности) в режиме реального времени, что
может быть эффективно использовано в нейромаркетинге, тестировании фильмов и телевизионных
передач, системах управляемого кино, при оценки восприятия лекционного материала студентами.
Работа поддержана грантом ГРНТИС5/26033 Фонда содействия инновациям.



To date, there has been a tendency toward wide use of neurophysiological data outside of scientific
laboratories and medical institutions. However, the quality requirements for data collection remain high given that
the measurements are conducted in nearly real-life conditions. This puts forward particular standards for equipment
including its diminutiveness, user-friendliness, noise and artifact reduction, and etc. A separate challenge is
simultaneous collection of multimodal data from a group of individuals who participate in a certain process together,
for example, in watching audiovisual content.
To solve the above mentioned problems LLC “Universe-Consulting” has developed computer appliance
ensuring synchronous collection of neurophysiological data from a group of individuals and its batch processing in
real time, too. The complex is comprised of 25 personal sets of equipment for collection and transmission of
multimodal data and a device for receiving data and its processing on the basis of personal computer. Each
personal set contains a headset providing a mount and a perfect fit of dry electrodes, product of the Cognionics
company, to scalp. It also includes an EEG amplifier, designed by LLC NPKF “Medicom MTD”, specifically to deal
with dry electrodes (located on the headset) as well as sensors for photoplethysmography (attached to ears), ECG,
and electrodermal activity. Multimodal data, gathered from all personal sets of equipment, is synchronized and
communicated via Wi-Fi to the device that receives and processes data – where its synchronization with presented
audiovisual content takes place.
Such equipment configuration allows not only to capture and save synchronous data for further processing
but also to define certain indicators, which characterize psycho-emotional states of study participants (for instance,
levels of attention, cognitive load, emotional involvement and its valence) in real time. This can be effectively used
in neuromarketing, movie and TV show research, neurocinematics, and for evaluation of students’ perceptions of
lecture material. This work was supported by a grant GRNTIS5/26033 from the Innovation Fund.