To read a person’s movements, now needed only one camera room

Researchers from Tokyo Institute of Technology and Carnegie Mellon University have jointly developed a new human motion capture system, which consists of one ultra-wide “fish eye” camera mounted on the user’s chest.

Conventional motion capture systems in specially equipped studios typically rely on multiple synchronized cameras attached to the ceiling and walls that capture the movements of a person wearing a protective suit equipped with multiple sensors. Such systems are often very expensive and limited in terms of space and environment in which the owner can move.

A team of researchers led by Hideki Koike of Tokyo Tech is introducing a new motion capture system, which consists of one ultra-wide fish eye camera mounted on the user’s chest. Their design not only helps to overcome the lack of space in existing systems, but is also cost-effective.

The system, called MonoEye, can capture the user’s body movements, as well as his or her perspective or “view window”. Our ultra-wide fisheye lens has a 280 degree field of view and can capture the user’s limbs, face and environment.

Text of study

To provide reliable multimodal motion capture, the system was designed with three deep neural networks capable of evaluating three-dimensional body posture, head posture and camera posture in real time.

The researchers have already trained these neural networks with an extensive data set consisting of 680,000 images of people with different body shapes, clothing, actions, background and lighting conditions, as well as 16,000 frames of photorealistic images.

The researchers suggest that in the future it will be possible to turn a chest camera into an everyday accessory such as a tie clip, brooch or sports equipment.


загородное строительство и недвижимостькак продать домправила продажи домабассейн в домебольшие окнаборовское шоссебыстровозводимые домадом и дачадом и коттеджкоттедж этоновая ригапокраска стенпокрасить стенудачное строительстводом в поселкекупить дом в коттеджном поселкебарвихадеревья на участкенедорогие дома в подмосковьедешевые дома в подмосковьекак сделать на дачеучасток на дачедоговор купли продажи дома с земельным участкомдом за городомдома в деревняхдом из сэндвич панелейэкологическая карта московской областиэкология московской областифасадный домдекор фасададизайн фасадагараж с домомгаз в домегаз частный домнайти домгипсовая штукатуркаголицыно московская областьголицыногород химкиклимовск московская областьклимовскгород лобнялобня московская областьлобнягород видноекак сделать свой домхочу домсвой домдом дешевледом для пмжиз чего построить домиз чего построитьиз чего строитьиз чего строят домакакой дом выбратькакой дом лучшематериал домастроить домквартиру на домобмен квартиры на частный домсвое фермерское хозяйство1 сотка сколько1 сотка это1 соткаодна соткаплощадь участкасколько метров в соткесотка земли этосамый дешевый способ построить домкак выбрать домчто делать если домпринимать домприемка домапроверить домна каком расстоянии должныпланировка участкадом своими рукамидом своимикак строитьпостроить своими рукамииз кирпичейдом из кирпичадом верандастроить верандустроить крыльцокакие доматеплые домавиды домовстили домовзадаток при покупкекиевское шоссепрораб этопрорабкупля продажа домалестницы в частных домахличное подсобное хозяйстволпх что этолпхмансардные крышимансардыразмеры участковдом в черте городакупленный домдом зимойстроительство зимойновая москватерритория москвыкакой дом лучше купитькакой домновостройка или вторичкакапитальный объектобъект капитального строительстваземля в арендеарендуемый участокдом в собственностькак оформить домоформление домоврегистрация домаистринское водохранилищерегистр отоплениягазификация подмосковьягазификация московской областиплоская кровляплоские крышипровести водупокупка домапол в домеполучить адреспоставить домкадастровый учетстроительство своими рукамипотолки в домсауна в домепридомовая территориякупля продажа земельного участкакакой проектпроект загородного домаможно ли прописаться в снтчто такое клинингчто такое ксмафыграницы москвы на картеграницы москвыкакой город подмосковья самый лучший для проживаниярайоны московской областисамый лучший город подмосковья для жизни рейтингразрешение на строительство домагород реутовгде хорошая рыбалкарыбалка в подмосковьесамостройкак купить домкакие комнатыкомнаты домаразмеры комнатсколько комнаткак построить свой домпостроить свой домсколько стоит построить свой домснипспил деревьевкакие деревья можно пилить без разрешениясроки строительствастроится домдеревянные окна в домесколько берут риэлторыстоимость риэлтерских услугстоимость частного домасодержание домадом в снткачество домастроительная экспертизапостроить дачупостройка дачстена домастроительство стенступино московская областьступиноссуда на строительство частного дома от государствасубсидия на строительствосвайно ростверковый фундаментдом в пригородетеплый пол домакоттеджные поселкилучшие деревни подмосковья для проживанияпоселки москвырейтинг загородных домоврейтинг поселковцокольный этажцокольцвет комнатыутепляем дачубыстромонтируемые зданиявнутренняя отделка домовотделка в домеотделка внутренняявода в загородном домеможайское водохранилищепроект кирпичного домасхемы домоввыставка домов на домодедовскойвыставка домовпроект под строительствонужен проекткраснознаменск московская областькраснознаменскземли населенных пунктовзнпсельскохозяйственные угодья эторыночная стоимость 1 сотки землисколько стоит 1 сотка земли