SmarToyGym: Inteligentne wykrywanie nietypowych działań związanych z zabawkami u niemowląt z grupy ryzyka

Naszym celem jest opracowanie SmarToyGym, w którym uczulone, bezprzewodowe zabawki są strategicznie zawieszane i umieszczane w zasięgu niemowląt, aby wywołać ruchy ciała i ramion/dłoni zorientowane na zabawkę. Każda zabawka będzie wyposażona w czujniki zdolne do pomiaru czynności chwytania dziecka, takich jak ściskanie, szczypanie, przechylanie itp.

Do gromadzenia danych wideo oraz kinematyki sięgania i ciała niemowląt w odpowiedzi na zabawki zostanie wykorzystany niedrogi system przechwytywania ruchu 3D. Do pomiaru zmian postawy zostanie użyta mata dociskowa, która umożliwi wykrycie przesunięć ciężaru ciała, przetaczania się, pełzania i innych ruchów odchylających się od pozycji początkowej.

Kinematyczna planarna (x, y) reprezentacja pozycji nadgarstka (w l) w oparciu o pozę zarejestrowaną za pomocą pojedynczej kamery i poprzez uczenie maszynowe. Mierzono położenie nadgarstka prawego i lewego ramienia. Pozycja nadgarstka jest podawana w pikselach na podstawie danych z kamery i normalizacji danych (jednostki miary są przedstawiane jako piksele na długość tułowia, jednostki znormalizowane w odniesieniu do długości tułowia). Wartość dodatnia oznacza ruch ramienia w górę, a wartość ujemna oznacza ruch ramienia w dół w stosunku do linii bazowej.

Analizowane dane z kamery dotyczyły stanu, w którym niemowlę poruszało się na macie do dwóch minut (bez zabawki). Kamera znajdowała się w stałym miejscu nad niemowlęciem.

Kinematyczna planarna (x, y) reprezentacja pozycji kostki (w l) w oparciu o pozę zarejestrowaną za pomocą pojedynczej kamery i poprzez uczenie maszynowe. Mierzono położenie kostki prawego i lewego ramienia. Pozycję kostki podaje się w pikselach na podstawie danych z kamery i normalizacji danych (jednostki miary są przedstawiane jako piksele na długość tułowia, jednostki znormalizowane w odniesieniu do długości tułowia). Wartość dodatnia oznacza ruch nogi w górę, a wartość ujemna oznacza ruch nogi w dół w stosunku do linii bazowej.

Analizowane dane z kamery dotyczyły stanu, w którym niemowlę poruszało się na macie do dwóch minut (bez zabawki). Kamera znajdowała się w stałym miejscu nad niemowlęciem.

Kinematyczna (x, y) reprezentacja ruchu nadgarstka (w l/s) w oparciu o pozę zarejestrowaną za pomocą pojedynczej kamery i poprzez uczenie maszynowe. Mierzono ruch nadgarstka prawego i lewego ramienia. Ruch nadgarstka jest raportowany w pikselach na podstawie danych z kamery i normalizacji danych (jednostki miary są przedstawiane jako piksele na długość tułowia, jednostki znormalizowane w odniesieniu do długości tułowia). Wartość dodatnia oznacza ruch ramienia w górę, a wartość ujemna oznacza ruch ramienia w dół w stosunku do linii bazowej.

Analizowane dane z kamery dotyczyły stanu, w którym niemowlę poruszało się na macie do dwóch minut (bez zabawki). Kamera znajdowała się w stałym miejscu nad niemowlęciem.

Kinematyczna (x, y) reprezentacja ruchu kostki (w l/s) w oparciu o pozę zarejestrowaną za pomocą pojedynczej kamery i poprzez uczenie maszynowe. Mierzono ruchomość prawej i lewej kostki. Ruch kostki jest raportowany w pikselach na podstawie danych z kamery i normalizacji danych (jednostki miary są przedstawiane jako piksele na długość tułowia, jednostki znormalizowane w odniesieniu do długości tułowia). Wartość dodatnia oznacza ruch nogi w górę, a wartość ujemna oznacza ruch nogi w dół w stosunku do linii bazowej.

Analizowane dane z kamery dotyczyły stanu, w którym niemowlę poruszało się na macie do dwóch minut (bez zabawki). Kamera znajdowała się w stałym miejscu nad niemowlęciem.