講演抄録/キーワード |
講演名 |
2023-06-16 15:50
画像認識とタッチパネル操作を統合した手指巧緻性計測システムの開発 ○柏原優稀・陳 思楠・林 敦子・中村匡秀(神戸大) WIT2023-5 |
抄録 |
(和) |
認知症は現代の日本社会において大きな問題となっている.認知症の診断やリハビリにおいては,手指の運動機能を計測することが重要である.本研究では手指巧緻性を計測するための方法であるタッピング課題の測定を行うためのWebアプリの開発を目的とする.我々のキーアイデアは,Webカメラによる手指認識とタッチパネル入力を組み合わせて,手指運動を計測することである.提案手法では,Webカメラで撮影したライブ画像を,手指認識のライブラリー MediaPipe の hand.js に導入し,手指の21個の特徴点が自動的に出力される.それと同時に,我々はタッチパネル操作ボタンをWeb画面に設定する.操作画面のシナリオとして,2秒間ずつに画面提示した数値や仮名に対応した手指を運動させて,ボタンを押す動作をタッチパネルによる入力で捉える.これにより,多角的な手指運動機能の計測を行うことができることが期待できる. |
(英) |
Dementia has become a significant problem in modern Japanese society. In diagnosing and rehabilitating dementia, it is important to measure the motor function of the fingers. This study aims to develop a web application for measuring the tapping task, which assesses manual dexterity. Our key idea is to combine finger recognition using a web camera with touch panel input to measure finger movements. In our proposed method, we utilize a live image captured by the web camera and input it into the hand.js library of MediaPipe for finger recognition. It automatically outputs 21 feature points of the fingers. Simultaneously, we set up touch panel operation buttons on the web interface. In the scenario of the operation screen, participants must move their fingers corresponding to the displayed numbers or characters at intervals of 2 seconds and press the buttons using touch panel input. It allows for comprehensive measurement of finger motor function. By combining finger recognition using a web camera and touch panel input, we expect to measure multifaceted finger motor function accurately. |
キーワード |
(和) |
画像認識 / タッチパネル操作 / 手指巧緻性 / Webサービス / スマートヘルス / / / |
(英) |
Image recognition / Touch panel operation / Finger dexterity / Web service / Smart healthcare / / / |
文献情報 |
信学技報, vol. 123, no. 81, WIT2023-5, pp. 24-29, 2023年6月. |
資料番号 |
WIT2023-5 |
発行日 |
2023-06-09 (WIT) |
ISSN |
Online edition: ISSN 2432-6380 |
著作権に ついて |
技術研究報告に掲載された論文の著作権は電子情報通信学会に帰属します.(許諾番号:10GA0019/12GB0052/13GB0056/17GB0034/18GB0034) |
PDFダウンロード |
WIT2023-5 |