关于元智医康

居家康复评估与训练辅助工具 —— 评估 → 训练 → 复评,全流程闭环(占位文案)

产品与原理

评估什么

通过摄像头识别人手 21 点关键点,测量拇指 CMC/IP、各指 DIP/PIP 屈曲角、对掌距离、掌宽、TAM 等指标(参考范围见各页来源角标)。

怎么训练

基于评估结果进入对应关节的训练方案:按关节分组的标准动作 + 计数反馈,训练后再评估对比改善。

技术路线

MediaPipe Hands 预训练模型,不做权重微调;单目摄像头投影测角为估算参考值;原始画面仅内存推理不落地。

数据可追溯

每条记录含 _meta 元数据(应用/模型/数据字典版本、会话/设备、光照距离、校准),医学审计链设计。

精度验证

首轮独立对照验证:拇指 IP 关节 MAE≈2.8°,全关节 MAE 2.8–4.1°(6 名志愿者、1080 试次),达到同类先进水平(详见项目计划书附录)。

隐私与数据

  • 摄像头画面仅在本地内存处理,不保存原始图像
  • 仅保存关键点时序数据(x/y/z + 置信度 + 时间戳),数据本地优先
  • AI 分析仅发送测量值与任务描述,不发送个人身份信息
  • 数据可随时导出 / 删除;内测调试模式需用户明确同意

医学声明

本产品为健康参考工具,不替代临床医师诊断、体格检查与治疗方案。所有测量值为估算参考值, 个体差异需结合临床判断;AI 解读仅供参考,不构成诊断结论。医学指标参考范围与文献来源在各单页 逐条标注(当前以《康复功能评定学》第3版等为基线,正式版将补全引用)。若出现持续疼痛、肿胀、 功能明显受限等症状,请及时就医。

项目团队

团队构成

13 名跨学科成员(康复治疗学、临床医学、麻醉学、护理学、预防医学、医学信息资源管理),获 2026 年湖北省大学生创新训练计划国家级立项;2026 年中国国际大学生创新创业大赛湖北省铜奖。

核心成员

杜承燚(项目负责人):康复治疗学 + AI 工程师,主导系统架构设计与开发。
王心芸(行政与数据负责人):负责项目资料归档与数据管理。

指导老师

杨慧君(湖北医药学院康复医学系):康复评定规范与对照试验设计。
王艺琪(生物医疗大数据教研室主任):算法框架与智能评估系统研发。
罗汀(双创导师):创新创业与项目孵化指导。

联系与反馈

团队邮箱:Yuanzhiyikang11@outlook.com
反馈请附应用版本号、页面、操作步骤与现象(格式见 社区页)。

项目信息

当前版本

主程序版本:v2.6.2

更新记录

版本更新摘要与历史记录见 历史记录;完整《更新摘要》《用户手册》随项目文档发布。

法律声明

免责声明

元智医康为健康参考工具,所有测量值与 AI 解读均为估算参考值,非解剖学真值,不构成医疗诊断、 治疗方案或康复处方。个体测量结果受光线、手位、设备与模型能力影响,需结合临床判断。 本工具不替代医师体格检查与专业评估;出现持续疼痛、肿胀、功能受限或病情变化时,请及时就医。

隐私政策

  • 摄像头画面仅在本地内存处理,不保存、不上传原始图像
  • 仅保存关键点时序数据(坐标/置信度/时间戳),数据本地优先存储
  • AI 分析仅发送测量值与任务描述,不发送姓名等个人身份信息
  • 记录含 _meta 元数据(版本/会话/设备/条件),支持数据导出与删除
  • 内测调试模式如临时保存原图,须经用户明确同意

用户协议

使用本工具即表示您知悉并同意:本产品面向居家康复辅助场景,测量结果仅作健康参考; 请遵循医护人员建议,不依据本工具数值自行调整药物或治疗方案。协议全文占位(正式上线前由项目方确认发布)。

网站备案:ICP 备案号 京ICP备XXXXXXXX号(备案流程中,占位) —— 依据国家规定展示于页面底部。

主要参考文献(期刊 / 会议 / 预印本,含 DOI)

  • [1] 王玉龙主编. 康复功能评定学[M]. 3版. 北京: 人民卫生出版社, 2018. ISBN 978-7-117-27150-9.(教材)
  • [2] MCGEE C, O'BRIEN V, JOHNSON J, et al. Thumb carpometacarpal palmar and radial abduction in adults with thumb carpometacarpal joint pain: inter-rater reliability and precision of the inter-metacarpal distance method[J]. J Hand Ther, 2022, 35(3): 454-460. DOI: 10.1016/j.jht.2021.03.001
  • [3] REISSNER L, FISCHER G, LIST R, et al. Minimal detectable difference of the finger and wrist range of motion: comparison of goniometry and 3D motion analysis[J]. J Orthop Surg Res, 2019, 14: 173. DOI: 10.1186/s13018-019-1177-y
  • [4] ROSSI M, REHMAN S. Integrating artificial intelligence into telemedicine: evidence, challenges, and future directions[J]. Cureus, 2025, 17(8): e90829. DOI: 10.7759/cureus.90829
  • [5] LAFAYETTE T B D G, KUNST V H L, MELO P V S, et al. Validation of angle estimation based on body tracking data from RGB-D and RGB cameras for biomechanical assessment[J]. Sensors, 2023, 23(1): 3. DOI: 10.3390/s23010003
  • [6] ZHANG F, BAZAREVSKY V, VAKUNOV A, et al. MediaPipe Hands: on-device real-time hand tracking[EB/OL]. arXiv:2006.10214, 2020. arXiv:2006.10214
  • [7] PANTELERIS P, OIKONOMIDIS I, ARGYROS A A. Using a single RGB frame for real time 3D hand pose estimation in the wild[C]//2018 IEEE WACV. IEEE, 2018: 436-445.
  • [8] LIN F, WILHELM C, MARTINEZ T. Two-hand global 3D pose estimation using monocular RGB[EB/OL]. arXiv:2006.01320, 2020. arXiv:2006.01320
  • [9] DINH H G, ZHOU J Y, BENMIRA A, et al. Proof of concept and validation of single-camera AI-assisted live thumb motion capture[J]. Sensors, 2025, 25(15): 4633. DOI: 10.3390/s25154633
  • [10] SHINOHARA I, INUI A, MIFUNE Y, et al. Posture estimation model combined with machine learning estimates the radial abduction angle of the thumb with high accuracy[J]. Cureus, 2024, 16(10): e71034. DOI: 10.7759/cureus.71034
  • [11] GU F, FAN J, WANG Z, et al. Automatic range of motion measurement via smartphone images for telemedicine examination of the hand[J]. Sci Prog, 2023, 106(1): 1-17. DOI: 10.1177/00368504231152740
  • [12] EHARA Y, INUI A, MIFUNE Y, et al. Estimating the thumb rotation angle by using a tablet device with a posture estimation artificial intelligence model[J]. Cureus, 2024, 16(5): e59657. DOI: 10.7759/cureus.59657
  • [13] GIONFRIDA L, RUSLI W M R, BHARATH A A, et al. Validation of two-dimensional video-based inference of finger kinematics with pose estimation[J]. PLoS One, 2022, 17(11): e0276799. DOI: 10.1371/journal.pone.0276799
  • [14] SPRAGUE A H, VOGEL C, WILLIAMS M, et al. Evaluation of commercial camera-based solutions for tracking hand kinematics[J]. Sensors, 2025, 25(18): 5716. DOI: 10.3390/s25185716
  • [15] GU F, FAN J, CAI C, et al. Automatic detection of abnormal hand gestures in patients with radial, ulnar, or median nerve injury using hand pose estimation[J]. Front Neurol, 2022, 13: 1052505. DOI: 10.3389/fneur.2022.1052505
  • [16] DE VET H C W, TERWEE C B, KNOL D L, et al. When to use agreement versus reliability measures[J]. J Clin Epidemiol, 2006, 59(10): 1033-1039. DOI: 10.1016/j.jclinepi.2005.10.015
  • [17] BESHARA P, CHEN J F, READ A C, et al. The reliability and validity of wearable inertial sensors coupled with the Microsoft Kinect to measure shoulder range-of-motion[J]. Sensors, 2020, 20(24): 7238. DOI: 10.3390/s20247238
  • [18] 吕璐璐, 杨建涛, 顾凡彬, 等. 关键点矩阵技术用于手指关节运动角度无接触式智能测量的可行性研究[J]. 中国修复重建外科杂志, 2022, 36(5): 540-547. DOI: 10.7507/1002-1892.202201078
  • [19] LATRECHE A, KELAIAIA R, CHEMORI A, et al. Reliability and validity analysis of MediaPipe-based measurement system for some human rehabilitation motions[J]. Measurement, 2023, 214: 112826. DOI: 10.1016/j.measurement.2023.112826
  • [20] 薛永泰, 徐红旗. 关节活动度三种测量方法结果的一致性评价[J]. 吉林体育学院学报, 2019, 35(2): 69-74.
  • [21] FINLEY M, JELINEK J A, MISAMORE G. Three-dimensional analysis versus goniometric measurement of total active elevation in normal subjects[J]. J Shoulder Elbow Surg, 2015, 24(9): 1391-1396. DOI: 10.1016/j.jse.2015.02.005
  • [22] KLEIN L C, CHELLAL A A, GRILO V, et al. Assessing the reliability of AI-based angle detection for shoulder and elbow rehabilitation[C]//OL2A 2023, Vol. 2. Springer, 2024: 3-18. DOI: 10.1007/978-3-031-53036-4_1
  • [23] KUSUNOSE M, INUI A, MIFUNE Y, et al. Estimation of forearm pronation-supination angles using MediaPipe and IMU sensors: performance comparison and interpretability analysis of machine learning models[J]. Appl Sci, 2025, 15(19): 10527. DOI: 10.3390/app151910527
  • [24] MONTERO C, PORTILLO E, ZUBIZARRETA A, et al. Estimation of joint angles in the upper limbs using a smartphone[C]//Jornadas de Automática, 2026, 47: 13777. DOI: 10.17979/ja-cea.2026.47.13777
  • [25] 李培丰, 林愉添, 朱君毅, 等. 一种新的智能手机应用程序AR尺子测量腕关节活动度的可靠性和同时效度评估[J]. 中华手外科杂志, 2020, 36(6): 425-429. DOI: 10.3760/cma.j.cn311653-20200604-00241
  • [26] 李雅希, 陈思平, 杨欢. 基于MediaPipe的脑卒中患者康复系统设计[J]. 计算机技术与发展, 2025, 35(1): 169-176. DOI: 10.20165/j.cnki.issn1673-629X.2024.0284
  • [27] 徐胜, 刘志诚, 涂鑫涛, 等. 基于手势识别的手部康复智能评估算法研究[J]. 自动化仪表, 2021, 42(12): 23-27, 32. DOI: 10.16086/j.cnki.issn1000-0380.2021070029
  • [28] GUNEY G, JANSEN T S, DILL S, et al. Video-based hand movement analysis of Parkinson patients before and after medication using high-frame-rate videos and MediaPipe[J]. Sensors, 2022, 22(20): 7992. DOI: 10.3390/s22207992
  • [29] RACHANIKORN S, PREELEKHA P, NA LAMPHUN P, et al. Development of a stroke tele-rehabilitation system using markerless augmented reality and a hybrid AI-based clinical decision support dashboard[J]. J Eng Ind Technol, Kalasin University, 2026, 4(4): 95-109.
  • [30] CHIU H Y, SU F C, WANG S T, et al. The motion analysis system and goniometry of the finger joints[J]. J Hand Surg Br, 1998, 23(6): 788-791. DOI: 10.1016/S0266-7681(98)80098-3
  • [31] WILLIAMS N W, PENROSE J M T, CADDY C M, et al. A goniometric glove for clinical hand assessment: construction, calibration and validation[J]. J Hand Surg Br, 2000, 25(2): 200-207. DOI: 10.1054/jhsb.1999.0360
  • [32] PALANI P, PANIGRAHI S, JAMMI S A, et al. Real-time joint angle estimation using Mediapipe framework and inertial sensors[C]//2022 IEEE BIBE. IEEE, 2022: 128-133. DOI: 10.1109/BIBE55377.2022.00035
  • [33] SABO A, MITTAL N, DESHPANDE A, et al. Automated, vision-based goniometry and range of motion calculation in individuals with suspected Ehlers-Danlos syndromes/generalized hypermobility spectrum disorders: a comparison of pose-estimation libraries to goniometric measurements[J]. IEEE J Transl Eng Health Med, 2023, 12: 140-150. DOI: 10.1109/JTEHM.2023.3327691
  • [34] BARZEGAR KHANGHAH A, FERNIE G, ROSHAN FEKR A. Joint angle estimation during shoulder abduction exercise using contactless technology[J]. Biomed Eng Online, 2024, 23: 11. DOI: 10.1186/s12938-024-01203-5
  • [35] SAMANI A S, RAZEGHI M, ABDOLI-ERAMAKI M, et al. Optimizing camera placement in multi-view markerless motion capture: a validation study against gold-standard kinematics for static and dynamic tasks[J]. BMC Res Notes, 2026, 19: 303. DOI: 10.1186/s13104-026-07886-4

注:列表取自团队论文《基于MediaPipe的居家手部关节活动度测量系统与临床量角器的一致性验证》(中国康复理论与实践,投稿中)参考文献;[1] 为主要参考教材《康复功能评定学》。