YouPose ポーズとアバターで楽しく運動、リハビリプラットフォーム!

© CC BY 4+ visibility1016
© CC BY 4+
visibility1016

怪我をしても大丈夫!リハビリしたい部位を指定して、一緒にやって欲しいアバターを選ぶだけで、ChatGPTがメニューを自動生成、体を使ったゲームが完成。つまらないリハビリも筋トレも楽しく続けられる!

link https://youpose.ktrips.net/
  • 健康・リラックス賞 by HappyLifeCreators藤岡ヒーローズ・リーグ 2024
動画
開発素材
システム構成
system image

YouPose: アバターとポーズで体を使ったゲームで遊べる

  • PoseNet: 体の17個の部位と顔パーツをカメラで読み取り、位置を取得
  • Pose-Animator: PoseNetの部位をSVGのアニメーションに連動させ、リアルタイムの動きを生成
  • Gaming: 上下左右からオブジェクトを動かし、PoseNetパーツとの当たり判定でゲームを作る
  • ChatGPT: 体部位とアクティビティをChatGPT APIに与え、それに適したリハビリ、運動方法を自動生成
Use Case YouPose at Hospital
1. リハビリ: 怪我した部位を選んでアバターとリハビリ
2. 筋トレ: 鍛えたい所を選んで腹筋、背筋
3. PoseWatchを付ければ、心拍や運動の強度をYouPose結果に反映。YouPoseでの当たり判定結果を、バイブでPoseWatchにフィードバック
4. (開発中)ビデオをアップロードすると、その動きをPoseNetに取り込む。ビデオと自分の動きが一致するかを判定して、ヨガやダンスの練習に使えるように!ポーズ業界のYouTubeのように!
5. 毎日続けられるかチャレンジ、ゴール設定(東海道五十三次)により長く続けられる仕組みづくり
YouPose at Hospital
ストーリー
  1. 2024/3月、マウンテンバイクで落ちて左腕をヒドく骨折して1ヶ月入院
  2. 2024/4月、リハビリを1年くらいやらなきゃ治らない、、、でもつまらない
  3. 娘がお見舞いに来てくれて、一度だけ一緒にリハビリしてくれた!楽しかった!一緒にやってくれる人がいれば続けられる、ゴールがあればやる気になる!
  4. 2024/9月、この想いを元に、Raspberry Piでリハビリデバイス作った!MakerFaire Tokyo 2024に出展!
  5. MakerFaire会場で、スマホだけの方がどこでも出来て便利との声。リハビリだけじゃなく、筋トレやダンスにも使いたいとも >> スマホのWebアプリ https://YouPose.ktrips.net に!
  6. 2024/10月、やっぱりハードが好きなので、PoseWatchを作成し、心拍数と運動強度との連動、当たり判定からのフィードバックを実現
  7. ビデオアップロードから、ヨガやダンスの動きを真似る事により、ポーズのプラットフォーム化(開発中)
  8. 再手術で再入院。めげずに病室でYouPoseリハビリ! ←イマココ! YouPose at Hospital
メンバー
  • user
    Kenichi Yoshida @ktrips
    • full stack engineer
    • Maker
    • Developer

関連イベント
  • event ヒーローズ・リーグ 20242024-09-02 開催
  • event アバナードHuman Impactリーグ2024-09-02 開催
関連リンク
user
健康・リラックス賞 by HappyLifeCreators藤岡 @ヒーローズ・リーグ 2024

健康というテーマの中で開発者の想いがストーリーから伝わりました!特に良かった点が①技術を楽しんでる点、AI・Web・ウェアラブルなど様々な技術を実装・チャレンジされている。②大人から子供まで楽しめる。③拡張性・応用が沢山アイデアがありそうな点。以上が選定理由です。今後も期待してます。

user
Kenichi Yoshida @ktrips

ありがとうございました!
これからも色んな体の悩みに応えるべく頑張ります!


同じニオイがする作品
  • event TRICK SCOOP
  • event STM Deck
  • event opniz
  • event デジたま2 the AI

Proto lovers ♥
user
user
user
user
user
user
user

作品を登録しよう

モノづくりしている人に、つくった作品を見てもらえ、リアクションがもらえるかも?

close

目次


Proto lovers ♥
user
user
user
user
user
user
user