ディスクトップ画面(cluster)のYOLOv5による物体検出

© CC BY 4+ visibility717
© CC BY 4+
visibility717

カメラではなく、ディスクトップ画面(cluster)の表示データをYOLOv5に入れて物体検出を行います。

動画
システム構成
system image

1.Androidのアプリ画面(cluster)をPC(Linux:Ubuntu)にscrcpyで取り込みます
(Windows、Macの場合はclusterが動くので必要ないです。。)
2.画面をmss(Pyhtonライブラリ)でデータとしてYOLOv5に入れます

utils/datasets.pyのclass LoadStreamsの
「def __init__」「def update」の
「self.imgs[i]」にスクリーンショットの画像を入れます。

3.YOLOv5で物体検出します

検出結果から、アバターを自動で動かしかったのですが
検出と動作の同期が難しくうまくできませんでした。。
このため、検出部分のみ載せます。

メンバー
  • user
    es.. @esc122

同じニオイがする作品
  • event 1000円BTリモコン基板(コストダウン版)
  • event 美人なび -びじなび-
  • event Happy Sound
  • event 家族の絵本

Proto lovers ♥
user

イベントまとめ

コンテストまとめ

作品を登録しよう

モノづくりしている人に、つくった作品を見てもらえ、リアクションがもらえるかも?

close

目次


Proto lovers ♥
user