ディスクトップ画面（cluster）のYOLOv5による物体検出

開発中 2022.05.09 公開（2022.05.09 更新） © CC BY 4+ visibility718

開発中 © CC BY 4+

2022.05.09 公開（2022.05.09 更新） visibility718

カメラではなく、ディスクトップ画面（cluster）の表示データをYOLOv5に入れて物体検出を行います。

システム構成: 1.Androidのアプリ画面（cluster）をPC（Linux:Ubuntu）にscrcpyで取り込みます
（Windows、Macの場合はclusterが動くので必要ないです。。）
2.画面をmss（Pyhtonライブラリ）でデータとしてYOLOv5に入れます

utils/datasets.pyのclass LoadStreamsの
「def __init__」「def update」の
「self.imgs[i]」にスクリーンショットの画像を入れます。

3.YOLOv5で物体検出します

検出結果から、アバターを自動で動かしかったのですが
検出と動作の同期が難しくうまくできませんでした。。
このため、検出部分のみ載せます。