Picognizer

Picognizerは、JavaScriptのみで記述されブラウザで動作する、電子音検出・認識のためのオープンソースライブラリです。ゲーム音、録音し再生された人間の声や音楽、電子機器の通知音などの検出を行えます。Picognizerを使えば、ソースコードの入手できないテレビゲームを改造したり、IoT化されていない家電の通知音を起点としたMashupなどが容易に行えます。

できることの例：
・スーパーマリオブラザーズでコインを取ったら、実世界でもコインを貰える
・モンスターストライクでボスが登場したら、部屋のIoT照明で緊張感を高める
・ニンテンドーSwitchの早打ちガンマンゲームを自動操作
・マクドナルドのポテトの揚げたて音を検出してスマホに通知

機械学習は用いておりません。Webブラウザ単体で高速に動作します。音声の検出後はIDCFチャンネル経由でMyThingsや自作IoTデバイスに通知したり、指定した任意のJavaScriptコードを実行することができます。

---

PC/Mac/AndroidのFirefoxが推奨環境です。

音声認識に必要なパラメータは、すべてURLだけで指定できます。
詳しくはプロジェクトサイト：
http://www.unryu.org/home/picognizer
を御覧ください。