Deep-Learning ディープラーニングのお勉強～その６。ESP32とM5Cameraでリアルタイム画像認識に挑戦～
ディープラーニングのお勉強第６弾で、ESP32やM5Cameraで畳み込みニューラルネットワークをArduinoプログラミングして、夢のイメージセンサ画像認識に挑戦してみました。シリアルモニターに表示させるだけですが、かなり自己満足できました。
イメージセンサ
Deep-Learning 
M5Stack M5StackとM5Camera でWiFi TCP/IP 動画ストリーミングする実験
M5Stack と M5Camera を使って、WiFi TCP/IP でMJPEG (BMP) 動画ストリーミングをやってみた。スマホやパソコンのブラウザに切り替えて表示可能です。双方向通信でイメージセンサ(OV2640)のホワイトバランスや露出調整ができます。フレームレートの不思議な挙動が謎です。
M5Stack M5StackとM5CameraでWiFi, UDPによる動画転送を長時間連続安定動作させる実験
M5Stack と M5Camera で WiFi UDP を使った動画転送を、CPUフルパワーで24時間以上の長時間連続稼働ができるようになりました。それには「割り込み」を使ったり、CPU core の使い分け、CPU温度を監視したり、冷却ファンをつけたり等、いろいろな解決策がありました。
ESP32 ( ESP-WROOM-32 ) esp32-cameraライブラリを読み解く ～OV2640, SCCB, DMA, I2S 編～
ESP32のDMAとI2Sを使って、イメージセンサOV2640の画像データを転送してみた。SCCBインターフェースでOV2640を制御したり、ロジックアナライザーでフレームサイズを確認したり、カラーバーを表示させたり、デジタルズームを使ってみたりして、esp32-cameraライブラリを読み解く第３弾です。
ESP32 ( ESP-WROOM-32 ) esp32-cameraライブラリを読み解く ～モジュール接続、動作チェック編～
Arduino core の esp32-camera ライブラリを読み解く第２弾。ESP32-DevKitC と OV2640 カメラモジュールと OLED SSD1331 を接続して、サンプルスケッチを動かしてみました。結構フレームレート速いです。ほとんど自作デジカメです。
M5Stack M5Camera の映像をArduino IDE シリアルモニターに表示させてみる
M5Camera に搭載されている CMOS カメラセンサーモジュール OV2640 で取得した映像を、Arduino IDE のシリアルモニターに表示させる実験をしてみました。サンプルスケッチから自由に画素データを取り出せるようになりました。