[M5StickV]BrownieでAIカメラのすごさを体感しよう!

2019年9月13日2019年9月16日M5Stack

M5StickV のファームアップデートができたので、いよいよ Brownie を動かしてみようと思います。

今回は20種類の物体を判別できるバージョンを試します。

Mac miniでM5StickVのファームウェアアップデートしたらハマった件

とうとう手に入れましたよM5StickV！Twitterで衝撃を受けて即ポチです。Mac miniでとりあえずファーム ...

 https://www.hivoki.com/m5stickv-firmware/

SDカードガチャ！？動くSDカードを入手しよう

microSDカードに入れたプログラム（Brownie）を M5StickV に挿入することで動作させます。

で、M5StickV はSDカードの相性に非常に厳しいです。相性が悪いと認識してくれません。私も自宅に5枚ありましたが全滅でした。

動作確認済リストを参考にしよう

Brownie作者の@ksasaoさんが動作確認済のSDカードをリストにされています。本当にありがたい。

brownie/README.ja.md at master · ksasao/brownie · GitHub

Brownie is an offline object detection app for M5StickV that will tell you the name of the objec ...

 https://github.com/ksasao/brownie/blob/master/README.ja.md

▼リストはここです

そもそもClass10じゃないとダメなようです。

間違えて買ったSDカードがたまたま動いた

▼私が買ったのはコレです。（もう品切れ）

Amazon | ADATA microSDHCカード 32GB Premier microSDHC UHS-I Class10 [SDカードア

ADATA microSDHCカード 32GB Premier microSDHC UHS-I Class10 [SDカードアダプタ付] AUSDH32GUICL10 8 ...

 https://www.amazon.co.jp/gp/product/B07BXPHTKT/

後でリストを再確認すると間違ったカードでした。たまたま動いて良かった。

▼ほんとに買いたかったのはこっちです

SDカードにBrownieを入れよう

FAT32でフォーマット

まずはSDカードをFAT32でフォーマットします。

OSの機能でフォーマットしても良かったのですが、馴染みのSDメモリカードフォーマッターを使いました。

SD Memory Card Formatter for Windows/Mac | SD Association

SD Memory Card Formatter for Windows/Mac | SD Association ENGLISH 日本語 Member Login Join the S ...

 https://www.sdcard.org/jp/downloads/formatter/

▼複数SDカードが挿さっている時は間違えないようにしよう

Brownieをダウンロードする

brownie/README.ja.md at master · ksasao/brownie · GitHub

Brownie is an offline object detection app for M5StickV that will tell you the name of the objec ...

 https://github.com/ksasao/brownie/blob/master/README.ja.md

▼ここからダウンロードします

ダウンロードしたら展開しましょう。

SDカードにコピーする

展開したファイルをSDカードにコピーします。

▼中のファイルをSDカードのルートにコピーします

Brownieを起動してみよう

M5StickVにUSBケーブルを挿して電源オンの状態にする

USBケーブルを挿すと自動で電源がオンになります。

十分に充電できていれば挿さなくても大丈夫っぽいのですが、内蔵バッテリーでは認識しないSDカードもあるようです。

USBケーブルはとりあえず挿しっぱなしにしておきましょう。

SDカードをM5StickVに挿入する

PCからSDカードを抜いてM5StickVに挿します。

M5StickVを再起動する

電源ボタンを6秒押しっぱなしにして再起動します。

電源ボタンを6秒押すと電源が切れるのですが、USBケーブルを挿しっぱなしにしているとすぐさま電源がオンになります。再起動というより、電源オフ→自動で電源オン、の方が正確かも。

ピコーン！という音と共にM5StickVのロゴが表示されてしまったらSDカードの認識失敗です。そのままもう一回再起動しましょう。相性の良いSDカードだと一回で認識されるようです。後でSDカード買い直そうかしら。

▼うまく起動できると「ぶらうにー」ってしゃべってくれます

brownie動いた！SDカードを入れた後リブート→もう一回リブートするとSDカード認識した。#M5StickV https://t.co/uGr40qK45M pic.twitter.com/2pdfESKgFy

— ヴォリー@ITエンジニア (@hivokiblog) August 20, 2019

Brownieで遊ぼう

M5StickV で見たものの名前を音声で返すやつ作った。かわいい。 pic.twitter.com/sRK6Otag5k

— ミクミンP/Kazuhiro Sasao (@ksasao) July 18, 2019

オレンジの枠とともに認識されたモノの英語テキストが表示されます。

そしたら正面の大きいボタンを押しましょう。かわいい声で教えてくれます。

Brownie Object & Face detectionが認識できるもの

Brownie Object & Face detectionが使用している機械学習モデルは、20種類の物体を判別することができます。

実物じゃなく画像でも認識するので、ググるのが手っ取り早いと思います。

1,000種類を認識するバージョンも！

Release 1000 class (preview) · ksasao/brownie · GitHub

1000-class object recognition. You must update firmware to minimum version of MaixPy for M5Stick ...

 https://github.com/ksasao/brownie/releases/tag/v1.1_1000clas...

テキスト表示はありませんが、ちゃんと声で教えてくれます。いやはや・・・。

*.kmodelを生成すれば色々と捗りそう

M5StickV は *.kmodel という機械学習モデルのファイルを使って判定しています。

TensorFlow（ディープラーニングのライブラリ by Google） + MNIST（ディープラーニング用の画像たくさん） で学習して *.kmodel ファイルを生成すれば色々と楽しいことができそうです。

TensorFlow

An end-to-end open source machine learning platform for everyone. Discover TensorFlow's flex ...

 https://www.tensorflow.org/

MNIST handwritten digit database, Yann LeCun, Corinna Cortes and Chris Burges

MNIST handwritten digit database, Yann LeCun, Corinna Cortes and Chris Burges THE MNIST DATABASE ...

 http://yann.lecun.com/exdb/mnist/