鳥の声をlocal認識してe-ink図鑑へ
これは何?FuglerammeはRaspberry Piとmicrophoneで鳥の声を認識し、対応する19世紀風illustrationをe-ink frameへ表示するopen source作品です。
音声検出からspecies分類、画像選択、表示までをlocalで処理し、cloudへ録音を送りません。低更新頻度のe-inkと常時待機するaudio pipelineを組み合わせ、家庭内deviceとして成立させています。
privacyを守るedge inferenceと、出力deviceの制約に合わせたproduct設計の好例です。認識精度だけでなく誤検出時の表示体験まで含めて設計できます。
- 読むべき人
- IoT developer、ML engineer、maker
- HN
- 2183 points / 244 comments