FRIDGEYE (フリージア)
製品概要
Life × Tech
背景(製品開発のきっかけ、課題等)
- 身近なものをテクノロジーを使って,より便利にしたいと考えた
- 冷蔵庫を持つ人たちの「あれあったっけ?」や「今日の晩御飯は何にしよう?」といった,ちょっとした悩み事を解決する
製品説明(具体的な製品の説明)
IoTとスマートフォンアプリケーションを用いた冷蔵庫SCANシステム.冷蔵庫の中に何が何個残っているのか,外出中でもアプリで確認ができる.冷蔵庫内カメラにて撮影した画像を,RaspberryPiで画像処理と機械学習を用いることで,冷蔵庫内に何が何個といったデータを検出している.また,冷蔵庫に鏡を張っており,狭い空間の中での広範囲撮影,カメラ等のデバイスの固定を実現している.更には,在庫の食材を元にオススメのレシピを表示する機能を実装している.これにより,ユーザーは在庫と献立を考えながら効率よく買い物できる.
特長
1. 特長1
画像処理・機械学習を用いて,冷蔵庫内在庫の種類と個数のデータを取得している
2. 特長2
外出中でも,専用スマホアプリケーションで冷蔵庫の中身を確認できる
3. 特長3
冷蔵庫内在庫データを元に,オススメのレシピを表示できる
解決出来ること
冷蔵庫内を常に把握できるようになることで,食材購入時に起こる買い物忘れ・超過がなくなり,ストレス原因の排除・時間損失確率の低下が見込める.
今後の展望
食材の消費期限・卵の残り個数といった,カメラから見て冷蔵庫の死角に位置するものを圧力センサを用いて,重量差分で検出.
開発内容・開発技術
活用した技術
API・データ
- 楽天レシピカテゴリ一覧API
- 楽天レシピカテゴリ別ランキングAPI
- AWS
- Google Cloud Platform(Vision API)
- 翻訳API
フレームワーク・ライブラリ・モジュール
- React.js
- Redux
- superagent
- Material-UI
- Node.js
- Cordova
- Xcode
デバイス
- Raspberry Pi
- iPhone7
- Log9ool HDウェブカメラC510
研究内容・事前開発プロダクト(任意)
- 特になし
独自開発技術(Hack Dayで開発したもの)
2日間に開発した独自の機能・技術
- IoT化した冷蔵庫
- 画像処理と機械学習を用いた,食材名・個数検知システム
- スマートフォンアプリ
- IoTとアプリを仲介するサーバー