宿泊施設のビュッフェを対象とした追加調理指示システムの構築

摘要

近年，宿泊施設は朝食と夕食にビュッフェ形式を採用する傾向にある.ビュッフェ形式では，料理品質を保つためにスタッフの指示によって適宜追加調理をしている.しかし，接客を含む多くの業務を抱えるスタッフが，切なタイミングで指示を出すことは難しい.そこで，宿泊施設のビュッフェにおける顧客満足度の低下を防ぐために，追加調理指示を自動化することを本研究の目的とする.この目的を達成するために，厨房へ追加調理を指示するシステムを構築する.追加指示は，食器領域検出，料理領域抽出，残量計測，追加調理判断の4段階を経て行う.まず，カメラによって撮影した画像から，CNNを用いて食器領域を検出する.検出に使用するモデルは，Mask R-CNNによる学習済みモデルである.次に，HSV色情報を用いて料理領域を抽出する.最後に，ブロブ解析により算出された面積の合計を残量とする.そして，これら3工程を繰り返し行い，残量が事前に定めた閾値を下回ったと判断したときに追加調理を指示する.ホテルAの夕食ビュッフェを対象に実証実験を行った結果，彩度の低い食器を用いた料理は適切に追加指示を出すことができた.しかし，模様付きの食器に盛り付けられた料理は，適切に抽出できなかつた.これらの結果から，料理領域の抽出方法を改善すべきであると考えられる.