飲食店メニュー読み上げシステム2
 −Character Information From Menu−

  • 研究目的
  •  飲食店において,点字メニューの普及はまだまだ不十分です.また,視覚障害者には,一人で飲食店に行きたい,予算に収まる商品を選ぶために価格を知りたい,という要望があり,全てのメニューの内容を晴眼者に聞くのは難しいです.
     そこで本研究では,図1のようにモバイルスキャナやノートPCなどを用いて,飲食店メニュー情報(品目・価格)を取得して,利用者に伝達する携帯型システムを研究・開発しています.


    図1 システム構成

  • 研究内容
  •  文字(品目・価格)が料理の写真などと重ならないような比較的シンプルなメニューに対しては,複数のフィルタリング処理を行い,最後にOCRにより文字認識します. しかし,飲食店メニューには,文字が写真と重なっていたり,複数の色で書かれていたりするような複雑なものもあります. 本研究では,このようなメニューに対しては,通貨記号の色を抽出することで文字と写真を切り分けた後,シンプルなメニューと同様の処理を行います.
     本研究では,できるだけ多くのメニューに対応できるようなシステムの完成を目指しています.

    (a)文字が写真と重ならないメニュー              (b)文字が写真と重なるメニュー
    図2 入力画像の一部


    (a)文字が写真と重ならないメニュー              (b)文字が写真と重なるメニュー
    図2 最終画像の一部

  • 研究成果
    1. 小林 慎平,松本 哲也,竹内 義則,工藤 博章,大西 昇,”視覚障害者向けの飲食店メニュー情報取得支援システム”, 電子情報通信学会技術研究報告 WIT,Vol.112, No.475, pp.139-144, Mar. 2013.
    2. 小林 慎平,松本 哲也,竹内 義則,工藤 博章,大西 昇,”視覚障害者のための飲食店メニュー読み上げシステム”, 映像情報メディア学会2012年年次大会講演予稿集,18-3, 広島,Aug. 2012.
    3. 小林 慎平,土井 泰法,竹内 義則,松本 哲也,工藤 博章,大西 昇,”視覚障害者のための飲食店メニュー読み上げシステム”, 電気関係学会東海支部連合大会講演論文集,H3-5,Sep. 2011.
    4. 土井 泰法,竹内 義則,松本 哲也,工藤 博章,大西 昇,”視覚障害者のための飲食店メニュー読み上げシステム”, 電気関係学会東海支部連合大会講演論文集,O-151,Sep. 2009.