東芝AI技術カタログ

異常検知状態推定メディア認識

画像と点検質問によるヒヤリハット検知技術

現場の画像から、安全マニュアルに違反したヒヤリハット要因を自動で検知します。

  • ・現場のマニュアル等から作成した安全点検質問と現場の画像を入力とし、質問応答AI(VQA: Visual Question Answering)により現在の状況を回答します。
  • ・画像+質問という汎用的なフォーマットのため、様々な現場にすぐに適用できます。
  • ・点検項目を追加・変更したい場合は、質問文を追加・編集するだけで検出アルゴリズムを作り変えることなしにすぐに対応できます。
画像と点検質問によるヒヤリハット検知技術イメージ

応用先

  • ・生産現場でのヒヤリハット検知
  • ・放送コンテンツからの特定シーンの検索、ドライブレコーダーや監視カメラ映像からの特定の状況や人物の検索、状況が類似した過去のヒヤリハット事例検索など、絞り込み条件に質問文を用いた画像検索
  • ・その他、画像と質問から回答を推定する用途に応用可能

ベンチマーク・強み・実績

  • ・世界的標準の公開データセット(VQA-v2)を用いた性能評価において、画像に対する質問に世界最高精度で回答(2021年4月時点)

問い合わせ窓口

東芝研究開発センターへのお問合せ

問合せの際はタイトル[東芝AI技術カタログ:画像と点検質問によるヒヤリハット検知技術]やURLを文面に含めてください。
本技術は研究開発中のためご要望にすぐに対応できない可能性があります。

参考文献: