Usecase

ユースケース

現場支援

AIグラス×Microsoft Teamsによる作業支援・記録・遠隔支援

作業者と同じものを見て、同じ話を聞くAI。判断に迷う場面では、Teamsで熟練技術者へ。

AIグラスをかけた作業者の視界と音声は、スマートフォンを経由してAIに届きます。同じものを見ているAIが、次の手順を示し、作業の記録を取り、危険な行動を知らせます。手順書は熟練者の作業を一度撮影すれば自動で用意され、記録は工程ごとの写真から報告項目まで整理されます。人の判断が要る場面では、Microsoft Teamsで遠隔の熟練技術者につながります。

使用デバイス

  • スマートグラス
  • スマートフォン
AIグラスをかけた作業者が配管の弁を指さし、目の前に手順のチェックリストと、遠隔の熟練技術者が映るMicrosoft Teamsの画面が浮かんでいる様子。

現在の課題

  • 作業手順やコツが紙のマニュアルと個人の経験に頼りがちで、標準化や引き継ぎが進みにくい状況があります。
  • 作業実績や異常の記録を現場を離れてから入力する運用では、報告までのタイムラグや記載漏れが起こりやすくなります。
  • ながら歩きや設備への不意の手出しといった危険な行動は、その場に気づける人がいないと見過ごされがちです。
  • トラブルのたびに熟練技術者が現地へ向かう体制では、対応が始まるまでに時間がかかりやすくなります。

Xynapse導入後

  • 熟練者の作業をAIグラスで撮影すると、AIが工程ごとに作業を分解し、手順書を自動で作成します。
  • 作業中は次の手順と注意点をAIグラスに提示し、経験の差によらず同じ品質で作業を進められます。
  • 工程ごとに撮影した写真をスマートフォンが自動で検知して記録し、報告書の下書きまで作成します。
  • 映像をその場で解析し、ながら歩きや不意の手出しなどの危険な行動をリアルタイムでお知らせします。
  • 判断が必要な場面では、AIグラスのカメラとマイクをMicrosoft Teamsにつなぎ、遠隔の熟練技術者と同じ映像を見ながら相談できます。

導入効果

AIグラスをかけた作業者の作業が工程 1〜4 のカードに分解され、写真つきの手順書にまとまっていく様子。

手順書の自動作成・更新

これまで数日かけて作っていた作業マニュアルが、熟練者の作業を一度撮影するだけで下書きまで出来上がります。文章と写真を人が起こす手間がなくなり、内容の更新も撮り直すだけで済みます。

計器を確認する作業者の写真と音声が自動で拾われ、タブレットの報告書に項目ごとに並んでいく様子。

報告書・作業記録の自動化

作業の結果はその場で写真と音声として残り、AIが報告に必要な項目を抽出して整理します。現場を離れてから思い出して入力する必要がなくなり、記載漏れや事実とのずれもなくなりました。

稼働中の設備へ手を伸ばした作業者に、AIグラスの視界で危険範囲が赤く示され、警告が出ている様子。

危険行動・ヒヤリハットの抑制

AIグラスから届く映像をその場で解析し、ながら歩きや設備への不意の手出しを検知して作業者にお知らせします。ヒヤリハットの記録も自動で残り、手順の見直しや再発防止に使えます。

関連製品・モジュール

  • 教育効率化 MR アプリケーション

    Assists

    テキストや 3D モデルなどを空間に表示できる教育用のアプリケーション。

  • 熟練の技を記録して活用する技術伝承 MR トレーニングツール

    TechniCapture

    手指や視線の動きをアニメーション形式で再現できるアプリケーション。

Contact

物理的・時間的な制約を超え、
現場の可能性を次のステージへ。

一時的な効率化にとどまらず、現場のあり方そのものを変革し、再現性の高い仕組みを確立する。
それが Xynapse の目指す変革の姿です。
技術と運用のプロフェッショナルとして、貴社が描くビジョンを具現化へと先導します。