---
title: "ロボット×XR"
description: "ROS、Unity、NVIDIA Omniverse などを活用した、ロボット・フィジカルAI領域におけるホロラボの開発事例のご紹介です。XRとロボットを組み合わせた遠隔操作や自動化を支援します。"
og_image: "/assets/img/robot/robot_01.jpg"
campaign_id: "701Q8000022hZ22IAE"
contact_heading: "貴社の課題解決に伴走します！どんなことでもご相談ください。"
---

## ホロラボのロボット／フィジカルAIに関する取組み

<div class="block-txt mb25">
      ホロラボでは「フィジカルとデジタルをつなぐ。」をテーマに、XR開発で培った知見を活かしたロボットやフィジカルAI領域での受託開発やR&amp;Dを行っています。<br>
      ROSやUnity、NVIDIA Omniverseなどのソフトウェア／シミュレーションにとどまらず、ロボット実機を使った開発や、3DGSや点群スキャンによるシミュレーション用の環境マッピングデータなど、幅広い相談内容に対応しています。<br>
      <br>
      【ご相談例】
  <div class="block-txt mb30">
      <ul>
          <li>XRデバイスや各種センサーを活用したロボットの遠隔操作やテレオペレーションの検証
          </li>
          <li>3Dスキャンデータを活用したシミュレーション/デジタルツイン環境の構築
          </li>
          <li>ロボット実機を用いた検証・PoC・受託開発
          </li>
      </ul>
  </div>
  </div>

<div class="block-txt txt-center btn-margin">
      <a class="btn-txt" href="#contact">お問い合わせ</a>
  </div>

## 開発/導入事例 {.cases}

```cards
- title: 協働ロボットの操縦デモアプリケーション
  client: 第一三共株式会社DX企画部様
  image: /assets/img/robot/robot_01.jpg
  text: デジタルファクトリー領域における製薬作業の DX について、フィジカルとデジタルを繋ぐ協働ロボットの活用のため、Apple Vision Pro によって協働ロボットの双腕の操縦ができるデモアプリケーションを開発しました。
  tags: Apple Vision Pro/Unity/ROS/デジタルファクトリー
  link: /showcases/robot/#cobot-teleoperation
```

## ショーケース一覧

　ホロラボでは、お客様との受託開発や社内R&amp;Dを通じて、ロボットとXR/シミュレーションを組み合わせた取組みを進めています。
　このページではその成果をショーケースとしてまとめており、これからロボットやフィジカルAIに取り組む皆様のアイデアの源泉となることを目的としています。
<!-- #showcase-list -->

## 協働ロボットの操縦 {#cobot-teleoperation}

　Apple Vision Pro を活用し、直感的にロボットを操縦できるデモアプリです。ROS を介してロボット実機およびシミュレータの制御・状態取得を行い、操縦者が装着する Apple Vision Pro とネットワーク連携します。​
　操縦者が仮想空間（シミュレータ）内の双腕ロボットの手先をつかんで動かすことで、ロボット実機を操作できます。
ロボット実機には、カワダロボティクス社製の双腕協働ロボット「NEXTAGE Fillie OPEN」を使用しています。

カテゴリ：製造,ロボット遠隔操作検証,ROS
制作環境：Unity

https://youtu.be/oBk7Wz31Kho

## ハンディ3Dスキャナーデータの Isaac Sim/Lab でのシミュレーション活用 {#isaac-sim}

　XGRIDS のハンディスキャナーによって撮影/処理を行った USDZ 形式の環境データから Isaac Sim/Lab (NVIDIA Omniverse) にて衝突メッシュを作成し、ヒューマノイドロボットの歩行の強化学習を実施しました。​
　実際の現場をスキャンしたデータをそのままシミュレーション環境として利用できるため、現地での試行回数を抑えながら学習を進めることができます。

カテゴリ：強化学習,3DGS,ヒューマノイドロボット
制作環境：Isaac Sim/Lab (NVIDIA Omniverse)

https://youtu.be/6Xk7iiD-f_E

## アーム型ロボットに対するVR機器を用いたテレオペレーション {#arm-teleoperation}

　Meta Quest 3 内蔵のハンドトラッキングをリーダーに、アーム型ロボット SO-101 をフォロワーとしたリーダーフォロワー制御の検証を行いました。​
　専用のコントローラーを用意することなく、手の動きだけで直感的にロボットを操作できます。

カテゴリ：ロボット遠隔操作,テレオペレーション,ハンドトラッキング
制作環境：Meta Quest 3,SO-101

https://youtu.be/qixvIU73EWw

## 4足歩行ロボットによる3DGSスキャンの自動化検証 {#quadruped-3dgs}

　4足歩行ロボット Unitree Go1 と、3D Gaussian Splatting (3DGS：ガウシアンスプラッティング) の生成に特化した XGRIDS のハンディスキャナーを組み合わせた 3DGS スキャンの自動化検証を行いました。​
　人が立ち入りにくい環境や、定期的に同じ範囲をスキャンしたい用途での活用が見込めます。

カテゴリ：スキャン自動化,3DGS,デジタルツイン
制作環境：Unitree Go1,XGRIDS

https://youtu.be/ih5dQmHu2sU