詳細を読む
ラスベガスのT-Mobileアリーナで、NHLチーム「ベガス・ゴールデンナイツ」の試合観戦者向けに、ロボットバーテンダー「ADAM」が飲み物を提供しています。
ADAMはRichtech Roboticsが開発し、NVIDIAのIsaacプラットフォームを基盤としています。ADAMという名称は「Automated Dual Arm Mixologist（自動化デュアルアーム調合師）」の略です。
実際の稼働前に、ADAMはNVIDIA Isaac Simを用いた仮想バーで訓練を受けました。カップや器具、照明の変化まで再現した高精度シミュレーションで、合成データを活用してグレアや反射がある状況でも物体を認識できるよう学習しています。
飲み物の注ぎ方やシェイクの動作は、NVIDIAのオープンソースロボット学習フレームワークであるIsaac Labで磨かれました。単なる手順の実行にとどまらず、環境の変化に精度高く適応できる能力を備えています。
ADAMの制御にはNVIDIA Jetson AGX Orinが使われており、275 TOPSの演算能力でエッジAI処理を実現しています。Isaac ROS 2ライブラリでカメラ映像を取り込み、TAO ToolkitとTensorRTで最適化された知覚スタックが40ms未満の遅延でカップや液面を識別します。
これにより、カップの位置がずれていても自動修正し、泡が縁に達したタイミングを検知して注ぎを止めるなど、繊細な動作制御が可能となっています。
Richtech Roboticsは同時に、工場や倉庫向けの人型移動ロボット「Dex」も開発しています。DexはNVIDIA Jetson Thorを搭載し、部品の仕分けや梱包など軽中量の産業タスクに対応します。Isaac Simの合成データと実世界データを組み合わせた訓練により、多様な現場シナリオに汎化できるモデルを実現しています。
Richtech Roboticsの社長Matt Casella氏は「ホスピタリティ業界が抱える深刻な人手不足に対し、ADAMは顧客体験を高めながらその課題に応える解決策です」と述べており、T-Mobileアリーナでの反響は非常に良好とのことです。