Search

자연어 기반 시뮬레이션 & 현실 로봇 제어 프레임워크

개요

6D Pose Estimation AI 모델과 ChatGPT API, Whisper API를 이용하여 음성 기반 로봇 제어 실제 물리 로봇 및 가상 로봇의 ee 포즈 제어 및 Pick & Place 명령을 내릴 수 있음

역할

연구/프레임워크 설계 및 구현

문제 상황

6D Pose Estimation을 Grasp Pose로 변환
Moveit2 오픈소스의 결함 수정
LLM Prompt Engineering
다수의 AI 모델 FastAPI로 모델 서빙

접근 방법

배운 점

결과