SO-101 시뮬레이션, 공식 환경에서 정답을 알고도 절반이었습니다
허깅페이스의 LeRobot 팀이 10월 16일에 SO-101 탁상 환경을 두 벌 공개했습니다. MuJoCo용 하나, Isaac Sim용 하나. 과제는 같습니다. 나무 큐브 네 개를 초록 상자에 넣는 것. 누구나 코드 한 줄로 불러올 수 있고, 로봇 파일까지 통째로 들어 있어 따로 받을 것이 없습니다. 그래서 내려받아 돌려 봤죠. 상자에 들어간 큐브는 열두 개 중 여섯 개. 큐브가 어디 있는지 시뮬레이터에게 직접 물어본 코드로도 그랬습니다. ▲ 환경이 정책에 건네주는 화면 두 장입니다. 왼쪽이 정면 카메라, 오른쪽이 손목 카메라. 이미지 출처: lerobot/so101-tabletop-mujoco 저장소(아파치 2.0 라이선스). 로봇 파일은 원본과 같은데 손끝이 달랐습니다 SO-101은 설계 원본을 공개한 TheRobotStudio가 시뮬레이션 파일도 함께 올려 두었고, 2편 에서 쓴 것이 그 파일입니다. 공식 환경은 MuJoCo Menagerie가 손본 판을 씁니다. 설명서에 "원본을 복사해 고쳤다"고 적혀 있길래 두 파일을 한 줄씩 대조해 봤습니다. 관절 여섯 개의 가동 범위는 소수점까지 똑같았습니다. 다른 곳은 충돌 형상이었죠. 원본은 눈에 보이는 메시 13개를 그대로 충돌에도 씁니다. Menagerie 판은 팔에 기본 도형 30개를 따로 붙였습니다. 상자 20개, 구 6개, 캡슐 1개, 메시 3개. 그 구 여섯 개의 반지름이 0.75mm 입니다. 손가락 끝에 박힌 바늘 끝 같은 점들이고, 큐브는 이 점으로 집힙니다. 3편 에서 그리퍼가 상자를 파고들던 일을 떠올리면, 손끝을 왜 이렇게 따로 만들었는지 짐작이 갑니다. 물리 설정도 달랐습니다. 원본은 오일러 적분에 0.002초, Menagerie 판은 implicitfast 적분에 0.005초. 초당 30번 제어에 맞추느라 환경 코드가 이 값을 210분의 1초로 다시 깎더군요. 모터 힘 한계는 3.35에서 2.94N·m로 내려갔고, 손목에 시야각 61도짜리 카메라...