Kite Trossen Cup Real ACT

공식 가중치
논문 및 기술 보고서

Kite task-trained ACT weights for cup picking on a bimanual WidowX AI station, based on LeRobot ACT; 30,000 training steps, evaluated by the author in simulation only.

전체 모델 설명 보기

Research and simulation evaluation of red-cup picking on the specified WidowX AI station.

논문 및 기술 보고서

논문 / 보고서 미확인

공식 소개 자료가 등록되어 있으며 해당 버전의 논문이나 기술 보고서는 아직 확인되지 않았습니다.

최근 확인: 2026-11-17

접근 및 사용 방법

공개 코드 자료
공개 접근
모델 파일
공개 접근
학습 데이터
공개 접근

평가 자료

학습 / 미세 조정 코드

접근 방법
공개 접근

출처확인 날짜 · 2026-11-17

코드 라이선스
Apache-2.0

모델 파일

모델 파일
trossen-bin-picking-act-cup-real · 30000접근 방법가중치 라이선스
출시 정보

출처확인 날짜 · 2026-11-17

배포 전 확인 사항

Single cup task; no language input. Author simulation only, all successes on the left layout, no hardware deployment reported. Exact upstream training revision and action units/frame/frequency remain unverified. 가중치나 코드가 공개되어도 로봇에서 즉시 실행할 수 있다는 의미는 아닙니다. 문서에서 구성, 데이터 및 인터페이스 요구 사항을 확인하세요.

배포 및 사용 자료

추론 방식
ACTPolicy.from_pretrained; LeRobot >=0.6; pin commit
실행 환경 및 프레임워크
lerobot-pytorch
미세 조정 요구 사항
Task training: 30,000 steps, batch 8, one A100, about 1h50m
배포 요구 사항
Four RGB cameras and 14 joint positions on bimanual WidowX AI

구조 및 입출력

모델 유형
행동 정책
아키텍처
Transformer
백본
ResNet18 (ImageNet1K V1), Transformer 512, encoder 4 / decoder 1
입력
RGB 이미지 / 로봇 상태
출력
14 joint targets; 100-step chunks
출시일
2026년 11월 16일

적용 범위 및 학습 방식

joint_position · continuous

14 DoF · horizon 100 · mean_std

기반 모델

Hugging Face LeRobot ACT

본체 범위

단일 본체

기능 분류

Action control

기록 유형

공식 가중치

출력

행동

파이프라인 작업

robotics

예측 출력

chunk_size=100; n_action_steps=100

로봇 형태

양팔 플랫폼 / 로봇 팔

작업 범위

단일 작업

학습 데이터 규모

7,318 training frames

학습 데이터 출처

Trossen real bin_picking, 18 training cup episodes

학습 방식

모방 학습

계보

파생 모델: ACT · LeRobot ACT ↗

  • 기반 모델 · 본체 범위 · 기능 분류 · 기록 유형 · 파이프라인 작업 · 로봇 형태 · 작업 범위 · 학습 데이터 규모 · 학습 데이터 출처 · 학습 방식 · joint_position · continuous · 계보 · LeRobot ACT: Kite ML, Inc.
  • 출력 · 예측 출력 · joint_position · continuous: Kite ML, Inc.

관련 로봇

전체 매개변수 및 검증 설명 (모델 카드)

Kite ML, Inc. publishes this task-trained derivative of Hugging Face LeRobot ACT, not a new foundation algorithm. No fine-tuning from a specific pretrained ACT checkpoint is established. The upstream implementation revision used for training is undisclosed; the model card states LeRobot >=0.6 can load it.

The task is to move the red cup into the clear tray on a bimanual WidowX AI station. Inputs: four RGB cameras (low, high, left wrist, right wrist), each 3×480×640, plus 14 joint positions. Outputs: 14 joint targets per step, chunks of 100 steps; n_obs_steps=1 and n_action_steps=100. It does not consume language instructions.

Configuration: ResNet18 with ImageNet1K V1 backbone weights; Transformer width 512, 8 heads, feedforward width 3200, ReLU, 4 encoder and 1 decoder layers; VAE enabled, latent dimension 32, 4 VAE encoder layers; dropout 0.1, KL weight 10. Visual, state and action normalization use MEAN_STD. Training config has CUDA, no AMP or PEFT, optimizer learning rate 1e-5, weight decay 1e-4 and backbone learning rate 1e-5. These are saved settings, not measured deployment requirements.

Training uses 18 cup episodes from Trossen public real bin_picking recordings, with source episodes 4 and 14 held out, totaling 7,318 training frames. Batch 8 on one A100, 30,000 steps, about 1h50m. Training hardware is not a minimum inference requirement.

Author-reported closed-loop simulated-station placements: room light 10/20, low light 8/20, warm light 8/20, extra objects 7/20, total 33/80 (41.25%). Every placement was on the left-arm pickup layout; none succeeded on the right-arm layout. The low camera combines a real-station photo with cup cut-outs. This is simulation only, not a hardware success rate or an independent reproduction. The website's 91% example is unrelated.

Complete weights first uploaded on 2026-11-16 at 22:39:44 UTC (2026-11-17 06:39:44 Taipei). The initial empty repository at 22:39:02 is not the complete-weight opening event. model.safetensors is 206,765,304 bytes; config and pre/postprocessor normalization files are included. Public, nongated HF download; pin the exact commit below. Model-card metadata declares Apache-2.0, but there is no standalone LICENSE file and config.license is null. This records the publisher's declaration, not a file-by-file legal audit; commercial permission is left unknown. LeRobot's code license is a separate claim. Full-model parameter count, action coordinate frame/units, deployment control frequency and independent/hardware evaluation are not established.

https://huggingface.co/kiteml/trossen-bin-picking-act-cup-real

https://huggingface.co/kiteml/trossen-bin-picking-act-cup-real/commit/1f47a171eb8009c0ba2ef591ba966bb8f88c632e

https://huggingface.co/kiteml/trossen-bin-picking-act-cup-real/blob/1f47a171eb8009c0ba2ef591ba966bb8f88c632e/config.json

https://github.com/kite-ml/trossen-bin-picking-sim-datasets

https://kiteml.com/

출처 또는 수정 제안 보내기