INTACT · SADL shared-BatchNorm

This research variant applies SADL to the INTACT latent world model with shared batch normalization. The one-epoch releases cover joint and separate training on PushT, Cube, Reacher, and TwoRoom. The model predicts future representations and generates goal-conditioned actions with Direct or Guarded A planning.

Vollständige Modellbeschreibung ansehen

Simulation research on visual world models and goal-conditioned planning.

Publikationen (1)

SADL: On the Demand-Supply Geometry of Representation Collapse

Fachartikel verfügbar

arXiv: 2611.21596DOI: 10.48550/arxiv.2611.21596
Autoren und Einrichtungen (10)

Autorenreihenfolge: Originalreihenfolge

  1. Junhan Sun

    State Key Laboratory of CAD&CG, Zhejiang University

  2. Yigui Feng

    RoboParty Lab

  3. Mingzhe Liu

    RoboParty Lab

  4. Haoyan Xu

    RoboParty Lab

  5. Lei Ye

    RoboParty Lab

  6. Ziqi Han

    RoboParty Lab

  7. Hanru Bai

    Alibaba Group

  8. Yanzhao Zhang

    Alibaba Group

  9. Hao ZhaoCorresponding author

    RoboParty Lab · Institute for AI Industry Research (AIR), Tsinghua University

Erstveröffentlichung
2026-11-16
Neueste Revision
v1 · 2026-11-16
Konferenz / Zeitschrift
arXiv

Abgedeckte Modellversionen

Zugang und Nutzung

Öffentliche Code-Ressourcen
Öffentlicher Zugang
Modelldateien
Öffentlicher Zugang
Trainingsdaten
Öffentlicher Zugang

Code und Training / Fine-Tuning

Zugang
Öffentlicher Zugang

QuelleGeprüft am · 2026-11-22

Code-Lizenz
MIT

Modelldateien

Modelldateien
E1 · Four tasks · seed3072ZugangGewichtelizenzKommerzielle Nutzung
Unter BedingungenBedingungen

QuelleGeprüft am · 2026-11-22

Bedingungen

MIT permits commercial use of the released weights. Keep the copyright and license notices in copies or substantial portions. Third-party components remain under their own terms.

E1 · Four tasks · seed3073ZugangGewichtelizenzKommerzielle Nutzung
Unter BedingungenBedingungen

QuelleGeprüft am · 2026-11-22

Bedingungen

MIT permits commercial use of the released weights. Keep the copyright and license notices in copies or substantial portions. Third-party components remain under their own terms.

E1 · Four tasks · seed3074ZugangGewichtelizenzKommerzielle Nutzung
Unter BedingungenBedingungen

QuelleGeprüft am · 2026-11-22

Bedingungen

MIT permits commercial use of the released weights. Keep the copyright and license notices in copies or substantial portions. Third-party components remain under their own terms.

E1 · Cube · seed3072ZugangGewichtelizenzKommerzielle Nutzung
Unter BedingungenBedingungen

QuelleGeprüft am · 2026-11-22

Bedingungen

MIT permits commercial use of the released weights. Keep the copyright and license notices in copies or substantial portions. Third-party components remain under their own terms.

E1 · PushT · seed3072ZugangGewichtelizenzKommerzielle Nutzung
Unter BedingungenBedingungen

QuelleGeprüft am · 2026-11-22

Bedingungen

MIT permits commercial use of the released weights. Keep the copyright and license notices in copies or substantial portions. Third-party components remain under their own terms.

E1 · Reacher · seed3072ZugangGewichtelizenzKommerzielle Nutzung
Unter BedingungenBedingungen

QuelleGeprüft am · 2026-11-22

Bedingungen

MIT permits commercial use of the released weights. Keep the copyright and license notices in copies or substantial portions. Third-party components remain under their own terms.

E1 · TwoRoom · seed3072ZugangGewichtelizenzKommerzielle Nutzung
Unter BedingungenBedingungen

QuelleGeprüft am · 2026-11-22

Bedingungen

MIT permits commercial use of the released weights. Keep the copyright and license notices in copies or substantial portions. Third-party components remain under their own terms.

E1 · Cube · seed3073ZugangGewichtelizenzKommerzielle Nutzung
Unter BedingungenBedingungen

QuelleGeprüft am · 2026-11-22

Bedingungen

MIT permits commercial use of the released weights. Keep the copyright and license notices in copies or substantial portions. Third-party components remain under their own terms.

E1 · PushT · seed3073ZugangGewichtelizenzKommerzielle Nutzung
Unter BedingungenBedingungen

QuelleGeprüft am · 2026-11-22

Bedingungen

MIT permits commercial use of the released weights. Keep the copyright and license notices in copies or substantial portions. Third-party components remain under their own terms.

E1 · Reacher · seed3073ZugangGewichtelizenzKommerzielle Nutzung
Unter BedingungenBedingungen

QuelleGeprüft am · 2026-11-22

Bedingungen

MIT permits commercial use of the released weights. Keep the copyright and license notices in copies or substantial portions. Third-party components remain under their own terms.

E1 · TwoRoom · seed3073ZugangGewichtelizenzKommerzielle Nutzung
Unter BedingungenBedingungen

QuelleGeprüft am · 2026-11-22

Bedingungen

MIT permits commercial use of the released weights. Keep the copyright and license notices in copies or substantial portions. Third-party components remain under their own terms.

E1 · Cube · seed3074ZugangGewichtelizenzKommerzielle Nutzung
Unter BedingungenBedingungen

QuelleGeprüft am · 2026-11-22

Bedingungen

MIT permits commercial use of the released weights. Keep the copyright and license notices in copies or substantial portions. Third-party components remain under their own terms.

E1 · PushT · seed3074ZugangGewichtelizenzKommerzielle Nutzung
Unter BedingungenBedingungen

QuelleGeprüft am · 2026-11-22

Bedingungen

MIT permits commercial use of the released weights. Keep the copyright and license notices in copies or substantial portions. Third-party components remain under their own terms.

E1 · Reacher · seed3074ZugangGewichtelizenzKommerzielle Nutzung
Unter BedingungenBedingungen

QuelleGeprüft am · 2026-11-22

Bedingungen

MIT permits commercial use of the released weights. Keep the copyright and license notices in copies or substantial portions. Third-party components remain under their own terms.

E1 · TwoRoom · seed3074ZugangGewichtelizenzKommerzielle Nutzung
Unter BedingungenBedingungen

QuelleGeprüft am · 2026-11-22

Bedingungen

MIT permits commercial use of the released weights. Keep the copyright and license notices in copies or substantial portions. Third-party components remain under their own terms.

Veröffentlichungsangaben

QuelleGeprüft am · 2026-11-22

Vor der Bereitstellung prüfen

The reported scores cover four simulation tasks. The release provides no hardware validation for these checkpoints. Verfügbare Gewichte oder Code belegen keine sofortige Roboterkompatibilität. Prüfen Sie Konfiguration, Daten und Schnittstellen in der Quelldokumentation.

Unterlagen zu Bereitstellung und Nutzung

Laufzeit und Frameworks
PyTorch

Architektur und Ein-/Ausgaben

Modelltyp
Weltsimulation
Eingabe
Zielbild / RGB-Bilder
Veröffentlichung
19. November 2026

Einsatzbereich und Training

Code-Lizenz

MIT

Ausgabe

Aktionen / Repräsentationen

Aufgabenumfang

Mehrere Aufgaben

Abstammung

Abgeleitet von: INTACT (INTACT-JEPA) · INTACT ↗

Evaluationsergebnisse

Keine verifizierten unabhängigen Evaluationen für diese Version oder die ausgewählten Gewichte erfasst.

Evaluation des Herausgebers · Berichtet; nicht unabhängig reproduziert

SADL Shared BatchNorm Simulation · Joint training · Guarded A ↗

Macro success rate: 95.1 %

shared-batchnorm-e1

NVIDIA RTX 4090

FP32; solver batch size 1; last five primitive actions supplied. Guarded A: 128 samples × 3 iterations, top 16, initial SD 0.25.

Joint training · Guarded A. Four simulation tasks, averaged across three training seeds (standard deviation 0.3 percentage points).

Evaluation des Herausgebers · Berichtet; nicht unabhängig reproduziert

SADL Shared BatchNorm Simulation · Separate training · Guarded A ↗

Macro success rate: 95.6 %

shared-batchnorm-e1

NVIDIA RTX 4090

FP32; solver batch size 1; last five primitive actions supplied. Guarded A: 128 samples × 3 iterations, top 16, initial SD 0.25.

Separate training · Guarded A. Four simulation tasks, averaged across three training seeds (standard deviation 0.9 percentage points).

Alle Parameter und Prüfhinweise (Modellkarte)

Inputs are 224 × 224 RGB observations, a goal image, and the causal history of the previous five primitive actions. The ViT-Tiny encoder starts without pretrained weights and uses a 192-dimensional latent space. The evaluation uses three training seeds (3072–3074) and three evaluation seeds (0, 1, 42), with 100 episodes per evaluation seed and task on an RTX 4090. Goals are 25 steps ahead, with at most 50 actions, a planning horizon of 5 and replanning every 5 actions. Four-task macro success is 94.8 ± 0.4% (Direct) and 95.1 ± 0.3% (Guarded A). Separately trained models score 94.9 ± 0.5% and 95.6 ± 0.9%, respectively. The values are means ± standard deviations across training seeds. Inference uses FP32 with solver batch size 1. Direct generates the actor’s plan without candidate search. Guarded A evaluates 128 samples per iteration for three iterations, using the top 16 and an initial standard deviation of 0.25. These numbers describe the released Shared BatchNorm checkpoints; the paper’s other ablation protocols report separate results.

Quelle oder Korrektur einreichen