Independent single-GPU runtime measurement of Matrix-Game 2.0 — your 25 fps claim reproduces
Chưa có ai nhận issue này.
Đánh giá
- Độ khó
- 2/5
- Thời gian dự kiến
- 1-3 giờ
- Mức phù hợp với người mới
- 20/100
- Loại issue
- Tài liệu
- Độ rõ ràng
- Cần làm rõ
- Mức độ hoạt động
- Sôi nổi
- Công nghệ
- python
- Lĩnh vực
- machine-learning
Hướng nghiên cứu
Start by reviewing the LiveFrame adapter, configuration, and evidence bundle linked in the issue, then compare them with Matrix-Game 2.0's published single-H100, 3-step setup. The issue asks for feedback or a suggested re-run configuration but does not identify repository files or define a code change or completion criteria.
Do mô hình lập chỉ mục viết ra từ nội dung của issue.
Mô tả
Hi, big fan of Matrix-Game.
I've been building an open harness called LiveFrame that measures interactive world models' released pipelines on stated hardware, and binds every result to a digest ledger that anyone can re-verify.
I ran Matrix-Game 2.0 in the configuration your claim names (single H100, 3 steps) and measured 19.7 fps median across 24 cases, mean 19.6 with a std of 0.4. My harness has a disclosed delivery bias of about 8% and runs with conservative settings, so I read this as consistent with your published 25 fps. Of the four models I measured, yours was the only claim specified fully enough to test as published, and it held up.
Two things I'd value your eyes on:
- The adapter and config I used. Is there anything I should change to represent MG2 more fairly? It runs your pipeline with flash-attn per your pins, and the evidence bundle with the ledger is in the repo.
- If you'd ever want to cite an independent reproduction, or have me re-run with settings you recommend, I'm glad to.
Harness: https://github.com/kkjcodes/liveframe
Evidence bundle: https://github.com/kkjcodes/liveframe/tree/main/agent/world/evidence/m7-mg2-h100
Re-verify: liveframe world verify /ledger.json
Thanks for open-sourcing the model. Happy to answer anything.
- Ngôn ngữ chính
- Python
- Star
- 2.8k
- Fork
- 298
- Chỉ số merge pull request
- Không có pull request nào được merge trong 30 ngày
Chuẩn bị môi trường
Dự án này không cung cấp dev container, Dockerfile hay hướng dẫn đóng góp, nên bạn cần tự thiết lập môi trường: hãy bắt đầu từ README và xem hướng dẫn đóng góp lần đầu của chúng tôi để biết các bước chung.
Bắt đầu từ đâu
- Đọc hết issue, rồi đọc hướng dẫn đóng góp của dự án.
- Bình luận trên issue rằng bạn sẽ nhận — tránh hai người làm cùng một việc.
- Fork repository và làm thay đổi trên một nhánh.
- Mở pull request có tham chiếu số hiệu của issue.
Issue khác của SkyworkAI/Matrix-Game
-
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 66/100
SkyworkAI/Matrix-Game#97 · 1 bình luận ·
-
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 78/100
SkyworkAI/Matrix-Game#90 ·
-
Replace deprecated v2.ToTensor() in Matrix-Game-2/inference.py with v2.ToImage() + v2.ToDtype(scale=True)Có thể đã có người làm @xyf5432 đã nhận 68 ngày trước. Đang mở
Độ khó 1/5 Dưới một giờ Mức phù hợp với người mới 90/100
SkyworkAI/Matrix-Game#82 ·
-
Độ khó 1/5 Dưới một giờ Mức phù hợp với người mới 88/100
SkyworkAI/Matrix-Game#80 ·
-
run logic error when finishCó thể đã có người làm @Arison591 đã nhận 105 ngày trước. Đang mở
Độ khó 1/5 Dưới một giờ Mức phù hợp với người mới 88/100
SkyworkAI/Matrix-Game#77 ·
Tất cả issue của SkyworkAI/Matrix-Game
Issue tương tự
-
getchaintips leaves out the active tip once a header is staged on it, where Core always lists itĐang mở
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 88/100
btclib-org/btclib-node#2158 ·
Maintainer thường phản hồi trong vòng 1 ngày
-
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 85/100
dbt-msft/dbt-sqlserver#897 ·
Maintainer thường phản hồi trong vòng 1 ngày
-
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 65/100
Gathin23/cleanyourtv#2770 · 2 bình luận ·
Maintainer thường phản hồi trong vòng 1 ngày
-
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 68/100
vllm-project/vllm#64845 ·
Maintainer thường phản hồi trong vòng 1 ngày
-
bug
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 84/100
dekobon/big-code-analysis#1729 ·
Maintainer thường phản hồi trong vòng 1 ngày