[Feature]: Multi-video overlay and split-screen layout regions on the timeline
Les mainteneurs répondent en général sous 1 jour
Personne n'a encore pris cette issue.
- #1318 par @rainyflash — fermée sans fusion
Évaluation
- Difficulté
- 5/5
- Temps estimé
- Plus d'une semaine
- Accessibilité débutants
- 20/100
- Type d'issue
- Fonctionnalité
- Clarté
- Plutôt claire
- Activité
- À l'abandon
- Stack technique
- electron, typescript
- Domaine
- full-stack
Piste de recherche
Start with the 11-step region checklist in technical-documentation/architecture/editor-shell.md and trace the existing document, timeline, preview, inspector, and agent/MCP entry points. The issue names AxcutDocument, V4Timeline, PreviewCanvas, FloatingInspector, and SceneDescription as areas to inspect. Done means overlay regions work across those surfaces, including composition, controls, synchronization, and agent/MCP authoring; an open linked pull request indicates work is already underway.
Rédigé par le modèle d'indexation à partir du texte de l'issue.
Description
Search existing issues
- I have searched the existing issues
Is your feature request related to a problem?
Currently, OpenScreen's timeline only supports playing one primary video clip at a time (plus the recording's linked webcam track). Users creating product demos, before/after performance comparisons, multi-client workflows (e.g. browser + terminal, or desktop + mobile side by side), or picture-in-picture B-roll overlays have no way to present two video assets simultaneously on screen and configure how they share the frame.
Describe the solution you'd like
Add support for multi-video overlay / split-screen regions (videoOverlayRanges) so users and AI agents can place a secondary video asset over any span of the edited timeline and control how the multiple videos are presented on screen:
- Document Model (
AxcutDocument):- Add clip-anchored
videoOverlayRangesreferencing any videoassetIdin the project, with source offset (offsetMs), layout mode (side-by-side,top-bottom,pip,wipe-compare), split ratio (splitRatio, 0.2–0.8, default 0.5), PiP rect (position / size), optionalcropRegion,muted, andgainDb.
- Add clip-anchored
- Editor UI (Timeline, Preview & Inspector):
- Add a Video Overlay / Split Screen lane and toolbar action on
V4Timelineto place, move, resize, and delete secondary video regions. - Render the simultaneous multi-video composition in
PreviewCanvas(side-by-side split, top/bottom split, wipe comparison, and draggable/resizable PiP overlay) synchronized with the playhead, trims, and speed regions. - Add an inspector selection pane (
FloatingInspector) to pick the secondary video asset, switch layout modes (side-by-side,top-bottom,pip,wipe-compare), adjust split ratio / PiP size, and toggle audio mute. - Extend
SceneDescriptionwithvideoOverlayRegionsso the scene contract carries the resolved multi-video regions.
- Add a Video Overlay / Split Screen lane and toolbar action on
- AI Agent & MCP Tools:
- Expose
addVideoOverlayandsetVideoOverlay(and supportremoveModifier+getCurrentDocumentreadback) so both the in-app agent and external MCP clients can author side-by-side comparisons and PiP overlays programmatically.
- Expose
Describe alternatives you've considered
Turning the primary timeline into a free-form N-track non-linear editor was rejected because it would break the contiguous primary timeline invariant (decisions.md) and add unnecessary complexity. Modeling secondary video presentations as clip-anchored regions keeps the sleek single-timeline UX intact.
Additional context
Follows the 11-step region checklist in technical-documentation/architecture/editor-shell.md.
- Langage dominant
- TypeScript
- Étoiles
- 3.7k
- Forks
- 231
- Merge moyen
- 16 h 25 min
- PR mergées (30 j)
- 331
Préparer son environnement
- Aucun Dockerfile ni fichier Docker Compose
- Propose un modèle de pull request
- Lire le guide de contribution
Par où commencer
- Lisez l'issue en entier, puis le guide de contribution du projet.
- Signalez en commentaire que vous la prenez — cela évite que deux personnes fassent le même travail.
- Forkez le dépôt et travaillez sur une branche.
- Ouvrez une pull request qui référence le numéro de l'issue.
Autres issues de getopenscreen/openscreen
-
build.yml: macOS arm64 DMG fails, cargo missing on the macos-26 runner imagePeut-être pris Une pull request liée à cette issue est ouverte ou déjà fusionnée. Ouverte
Difficulté 2/5 1-3 heures Accessibilité débutants 78/100
getopenscreen/openscreen#1423 ·
Les mainteneurs répondent en général sous 1 jour
-
Native review wanted: machine-translated recording bar tooltips (14 locales)Peut-être à nouveau libre @auberginewly l’a pris il y a 20 jours, et aucune pull request n’est ouverte. Ouvertegood first issue help wanted
Difficulté 2/5 1-3 heures Accessibilité débutants 68/100
getopenscreen/openscreen#913 · 5 commentaires ·
Les mainteneurs répondent en général sous 1 jour
-
Difficulté 3/5 1-2 jours Accessibilité débutants 57/100
getopenscreen/openscreen#1422 ·
Les mainteneurs répondent en général sous 1 jour
-
macOS: pick the YCbCr matrix per buffer instead of hard-coding BT.709Peut-être pris Une pull request liée à cette issue est ouverte ou déjà fusionnée. Ouverte
Difficulté 3/5 1-2 jours Accessibilité débutants 72/100
getopenscreen/openscreen#1420 ·
Les mainteneurs répondent en général sous 1 jour
-
enhancement
Difficulté 3/5 1-2 jours Accessibilité débutants 48/100
getopenscreen/openscreen#1419 ·
Les mainteneurs répondent en général sous 1 jour
Toutes les issues de getopenscreen/openscreen
Issues similaires
-
Difficulté 2/5 1-3 heures Accessibilité débutants 78/100
gnosis/gnosis_vpn#661 ·
Les mainteneurs répondent en général sous 1 jour
-
content-freshness: staleOwnedContent doc comments still say 'complete receipt' (follow-up to #7912)Ouvertetriage:bug-verified
Difficulté 1/5 Moins d'une heure Accessibilité débutants 92/100
Les mainteneurs répondent en général sous 1 jour
-
fix: reject sourceStorage/packagedStorage bucket that differs from the stack default (fail loud)Ouverte
Difficulté 2/5 1-3 heures Accessibilité débutants 82/100
Eyevinn/open-videocore#1300 ·
Les mainteneurs répondent en général sous 1 jour
-
nextjs-tracking
Difficulté 2/5 1-3 heures Accessibilité débutants 67/100
cloudflare/vinext#4390 ·
Les mainteneurs répondent en général sous 1 jour
-
kind/bug
Difficulté 2/5 1-3 heures Accessibilité débutants 82/100
kubernetes-sigs/headlamp#8175 ·
Les mainteneurs répondent en général sous 2 jours