Regarding Crossfile Completion Prompt Format for Seed-Coder-8B Series Models on CrossCodeEval Benchmark
Nessuno ha ancora preso questa issue.
Valutazione
- Difficoltà
- 4/5
- Tempo stimato
- 3-5 giorni
- Idoneità per principianti
- 25/100
- Tipo di issue
- Documentazione
- Chiarezza
- Abbastanza chiara
- Stato di attività
- Ferma
- Ambito
- documentation, machine-learning
Direzione di ricerca
Inizia con il rapporto tecnico e la configurazione di valutazione CrossCodeEval citati nell’issue. Verifica il template esatto del prompt, l’eventuale gestione del contesto tra più file e gli eventuali token speciali utilizzati per Seed-Coder-8B-Base. Il lavoro è completato quando vengono documentati il formato confermato e un esempio di prompt, oppure quando viene indicato chiaramente quali dettagli non sono disponibili.
Scritto dal modello di indicizzazione a partire dal testo della issue.
Descrizione
Referencing the technical report, could you please provide the specific prompt format used to evaluateSeed-Coder-8B-Base on the CrossCodeEval benchmark?
This information is needed to accurately reproduce the evaluation setup and for comparative analysis.
Specifically:
CrossCodeEval Prompt Format:
- What was the exact prompt structure/template used for Seed-Coder-8B-Base during the CrossCodeEval evaluation?
Cross-File Context Handling:
- How was cross-file context incorporated into the prompts for the CrossCodeEval evaluation (if applicable)?
- More generally, does the Seed-Coder model series utilize special tokens or a specific prompt format for handling multi-file context in repository-level code completion tasks (potentially similar to mechanisms in models like the Qwen2.5-Coder series)?
Details on the format(s), including any special tokens, or providing an example prompt would be very helpful.
Thanks!
- Lingua principale
- Nessun dato sulla lingua
- Stelle
- 761
- Fork
- 60
- Metriche di merge delle PR
- Nessuna PR unita negli ultimi 30g
Preparare l'ambiente
Questo progetto non fornisce container di sviluppo, Dockerfile né guida per i contributori, quindi l'ambiente è a tuo carico: parti dal suo README e consulta la nostra guida al primo contributo per i passaggi generali.
Come iniziare
- Leggi tutta la issue e poi la guida ai contributi del progetto.
- Commenta sulla issue per dire che te ne occupi tu — evita che due persone facciano lo stesso lavoro.
- Fai un fork del repository e lavora su un branch.
- Apri una pull request che faccia riferimento al numero della issue.
Altre issue di ByteDance-Seed/Seed-Coder
-
Difficoltà 2/5 1-3 ore Idoneità per principianti 45/100
ByteDance-Seed/Seed-Coder#24 ·
-
Difficoltà 5/5 Più di una settimana Idoneità per principianti 20/100
ByteDance-Seed/Seed-Coder#23 ·
-
Difficoltà 5/5 Più di una settimana Idoneità per principianti 25/100
ByteDance-Seed/Seed-Coder#22 ·
-
Difficoltà 5/5 Più di una settimana Idoneità per principianti 25/100
ByteDance-Seed/Seed-Coder#21 ·
-
Difficoltà 5/5 Più di una settimana Idoneità per principianti 20/100
ByteDance-Seed/Seed-Coder#20 ·
Tutte le issue di ByteDance-Seed/Seed-Coder
Issue simili
-
Difficoltà 1/5 Meno di un'ora Idoneità per principianti 75/100
I maintainer di solito rispondono entro 1 giorno
-
A practical example of rulerAperta
Difficoltà 2/5 1-3 ore Idoneità per principianti 65/100
-
Difficoltà 2/5 1-3 ore Idoneità per principianti 72/100
grafana/profiles-drilldown#1212 ·
I maintainer di solito rispondono entro 1 giorno
-
Difficoltà 2/5 1-3 ore Idoneità per principianti 78/100
grafana/traces-drilldown#980 ·
I maintainer di solito rispondono entro 1 giorno
-
sync-en
Difficoltà 1/5 Meno di un'ora Idoneità per principianti 75/100
I maintainer di solito rispondono entro 2 giorni