Create toy tasks/dummy code for fine-tuning evals

Évaluation

Cette issue n'a pas encore été évaluée.

Description

Préparer son environnement

Par où commencer

1. Lisez l'issue en entier, puis le guide de contribution du projet.
2. Signalez en commentaire que vous la prenez — cela évite que deux personnes fassent le même travail.
3. Forkez le dépôt et travaillez sur une branche.
4. Ouvrez une pull request qui référence le numéro de l'issue.

Autres issues de bigscience-workshop/evaluation

• Add MKQA to Full Benchmark

  Ouverte

  ⋯Signaler un problème avec cette issue

  • Quelque chose ne va pas ?

  • Déjà prise
  • Pas adaptée aux débutants
  • Obsolète ou invalide
  • Autre chose…
  • Envoyer Annuler

  Difficulté 4/5 3-5 jours Accessibilité débutants 25/100

  bigscience-workshop/evaluation#73 · Ouverte le 7/2/2022

• Refactor task template to merge multilingual.json and english.json

  Peut-être à nouveau libre @wilsonyhlee l’a pris il y a 1850 jours, et aucune pull request n’est ouverte. Ouverte

  ⋯Signaler un problème avec cette issue

  • Quelque chose ne va pas ?

  • Déjà prise
  • Pas adaptée aux débutants
  • Obsolète ou invalide
  • Autre chose…
  • Envoyer Annuler

  bigscience-workshop/evaluation#64 · 1 personne assignée · Ouverte le 2/9/2021

• Wrap evaluation benchmark using HF-trainer

  Ouverte

  ⋯Signaler un problème avec cette issue

  • Quelque chose ne va pas ?

  • Déjà prise
  • Pas adaptée aux débutants
  • Obsolète ou invalide
  • Autre chose…
  • Envoyer Annuler

  Difficulté 5/5 Plus d'une semaine Accessibilité débutants 20/100

  bigscience-workshop/evaluation#61 · 2 commentaires · 3 réactions · Ouverte le 25/8/2021

• Setup testing

  Peut-être à nouveau libre @tttyuntian l’a pris il y a 1866 jours, et aucune pull request n’est ouverte. Ouverte

  ⋯Signaler un problème avec cette issue

  • Quelque chose ne va pas ?

  • Déjà prise
  • Pas adaptée aux débutants
  • Obsolète ou invalide
  • Autre chose…
  • Envoyer Annuler
  engineering

  bigscience-workshop/evaluation#57 · 2 commentaires · 3 personnes assignées · Ouverte le 19/8/2021

• Start overleaf for benchmark tech report

  Peut-être à nouveau libre @arunraja-hub l’a pris il y a 1861 jours, et aucune pull request n’est ouverte. Ouverte

  ⋯Signaler un problème avec cette issue

  • Quelque chose ne va pas ?

  • Déjà prise
  • Pas adaptée aux débutants
  • Obsolète ou invalide
  • Autre chose…
  • Envoyer Annuler
  documentation

  bigscience-workshop/evaluation#54 · 1 commentaire · 3 réactions · 2 personnes assignées · Ouverte le 16/8/2021

Toutes les issues de bigscience-workshop/evaluation

Issues similaires

• Broken links found in docs

  Ouverte

  ⋯Signaler un problème avec cette issue

  • Quelque chose ne va pas ?

  • Déjà prise
  • Pas adaptée aux débutants
  • Obsolète ou invalide
  • Autre chose…
  • Envoyer Annuler
  docs pydanty:is-working

  Difficulté 2/5 1-3 heures Accessibilité débutants 75/100

  pydantic/pydantic-ai#8863 · Ouverte le 28/9/2026

  Les mainteneurs répondent en général sous 1 jour

• [Bug]: MediaResource raises KeyError instead of ValidationError when path fails validation

  Ouverte

  ⋯Signaler un problème avec cette issue

  • Quelque chose ne va pas ?

  • Déjà prise
  • Pas adaptée aux débutants
  • Obsolète ou invalide
  • Autre chose…
  • Envoyer Annuler

  Difficulté 2/5 1-3 heures Accessibilité débutants 68/100

  run-llama/llama_index#23278 · Ouverte le 27/9/2026

  Les mainteneurs répondent en général sous 2 jours

• nit(ci): workflow-status template phrasing should match #5523's hand-corrected wording so regeneration stays consistent

  Ouverte

  ⋯Signaler un problème avec cette issue

  • Quelque chose ne va pas ?

  • Déjà prise
  • Pas adaptée aux débutants
  • Obsolète ou invalide
  • Autre chose…
  • Envoyer Annuler
  documentation from-review-extraction github-actions priority: low severity:nit

  Difficulté 1/5 Moins d'une heure Accessibilité débutants 92/100

  LearningCircuit/local-deep-research#6946 · Ouverte le 27/9/2026

  Les mainteneurs répondent en général sous 1 jour

• OracleChatMessageHistory generated index name can exceed Oracle's byte limit

  Ouverte

  ⋯Signaler un problème avec cette issue

  • Quelque chose ne va pas ?

  • Déjà prise
  • Pas adaptée aux débutants
  • Obsolète ou invalide
  • Autre chose…
  • Envoyer Annuler

  Difficulté 2/5 1-3 heures Accessibilité débutants 82/100

  oracle/langchain-oracle#323 · Ouverte le 27/9/2026

  Les mainteneurs répondent en général sous 1 jour

• Kimi-K3 test_mla_chunked_perf_check runs below its perf band since #55596

  Ouverte

  ⋯Signaler un problème avec cette issue

  • Quelque chose ne va pas ?

  • Déjà prise
  • Pas adaptée aux débutants
  • Obsolète ou invalide
  • Autre chose…
  • Envoyer Annuler

  Difficulté 1/5 Moins d'une heure Accessibilité débutants 88/100

  tenstorrent/tt-metal#58057 · 1 commentaire · Ouverte le 27/9/2026

  Les mainteneurs répondent en général sous 1 jour

Plus d'issues Python