jackMort/ChatGPT.nvim

[Feature request]: Add support for image generation/editing models

Open

#386 ouverte le 4 févr. 2024

Voir sur GitHub
 (0 commentaires) (0 réactions) (0 assignés)Lua (323 forks)batch import
enhancementhelp wanted

Métriques du dépôt

Stars
 (4 005 stars)
Métriques de merge PR
 (Aucune PR mergée en 30 j)

Description

It would be really cool to support image generation and/or image editing models via this plugin. For example: dall-e-2 and dall-e-3 reuse the same OpenAI API key as regular GPT models. (docs).

Currently, when I manually set the model setting to dall-e-3 I get this response: image But I am successfully generating an image if I manually query OpenAI via curl image

Proposal:

  • By default the plugin's response to a prompt is to print the revised_prompt and the newly saved image path + filename.
  • By default the plugin saves all image responses to some location.
    • Default value for this download location is set via the config object.
    • Optionally this can be toggled off, and user will have to open URLs with gx to preview images.
  • When using dall-e-2/dall-e-3 the plugin can accept a new setting for the filesystem path where artifacts can be saved.
    • This way, you can use separate directories for different "visions" or projects

Guide contributeur

Direction de recherche
Étudiez comment le plugin gère actuellement les appels d'API à OpenAI, probablement dans un fichier comme `chatgpt.lua`. L'issue propose des modifications pour prendre en charge les points de terminaison de génération d'images et la gestion de l'enregistrement des fichiers. Examinez la structure de configuration du plugin pour ajouter de nouvelles options pour le chemin de téléchargement des images. Consultez la documentation de l'API OpenAI pour la génération d'images afin de comprendre le format de réponse. Comme il n'y a pas de commentaires ou de PR, commencez par vous familiariser avec la base de code et proposez une conception.
Stack technique
Aucun
Domaine
aideveloper experience
Type d'issue
Fonctionnalité
DifficultéDifficulté estimée pour un nouveau contributeur, de 1 pour un très petit changement à 5 pour un travail expert.
3
Temps estiméFourchette de temps approximative pour investiguer, implémenter, tester et préparer une pull request.
1-2 jours
Statut d'activitéDisponibilité apparente de l'issue : fraîche, active, ancienne, bloquée ou en attente d'un mainteneur.
Récente
ClartéClarté avec laquelle l'issue explique le changement attendu, les critères d'acceptation et la prochaine étape.
Claire
Prérequis
Lua programmingOpenAI API basicsNeovim plugin concepts
Accessibilité débutantScore de 1 à 100 estimant l'accessibilité de cette issue pour un premier contributeur.
50