google/generative-ai-docs

A Web UI to check for tokens and character count of palm api

Ouverte

#171 ouverte le 17 nov. 2023

Voir sur GitHubGuide contributeur
 (3 commentaires) (0 réaction) (0 personne assignée)Jupyter Notebook (746 forks)github user discovery
component:demosgood first issuestatus:triagedtype:feature request

Métriques du dépôt

Stars
 (2 250 étoiles)
Métriques de merge PR
 (Aucune PR mergée en 30 j)

Description

Description of the feature request:

A web ui where a user can come and input his text to check for tokens and character.

What problem are you trying to solve with this feature?

This would help the user to check his character count. In fine tuning a model in maker suite the output should be less than 5000 character. This way the user can open the webapp and past his output o check for characters.

Any other information you'd like to share?

https://platform.openai.com/tokenizer U can check this for reference. Something like this for palm api would be fantastic.

Guide contributeur

Direction de recherche
Recherchez si l'API PaLM fournit un point de terminaison pour le comptage des tokens. Sinon, étudiez comment estimer les tokens pour les modèles PaLM et construisez une interface Web simple qui accepte la saisie de texte et affiche le nombre de tokens et de caractères.
Stack technique
Aucun
Domaine
web dev
Type d'issue
Fonctionnalité
DifficultéDifficulté estimée pour un nouveau contributeur, de 1 pour un très petit changement à 5 pour un travail expert.
3
Temps estiméFourchette de temps approximative pour investiguer, implémenter, tester et préparer une pull request.
1-2 jours
Statut d'activitéDisponibilité apparente de l'issue : fraîche, active, ancienne, bloquée ou en attente d'un mainteneur.
Ancienne
ClartéClarté avec laquelle l'issue explique le changement attendu, les critères d'acceptation et la prochaine étape.
Claire
Prérequis
Web developmentHTML/CSS/JavaScript
Accessibilité débutantScore de 1 à 100 estimant l'accessibilité de cette issue pour un premier contributeur.
40