deeplearning4j/deeplearning4j-examples

Convert string to vector in DataVec

Aberta

#877 aberto em 20 de ago. de 2019

Ver no GitHubGuia do colaborador
 (2 comentários) (1 reação) (0 responsável)Java (1.841 forks)batch import
enhancementhelp wanted

Métricas do repositório

Stars
 (2.395 estrelas)
Métricas de merge de PR
 (Nenhuma PRs mesclada em 30d)

Description

Please provide an example showing how to transform sentence (string) training data to vectors using a pre-populated word2vec object. Edourado mentioned we should be able to use an embedded layer to do this. Something about mapping word2vec to rows of vectors inside an embedded layer, then having the input layer contain indexes to those rows depending on what words the input data references.

Keep in mind the input contains sentences (multiple words). Thank you.

Guia do colaborador

Direção de pesquisa
Explore os exemplos existentes do DataVec e entenda como carregar um modelo word2vec pré treinado e mapeá lo para uma camada de embedding. Consulte a documentação do DL4J sobre word2vec e camadas de embedding. Crie um exemplo simples que pegue uma frase, converta palavras em índices, procure embeddings e os agregue em um vetor.
Pilha de tecnologia
java
Domain
machine learningai
Tipo Issue
Documentação
DifficultyDificuldade de implementação estimada para um novo contribuidor, de 1 para alterações muito pequenas a 5 para trabalho de nível especializado.
2
Tempo estimadoUm intervalo de tempo aproximado para um colaborador experiente investigar, implementar, testar e preparar um pull request.
1-3 horas
Status da atividadeQuão disponível o issue aparece agora: novo, ativo, obsoleto, bloqueado ou aguardando entrada do mantenedor.
Ativo
ClarityCom que clareza o issue explica a mudança esperada, os critérios de aceitação e a próxima etapa.
Principalmente claro
Prerequisites
JavaBasic deep learning concepts
Simpatia para novatosUma pontuação de 1 a 100 que estima o quão acessível este issue é para colaboradores iniciantes.
60