confluentinc/ksql

Get clickstream demo working with latest ES (v6.6)

Open

#1.087 aberto em 28 de mar. de 2018

Ver no GitHub
 (0 comments) (0 reactions) (0 assignees)Java (1.048 forks)batch import
documentationhelp wanteduser-experience

Métricas do repositório

Stars
 (5.739 stars)
Métricas de merge de PR
 (Mesclagem média 4d 20h) (6 fundiu PRs em 30d)

Description

Current demo only works with ES v5.6.x, whereas latest ES is v6.6. Would be good to get the demo working with the latest ES.

Previous attempt failed and ran out of time to problem solve.

@rmoff Also did some work and thinks removing the "index": "not_analyzed" may be the trick, but need to test:

PUT /_template/kafkaconnect/
{
  "index_patterns": "*",
  "settings": {
    "number_of_shards": 1,
    "number_of_replicas": 0
  },
  "mappings": {
    "_default_": {
      "dynamic_templates": [
        {
          "dates": {
            "match": "EXTRACT_TS",
            "mapping": {
              "type": "date"
            }
          }
        },
        {
          "non_analysed_string_template": {
            "match": "*",
            "match_mapping_type": "string",
            "mapping": {
              "type": "keyword"
            }
          }
        }
      ]
    }
  }
}

Guia do colaborador

Direção de pesquisa
Examine a configuração do Elasticsearch da demonstração clickstream, provavelmente no módulo ksql clickstream demo. Localize o arquivo onde o template de índice do ES é definido (por exemplo, em um diretório resources ou config). Aplique a alteração sugerida por @rmoff: remova a linha 'index': 'not analyzed' e atualize o mapeamento para usar o tipo 'keyword' em vez de string com not analyzed. Teste com ES v6.6 para garantir que a demonstração funcione.
Pilha de tecnologia
javakafkaelasticsearch
Domain
backenddata
Tipo Issue
Bug
DifficultyDificuldade de implementação estimada para um novo contribuidor, de 1 para alterações muito pequenas a 5 para trabalho de nível especializado.
3
Tempo estimadoUm intervalo de tempo aproximado para um colaborador experiente investigar, implementar, testar e preparar um pull request.
1-2 dias
Status da atividadeQuão disponível o issue aparece agora: novo, ativo, obsoleto, bloqueado ou aguardando entrada do mantenedor.
Ativo
ClarityCom que clareza o issue explica a mudança esperada, os critérios de aceitação e a próxima etapa.
Principalmente claro
Prerequisites
JavaElasticsearch
Simpatia para novatosUma pontuação de 1 a 100 que estima o quão acessível este issue é para colaboradores iniciantes.
60