lizzy-0323/oasisdb

test: add benchmarks for OasisDB

Aberta

#29 aberto em 25 de jun. de 2025

Ver no GitHub
 (2 comentários) (0 reação) (1 responsável)Go (16 forks)auto 404
good first issuehelp wantedtest

Métricas do repositório

Stars
 (99 estrelas)
Métricas de merge de PR
 (Métricas PR pendentes)

Description

We can use dataset to test OasisDB's performance.

What we need to do?

  1. download the dataset
  2. choose algorithm(here we can use hnsw for example)
  3. adjust the parameters to get a graph with recall as horizontal axix, and QPS as the vertical axis.

This is really important to help us to know the OasisDB's capability boundaries.

Guia do colaborador

Direção de pesquisa
Configure uma estrutura de benchmark em Go usando a biblioteca OasisDB existente. Baixe um conjunto de dados vetoriais padrão, implemente o algoritmo HNSW e ajuste os parâmetros para gerar um gráfico de recall vs QPS. Concentre se na estrutura do arquivo de teste e na precisão das medições.
Pilha de tecnologia
go
Domain
database
Tipo Issue
Teste
DifficultyDificuldade de implementação estimada para um novo contribuidor, de 1 para alterações muito pequenas a 5 para trabalho de nível especializado.
2
Tempo estimadoUm intervalo de tempo aproximado para um colaborador experiente investigar, implementar, testar e preparar um pull request.
1-3 horas
Status da atividadeQuão disponível o issue aparece agora: novo, ativo, obsoleto, bloqueado ou aguardando entrada do mantenedor.
Ativo
ClarityCom que clareza o issue explica a mudança esperada, os critérios de aceitação e a próxima etapa.
Claro
Prerequisites
GoGitBasic understanding of benchmarking
Simpatia para novatosUma pontuação de 1 a 100 que estima o quão acessível este issue é para colaboradores iniciantes.
75