ETL pipeline: export company data from Openapi to PostgreSQL
Personne n'a encore pris cette issue.
Évaluation
- Difficulté
- 4/5
- Temps estimé
- 3-5 jours
- Accessibilité débutants
- 45/100
- Type d'issue
- Fonctionnalité
- Clarté
- Plutôt claire
- Activité
- Calme
- Stack technique
- php, postgresql
- Domaine
- data-engineering
Piste de recherche
Start by reading the SDK's API client and OAuth usage shown in the issue, then inspect the examples/ directory to see how examples are organized. The proposed workflow uses Openapi's company API and PostgreSQL, but pagination and partial failure behavior are still open questions. Done would mean those choices are settled and the intended example or SDK support is clearly specified.
Rédigé par le modèle d'indexation à partir du texte de l'issue.
Description
Use case
A common ETL scenario: pull company data from the Openapi IT company API and load it into a local PostgreSQL database for reporting or enrichment pipelines.
Example flow
use Openapi\Client;
use Openapi\OauthClient;
$oauth = new OauthClient();
$token = json_decode($oauth->createToken(['GET:company.openapi.com/IT-advanced']), true)['token'];
$client = new Client($token);
$companies = json_decode($client->get('https://company.openapi.com/IT-search', [
'provincia' => 'MI',
'codice_ateco' => '6201',
]), true);
foreach ($companies['items'] as $company) {
$pdo->execute(
'INSERT INTO companies (cf, name, address) VALUES (?, ?, ?) ON CONFLICT DO NOTHING',
[$company['cf'], $company['name'], $company['address']]
);
}
Open questions
- Should the SDK expose a pagination helper or leave that to the consumer?
- How do we handle partial failures mid-batch — retry, skip, or fail fast?
- Is there interest in an official example script for this use case in
examples/?
- Langage dominant
- PHP
- Étoiles
- 20
- Forks
- 3
- Métriques de merge des PR
- Aucune PR mergée en 30 j
Préparer son environnement
- Aucun Dockerfile ni fichier Docker Compose
- Propose un modèle de pull request
- Lire le guide de contribution
Par où commencer
- Lisez l'issue en entier, puis le guide de contribution du projet.
- Signalez en commentaire que vous la prenez — cela évite que deux personnes fassent le même travail.
- Forkez le dépôt et travaillez sur une branche.
- Ouvrez une pull request qui référence le numéro de l'issue.
Autres issues de openapi/openapi-php-sdk
-
Improve PHPDoc Consistency Across the CodebasePeut-être à nouveau libre @Seraphim200001 l’a pris il y a 140 jours, et aucune pull request n’est ouverte. Ouverte
Difficulté 4/5 3-5 jours Accessibilité débutants 48/100
openapi/openapi-php-sdk#36 · 3 commentaires ·
-
enhancement help wanted
Difficulté 5/5 Plus d'une semaine Accessibilité débutants 25/100
openapi/openapi-php-sdk#34 ·
-
good first issue question
Difficulté 5/5 Plus d'une semaine Accessibilité débutants 35/100
openapi/openapi-php-sdk#33 · 2 commentaires ·
-
enhancement
Difficulté 5/5 Plus d'une semaine Accessibilité débutants 25/100
openapi/openapi-php-sdk#32 ·
-
help wanted question
Difficulté 5/5 Plus d'une semaine Accessibilité débutants 25/100
openapi/openapi-php-sdk#31 ·
Toutes les issues de openapi/openapi-php-sdk
Issues similaires
-
Difficulté 2/5 1-3 heures Accessibilité débutants 78/100
pluginsGLPI/addressing#127 ·
-
Difficulté 2/5 1-3 heures Accessibilité débutants 62/100
TYPO3BestPractices/tea#2409 ·
Les mainteneurs répondent en général sous 1 jour
-
Difficulté 2/5 1-3 heures Accessibilité débutants 72/100
api-platform/core#8690 ·
Les mainteneurs répondent en général sous 1 jour
-
No Code Attached Yet
Difficulté 2/5 1-3 heures Accessibilité débutants 72/100
joomla/joomla-cms#48626 ·
Les mainteneurs répondent en général sous 1 jour
-
enhancement good first issue
Difficulté 2/5 1-3 heures Accessibilité débutants 70/100
DorsetDigital/silverstripe-schema-manager#26 ·
Les mainteneurs répondent en général sous 1 jour