NepTechTribe/CodeVault

Link Scraper in Python

Ouverte

#15 ouverte le 10 oct. 2025

Voir sur GitHubGuide contributeur
 (2 commentaires) (0 réaction) (1 personne assignée)JavaScript (21 forks)auto 404
hacktoberfest

Métriques du dépôt

Stars
 (5 étoiles)
Métriques de merge PR
 (Métriques PR en attente)

Description

  1. A py script that takes url of website and scrape all links then dump them in txt file.
  2. Categorize them based on anchor link, internal link, external link.
  3. MetaData present in the site.

I think this is useful for SEO.

Guide contributeur

Direction de recherche
Implémentez un script Python utilisant requests et BeautifulSoup pour scraper tous les liens d'une URL donnée, les catégoriser en liens d'ancrage, internes et externes, et les déverser dans un fichier TXT. Extrayez également les métadonnées du site. Utilisez argparse pour les arguments de ligne de commande.
Stack technique
python
Domaine
backend
Type d'issue
Fonctionnalité
DifficultéDifficulté estimée pour un nouveau contributeur, de 1 pour un très petit changement à 5 pour un travail expert.
3
Temps estiméFourchette de temps approximative pour investiguer, implémenter, tester et préparer une pull request.
Une demi journée
Statut d'activitéDisponibilité apparente de l'issue : fraîche, active, ancienne, bloquée ou en attente d'un mainteneur.
Active
ClartéClarté avec laquelle l'issue explique le changement attendu, les critères d'acceptation et la prochaine étape.
Claire
Prérequis
PythonWeb scraping basics
Accessibilité débutantScore de 1 à 100 estimant l'accessibilité de cette issue pour un premier contributeur.
80