Skip to main content

Normalisation des noms et prénoms (nettoyage, patterns, détection d’anomalies)

Project description

README — normalize_names

But : Ce README et la docstring décrivent une fonction Python normalize_names(df, value=None, nettoyage=True, overlap_cleaning=True, pattern_detection=True, normalization=True, dict_check=True) destinée à nettoyer et normaliser des colonnes de noms dans un pandas.DataFrame. Le texte est en français et contient : usage, paramètres, comportement des options, exemples et bonnes pratiques.

Objectif

normalize_names prend en entrée un DataFrame et applique une série d'opérations (suppression d'erreurs typographiques simples, détection de motifs, harmonisation d'ordres prénom/nom, vérification contre un dictionnaire, etc.) pour retourner un DataFrame avec une ou plusieurs colonnes de noms normalisées. Le but est d'améliorer la qualité des noms pour des opérations de jointure, déduplication, ou visualisation.

Installation / Dépendances

Requiert (au minimum) :

pandas

numpy

unidecode (pour retirer les accents)

Comportement résumé des options

df : pandas.DataFrame d'entrée.

value : nom de la colonne à normaliser (str) ou liste/tuple de colonnes à normaliser. Si None, la fonction essaie de détecter automatiquement la(les) colonne(s) contenant des noms (heuristique : colonnes textuelles avec mots capitalisés fréquents).

nettoyage (bool) : opérations de nettoyage de base (strip, lower/upper selon stratégie, suppression d'espaces doublons, suppression de ponctuation inutile).

overlap_cleaning (bool) : atténuation des chevauchements/doublons internes (p. ex. "Jean Jean" → "Jean", "Marie-Anne Marie" → "Marie-Anne").

pattern_detection (bool) : détection et correction de motifs courants (inversions "Lastname, Firstname", présence de titres Dr., Mme, initiales mal formatées, format LASTNAME Firstname, etc.).

normalization (bool) : application de règles de normalisation (capitalisation correcte : Jean Dupont, séparation prénom/nom si possible, translittération).

dict_check (bool) : vérification et correction optionnelle via dictionnaire de noms propres / base de référence (fuzzy-matching pour corriger Jahn → John si plausible).

Retourne : un DataFrame (copie par défaut) où la/les colonnes spécifiées sont ajoutées ou remplacées par leur version normalisée. La fonction peut aussi renvoyer un rapport de transformations si demandé.

Project details


Download files

Download the file for your platform. If you're not sure which to choose, learn more about installing packages.

Source Distribution

cartelis_name_normalizer-1.4.0.tar.gz (16.5 MB view details)

Uploaded Source

Built Distribution

If you're not sure about the file name format, learn more about wheel file names.

cartelis_name_normalizer-1.4.0-py3-none-any.whl (16.8 MB view details)

Uploaded Python 3

File details

Details for the file cartelis_name_normalizer-1.4.0.tar.gz.

File metadata

  • Download URL: cartelis_name_normalizer-1.4.0.tar.gz
  • Upload date:
  • Size: 16.5 MB
  • Tags: Source
  • Uploaded using Trusted Publishing? No
  • Uploaded via: twine/6.2.0 CPython/3.14.3

File hashes

Hashes for cartelis_name_normalizer-1.4.0.tar.gz
Algorithm Hash digest
SHA256 795efeef4105ec8215b1a5e147ddfb1314b3fe09cad324476556f6085d70f1c2
MD5 1b12ff8da3ffe4058f6db2104fe530f2
BLAKE2b-256 452b0d3987207f9bb125b2abe5d8eb9212092077cb994e3bb5d31275787802ee

See more details on using hashes here.

File details

Details for the file cartelis_name_normalizer-1.4.0-py3-none-any.whl.

File metadata

File hashes

Hashes for cartelis_name_normalizer-1.4.0-py3-none-any.whl
Algorithm Hash digest
SHA256 d3cf18bed54a9043e0b8fc2fea9307a5451de39f8edc9718c1a684bb68a15028
MD5 2312400dd92c84dbc2092519be9c3508
BLAKE2b-256 487861c5107315fad1beb909947374db226bbc87f449ba8a915906a04d669efb

See more details on using hashes here.

Supported by

AWS Cloud computing and Security Sponsor Datadog Monitoring Depot Continuous Integration Fastly CDN Google Download Analytics Pingdom Monitoring Sentry Error logging StatusPage Status page