POWERQUERY :: Consolider un classeur Excel comportant des onglets de données de même nature

oguruma

XLDnaute Occasionnel
Dans ce post l'idée est de consolider des onglets de même nature d'un classeur externe à partir d'un classeur de consolidation.

Exemple de classeur source - un onglet pour chaque année :
1706132804249.png


1706132845230.png


Le but étant de consolider dans un seul classeur les 3 années contenues dans un classeur externe.

La requête effectue les opérations suivantes
- lecture du classeur source et capture de tous les onglets
- renommage des colonnes
- typage des colonnes

Pour la table de mapping peu importe le nom des colonnes la requête les gère dynamiquement. Il suffit de respecter l'ordre ci-dessous

Les paramètres

1706132944323.png


PowerQuery:
let

    //------------------------------------------------------------------------------------------------
    // Combinaison des onglets d'un fichier Excel externe
    // avec renommage et typage des colonnes
    //------------------------------------------------------------------------------------------------
    
    //------------------------------------------------------------------------------------------------
    // On récupère les paramètres
    //------------------------------------------------------------------------------------------------

    // Le classeur avec ses onglets
    FilePath = fnGetParameters("TB_PARAMS","DOSSIER") & "\" & fnGetParameters("TB_PARAMS","FICHIER"),

    // La table de mapping avec les nouveaux types
    T_Mapping=fnGetParameters("TB_PARAMS","TABLE_RENAME"),

    //------------------------------------------------------------------------------------------------
    // Table de mapping
    //------------------------------------------------------------------------------------------------
    TbMapping = Excel.CurrentWorkbook(){[Name=T_Mapping]}[Content],

    //------------------------------------------------------------------------------------------------
    // On prépare la table de mapping pour typer les colonnes
    //------------------------------------------------------------------------------------------------
    ListColumnsTbMapping=Table.ColumnNames(TbMapping),
    Ancien=ListColumnsTbMapping{0},
    Nouveau=ListColumnsTbMapping{1},
    Type=ListColumnsTbMapping{2},

    //------------------------------------------------------------------------------------------------
    // On prépare le mapping des noms de colonnes
    //------------------------------------------------------------------------------------------------
    ToStringAncien="TbMapping[" & Ancien & "]",
    ListAncien=Expression.Evaluate(ToStringAncien,[TbMapping=TbMapping]),
    ToStringNouveau="TbMapping[" & Nouveau & "]",
    ListNouveau=Expression.Evaluate(ToStringNouveau,[TbMapping=TbMapping]),
    ToStringType="TbMapping[" & Type & "]",
    ListType=Expression.Evaluate(ToStringType,[TbMapping=TbMapping]),

    //------------------------------------------------------------------------------------------------
    // On applique le renommage des colonnes
    ChangeColTypes = Table.TransformColumnTypes(TbMapping,{{ListColumnsTbMapping{0}, type text}, {ListColumnsTbMapping{1}, type text}, {ListColumnsTbMapping{2}, type text}}),

    //------------------------------------------------------------------------------------------------
    // Suppression de la colonne ancien dans la table de mapping pour attérir sur le nouveau nom
    //------------------------------------------------------------------------------------------------
    SupprColAncien = Table.RemoveColumns(ChangeColTypes,{"ANCIEN"}),

    //------------------------------------------------------------------------------------------------
    // Construction du contexte powerquery pour le typage des colonnes
    //------------------------------------------------------------------------------------------------
    ToType = Table.TransformColumns(SupprColAncien,{{ListColumnsTbMapping{2}, each Expression.Evaluate(_, [Currency.Type=Currency.Type, Int64.Type=Int64.Type, Percentage.Type=Percentage.Type])}}),

    //------------------------------------------------------------------------------------------------
    // Traitements sur les colonnes pour le typage
    //------------------------------------------------------------------------------------------------
    ToField = Table.AddColumn(ToType, "CustomTypes", each Record.FieldValues(_)),
    RemoveOtherCols = Table.SelectColumns(ToField,{"CustomTypes"}),
    ToListType = RemoveOtherCols[CustomTypes],
    
    //------------------------------------------------------------------------------------------------
    // Capture des onglets
    //------------------------------------------------------------------------------------------------
    Source = Excel.Workbook(File.Contents(FilePath), null, true),
    Filter = Table.SelectRows(Source, each ([Kind] = "Sheet")),
    TransformColumns_TABLE = Table.TransformColumns(Filter,{{"Data", each Table.PromoteHeaders(_), type table}}),

    //------------------------------------------------------------------------------------------------
    // Renommage des colonnes
    //------------------------------------------------------------------------------------------------
    TransformColumns_ZIP = Table.TransformColumns(TransformColumns_TABLE, {{"Data",  each Table.RenameColumns(_, List.Zip({ListAncien,ListNouveau}) , MissingField.Ignore), type table}}),
    
    //------------------------------------------------------------------------------------------------
    // Transformation en table de données
    //------------------------------------------------------------------------------------------------
    Columns_DATA = Table.SelectColumns(TransformColumns_ZIP,{"Data"}),
    ToTable = Table.ExpandTableColumn(Columns_DATA, "Data", ListNouveau, ListNouveau),

    //------------------------------------------------------------------------------------------------
    // Application des types sur les colonnes
    //------------------------------------------------------------------------------------------------
    ToTableType = Table.TransformColumnTypes(ToTable,ToListType) 
    
in
    ToTableType

PowerQuery:
let
    fnGetParameters = (pTable as text, pName as any) =>
    let
        ParamSource = Excel.CurrentWorkbook(){[Name=pTable]}[Content],
        ParamRow = Table.SelectRows(ParamSource, each ([PARAMETRE] = pName)),
        Value=
        if Table.IsEmpty(ParamRow)=true
            then null
        else Record.Field(ParamRow{0},"VALEUR")
    in
        Value
in
    fnGetParameters
 

Pièces jointes

  • FileCombineRename_V0.012.xlsx
    63.6 KB · Affichages: 3
  • Ventes_2020-2022.xlsx
    57.2 KB · Affichages: 4
  • Ventes_2020-2022_1.xlsx
    56.7 KB · Affichages: 4

oguruma

XLDnaute Occasionnel
Mise à jour

PowerQuery:
let

    //------------------------------------------------------------------------------------------------
    // Combinaison des onglets d'un fichier Excel externe
    // avec renommage et typage des colonnes
    //------------------------------------------------------------------------------------------------
    
    //------------------------------------------------------------------------------------------------
    // On récupère les paramètres
    //------------------------------------------------------------------------------------------------

    // Le classeur avec ses onglets
    FilePath = fnGetParameters("TB_PARAMS","DOSSIER") & "\" & fnGetParameters("TB_PARAMS","FICHIER"),

    // La table de mapping avec les nouveaux types
    T_Mapping=fnGetParameters("TB_PARAMS","TABLE_RENAME"),

    //------------------------------------------------------------------------------------------------
    // Table de mapping
    //------------------------------------------------------------------------------------------------
    TbMapping = Excel.CurrentWorkbook(){[Name=T_Mapping]}[Content],

    //------------------------------------------------------------------------------------------------
    // On prépare la table de mapping pour typer les colonnes
    //------------------------------------------------------------------------------------------------
    ListColumnsTbMapping=Table.ColumnNames(TbMapping),
    Ancien=ListColumnsTbMapping{0},
    Nouveau=ListColumnsTbMapping{1},
    Type=ListColumnsTbMapping{2},

    //------------------------------------------------------------------------------------------------
    // On prépare le mapping des noms de colonnes
    //------------------------------------------------------------------------------------------------
    //ToStringAncien="TbMapping[" & Ancien & "]",
    //ListAncien=Expression.Evaluate(ToStringAncien,[TbMapping=TbMapping]),

    ListAncien=Table.Column(TbMapping,Ancien),

    //ToStringNouveau="TbMapping[" & Nouveau & "]",
    //ListNouveau=Expression.Evaluate(ToStringNouveau,[TbMapping=TbMapping]),
    
    ListNouveau=Table.Column(TbMapping,Nouveau),
    
    //ToStringType="TbMapping[" & Type & "]",
    //ListType=Expression.Evaluate(ToStringType,[TbMapping=TbMapping]),
    
    ListType=Table.Column(TbMapping,Type),

    //------------------------------------------------------------------------------------------------
    // On applique le renommage des colonnes
    ChangeColTypes = Table.TransformColumnTypes(TbMapping,{{ListColumnsTbMapping{0}, type text}, {ListColumnsTbMapping{1}, type text}, {ListColumnsTbMapping{2}, type text}}),

    //------------------------------------------------------------------------------------------------
    // Suppression de la colonne ancien dans la table de mapping pour attérir sur le nouveau nom
    //------------------------------------------------------------------------------------------------
    ListAfterRename=Table.ColumnNames(ChangeColTypes),
    SupprColAncien = Table.RemoveColumns(ChangeColTypes,{ListAfterRename{0}}),

    //------------------------------------------------------------------------------------------------
    // Construction du contexte powerquery pour le typage des colonnes
    //------------------------------------------------------------------------------------------------
    ToType = Table.TransformColumns(SupprColAncien,{{ListColumnsTbMapping{2}, each Expression.Evaluate(_, [Currency.Type=Currency.Type, Int64.Type=Int64.Type, Percentage.Type=Percentage.Type])}}),

    //------------------------------------------------------------------------------------------------
    // Traitements sur les colonnes pour le typage
    //------------------------------------------------------------------------------------------------
    ToField = Table.AddColumn(ToType, "CustomTypes", each Record.FieldValues(_)),
    RemoveOtherCols = Table.SelectColumns(ToField,{"CustomTypes"}),
    ToListType = RemoveOtherCols[CustomTypes],
    
    //------------------------------------------------------------------------------------------------
    // Capture des onglets
    //------------------------------------------------------------------------------------------------
    Source = Excel.Workbook(File.Contents(FilePath), null, true),
    Filter = Table.SelectRows(Source, each ([Kind] = "Sheet")),
    TransformColumns_TABLE = Table.TransformColumns(Filter,{{"Data", each Table.PromoteHeaders(_), type table}}),

    //------------------------------------------------------------------------------------------------
    // Renommage des colonnes
    //------------------------------------------------------------------------------------------------
    TransformColumns_ZIP = Table.TransformColumns(TransformColumns_TABLE, {{"Data",  each Table.RenameColumns(_, List.Zip({ListAncien,ListNouveau}) , MissingField.Ignore), type table}}),
    
    //------------------------------------------------------------------------------------------------
    // Transformation en table de données
    //------------------------------------------------------------------------------------------------
    Columns_DATA = Table.SelectColumns(TransformColumns_ZIP,{"Data"}),
    ToTable = Table.ExpandTableColumn(Columns_DATA, "Data", ListNouveau, ListNouveau),

    //------------------------------------------------------------------------------------------------
    // Application des types sur les colonnes
    //------------------------------------------------------------------------------------------------
    ToTableType = Table.TransformColumnTypes(ToTable,ToListType) 
    
in
    ToTableType
 

Pièces jointes

  • FileCombineRename_V0.018.xlsx
    63.5 KB · Affichages: 4

Discussions similaires

Statistiques des forums

Discussions
315 087
Messages
2 116 084
Membres
112 656
dernier inscrit
VNVT