Bonjour,
L'outil pour consolider des données est Powerquery qui est disponible dans Excel.
Il peut facilement traiter des millions de lignes, et sans pouvoir les afficher simultanément il est ensuite facile de les agréger, ou des les envoyer dans un modèle de données Power Pivot (également dans Excel) pour les analyser.
Tu trouveras facilement moult tutoriels sur ces deux "briques" complémentaires.