2 dépôts
Integrating lazy-loading mechanisms to defer array computations until results are explicitly requested.
Distinct from Lazy Array Constructors: Focuses on the integration of deferred computation (via Dask) rather than the construction of the arrays themselves.
Explore 2 awesome GitHub repositories matching data & databases · Deferred Computation Integration. Refine with filters or upvote what's useful.
Xarray est une bibliothèque de tableaux multidimensionnels Python et un framework de jeux de données étiquetés. Elle étend la structure de données NumPy en ajoutant des étiquettes aux tableaux, permettant l'organisation de données N-dimensionnelles complexes en utilisant des dimensions et des coordonnées nommées. La bibliothèque fournit une interface de données NetCDF pour lire et écrire des formats de données scientifiques tels que NetCDF et Zarr. Elle permet le calcul scientifique sur tableaux en maintenant la relation entre les données et les coordonnées physiques pendant les opérations mathématiques. Le projet couvre l'analyse de données multidimensionnelles, la manipulation de données géospatiales et le traitement de données climatiques. Il prend également en charge l'analyse de séries temporelles pour gérer des séquences d'observations au fil du temps.
Wraps Dask arrays to defer computation until a result is explicitly requested.
Stumpy est une bibliothèque Python pour l'analyse de séries temporelles évolutive centrée sur l'implémentation d'algorithmes de profil de matrice. Elle fournit un framework pour calculer des profils de distance afin d'identifier des modèles répétitifs et des anomalies au sein des données de séries temporelles. Le projet se distingue par sa capacité à mettre à l'échelle des calculs lourds sur du matériel GPU et des clusters distribués utilisant Dask. Il prend en charge l'analyse multidimensionnelle pour découvrir des motifs à travers des flux de données concurrents et offre un calcul incrémentiel pour l'analyse de streaming en temps réel. La bibliothèque couvre un large éventail de techniques d'exploration de séries temporelles, incluant la découverte de motifs, la détection d'anomalies et la correspondance de modèles de séquence. Elle fournit également des outils pour la segmentation sémantique afin de détecter les changements de régime et l'extraction de chaînes temporellement ordonnées de modèles de sous-séquences similaires.
Distributes matrix profile computations across a cluster of machines using Dask integration.