En mars 2024, Dell a lancé Data Lakehouse, une solution disponible à la main avec un puissant moteur de consultation basé sur la technologie Starburst, qui offre un accès à un haut rendu et une haute concurrence aux données distribuées, indépendamment de la source de données et de votre emplacement. Dell Data Lakehouse est basé sur un stockage compatible avec Dell S3, qui offre une capacité de stockage de haut rendu et de haute disponibilité pour stocker et consulter les données dans des formats ouverts comme l’iceberg.
Les dirigeants de TI et de données sont impliqués dans la tâche d’accélérer l’analyse et l’IA pendant qu’ils maintiennent les coûts sous contrôle. Si bien l’adoption de Data Lakehouse offre des opportunités de rendu à moindre coût, les équipes d’ingénierie de données et de TI doivent décider comment optimiser les données et les stocker dans le caché et ce qu’elles font comme étant dans le datalake.
Les responsables des données de nombreuses entreprises veillent à ce que les données soient augmentées plus rapidement que leurs présupposés.
Pour répondre à ces nécessités, Dell présente Warp Speed et Dell Data Lakehouse pour optimiser le stockage des données en el almacenamiento compatible avec S3 de Dell.
Warp Speed pour le stockage des données
Vitesse de distorsion Il s’agit d’une nouvelle caractéristique de Dell Data Lakehouse qui permet de former automatiquement les clients de consultation et d’identifier les données auxquelles vous accédez avec fréquence pour créer des indices et des cachés optimaux, au moment où vous conservez les données à celles qui accèdent à une certaine fréquence à l’endroit où vous vous trouvez.
Warp Speed accélère le rendu des consultations pendant le maintien des coûts. Avec Warp Speed, le même groupe peut exécuter des consultations sur le lac de données de 3 à 5 fois plus rapidement sans nécessité de changer de consultation lors de la consultation de la partie finale de l’utilisateur. Vous pouvez également aider à réduire la taille des groupes jusqu’à un 40%.
Warp Speed améliore le rendu, réduit les coûts et optimise l’analyse des données avec Dell Data Lakehouse
En termes plus sencillos, les organisations peut-être effectuer plus de consultations dans des groupes plus grands ou exécuter le même volume de consultations dans des groupes plus petits.
- Accélération de consultations dans les datalakes : Permettre d’indexer de manière autonome le lac de données et d’accélérer bas en exigeant les ensembles de données exploratoires sans faire appel à l’ingénierie de données.
- Création des panneaux de contrôle de haut rendu : Permettez la desglosar plus rapide de TB à PB de données, sans aucun changement dans l’expérience de l’utilisateur final. Les mêmes consultations sont désormais exécutées plus rapidement.
Warp Speed utilise une combinaison de technologies d’accélération pour enregistrer votre rendu remarquable.
· Indexation autonome: Cette fonction crée des types d’indices appropriés (carte de bits, dictionnaire, arbre) adaptés à chaque bloc de données, afin d’accélérer les opérations comme les syndicats, les filtres et les recherches. Les indices sont stockés sur un SSD dans les nœuds de calcul pour un accès rapide.
· Stockage en caché intelligent: Le stockage caché intelligent est un stockage caché de blocs et de colonnes SSD breveté qui optimise le rendu en fonction de la fréquence d’utilisation des données. Le stockage caché élimine l’analyse inutile des tableaux et propose une réutilisation plus importante des données entre les consultations, ce qui entraîne des coûts de processus.
Disponibilité
À partir du 17 juillet, Warp Speed sera disponible pour tous les clients de Dell Data Lakehouse et sera compatible avec ceux qui utilisent l’hébergement compatible avec Dell S3 dans leur datalake. Il n’y a pas de changement dans la licence du logiciel, maintenant il est intégré. La configuration des nœuds de calcul est modifiée pour inclure le SSD qui est entièrement testé et évalué par Dell pour admettre l’indice de vitesse de déformation et la mémoire cachée
