Apache Impala
De Wikipédia, l'encyclopédie libre
Apache Impala est un moteur de requêtes SQL open source de Cloudera (MPP) pour les données stockées dans des clusters d'ordinateurs exécutant Apache Hadoop[2].
Apache Impala
Développé par | Cloudera et Apache Software Foundation |
---|---|
Dernière version | 4.4.0 ()[1] |
Dépôt | github.com/apache/impala |
État du projet | en développement |
Écrit en | C++, Java et Python |
Système d'exploitation | Multiplateforme (en) |
Environnement | Machine virtuelle Java |
Licence | Licence Apache |
Site web | impala.apache.org |
Description
Résumé
Contexte
Cloudera Impala est un moteur de requête qui s'exécute sur Apache Hadoop.
Impala apporte la technologie évolutive et parallèle des bases de données Hadoop, permettant aux utilisateurs d'émettre des requêtes SQL faibles latences aux données stockées dans le HDFS et Apache HBase sans nécessiter le déplacement des données ou transformation. Impala est intégré avec Hadoop pour utiliser les mêmes fichiers et formats de données, ainsi que les frameworks de sécurité et management de ressource utilisés par MapReduce, Apache Hive, Apache Pig et autres logiciels Hadoop[3].
Impala est favorisée par les analystes et les data scientists pour effectuer des analyses sur des données stockées dans Hadoop via des outils de SQL ou des outils d'informatique décisionnelle. Le résultat est un traitement massif sur les données et des requêtes interactives qui peuvent-être effectuées sur le même système en utilisant les mêmes données et méta-données – en évitant de migrer l'ensemble de données dans les systèmes spécialisés ou sur des formats propriétaires tout simplement pour effectuer des analyses.
Fonctionnalités :
- Support HDFS et Apache HBase,
- Lecture des formats Hadoop, y compris les formats texte, LZO, SequenceFile, Avro, RCFile, et Parquet,
- Support Hadoop security (authentication Kerberos),
- Autorisation fine basée sur les rôles avec Apache Sentry,
- Utilisation des meta-datas, driver ODBC, et syntaxe SQL de Apache Hive.
Au début de 2013, un format de fichier en colonnes appelé Parquet a été annoncé pour les architectures y compris Impala. En , Amazon Web Services a annoncé un soutien pour Impala. Au début de 2014, MapR ajouté le support pour Impala. En 2015, un autre format appelé Kudu a été annoncé, que Cloudera a propose de donner à la Fondation Apache Software avec Impala. En , Impala devient un projet Apache Incubator.
Historique
En , Cloudera annonce vouloir donner Impala à la Apache Software Foundation[4].
Voir aussi
- Presto — Moteur de requêtes SQL open source créé par Facebook et soutenu par Teradata. Optimisé d'analyse interactive pour architecture temps réel distribuée
- Dremel — est un outil similaire proposé par Google
- Apache Drill — Projet open source similaire inspiré de Dremel
- Cloudera — La distribution Hadoop initiatrice du projet Cloudera Impala
- Hadoop
- Presto
- Catégorie:Écosystème Hadoop
Références
Liens externes
Wikiwand - on
Seamless Wikipedia browsing. On steroids.