Les paires de clés de valeur dans le modèle de données HBase
Le modèle de données logique HBase est simple mais élégant, et il fournit un mécanisme de stockage de données pour organiser toutes sortes de données - de grands ensembles de données non structurées en particulier. Toutes les parties du modèle de données convergent en une paire clé-valeur.
Tout d'abord, dans un monde où vous pouvez penser de la clé de ligne que la clé primaire pour les données stockées dans HBase, comment vous retrouvez-vous tirer parti le reste des composants du modèle de données? Eh bien, tout dépend de la quantité de données que vous souhaitez renvoyer dans les requêtes et combien de temps vous êtes prêt à attendre.
En ne spécifiant que la clé de ligne peut potentiellement revenir une tonne de données, car une ligne individuelle peut avoir des millions de colonnes. Aussi, avec seulement la clé de ligne de travailler à partir, HBase peut revenir chaque colonne de qualification, la version et la valeur liée à la touche de ligne.
Que faire si vous voulez seulement une colonne ou une version particulière de vos données? Dans l'exemple montré, pouvez-vous voir ce qui se passe si vous voulez seulement le nom d'un client en particulier? La solution est de construire une touche plus complexe de spécifier exactement ce que vous avez besoin. Une paire clé-valeur peut ressembler à ceci: RowKey: (Colonne Famille: Colonne Qualifier: Version) => Valeur
| Key Row | Colonne Famille: {Colonne Qualifier: Version: Valeur} |
|---|---|
| 00001 | CustomerName: {«FN»: 1383859182496: «John», 'LN': 1383859182858: «Smith», «MN»: 1383859183001: Timothy '', «MN»: 1383859182915: 'T'} ContactInfo: {'EA': 1383859183030:'[email protected] », «SA»: 1383859183073: «1 Hadoop Lane, NY11111 '} |
| 00002 | CustomerName: {«FN»: 1383859183103: «Jane», 'LN': 1383859183163: «Doe», Informations de contact: { «SA»: 1383859185577: «7 HBase Ave, CA22222 '} |
Après avoir spécifié la clé, le reste est optionnel. Le plus précis vous faites la requête, cependant (de gauche à droite), le plus granulaire les résultats. Votre performance va empirer, parce que le système doit passer plus de temps de localiser la valeur exacte ou des valeurs dont vous avez besoin, mais moins de données est renvoyée lorsque la requête est terminée.
Donc touches sont plus complexes que vous pouvez l'imaginer à partir de l'étude de la table. Par exemple, si vous voulez le plus récent prénom (ou le seul prénom jusqu'à présent) du client dans la rangée '00001', la paire clé-valeur résultant devrait ressembler à ceci: '00001: CustomerName: MN' => ' Timothy '
Rappelez-vous que les versions sont implémentées en utilisant des timbres de temps par défaut et sont classés par ordre décroissant de sorte que vous obtenez automatiquement la valeur la plus récente, si vous ne spécifiez pas une version. Si vous voulez un milieu initial avant pour votre client (voir le tableau 12-2), votre paire clé-valeur résultant devrait ressembler à ceci: '00001: CustomerName: MN: 1383859182915' => 'T'
Nous espérons que les différentes descriptions de HBase commencent à prendre forme dans votre esprit. Plus précisément, HBase est à la fois une famille orientée magasin de données de la colonne et un magasin de données clé-valeur-paire. Se référant à HBase simplement comme un “ colonne orientée ” magasin de données laisse beaucoup à l'imagination.
Dans le cas où vous étiez curieux, il n'y a aucun types de données dans HBase - valeurs dans HBase sont seulement un ou plusieurs octets. Encore une fois, simple mais puissant parce que vous pouvez stocker quoi que ce soit!
Importation de données dans HDFS avec Sqoop Imaginez une base de données relationnelle utilisée par une société de service fictif qui a été pris (vous l'aurez deviné) les appels de service Apache Hadoop et veut maintenant déplacer certains de ses données vers Hadoop pour exécuter…
Régions en HBase RegionServers sont une chose, mais il faut aussi jeter un oeil à la façon dont les différentes régions travaillent. Dans HBase, une table est à la fois la propagation à travers un certain nombre de RegionServers ainsi comme étant composé des…
Regionservers dans HBase RegionServers sont les processus logiciels (souvent appelés démons) vous activez pour stocker et récupérer des données dans HBase (Base de données Hadoop). Dans les environnements de production, chaque RegionServer est déployé sur son propre…
Touches de ligne dans le modèle de données HBase Hbase magasins de données sont constitués d'une ou plusieurs tables qui sont indexées par les touches de ligne. Les données sont stockées dans des lignes avec des colonnes et rangées peut avoir plusieurs versions. Par défaut, le versioning…
Stocker les données de grandes avec HBase HBase est, une base de données qui utilise HDFS que son magasin de persistance pour les grands projets de données non relationnelles distribuée (de colonne). Elle est calquée sur Google BigTable et est capable d'accueillir de très grandes…
Les attributs de HBase HBase (Base de données Hadoop) est une implémentation Java de BigTable de Google. Google définit comme un BigTable “ clairsemée, distribué, carte triés multidimensionnelle persistante ”. Il est une définition assez concise, mais…
L'écosystème du client HBase HBase est écrit en Java, un langage élégant pour la construction de technologies distribuées comme HBase, mais le visage il - pas tout le monde qui veut prendre avantage des innovations Hbase est un développeur Java. Voilà pourquoi il ya un…
Comment préparer les données dans un classement de r analyse prédictive modèle Pour exécuter une analyse prédictive, vous devez obtenir les données sous une forme que l'algorithme peut utiliser de construire un modèle. Pour ce faire, vous avez à prendre un certain temps à comprendre les données et de connaître sa…
Les bases de données en colonnes dans un environnement grand de données Les bases de données en colonnes peuvent être très utiles dans votre grand projet de données. Bases de données relationnelles sont orientée rangée, que les données de chaque ligne d'une table sont stockées ensemble. Dans une forme de…
Ajouter des données mysql une ligne à la fois Si vous avez une petite quantité de données à ajouter à votre base de données MySQL, vous pouvez ajouter une ligne à la fois à la table. Scripts PHP ont souvent besoin d'ajouter une ligne à la fois. Par exemple, quand un script PHP accepte…
Comment travailler avec les noms de variables dans r Variables dans une trame de données dans la R toujours besoin d'avoir un nom. Pour accéder aux noms de variables, vous pouvez encore traiter une trame de données comme une matrice et utiliser la fonction colnames () comme ça:> Colnames…
Comment maintenir l'intégrité de domaine dans une base de données SQL multitable Vous pouvez habituellement pas garantir qu'un élément de données particulier dans une base de données SQL est correct, mais vous pouvoir déterminer si un élément de données est valide. De nombreux éléments de données ont un nombre limité…
Comment dessiner des graphiques linéaires sur un ordinateur La meilleure façon de dessiner une ligne graphique en utilisant un ordinateur est d'utiliser un tableur programme tel que Microsoft Excel ou OpenOffice Calc, qui est gratuit.Saisie de vos données graphiques en lignePour entrer les données pour…
Comment dessiner des diagrammes circulaires sur un ordinateur Dessiner un diagramme circulaire sur l'ordinateur est une expérience fantastique, au moins par rapport à faire à la main. Il faut quelques secondes, et vous ne devez pas se rappeler comment utiliser un rapporteur ou d'inquiétude à propos de…