Importation de données dans la ruche avec Sqoop
Ici, vous importez la totalité de la base de données directement à partir de l'ordre de service MySQL dans la ruche et exécutez une requête HiveQL contre la base de données nouvellement importée sur Hadoop. La liste suivante vous montre comment il est fait.
ruche> create database serviceorderdb-OKTime prise: 1.343 secondshive> utilisation serviceorderdb-OKTime prises: 0.062 secondes $ Sqoop importation JDBC --connect: mysql: // localhost / serviceorderdb - nom d'utilisateur root -P - Table productinfo - ruche-import - ruche table serviceorderdb.productinfo -m passe 1Entrez: ... 13/08/16 15:17:08 INFO hive.HiveImport: import ruche complète Sqoop $ importation JDBC --connect: mysql: /. / localhost / serviceorderdb - nom d'utilisateur root -P - Table customercontactinfo - ruche-import - ruche table serviceorderdb.customercontactinfo -m passe 1Entrez: ... 13/08/16 17:21:35 INFO . hive.HiveImport: import ruche complète Sqoop $ importation JDBC --connect: mysql: // localhost / serviceorderdb - nom d'utilisateur root -P - serviceorders de table - ruche-import - serviceorderdb.serviceorders ruche tables -m passe 1Entrez: ... 13/08/16 17:26:56 INFO hive.HiveImport: import ruche complète.
Lorsque les opérations d'importation sont complets, vous courez le Voir tableaux commande à la liste les tables nouvellement importés (voir la liste suivante):
ruche> show tables-OKcustomercontactinfoproductinfoserviceordersTime prise: 0.074 secondes
Ensuite, exécutez une requête Hive pour montrer qui Hadoop technologies ont des ordres de service ouverts dans la base de données:
ruche> de productdesc SELECT FROM productinfo> INNER JOIN serviceorders> ON productinfo.productnum = serviceorders.productnum -... OKHBase Product SupportSoutien ruche produitSqoop Product SupportSoutien Pig produitTemps nécessaire: 28.552 secondes
Vous pouvez confirmer les résultats. Vous disposez de quatre ordres de service ouvertes sur les produits en gras. L'opération d'importation Sqoop Hive a travaillé, et maintenant la société de services peuvent tirer parti de la ruche pour interroger, analyser et transformer les données structurées de l'ordre de service.
En outre, l'entreprise peut désormais combiner ses données relationnelles avec d'autres types de données non structurées (peut-être) dans le cadre de toutes les nouvelles applications d'analyse Hadoop. Beaucoup de possibilités existent maintenant avec Hadoop faisant partie de la stratégie globale de l'informatique!
Importation de données dans HDFS avec Sqoop Imaginez une base de données relationnelle utilisée par une société de service fictif qui a été pris (vous l'aurez deviné) les appels de service Apache Hadoop et veut maintenant déplacer certains de ses données vers Hadoop pour exécuter…
Importation de données avec Sqoop Prêt à plonger dans l'importation de données avec Sqoop? Commencez par jeter un oeil à la figure, qui illustre les étapes d'une opération typique Sqoop d'importation à partir d'un SGBDR ou un système d'entrepôt de données. Rien de trop…
Amélioration de vos requêtes ruche avec des index Création d'un index est une pratique courante avec les bases de données relationnelles quand vous voulez accélérer l'accès à une colonne ou un ensemble de colonnes dans votre base de données. Sans index, le système de base de données doit…
Rejoindre des tables avec ruche Vous savez probablement déjà que les experts en modélisation de base de données relationnelle et la conception passent généralement beaucoup de leur temps à la conception des bases de données normalisées, ou schémas. Base de données…
Caractéristiques de hiveql clés La communauté Apache Hive vivante et active en permanence ajouters déjà à un vaste ensemble de fonctionnalités, ce qui rend la couverture exhaustive encore plus difficile. La liste qui suit résume quelques caractéristiques principales HiveQL…
Access SQL et ruche apache Apache Hive est incontestablement interface d'interrogation de données la plus répandue dans la communauté Hadoop. À l'origine, les objectifs de conception pour la ruche étaient pas pour assurer la compatibilité de SQL complète et de haute…
Ecureuil client comme ruche avec le pilote JDBC SQuirreL SQL est un outil open source qui agit comme un client Hive. Vous pouvez télécharger ce client SQL universelle à partir du site SourceForge. Il fournit une interface utilisateur de ruche et simplifie les tâches de l'interrogation de…
L'architecture de la ruche apache Comme vous examinez les éléments de Apache Hive montrées, vous pouvez voir au bas cette ruche se trouve au sommet du système Hadoop Distributed File (HDFS) et les systèmes de MapReduce.Dans le cas de MapReduce, les figureshows deux composants…
Les données de grandes mines avec ruche Hive est, une couche d'entreposage des données orientée lots construit sur les éléments de base de Hadoop (HDFS et MapReduce) et est très utile dans les grandes données. Il fournit aux utilisateurs qui connaissent SQL avec une mise en œuvre…
Choisir le meilleur plan pour construire la ruche Quand vous avez beaucoup de renforcement ruche envisage de choisir, comment décidez-vous qui est le mieux à vos besoins? Côté esthétique, plusieurs facteurs devraient influencer votre décision. L'un a trait à vos talents de menuisier, et…
Bee gabarits de cadre ruche: comment faire votre propre Pour construire un gabarit de trame pour les ruches, d'abord de le décomposer en ses composants individuels et suivez ces instructions sur la façon de réduire ces composants frame-jig.Lumber dans un magasin est identifié par son nominal taille,…
Le stand ruche élevée: comment faire votre propre Lors de la construction d'une position élevée pour votre ruche d'abeille, il est plus facile de le décomposer en ses composants individuels - les tableaux suivants montrent comment et fournir des instructions sur la façon de réduire ces…
Comment construire une position élevée ruche Un stand ruche élevée est exactement ce que cela ressemble: un élément que vous utilisez pour maintenir une ruche sur le sol. Beaucoup d'apiculteurs mettent tous leurs ruches sur ce type de support.La figure montre les plans pour vous aider à…
Comment établir une ruche noyau Une ruche de noyau (souvent appelé un nuc) Est créé en stockant une ruche miniature spéciale avec quelques cadres d'abeilles et le couvain de l'un de vos colonies. Pourquoi créer un nuc? Certaines des raisons sont les suivantes:Un nuc peut…