Importación de datos en colmena con sqoop

Video: Importación de datos y ordenamiento en R Studio

A continuación, se importa la totalidad de la base de datos de órdenes de servicio directamente desde MySQL en Colmena y ejecuta una consulta HiveQL la base de datos recién importado en Apache Hadoop. El siguiente listado muestra cómo se hace.

Video: importación base de datos transacciones

hivegt; crear la base de datos serviceorderdb-OKTime tomada: 1.343 secondshivegt; utilizar serviceorderdb-OKTime tomada: 0.062 segundos $ Sqoop importación JDBC --connect: mysql: // localhost / serviceorderdb - -P nombre de usuario root - productinfo mesa - colmena-importación - colmena mesa serviceorderdb.productinfo -m contraseña 1Ingrese : ... 13/08/16 15:17:08 INFO hive.HiveImport: importación colmena completa $ Sqoop importación --connect jdbc: mysql:. ​​// localhost / serviceorderdb - -P nombre de usuario root - customercontactinfo-- mesa colmena-importación - colmena mesa serviceorderdb.customercontactinfo -m contraseña 1Ingrese: 13/08/16 17:21:35 ... INFO hive.HiveImport: importación colmena completa $ importación Sqoop JDBC --connect: mysql: //. localhost / serviceorderdb - -P nombre de usuario root - serviceorders de mesa - colmena-import - serviceorderdb.serviceorders colmena-mesa -m contraseña 1Ingrese: 13/08/16 17:26:56 ... INFO hive.HiveImport: colmena importación completa.

Cuando las operaciones de importación están completos, se corre el tablas muestran comando para listar las tablas recién importados (véase la siguiente lista):

Video: Sqoop Import to Hive and Sqoop Export

hivegt; Mostrar tablas-OKcustomercontactinfoproductinfoserviceordersTime tomada: 0.074 segundos

A continuación, ejecutar una consulta de la colmena para mostrar qué tecnologías Apache Hadoop tiene órdenes de servicio abiertas en la base de datos:

hivegt; SELECT productdesc DE productinfogt; Serviceordersgt combinación interna; EN productinfo.productnum = serviceorders.productnum -... OKHBase Soporte de ProductoSoporte del producto de la colmenaSqoop Soporte del productoConejillo de soporte de productosTiempo empleado: 28.552 segundos

Video: neodata 2014 9: importar base de datos 2009

Puede confirmar los resultados. Tiene cuatro órdenes de servicio abiertas en los productos en negrita. La operación de importación Sqoop Colmena funcionó, y ahora la compañía de servicios puede aprovechar la colmena a consultar, analizar y transformar los datos estructurados su orden de servicio.

Además, la compañía ahora puede combinar sus datos relacionales con otros tipos de datos no estructurados (quizás) como parte de las nuevas aplicaciones de análisis de Hadoop. Muchas posibilidades existen ahora con Apache Hadoop ser parte de la estrategia general de TI!

Artículos Relacionados