Sqoop是一个用来将Hadoop和关系型数据库中的数据相互转移的工具，可以将一个关系型数据库（例如：MySQL,Oracle,Postgres等） ... [详细]

RCFile是Hive推出的一种专门面向列的数据格式。它遵循ldquo;先按列划分，再垂直划分rdquo;的设计理念。当查询过程中，针对它并 ... [详细]

项目进行了大半后发现悲剧了，利用sqoop默认的从oracle数据库到处的数据表，如果其中的数据精度大于15位，而导入的表有些字段默认 ... [详细]

将Oracle中的业务基础表增量数据导入Hive中，与当前的全量表合并为最新的全量表。通过Sqoop将Oracle中表的导入Hive，模拟全量表和 ... [详细]

上一篇文章《Sqoop1.4.4实现将Oracle10g中的增量数据导入Hive0.13.1，并更新Hive中的主表》描述了增量更新Hive表的原理和Sq ... [详细]

HBase是ApacheHadoop的数据库，能够对大型数据提供随机、实时的读写访问。HBase的目标是存储并处理大型的数据。HBase是一个开源 ... [详细]

Sqoop的安装也很简单。完成sqoop的安装后，可以这样测试是否可以连接到mysql(注意：mysql的jar包要放到SQOOP_HOMElib下)： ... [详细]

list-tablessqooplist-tables--connectjdbc:mysql:192.168.40.194sqoop--usernameroot--passwordroot建表及数据导入sqoopimport--connectjdbc:oracle:thin:@69.16.22.106:1521:tjsatbi--tableFWSK.DM_HY--usernameSJCX--passwordsjcx ... [详细]

Hue是一个开源的ApacheHadoopUI系统，最早是由ClouderaDesktop演化而来，由Cloudera贡献给开源社区，它是基于PythonWeb框架Django实现的。通过使用Hue我们可以在浏览器端的Web控制台上与Hadoop集群进行交互来分析处理数据，例如操作HDFS上的数据，运行Ma ... [详细]

Hadoop家族系列文章Hadoop家族系列文章，主要介绍Hadoop家族产品，常用的项目包括Hadoop,Hive,Pig,HBase,Sqoop,Mahout,Zookeeper,Avro,Ambari,Chukwa，新增加的项目包括，YARN,Hcatalog,Oozie,Cassandra,Hama,Whirr,Flume,Bigtop,Crunch, ... [详细]

周海汉文2013.8.22环境hive版本hive-0.11.0sqoop版本?sqoop-1.4.4.bin__hadoop-1.0.0从hive导到mysqlmysql表：mysqldesccps_activation;++-++++-+|Field|Type|Null|Key|Default|Extra|++-++++-+|id|int(11)|NO|PRI|NU ... [详细]

首先我们要安装好sqoop笔者我用的是sqoop1其次我们需要ojdbc6.jar这个jar包下载地址如下：www.oracle.comtechnetworkdatabaseenterprise-editionjdbc-112010-090769.html将解压的包复制到sqoop安装目录下的lib目录中最后执行我们的导入 ... [详细]