上篇已经介绍了如何从Hbase中读取数据，这次介绍如下向Hbase写数据
使用接口：saveAsNewAPIHadoopDataset(jobConf)
/**
* 将RDD写入Hbase
* @p...
天涯孤鸟
2年前 (2017-11-30) 3685℃ 1评论
2喜欢
Spark操作Hbase有两个接口：
1、newAPIHadoopRDD(conf,TableInputFormat.class, ImmutableBytesWritable.class, Result.class);读取数据
2、 saveAsNewAPIHadoopDa...
天涯孤鸟
2年前 (2017-11-30) 2612℃ 0评论
1喜欢
测试环境:
CDH-5.7.1-1
CentOS6.5
Spark1.6
Kafka_2.10-0.9.0.1
最近在做Spark on Yarn 遇到了诸多问题，下面就遇到的问题及解决方法做一个记录：
一、没有认证
...
天涯孤鸟
2年前 (2017-11-21) 10844℃ 1评论
2喜欢
一、Spark是什么
Spark是一个用来实现快速而通用的集群计算的平台。
在速度方面，Spark扩展了广泛使用的MapReduce计算模型，而且高效的支持更多计算模式，包括交互式查询和流处理。Spark的一个主要特点就是能够在内存中计算，因此速度更快。不过即使是必须在磁盘上进...
天涯孤鸟
3年前 (2016-12-10) 3057℃ 0评论
0喜欢
