分类目录归档:大数据

入门Hbase,看这一篇就够了

团队内部要分享HBase的知识,之前研究了一段时间,知识比较零散,这一次就系统化 … 继续阅读

发表在 大数据 | 标签为 , | 留下评论

Spark Windows IDEA 开发环境配置

必要条件: JDK IDEA Spark core jar 包 Hadoop C … 继续阅读

发表在 Spark, 大数据 | 留下评论

Unable to load native-hadoop library for your platform… using builtin-java classes where applicable

原因一: 网上有很多说法是版本 默认 64位 而 系统是  32位,那我们要自己 … 继续阅读

发表在 Hadoop, 大数据 | 留下评论

ERROR Shell: Failed to locate the winutils binary in the hadoop binary path

下载对应的 hadoop 二进制安装包到 Windows 下,解压后配置环境变量 … 继续阅读

发表在 Hadoop, 大数据 | 留下评论

Spark 第一个实例 by Shell

从 WordCount 开始 Spark 实战之旅。该实例将用 Scala 语言 … 继续阅读

发表在 Spark, 大数据 | 留下评论

Spark JAVA_HOME is not set 问题排查

排查后发现,在 sbin 目录下的 spark-config.sh 文件下未添加 … 继续阅读

发表在 Spark, 大数据 | 留下评论

实时流处理 Storm、Spark Streaming、Samza、Flink 比较

分布式流处理需求日益增加,包括支付交易、社交网络、物联网(IOT)、系统监控等。 … 继续阅读

发表在 Spark, 大数据 | 留下评论