BigData Blog

我干了什么 究竟拿了时间换了什么

kafka之Producer同步与异步消息发送及事务幂等性案例应用实战

版权声明:本套技术专栏是作者(秦凯新)平时工作的总结和升华,通过从真实商业环境抽取案例进行总结和分享,并给出商业应用的调优建议和集群环境容量规划等内容,请持续关注本套博客。版权声明:禁止转载,欢迎学习。QQ邮箱地址:1120746959@qq.com,如有任何商业交流,可随时联系。 https://blog.csdn.net/shenshouniu/ar...

hive的简单理解--笔记

版权声明:遥想公瑾当年,小乔初嫁了,使我不得开心颜。 https://blog.csdn.net/Beeman_xia/article/details/53699952 Hive的理解 数据仓库的工具  Hive仅仅是在hadoop上面包装了SQL; Hiv...

hdfs架构分析

版权声明:本文为博主原创文章,未经博主允许不得转载。 https://blog.csdn.net/lwy313722871/article/details/69936854 hdfs介绍 hadoop的分布式文件系统hdfs是依据谷歌的GFS论文来实现的,它...

hbase的重建

本文主要讨论hbase中如何将集群环境转换为单机环境。如果你认为把不用的regionserver停止就可以的话,你就错了,这时整个hbase会不段的报错。下面就以不破坏正常的hdfs为前提,将原有hbase砍掉重新使用。   假设现在你的hadoop和hbase已经在运行中,并且hbase有多个regi...

hadoop-quickstart-命令行方式打包运行wordcount

在hadoop环境配置完成后,运行第一个例子程序: 1,创建文件 #echo "hello world" >> test1.txt #echo "hello hadoop" >> test2.txt 2,上传文件到hdfs #cd ../hadoop #bin/hadoop d...

MapReduce的核心资料索引

[+] 名字起源起源诸多优点架构 HDFSNameNodeDataNode文件操作Linux 集群集群系统应用程序 Hadoop系统安装于配置海量数据处理平台架构介绍Hadoop能解决哪些问题Hadoop在国内的情景Hadoop简介Hadoop生态系统介绍HDFS简介HDFS设计原则HDFS系统结构H...

Kafka高性能架构之道

点击链接加入群【悦分享测试联盟】:https://jq.qq.com/?_wv=1027&k=5DiePik摘要上一篇文章《Kafka设计解析(五)- Kafka性能测试方法及Benchmark报告》从测试角度说明了Kafka的性能。本文从宏观架构层面和具体实现层面分析了Kafka如何实现高性能...

Hadoop实战(7)_Apache Hadoop安装和配置Hue

版权声明:本文为博主原创文章,未经博主允许不得转载。 https://blog.csdn.net/padluo/article/details/78409509 系列目录: Hadoop实战(1)_阿里云搭建Hadoop2.x的伪分布式环境 Hadoop实...

Hadoop分布式文件系统HDFS

版权声明:原创博客,微信:18518215883 https://blog.csdn.net/G290095142/article/details/78255086 参考博客 还不懂HDFS的工作原理?快来扫扫盲 HDFS中的Namenode和Datano...

HDFS体系结构及常见功能

版权声明:本文为博主原创文章,未经博主允许不得转载。 https://blog.csdn.net/cp_Mark/article/details/80206720 本文主要是介绍HDFS的体系结构和常用操作,涉及到的知识点如下: HDFS的体系结构 数据上...