本帖最后由 Oner 于 2017-7-27 17:26 编辑 问题导读： 1. 如何进行日志提取预处理？ 2. 如何设计KPI指标？ 3. 如何使用Hado ...

Oner 2017-7-27 1 10484

本帖最后由 levycui 于 2020-4-28 16:52 编辑 问题导读： 1、CM/CDH包含哪些内容？ 2、如何进行Cloudera Manager 升级？ 3 ...

levycui 2020-4-28 3 8239

问题导读 1.hadoop有哪些工具？ 2.hadoop流的作用是什么？ 3.hadoop集群负载如何模拟？ 4.hadoop数据提取和分析工具是哪个？ ...

pig2 2016-2-22 2 18061

编译的时候遇到了不少问题，在后面会贴出错误，参考 从零教你在Linux环境下（ubuntu 12.04）如何编译hadoop2.4环境重新安装 ...

nettman 2014-11-24 117 152628

问题导读 1.什么是OneData标准？ 2.OneData核心特点是什么？ 3.如何设计统一归口？ 在现有大数据平台的基础上，借 ...

a87758133 2019-10-21 1 6671

问题导读 1.hadoop1.x中mapreduce框架与yarn有什么共同点？ 2.它们有什么不同点？ 3.yarn中有哪些改变？ 4.yarn中有哪些术 ...

pig2 2017-1-30 25 48949

问题导读： 1.什么是纠删码？2.HDFS中怎样实现的纠删码？3.Erasure Coding技术有哪些优劣势？ 最新经典文章，欢迎关注 ...

fc013 2018-10-27 2 16566

注：本文来自个人博客www.zhuyongpeng.cn 1、概要 2、主要变动介绍总架构的改变>> 1. Shell脚本重写（1）增加了参数冲突检测 ...

不可替代 2018-4-6 3 15197

问题导读：1、什么是yarn？2、Yarn 和MapReduce相比，它有什么特殊作用 ？ 背景Yarn是一个分布式的资源管理系统，用以 ...

xioaxu790 2014-5-11 19 95220

问题导读： 1、Hadoop1.x和Hadoop2.x架构有哪些区别？ 2、什么是QJM？ 3、如何理解QJM框架？ 4、如何理解主备切换机制？ ...

levycui 2017-10-17 3 18565

国内外使用Hadoop的公司比较多，全球最大的Hadoop集群在雅虎，有大约25，000个节点，主要用于支持广告系统与网页搜索。国内用Had ...

pig2 2014-1-13 12 19385

本帖最后由 pig2 于 2017-7-3 14:54 编辑 问题导读： 1.如何配置各个节点之间无密码互通？ 2.启动hadoop，看不到进程的原因 ...

pig2 2014-5-12 129 432805

问题导读： 1.公司自建IDC机房的适合做吗？ 2.实现思路有哪些？ 3.实现代码和注意事项有哪些？ 一.背景： 公司自建IDC机 ...

林宝宝 2019-8-27 2 9773

问题导读 1、如何理解Hadoop运维？ 2、频繁出现Deadnode是什么原因？ 3、datanode报错如何解决？ （一）Hadoo ...

xioaxu790 2015-2-5 4 35596

本帖最后由 desehawk 于 2018-1-21 21:08 编辑 在运行hadoop集群过程中，hadoop数据量大的情况下，会造成死机，停止hdfs和yarn ...

desehawk 2018-1-21 2 11603

相关内容： hadoop2.5.2汇总：新增功能最新编译 32位、64位安装、源码包、API、eclipse插件下载 Hadoop2.5 Eclipse插件制 ...

nettman 2014-12-12 280 235126

问题导读 1.如何进行环境配置？ 2.Hadoop 的安装步骤有哪些？ 3.如何关闭防火墙？ 4.rsync的安装 Java环境的安装 zookeepe ...

阿大 2019-3-20 2 10073

本帖最后由 pig2 于 2018-1-10 15:28 编辑 问题导读 1.如何指定hadoop临时路径？ 2.dfs.blocksize可以使用那些单位？ 3.m ...

pig2 2018-1-8 2 25435

下载hadoop1.0.4版本，和jdk1.6版本或更高版本： 1. 安装JDK，安装目录大家可以自定义，下面是我的安装目录：配置环境变量：将 ...

lzw 2013-12-22 21 86272

问题导读： 1.怎样在Centos7.6基础上实现Hadoop 3.1.1的HA高可用安装？2.怎样配置集群之间的免密登录？3.怎样配置HA高可用？ ...

fc013 2019-2-16 1 4623

问题导读 1.磁盘IO实现共享，使用的是什么原理技术？ 2.如何描述磁盘I / O资源？ 3.磁盘I / O资源中的调度因素如何？ 4.每 ...

pig2 2018-1-18 1 14449

问题导读 1.hadoop3.x必须使用哪个版本的jdk? 2.hadoop3.x是否可以配置5个namenode？ 3.hadoop除了可以使用swift，还可以使用 ...

pig2 2016-9-14 34 35966

问题导读： 1.怎样在Hadoop上运行分布式深度学习/机器学习应用程序？2.Submarine项目包含哪些部分？3.Submarine计算引擎可以 ...

fc013 2019-1-5 1 11037

问题导读 1.Hadoop 设置map的个数后为什么不生效？ 2.map的个数有什么来决定？ 3.如何确定分片的大小？ 4.reduce个数该如 ...

pig2 2018-12-20 2 9643

问题导读 1.如何配置 Hadoop HTTP web-consoles 所需要的用户身份验证? 2.哪个配置文件可以配置 Hadoop HTTP认证？ 3.hadoo ...

pig2 2016-1-10 3 16405

问题导读： 1.如何使用Scala代码访问Kerberos环境的HDFS？2.怎样导出Kerberos集群中访问HDFS的keytab文件？3.怎样实现客户端 ...

fc013 2018-11-17 2 9551

本帖最后由 levycui 于 2018-11-13 22:40 编辑 问题导读： 1、如何进行时钟同步？ 2、如何安装Kerberos客户端？ 3、Kerbero ...

levycui 2018-11-13 2 8769

本帖最后由 howtodown 于 2014-8-19 11:49 编辑 问题导读： 1.如何修改本地时区？ 2.需要安装那些软件？ 3.带dos参数与不带 ...

howtodown 2014-8-6 127 120287

1.hadoop2.5.2发布：新增功能和改进 hadoop2.5.2与hadoop2.5.1新增功能和改进几乎没有变化 Common： 1.当使用代理服务 ...

nettman 2014-11-24 240 198037