为了账号安全,请及时绑定邮箱和手机立即绑定
慕课网数字资源数据库体验端
认识Hadoop--基础篇_学习笔记_慕课网
为了账号安全,请及时绑定邮箱和手机立即绑定

认识Hadoop--基础篇

Kit_Ren Linux系统工程师
难度初级
时长 1小时22分
  • 用javac..查看是否安裝java 安裝openjdk7 vim /etc/profile : export JAVA_HOME=/usr/lib/jvm/java-7-openjdk-amd64 <==從安裝訊息上可以知道 export JRE_HOME=$JAVA_HOME/jre export CLASSPATH=$JAVA_HOME/lib:$JRE_HOME/lib:$CLASSPATH export PATH=$JAVA_HOME/bin:$JRE_HOME/bin:$PATH
    查看全部
  • hadoop生态系统: 1.hdfs 2.mapreduce 3.相关开源工具: (1)hive:将sql语句转化为hadoop任务 (2)HBASE:存储结构化数据的分布式数据库,放弃事务特性,追求更高的扩展,它提供数据的随机读写和实时访问,实现对表数据的读写功能 (3)zookeeper:监控Hadoop集群里的每个节点的状态,管理整个集群的配置,维护数据节点之间的一致性
    查看全部
  • hadoop=分布式存储(HDFS)+分布式计算(MapReduce) HDFS:分布式文件系统,存储海量数据 MapReduce:并行处理框架,实现任务分解和调度 Hadoop用途:搭建大型数据仓库,PB级数据存储、处理、分析、统计等业务(搜索引擎、日志分析、商业智能、数据挖掘)。
    查看全部
  • hdfs:分布式文件系统,存储海量的数据 mapReduce:并行处理框架,实现任务的分解和调度
    查看全部
  • 关于楼上说的分区问题,我觉得是在map任务执行完之后,提交给Reduce任务时进行分区的
    查看全部
  • Hadoop配置
    查看全部
  • 搭建便捷的Linux环境——租用云主机,阿里云、UnitedStack等
    查看全部
  • 222
    查看全部
  • Hadoop
    查看全部
  • 用javac..查看是否安裝java 安裝openjdk7 vim /etc/profile : export JAVA_HOME=/usr/lib/jvm/java-7-openjdk-amd64 <==從安裝訊息上可以知道 export JRE_HOME=$JAVA_HOME/jre export CLASSPATH=$JAVA_HOME/lib:$JRE_HOME/lib:$CLASSPATH export PATH=$JAVA_HOME/bin:$JRE_HOME/bin:$PATH
    查看全部
  • hdfs:分布式文件系统,存储海量的数据 mapReduce:并行处理框架,实现任务的分解和调度
    查看全部
  • hadoop生态系统: 1.hdfs 2.mapreduce 3.相关开源工具: (1)hive:将sql语句转化为hadoop任务 (2)HBASE:存储结构化数据的分布式数据库,放弃事务特性,追求更高的扩展,它提供数据的随机读写和实时访问,实现对表数据的读写功能 (3)zookeeper:监控Hadoop集群里的每个节点的状态,管理整个集群的配置,维护数据节点之间的一致性
    查看全部
  • hadoop=分布式存储(HDFS)+分布式计算(MapReduce)——开源 Hadoop的核心组成部分 HDFS:分布式文件系统,存储海量数据 MapReduce:并行处理框架,实现任务分解和调度 Hadoop用途:搭建大型数据仓库,PB级数据存储、处理、分析、统计等业务(搜索引擎、日志分析、商业智能、数据挖掘)。 hadoop优势: 1.高扩展(通过硬件来不断扩展性能和内容) 2.低成本(可以在普通pc机上进行开发) 3.成熟的生态圈
    查看全部
  • Google分布式技术革命性变化1:成本降低、能用PC机、就不用大型机和高端存储。 2、软件容错硬件故障视为常态。通过软件保证高可靠性。 3.简化并行分布式计算,无须控制节点同步和数据交换。。。 hadoop采用了Google的这种技术。
    查看全部
  • 结合书本,同步学习java开发。
    查看全部

举报

0/150
提交
取消
课程须知
本课程需要童鞋们提前掌握Linux的操作以及Java开发的相关知识。对相关内容不熟悉的童鞋,可以先去《Linux达人养成计划Ⅰ》以及《Java入门第一季》进行修炼~~
老师告诉你能学到什么?
1、Google的大数据技术 2、Hadoop的架构设计 3、Hadoop的使用 4、Hadoop的配置与管理
友情提示:

您好,此课程属于迁移课程,您已购买该课程,无需重复购买,感谢您对慕课网的支持!