Secondary NameNode:它究竟有什么作用？

Feb 15,2017 in Hadoop read (802)

最近刚接触Hadoop, 一直没有弄明白NameNode和Secondary NameNode的区别和关系。很多人都认为，Secondary NameNode是NameNode的备份，是为了防止NameNode的单点失败的，直到读了这篇文章Secondary Namenod...

Hadoop Hadoop配置(三)

Feb 14,2017 in Hadoop read (924)

独立模式没有运行的守护程序，所有程序运行在一个JVM中。适合开发期间运行MapReduce程序，源于他的易于测试和调试 Nothing!(不用配置) local FileSystem和local MR job runner 伪分布式 Hadoop的三种模式可以共存,使...

Feb 14,2017 in Hadoop read (733)

Hadoop简介 Apache开源软件,Doug Cutting(Luncene) 计算框架分布式可靠可伸缩搜索引擎海量数据存储 Hadoop发展史 2002年Apache Nutch 抓取网页,数十亿存储瓶颈 2003年 GFS论文 ...

Feb 14,2017 in Hadoop read (823)

大数据生态系统 Java-大数据的基石 Hadoop生态圈 Hive Hive依赖HDFS进行存储,表是逻辑表 Hive的SQL翻译成MR执行 Hive可以将结构化数据映射成一张单表 OLAP,重在分析和统计不支持低延迟操作不提供row...

Feb 14,2017 in JVM read (881)

Trace跟踪参数 -verbose:gc -XX:+printGC 可以打印GC的简要信息 [GC 4790K->374K(15872K), 0.0001606 secs] [GC 4790K->374K(15872K), 0.0001474 secs] [G...

Feb 13,2017 in JVM read (1045)

JVM启动流程使用java或javaw启动,后面跟一个包含main方法的启动类在当前路径寻找配置文件jvm.cfg 根据配置寻找JVM.dll 初始化JVM获得JNIEnv接口,JNIEnv接口包括一些和jvm交互的操作,比如查找一个类找到mai...

Feb 11,2017 in JVM read (888)

JVM概念 JVM是Java Virtual Machine的简称.意为Java虚拟机虚拟机指通过软件模拟的具有完整硬件系统功能的,运行在一个完全隔离环境中的完整计算机系统有哪些虚拟机 VMWare Visual Box JVM VMW...

Feb 02,2017 in 数据结构与算法 read (925)

影响排序算法性能的几个要素时间性能辅助空间算法的复杂性冒泡排序冒泡排序的基本思想两两相邻记录的关键字,如果反序则交换,直4到没有反序的记录为止 Code void BubbleSort(int k[],int n) { int i,j,t...