登录
首页 » Java开发 » hadoop源码

hadoop源码

于 2022-08-24 发布 文件大小:15.78 MB
0 125
下载积分: 2 下载次数: 1

代码说明:

应用背景 Hadoop实现了一个分布式文件系统(Hadoop Distributed File System),简称HDFS。HDFS有高容错性的特点,并且设计用来部署在低廉的(low-cost)硬件上;而且它提供高吞吐量(high throughput)来访问应用程序的数据,适合那些有着超大数据集(large data set)的应用程序。HDFS放宽了(relax)POSIX的要求,可以以流的形式访问(streaming access)文件系统中的数据。 关键技术 Google的数据中心使用廉价的Linux PC机组成集群,在上面运行各种应用。即使是分布式开发的新手也可以迅速使用Google的基础设施。核心组件是3个: ⒈GFS(Google File System)。一个分布式文件系统,隐藏下层负载均衡,冗余复制等细节,对上层程序提供一个统一的文件系统API接口。Google根据自己的需求对它进行了特别优化,包括:超大文件的访问,读操作比例远超过写操作,PC机极易发生故障造成节点失效等。GFS把文件分成64MB的块,分布在

下载说明:请别用迅雷下载,失败请重下,重下不扣分!

发表评论

0 个回复

  • 异常检测
    这个项目的开发参数化的方法来检测网络异常使用只有总通信量统计数据,与其他工程,须流动分离,甚至当异常是一小部分的总的交通。通过采用简单的统计模型异常和背景交通在时间域中,可以估计模型参数在真正的时间,从而不需要长时间训练阶段或手动参数整定。拟议的二元参数检测机制 (bPDM) 使用序贯概率比检验,允许为假阳性率的控制,同时检查检测时间和强度的一种异常现象之间的权衡。 此外,它还使用交通率和数据包大小的统计数据,产生一个二元模型,消除了大多数误报。使用的比特率信号信噪比 (SNR) 度量,被证明是有效的度量的异常检测,分析了的方法。BPDM 的性能三个方面。第一,综合生成的交通提供作为函数的异常交通的水平,检测时间对照比较。第二,该方法是证明能够检测控制人工攻击在南加州大学 (USC),洛杉矶,校园网络在不同的实际交通混合。第三,所提出的算法实现快速检测确定以前捕获的网络跟踪的重播的真正拒绝服务攻击。本文提出的方法是能够在几秒钟内,在这些场景中检测所有攻击或更少。
    2022-05-26 20:02:08下载
    积分:1
  • 图书查询系统
    本设计主要用于中小规模的图书查询,总体任务是使图书查询工作规范化、系统化、程序化,避免图书查询的随意性,提高信息处理的速度和准确性,能够及时、准确、有效的查询和修改图书情况。 采用现代化统一的计算机信息网站系统,能够有效优化图书馆查询系统,使其高效的发挥最大作用,能够迅捷的为读者提供相应的服务。 技术上的可行性分析主要分析技术条件能否顺利完成开发工作,软、硬件能否满足需要。本系统采用JSP开发出友好美观的人机界面,便于用户理解、操作。数据库查询系统采用MySQL,它能够处理大量数据,同时保持数据的完整性、安全性。因此本系统的开发平台已成熟可行。硬件方面,在科技飞速发展的今天,硬件更新速度越来越快,容量越来越大,可靠性越来越高,价
    2022-09-28 01:50:04下载
    积分:1
  • Hashmap同步问题
    空中网4k/5k月薪挑选大四实习生的线程题     两年前,我们一个大四的学员去应聘空中网的实习生职位,空中网只给他出了三道线程题,拿回家做两天后再去给经理讲解,如果前两题做好了给4k月薪,第三道题也做出来的话就给5k的月薪。这样的实习薪水和招聘要求,不需要有工作经验的限制,纯粹是技术功底的比拼和考核,而不像许多其他公司非要招两年工作经验的人,逼得那些刚毕业和未毕业的大学生不得不去撒谎,不得不去做假简历,甚至假毕业证!所以,空中网的这份工作对未毕业的大学生来说,还是很有吸引力的。这个学生是否入职空中网,大家去猜吧,免得有人看不顺眼而叫骂,呵呵!     第一题:现有的程序代码模拟产生了16个日志对象,并且需要运行16秒才能打印完这些日志,请在程序中增加4个线程去调用parseLog()方法来分头打印这16个日志对象,程序只需要运行4秒即可打印完这些日志对象。原始代码如下: package read; public class Test { public static void main(String[] args){ 请点击左侧文件开始预览 !预览只提供20%的代码片段,完整代码需下载后查看 加载中 侵权举报
    2022-03-17 11:15:13下载
    积分:1
  • 猜数字源代码
    /**  * 编写程序,实现控制台的猜数字游戏。    游戏运行时产生一个0-10之间的随机整数,  * 要求用户从控制台输入数字,    若输入的数字比产生的数字小,则输出:  * “太小了,再大一点!”;    若输入的数字比产生的数字大,则输出:“太大了,再小一点!”,  * 若输入的数字和产生的数字相等,则输出:“恭喜你猜对了!”然后退出程序;  * 若用户猜了5次还未猜对,则输出:“你太笨了,下次再来吧!”然后退出程序。  *  */  GuessNumGame.java    
    2022-01-25 23:58:53下载
    积分:1
  • 爪哇计算器代码
    应用背景这是一个免费的爪哇计算器教程,用的是开发的除非你尝试自己的代码,否则你会感到很难在爪哇的代码。今天我将与大家分享代码,在爪哇创建计算器。请使用代码仅供参考,复制代码不会帮助你学习爪哇。先决条件:在开始使用代码之前,你应该注意以下几个概念,在你自己的代码和实现相同的。异常处理即事件处理功能AWT组件如按钮,文本框,标签等(AWT =抽象窗口工具)最后,但并非最不重要的逻辑能力。关键技术简易计算器1。一四功能计算器具有以下功能:*除了–两个数相加:N1 + N2。*减–减去二号从一号:N1 N2–。*乘法–将两个数字:N1×N2。*分–分两个数为1:N1/N2。2。用JButton的数量和功能。3。用JMenu文件和帮助。4。创建一个类来响应由数、函数、退出、帮助和功能的事件引起的事件。5。使用BorderLayout  ; ;在计算机各部件的框架布局。一个BorderLayout勾画出一个集装箱,安排和调整其成分放在五个区域:北,南,东,西,和中心。
    2022-07-24 18:39:51下载
    积分:1
  • snmp4j初学代码
    简单的连接snmp agent 然后get数据 在main函数中 Address targetAddress=GenericAddress.parse("udp:192.168.5.151/161");   TransportMapping transport=new DefaultUdpTransportMapping();   Snmp snmp=new Snmp(transport);   transport.listen();   CommunityTarget target=new CommunityTarget();   target.setCommunity(new OctetString("WinSpread"));   target.setAddress(targetAddress);   target.setRetries(3);   target.setTimeout(5000);   target.setVersion(1);   PDU request=new PDU();   request.setType(PDU.SET); //  request.add(new VariableBinding(new OID("IP-FORWARD-MIB::inetCidrRouteMetric4.ipv4"))); //  request.add(new VariableBinding(new OID("IP-MIB::ipAdEntAddr"))); //  request.add(new VariableBinding(new OID(".1.3.6.1.2.1.1.3.0"))); //  
    2022-04-07 20:38:13下载
    积分:1
  • java 摘要实现案例
    java摘要的实现案例如MD系列,RIPEMD系列,SHA系列
    2022-05-29 02:29:10下载
    积分:1
  • ibb论坛,jsp+mysql
    IBBS]是用JSP(Java服务器页面)的论坛软件,因此,它可以运行在几乎每一个平台的范围从WINX到Linux.This版本v1.0是完全免费的,您可以更改代码,只要你喜欢,和重新发布代码,如你所愿。
    2022-02-04 04:56:10下载
    积分:1
  • FB Tree SubGrap
    FP-tree是一种紧凑的数据结构,它表示
    2022-07-21 04:42:04下载
    积分:1
  • html5个人网页 模板
    资源描述快快快快快快快快快快快快快快快快快快快快快快快快快快快快快快快快快快快快快快快快快快快快快快快快快快快1111111111111111111111111111111111111111111111111111111111下载
    2022-05-14 14:41:06下载
    积分:1
  • 696518资源总数
  • 105873会员总数
  • 12今日下载