-
日志合并代码
将电信实时日志 根据正则提取 然后通过mr合并，按类区分。
第一类：2016-06-02 23:44:32[02 00:27:16,496 INFO ] - [Topic2Queue.java]-[com.tydic.rtaBc.msgPrep.Topic2Queue$TopicThread]-[run]-[140] -
[消息发送完成****开始时间:1464798436495 结束时间:1464798436496 发送耗时毫秒:1 消息内容:PROD_OFFER_STRA_INST_553#|20160602002715000#|1588772703#|2#|2#|553#|52404686#~256902779#~0#~1763220#~20120829000000#~20170731000000#~48819113#~#~0#~1#~55302972867#~#~24#~1000#~553#~20120829175149#~#~20120829175102#~1#~11] 103002103002009103002009001Topic2Queue174_58_61134.64.115.174file
第二类：[0624 17:12:40 047 INFO ] com.tydic.rtaBc.msgPrep.MsgPrep - [@PH] [2016-06-24 17:12:40] [40-92815B5A8001-RTA1-29928958696021756] [P_1_MR] [1] [OFFER_PROD_INST_REL_554#|20160624170210000#|823943705#|1#|2#|554#|179490421#~286955326#~277480107#~554#~20160624170210#~20160624170210#~555913462#~A1#~286955326#~0#~#~#~#~#~70911#~12#~0#~0]
第三类：103002103002009
- 2022-02-04 07:56:15下载
- 积分：1
-
CRS编码
用于hadoop0.22.0的分布式纠删编码，是对原始hadoop0.22.0的改进版本，大大提高数据恢复速度，非常高效。
- 2022-09-12 03:55:03下载
- 积分：1
-
MapReduce实现大矩阵乘法
MapReduce实现大矩阵乘法 ，即把一个大的矩阵分解成两个矩阵，通过计算两个小的矩阵就可以获得大的矩阵，可以很有效地解决大数据存储的问题。
- 2022-02-18 17:07:55下载
- 积分：1
-
基于hadoop的单词计数
package org.apache.hadoop;
import java.io.IOException;
import java.text.DecimalFormat;
import java.util.StringTokenizer;
import org.apache.hadoop.conf.Configuration;
import org.apache.hadoop.fs.Path;
import org.apache.hadoop.io.DoubleWritable;
import org.apache.hadoop.io.IntWritable;
import org.apache.hadoop.io.Text;
import org.apache.hadoop.mapreduce.Job;
import org.apache.hadoop.mapreduce.Mapper;
import org.apache.hadoop.mapreduce.Reducer;
import org.apache.hadoop.mapreduce.Reducer.Context;
import org.apache.hadoop.mapreduce.lib.input.FileInputFormat;
import org.apache.hadoop.mapreduce.lib.jobcontrol.ControlledJob;
import org.apache.hadoop.mapreduce.lib.jobcontrol.JobControl;
import org.apache.hadoop.mapreduce.lib.output.FileOutputFormat;
import org.apache.hadoop.util.GenericOptionsParser;
public class WordCount {
- 2022-03-24 10:24:54下载
- 积分：1
-
基于MapReduce的大量数据求和
使用Hadoop中的MapReduce计算框架可以对数字文本分析及求和，当遇到大规模数据时，使用别的编程语言会使得计算过程变得复杂，但使用MapReduce并行计算框架只需编写map函数和reduce函数即可，简单方便。
- 2022-02-28 22:28:59下载
- 积分：1
-
Hadoop2.0入门案例
Hadoop2.0.入门案例。很实用，想要学习大数据的同学抓紧，里面有自己的学习心得！
- 2022-03-23 12:12:27下载
- 积分：1
-
hadoop-workCount-源码
hadoop2.5.1-workCount-源码,导入eclipse可直接运行。有需求的可以一起研究一下。
- 2022-02-25 01:53:06下载
- 积分：1
-
hdfs文件系统操作
提供的是Hadoop系统中的HDFS文件系统的上传下载文件，以及对文件进行操作的的Java代码。提供的是Hadoop系统中的HDFS文件系统的上传下载文件，以及对文件进行操作的的Java代码。提供的是Hadoop系统中的HDFS文件系统的上传下载文件，以及对文件进行操作的的Java代码。提供的是Hadoop系统中的HDFS文件系统的上传下载文件，以及对文件进行操作的的Java代码。
- 2022-05-21 13:24:13下载
- 积分：1
-
分析部门员工的情况
1) 求各个部门的总工资
2) 求各个部门的人数和平均工资
3) 求每个部门最早进入公司的员工姓名
4) 求各个城市的员工的总工资
5) 列出工资比上司高的员工姓名及其工资
6) 列出工资比公司平均工资要高的员工姓名及其工资
7) 列出名字以J开头的员工姓名及其所属部门名称
8) 列出工资最高的头三名员工姓名及其工资
9) 将全体员工按照总收入（工资+提成）从高到低排列，要求列出姓名及其总收入
10) 如果每位员工只能和他的直接上司，直接下属，同一部门的同事交流，求任何两名员工之间若要进行信息传递所需要经过的中间节点数。
- 2022-03-14 23:07:58下载
- 积分：1
-
hiped2_sourcecode.zip
ont-style:normal;font-variant:normal;"突然之间， 大数据一下子就“火”了， 开源软件 Hadoop 也因此水涨船高 请点击左侧文件开始预览 ！预览只提供20%的代码片段，完整代码需下载后查看 加载中 侵权举报
- 2022-05-26 04:34:14下载
- 积分：1
