Hadoop大数据实训中的最高与最低温度实验报告

简介：
本实验报告基于Hadoop平台进行大数据分析，重点探讨了如何利用MapReduce技术从海量数据中提取并计算每日最高和最低气温信息。通过该实践项目，学员掌握了高效处理大规模气象记录的技能，并加深了对分布式系统架构的理解与应用能力。 需要完成以下任务：统计全球每年的最高气温和最低气温；MapReduce输出结果应包含年份、最高气温以及最低气温，并按照最高气温降序排序，如果遇到相同最高温度的情况，则进一步根据最低温度升序排列；使用自定义数据类型来实现这一功能。此外，还需结合Combiner与上述自定义的数据结构共同完成全球每年的最热和最冷记录统计工作。最后，在整个过程中要运用ToolRunner的应用以及通过Eclipse提交MapReduce作业的操作流程。