HiBench

此项目已归档 # Intel 不会提供或保证此项目的开发或支持,包括但不限于维护、错误修复、新版本或更新。 此项目的补丁已不再被 Intel 接受。 此项目已确定存在已知的安全问题。

HiBench 是一个大数据基准套件,可帮助评估不同的大数据框架在速度、吞吐量和系统资源利用率方面的表现。它包含一组 Hadoop、Spark 和流式工作负载,包括 Sort、WordCount、TeraSort、Repartition、Sleep、SQL、PageRank、Nutch 索引、贝叶斯、Kmeans、NWeight 和增强的 DFSIO 等。此外,它还包含了用于 Spark Streaming、Flink、Storm 和 Gearpump 的多个流式工作负载。

工作负载

TeraSort 是 Jim Gray 创建的一个标准基准测试。其输入数据由 Hadoop TeraGen 示例程序生成。 4. 重分区 (微重分区) 此工作负载基准测试了混合性能。输入数据由 Hadoop TeraGen 生成。工作负载随机选择混合后的分区 f