基于云平台日志分析的追责方法研究与设计
【文章页数】:72 页
【学位级别】:硕士
【部分图文】:
图2-4?MapReduce执行过程图??以WordCount为例,结合图2-4,一次统计过程如下:??
MapReduce划分为“Map?(映射)”和“Reduce?(归约)”两个概念[38],是并行计算??的中心思想,在Hadoop框架中中只需要实现map()和reduce()两个函数就可以实现??分布式计算。MapReduce的执行过程如图2-4所示:??<kl,?vl>?Ma....
图2一SStom计算拓扑图
所示的Storm任务有两个数据源,经过处理后,输出两种不同结果。目??在美团点评的相关实时任务中己经有较为成熟的应用。??orm相同,Flink在流式处理上也有较为成熟的应用。事实上,Flink是一??流式处理和批处理的混合框架,当前的主流框架都将批处理和流式处理??类型,而Fl....
图2-6?Kafka消息分发机制图??2-6,kafkaartition组,组里??
?Consumer?Group2??图2-6?Kafka消息分发机制图??如图2-6所示,kafka先将所有partition的消息都分发到所有用户组,然后组里??的用户轮询消费partition的数据,允许用户重复消费,但不允许用户消费不到消??息,因此,每个group中用户数....
图3-2实体间关系量化方法架构图??
云平台具有分布式特性,每个实体在运行过程中都在不断产生日志,来记录??实体的运行状况和通信信息等。由上研究可知,实体间相关性是会随时间变化的,??因此本文为实体间相关性度量系统设计了如图3-2的物理架构,来保证实体间相??关性度量的实时性和准确性:?????__??、、、、??、....
本文编号:4032873
本文链接:https://www.wllwen.com/kejilunwen/ruanjiangongchenglunwen/4032873.html
下一篇:没有了