基于网络日志挖掘技术数据信息分析的研究

  本文关键词：基于网络日志挖掘技术数据信息分析的研究，由笔耕文化传播整理发布。

龙源期刊网 基于网络日志挖掘技术数据信息分析的研究 作者：付生 来源：《科技与创新》2015 年第 06 期 摘 要：对网络日志挖掘技术数据信息分析的研究，是动态交互网络使用数据挖掘的一种 技术实现。通过挖掘动态交互网络日志，可以查找用户访问动态交互网络的浏览方式和习惯性 行为，并依据数据挖掘分析和研究动态交互网络日志记录中的规

律，判断数据价值链与组织结 构的适应性问题，从而提高信息查找的快速指向性和信息检索的高效性，，并利用统计和关联的 分析找出特定用户与特定地域、特定时间、特定页面等要素之间的内在联系。 关键词：日志挖掘；数据分析；信息检索；网络日志 中图分类号：TP311.13 文献标识码：A DOI：10.15913/j.cnki.kjycx.2015.06.068 1 日志数据挖掘 动态交互网络获取信息的过程存在站点访问的跳跃性和无序性，数据信息指向是呈布朗运 动分布的。超文本链接的跳转过程具有一定的普遍性，并且还有数据存量大、数据更替快等大 数据 4V 特点。挖掘规律即是动态交互网络用户访问信息发现的重要研究内容。动态交互网络 日志挖掘是对大量用户行为和数据价值有效性的判断，该判断是经过数据的预处理、数据模式 识别和模式分析 3 个过程实现的。 2 动态交互网络日志挖掘的过程 对于动态交互网络日志挖掘，首先要研究和分析网络日志记录信息存在的变化和特点，进 而实现数据的预处理过程。另外，要识别用户信息，提高对用户价值信息的服务质量，改进动 态交互网络服务系统的数据信息判断和组织结构。 2.1 数据预处理 在动态交互网络日志文件记录中，存储的是用户访问站点信息的原始记录，而原始记录的 数据具有多样性和大量性，所以，直接从数据中挖掘其有效价值存在不确定性和一定的困难。 在借助一定的算法和工具分析数据时，必须要对数据进行预处理。预处理过程是指对数据质 量、数据的多样性和量级进行处理，这会直接影响数据挖掘的结果，还会影响数据价值存在的 判断。对于数据访问量小、数据多样性单一的网络日志信息，数据处理的准确性具有非常重要 的意义。日志预处理主要是通过数据净化、用户识别、会话识别和数据合并 4 个过程实现的。 2.2 数据模式发现 龙源期刊网 利用数据挖掘相关算法是实现对网络日志中隐藏的、重复的、大量有用的或者无用的信息 进行数据模式识别的一种方式，最终发现可以理解和学习的信息。同时，用于动态交互网络的 挖掘技术有路径选择、关联分析、分类规则、聚类分析、序列分析和依赖性建模等。 2.3 模式分析 在动态交互网络日志挖掘中，最重要的一项工作就是数据分析。它主要完成有用模式的算 法发现和数据链的模式分析。在当前的电子商务系统中，模式发现和模式分析能够实现大量用 户数据的价值发现，利用挖掘的有效算法，能够在日志数据快速变化的状态下分析用户的浏览 状况，并依据模式分析结果改进网页内容，优化用户服务，从而提高用户的兴趣点，提升访问 量，解决数据大量、快速、多样性变化的特点，以此获取有效价值数据对交互网络的影响。 3 在信息系统中的构建 3.1 网站设计 网站设计的主要内容包括以下几点：①用户访问网站方式基于 http 协议；②动态交互网络 的服务多样性；③依据用户行为信息，挖掘有效价值链，产生具有特色的网络交互行为，而数 据页面的引导表现出了便捷和快速的特点；④利用日志挖掘技术查询用户有价值信息，依据数 据价值判断、推算出潜在的数据连接和页面访问指向。 3.2

WEB日志挖掘技术的研究及应用

传统数据挖掘技术只是对数据结构中结 构化的数据进行...Web 日志挖掘体系, 才能分析并得出自己需要的信息。...人工神经网络算法后又一个得到大家认可的研究性课题...

基于Web数据挖掘技术的远程教育应用研究

基于Web数据挖掘技术的远程教育应用研究_互联网_IT/...我们只需要分析和挖掘系统日志,就可 以很好的对学习...Web 数据挖掘是数据挖掘技术与计算机网络技术的融合,...

基于网络舆情日志挖掘的政府决策信息行为研究

基于网络舆情日志挖掘的政府决策信息行为研究_军事/政治...本课题首次提出政府应从分析公众利用网络问政、参与...日志数据的 处理、代表用户信息行为特征值的提取的...

FL15111702+WEB日志挖掘技术的研究及应用

这就让挖掘的前提需要将传 统数据挖掘技术与 Web ...Web 日志挖掘体系, 才能分析并得出自己需要的信息。...人工神经网络算法后又一个得到大家认可的研究性课题...

基于数据挖掘技术的网页个性化推荐系统分析

基于数据挖掘技术的网页个性化推荐系统分析_信息与通信...关键词:网络摘要:介绍了―网络迷航现象及 WEB 数据...应用数据挖掘技术就是分析网站描述文件和日志文件,...

关于 网络博客关键信息挖掘技术的研究与实现

关于 网络博客关键信息挖掘技术的研究与实现_调查/...API 进行了设计与实现,并对获取的数据进行了分析。...博客的日志结构如图 1 所示: 图 1 博客的结构 ...

如何通过用数据挖掘技术来分析Web网站日志？

之一 如何通过用数据挖掘技术来分析 Web 网站日志?...这些信息对站点建设 潜在有用的可理解的未知信息和...寻找彼此相似对象组,这些数据 基于距离函数求出对象...

基于数据挖掘技术的科技情报系统研究

基于数据挖掘技术的科技情报系统研究_信息与通信_工程...其原因主要是分析处理的数据 可能来自多种不同的...2.2 科技情报的收集 近些年,随着网络环境的普及,我...

web数据挖掘技术分析与研究

web数据挖掘技术分析与研究_互联网_IT/计算机_专业资料...它所涉及的学科知识包括有网络技术、 信息统计学、...新闻组、BBS、电子邮件、网站日志等都属于文本资 源...

  本文关键词：基于网络日志挖掘技术数据信息分析的研究，由笔耕文化传播整理发布。