大数据课程论文 大数据时代.doc

1、山东农业大学课程论文题目： 大数据时代 学院： 信息科学与工程学院 专业： 通信工程 学号： 班级： 姓名： 年 月 日山东农业大学0大数据时代摘要： 大数据技术(big data)指的是所涉及的资料量规模巨大到无法通过目前主流软件工具，在合理时间内达到撷取、管理、处理、并整理成为帮助企业经营决策更积极目的的资讯。大数据的 4V 特点：Volume（大量）、Velocity（高速）、Variety（多样）、value（价值）。关键字：大数据 云计算 海量 发展 影响1、 大数据的初识随着云时代的来临，大数据（big data）吸引了越来越多的关注。“大数据”是需要新处理模式才能具有更强的决策力

2、、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。 大数据技术的战略意义不在于掌握庞大的数据信息，而在于对这些含有意义的数据进行专业化处理。换言之，如果把大数据比作一种产业，那么这种产业实现盈利的关键，在于提高对数据的“加工能力”，通过“加工”实现数据的“增值”。 对于企业组织来讲，大数据的价值体现在两个方面：分析使用和二次开发。对大数据进行分析能揭示隐藏其中的信息。例如零售业中对门店销售、地理和社会信息的分析能提升对客户的理解。对大数据的二次开发则是那些成功的网山东农业大学1络公司的长项。例如 Facebook 通过结合大量用户信息，定制出高度个性化的用户体验，并创造出一种新的广

3、告模式。这种通过大数据创造出新产品和服务的商业行为并非巧合，谷歌、雅虎、亚马逊和 Facebook 它们都是大数据时代的创新者。我们正处在一个数据爆炸性增长的“大数据“时代。1、大数据四个特性海量性：企业面临着数据量的大规模增长。例如，IDC 最近的报告预测称，到 2020 年，全球数据量将扩大 50 倍。目前，大数据的规模尚是一个不断变化的指标，单一数据集的规模范围从几十 TB到数 PB 不等。简而言之，存储 1PB 数据将需要两万台配备 50GB 硬盘的个人电脑。此外，各种意想不到的来源都能产生数据。多样性：一个普遍观点认为，人们使用互联网搜索是形成数据多样性的主要原因，这一看法部分正确。

4、然而，数据多样性的增加主要是由于新型多结构数据，以及包括网络日志、社交媒体、互联网搜索、手机通话记录及传感器网络等数据类型造成。其中，部分传感器安装在火车、汽车和飞机上，每个传感器都增加了数据的多样性。高速性：高速描述的是数据被创建和移动的速度。在高速网络时代，通过基于实现软件性能优化的高速电脑处理器和服务器，创建实时数据流已成为流行趋势。企业不仅需要了解如何快速创建数据，还必须知道如何快速处理、分析并返回给用户，以满足他们的山东农业大学2实时需求。根据 IMS Research 关于数据创建速度的调查，据预测，到 2020 年全球将拥有 220 亿部互联网连接设备。易变性：大数据具有多层结构

5、，这意味着大数据会呈现出多变的形式和类型。相较传统的业务数据，大数据存在不规则和模糊不清的特性，造成很难甚至无法使用传统的应用软件进行分析。传统业务数据随时间演变已拥有标准的格式，能够被标准的商务智能软件识别。目前，企业面临的挑战是处理并从各种形式呈现的复杂数据中挖掘价值。2、 大 数 据 三 个 特 征除 了 有 四 个 特 性 之 外 ， 大 数 据 时 代 的 数 据 还 呈 现 出 其 他 三 个 特征 。第 一 个 特 征 是 数 据 类 型 繁 多 。 包 括 网 络 日 志 、 音 频 、 视 频 、 图片 、 地 理 位 置 信 息 等 等 ， 多 类 型 的 数 据 对 数

6、据 的 处 理 能 力 提 出 了更 高 的 要 求 。第 二 个 特 征 是 数 据 价 值 密 度 相 对 较 低 。 如 随 着 物 联 网 的 广 泛应 用 ， 信 息 感 知 无 处 不 在 ， 信 息 海 量 ， 但 价 值 密 度 较 低 ， 如 何 通过 强 大 的 机 器 算 法 更 迅 速 地 完 成 数 据 的 价 值 “提 纯 ”， 是 大 数 据时 代 亟 待 解 决 的 难 题 。第 三 个 特 征 是 处 理 速 度 快 ， 时 效 性 要 求 高 。 这 是 大 数 据 区 分 于传 统 数 据 挖 掘 最 显 著 的 特 征 。2、 大 数 据 的 作 用 及

7、 其 用 途山东农业大学3大 数 据 ， 其 影 响 除 了 经 济 方 面 的 ， 它 同 时 也 能 在 政 治 、 文 化 等方 面 产 生 深 远 的 影 响 ， 大 数 据 可 以 帮 助 人 们 开 启 循 “数 ”管 理 的模 式 ， 也 是 我 们 当 下 “大 社 会 ”的 集 中 体 现 ， 三 分 技 术 ， 七 分 数据 ， 得 数 据 者 得 天 下 。“大 数 据 ”的 影 响 ， 增 加 了 对 信 息 管 理 专 家 的 需 求 。 事 实 上 ，大 数 据 的 影 响 并 不 仅 仅 限 于 信 息 通 信 产 业 ， 而 是 正 在 “吞 噬 ”和重 构 很

8、 多 传 统 行 业 ， 广 泛 运 用 数 据 分 析 手 段 管 理 和 优 化 运 营 的 公司 其 实 质 都 是 一 个 数 据 公 司 。 在 零 售 业 中 ， 数 据 分 析 的 技 术 与 手段 得 到 广 泛 的 应 用 ， 传 统 企 业 通 过 数 据 挖 掘 重 塑 并 优 化 供 应 链 ，电 商 卓 越 亚 马 逊 、 淘 宝 等 则 通 过 对 海 量 数 据 的 掌 握 和 分 析 ， 为 用户 提 供 更 加 专 业 化 和 个 性 化 的 服 务 。1、 变 革 价 值 的 力 量未 来 十 年 ， 决 定 中 国 是 不 是 有 大 智 慧 的 核 心

9、意 义 标 准 （ 那 个 ”思想 者 ”） ， 就 是 国 民 幸 福 。 一 体 现 到 民 生 上 ， 通 过 大 数 据 让 事 情变 得 澄 明 ， 看 我 们 在 人 与 人 关 系 上 ， 做 得 是 否 比 以 前 更 有 意 义 ；二 体 现 在 生 态 上 ， 看 我 们 在 天 与 人 关 系 上 ， 做 得 是 否 比 以 前 更 有意 义 。 总 之 ， 让 我 们 从 前 10 年 的 意 义 混 沌 时 代 ， 进 入 未 来 10 年意 义 澄 明 时 代 。2、 变 革 经 济 的 力 量生 产 者 是 有 价 值 的 ， 消 费 者 是 价 值 的 意 义

10、所 在 。 有 意 义 的 才 有 价值 ， 消 费 者 不 认 同 的 ， 就 卖 不 出 去 ， 就 实 现 不 了 价 值 ； 只 有 消 费者 认 同 的 ， 才 卖 得 出 去 ， 才 实 现 得 了 价 值 。 大 数 据 帮 助 我 们 从 消山东农业大学4费 者 这 个 源 头 识 别 意 义 ， 从 而 帮 助 生 产 者 实 现 价 值 。 这 就 是 启 动内 需 的 原 理 。3、 变 革 组 织 的 力 量随 着 具 有 语 义 网 特 征 的 数 据 基 础 设 施 和 数 据 资 源 发 展 起 来 ， 组 织的 变 革 就 越 来 越 显 得 不 可 避 免 。

11、 大 数 据 将 推 动 网 络 结 构 产 生 无 组织 的 组 织 力 量 。 最 先 反 映 这 种 结 构 特 点 的 ， 是 各 种 各 样 去 中 心 化的 WEB2.0 应 用 ， 如 RSS、 维 基 、 博 客 等 。 大 数 据 之 所 以 成 为 时代 变 革 力 量 ， 在 于 它 通 过 追 随 意 义 而 获 得 智 慧 。大 数 据 可 分 成 大 数 据 技 术 、 大 数 据 工 程 、 大 数 据 科 学 和 大 数 据应 用 等 领 域 。 目 前 人 们 谈 论 最 多 的 是 大 数 据 技 术 和 大 数 据 应 用 。工 程 和 科 学 问 题 尚

12、 未 被 重 视 。 大 数 据 工 程 指 大 数 据 的 规 划 建 设 运营 管 理 的 系 统 工 程 ； 大 数 据 科 学 关 注 大 数 据 网 络 发 展 和 运 营 过 程中 发 现 和 验 证 大 数 据 的 规 律 及 其 与 自 然 和 社 会 活 动 之 间 的 关 系 。物 联 网 、 云 计 算 、 移 动 互 联 网 、 车 联 网 、 手 机 、 平 板 电 脑 、 PC以 及 遍 布 地 球 各 个 角 落 的 各 种 各 样 的 传 感 器 ， 无 一 不 是 数 据 来 源或 者 承 载 的 方 式 。3、 云 中 大 数 据如 今 ， 大 数 据 与

13、云 计 算 是 全 球 企 业 最 为 关 注 的 两 大 IT 话 题 。大 数 据 分 析 提 供 独 具 价 值 的 洞 察 ， 帮 助 企 业 打 造 竞 争 优 势 ， 启 迪创 新 ， 推 动 收 益 增 长 。 作 为 IT 服 务 的 交 付 模 式 ， 云 计 算 可 以 增强 业 务 灵 活 性 ， 提 高 生 产 力 ， 同 时 增 加 效 率 ， 降 低 成 本 。山东农业大学5两 种 技 术 均 在 不 断 发 展 。 目 前 企 业 所 探 寻 的 核 心 问 题 ， 已 经 从采 用 何 种 介 质 和 怎 样 存 储 大 数 据 ， 转 变 为 如 何 通 过

14、有 效 的 分 析 方法 来 应 付 实 际 业 务 需 要 。 随 着 云 计 算 技 术 的 成 熟 ， 越 来 越 多 的 企业 开 始 创 建 高 效 、 灵 活 的 云 环 境 。 同 时 云 提 供 商 也 在 不 断 增 加 服务 项 目 。 因 此 IT 企 业 应 将 云 计 算 作 为 支 持 大 数 据 项 目 的 基 础 架 构 。对 于 大 数 据 环 境 而 言 ， 需 要 服 务 器 集 群 支 持 多 种 工 具 ， 已 处 理 大容 量 ， 高 速 度 ， 多 样 性 的 大 数 据 ， 云 已 经 不 熟 在 服 务 器 池 、 、 存储 器 和 联 网 资

15、 源 上 ， 并 能 根 据 实 际 需 要 伸 缩 自 如 。 云 计 算 提 供 了一 种 更 经 济 的 方 法 。 它 可 以 支 持 大 数 据 技 术 和 高 级 分 析 应 用 ， 推动 业 务 价 值 的 增 长 。4、 IT 的 未 来 举 措IT 在 企 业 中 担 当 着 与 众 不 同 的 角 色 ， 面 对 数 据 爆 炸 性 的 增 长 ，新 兴 技 术 不 断 涌 现 和 环 境 快 速 变 革 ， 您 需 要 在 企 业 内 领 导 实 施 大数 据 分 析 。 首 先 ， 需 要 思 考 IT 如 何 在 企 业 中 成 为 经 纪 人 ， 推 动基 于 云

16、的 大 数 据 分 析 服 务 。 立 即 与 企 业 主 合 作 ， 协 助 其 确 定 如 何 使 用 大 数 据 ， 以 解 决 企 业业 务 难 题 并 应 对 机 遇 。 作 为 全 力 参 与 的 合 作 伙 伴 ， 您 可 协 助 评估 和 影 响 技 术 选 择 ， 并 成 就 最 佳 实 践 。 探 索 基 于 云 的 大 数 据 分 析 技 术 方 式 ， 包 括 私 有 云 ， 公 有 云 和混 合 云 交 付 模 式 。 紧 跟 最 新 趋 势 ， 深 入 观 察 市 场 并 熟 知 其 成 本 。山东农业大学6 创 建 或 更 新 现 有 大 数 据 战 略 ， 确

17、定 I， T 参 与 到 大 数 据 分 析 项目 的 时 时 过 程 中 。 切 记 ， 您 需 要 让 用 户 能 够 轻 松 快 速 的 推 动 业务 ， 否 则 业 务 部 门 就 会 自 行 主 导 实 施 。 思 考 如 何 协 调 IT， 使 其 与 业 务 人 员 更 好 地 配 合 ， 并 就 大 数 据项 目 进 行 合 作 和 协 商 。参 考 资 料 ：1 云 中 大 数 据 ： 融 合 技 术 -如 何 运 用 基 于 云 的 大 数 据 分 析 ,创 造 商 业 竞 争 优 势 百 度 文 库2 孟 小 峰 ， 慈 祥 大 数 据 管 理 概 念 技 术 与 挑 战 J 计 算机 研 究 与 发 展 ， 2013， 50(1):146 1693 大 数 据 （ big data） 百 度 百 科山东农业大学7