第三章大数据与大数据关键技术
第三章 大数据与大数据关键技术
目录 3.1大数据来了！ 3.2Web2.0模式下互联网应用环境对关系数据库带 来的技术挑战 3.3大数据核心技术的分析研究 3.4大数据的技术门派及对比分析 3.5网页大数据应用实例：网页检索的技术路线 3.6一个基于倒排索引技术的中文检索应用实例 3.7 NoSQL数据库和sQL数据库在技术上的对比分析 3.8本章小结
目 录 3.1 大数据来了！ 3.2 Web 2.0模式下互联网应用环境对关系数据库带 来的技术挑战 3.3 大数据核心技术的分析研究 3.4 大数据的技术门派及对比分析 3.5 网页大数据应用实例：网页检索的技术路线 3.6 一个基于倒排索引技术的中文检索应用实例 3.7 NoSQL数据库和SQL数据库在技术上的对比分析 3.8 本章小结
3.1大数据来了！ 了解大数据技术，必须首先了解“传统”的数据库管理技术及其发 展简史。 自从1946年人类拥有了计算机，计算机应用的普及与发展，对物理 世界中的各种客观存在进行了电子化和数字化的描述和记录，这也成 为数据产生的主流方式。而各种数据库技术，尤其是关系数据库中的 结构化数据建模方法及其对应的技术体系，为有序描述、记录和管理 物理世界中的各种客观存在，提供了一种新的强有力的技术手段。 技术领域里，没有用之四海而皆准的方法和技术手段。在某些新兴的 应用场景下，数据库技术也有“技止此耳”或“一筹莫展”的时候， 从而也就能充分体会到大数据技术到底“大”在哪里，“新”在哪里 ,“强”在哪里
3.1 大数据来了！ 了解大数据技术，必须首先了解“传统”的数据库管理技术及其发 展简史。 自从 1946 年人类拥有了计算机，计算机应用的普及与发展，对物理 世界中的各种客观存在进行了电子化和数字化的描述和记录，这也成 为数据产生的主流方式。而各种数据库技术，尤其是关系数据库中的 结构化数据建模方法及其对应的技术体系，为有序描述、记录和管理 物理世界中的各种客观存在，提供了一种新的强有力的技术手段。 技术领域里，没有用之四海而皆准的方法和技术手段。在某些新兴的 应用场景下，数据库技术也有“技止此耳”或“一筹莫展”的时候， 从而也就能充分体会到大数据技术到底“大”在哪里，“新”在哪里 ，“强”在哪里
3.1大数据来了！ 数据库的关系模型理论，就像经典的物理学原理，将相互关联的 社会网络分割成若干个相对独立的部分（对应关系模型中的实体） 并对组成物理世界的各种实体，进行清晰的本体定义和界限划分，包 括角色、责任、上下级关系、责任范围等方面的严格定义（如基于属 性划分的关系定义)。在此基础上，通过定义实体之间的关联模式， 实现物理世界中社会网络的虚拟化重构。这种具有严谨理论基础的技 术体系，从行业规范和行为约束的角度，配合了社会的有序运行
3.1 大数据来了！ 数据库的关系模型理论，就像经典的物理学原理，将相互关联的 社会网络分割成若干个相对独立的部分（对应关系模型中的实体）， 并对组成物理世界的各种实体，进行清晰的本体定义和界限划分，包 括角色、责任、上下级关系、责任范围等方面的严格定义（如基于属 性划分的关系定义）。在此基础上，通过定义实体之间的关联模式， 实现物理世界中社会网络的虚拟化重构。这种具有严谨理论基础的技 术体系，从行业规范和行为约束的角度，配合了社会的有序运行
3.1大数据来了！ 随着2004年前后互联网环境从Web1.0的运行模式逐渐向 Web2.0模式的转变，数据库技术越来不适应这种生产关系概 念下的新的组织模式。 W®b2.0的出现，使得数据库技术遇到了前所未有的技术挑战
3.1 大数据来了！ 随着 2004 年前后互联网环境从 Web1.0 的运行模式逐渐向 Web2.0 模式的转变，数据库技术越来不适应这种生产关系概 念下的新的组织模式。 Web2.0的出现，使得数据库技术遇到了前所未有的技术挑战