1.2 Information technology provides technical support for BD times 3D laser fabrication for multilayer nanophotonic devices 来自斯威本科技大学( Swinburne University of Technology)的研究团队,在2013年6月29日刊出的 《自然通讯( Nature communications)》杂志的文章 中,描述了一种全新的数据存储方式,可将1PB (1024TB)的数据存储到一张仅DVD大小的聚合物碟片 《大数据技术原理与应用》 山西农业大学信息学院 heqiang@cisau.com.cn
《大数据技术原理与应用 大数据技术原理与应用》 山西农业大学信息学院 山西农业大学信息学院 贺强 heqiang@cisau.com.cn heqiang@cisau.com.cn 1.2 Information technology provides technical support for BD times 来自斯威本科技大学(Swinburne University of Technology)的研究团队,在2013年6月29日刊出的 《自然通讯(Nature Communications)》杂志的文章 中,描述了一种全新的数据存储方式,可将1PB (1024TB)的数据存储到一张仅DVD大小的聚合物碟片 上
1.1.2 Information technology provides technical support for BD times 2CPU处理能力 Frequency大幅提升 2.600000,000 1000,000,000 100,000,000 10.000000 1.000,000 100000 10 000 2,300 1980 2000 cPU推出日期 图1-3CPU晶体管数目随时间变化情况 《大数据技术原理与应用》 山西农业大学信息学院 heqiang@cisau.com.cn
《大数据技术原理与应用 大数据技术原理与应用》 山西农业大学信息学院 山西农业大学信息学院 贺强 heqiang@cisau.com.cn heqiang@cisau.com.cn 1.1.2 Information technology provides technical support for BD times 图1-3 CPU晶体管数目随时间变化情况 2. CPU处理能力Frequency大幅提升
1.2Information technology provides technical support for BD times 3.网络带宽 bandwidth不断增加 (百万) 0每秒周转次数(百万赫兹) +前端总线率(百万越) 转移数据量(百万兆) 图1-4网络带宽随时间变化情况 《大数据技术原理与应用》 山西农业大学信息学院 heqiang@cisau.com.cn
《大数据技术原理与应用 大数据技术原理与应用》 山西农业大学信息学院 山西农业大学信息学院 贺强 heqiang@cisau.com.cn heqiang@cisau.com.cn 1.2Information technology provides technical support for BD times 图1-4 网络带宽随时间变化情况 3. 网络带宽bandwidth不断增加
1.3 Changes in the way of data generation 数据产生方式的变革促成大数据时代的来临 运营式系统阶段 用户原创内容阶段 感知式系统阶段 ·数据库的出现使得·数据爆发产生于 感知式系统的广泛 数据管理的复杂度 Web20时代,而 使用 大大降低,数据往 Wveb20的最重要 人类社会数据量第 往伴随着一定的运 标志就是用户原创 三次大的飞跃最终 营活动而产生并记 内容 导致了大数据的产 录在数据库中,数 ·智能手机等移动设 生 据的产生方式是被 备加速内容产生 动的 数据产生方式是主 动的 图1-5数据产生方式的变革 《大数据技术原理与应用》 山西农业大学信息学院 heqiang@cisau.com.cn
《大数据技术原理与应用 大数据技术原理与应用》 山西农业大学信息学院 山西农业大学信息学院 贺强 heqiang@cisau.com.cn heqiang@cisau.com.cn 1.3 Changes in the way of data generation 数据产生方式的变革促成大数据时代的来临 图1-5 数据产生方式的变革
14 BD History大数据的发展历程 表12大数据发展的三个阶段 阶段 时间 内容 第一阶段:上世纪90年随着数据挖掘理论和数据库技术的逐步成熟 芽期 代至本世纪,一批商业智能工具和知识管理技术开始被 初 应用,如数据仓库、专家系统、知识管理系 统等。 Meb20应用迅猛发展,非结构化数据大量产 生,传统处理方法难以应对,带动了大数据 第二阶段:成本世纪前十技术的快速突破,大数据解决方案逐渐走向 熟期 年 成熟,形成了并行计算与分布式系统两大核 丶技术,谷歌的GFS和 MapReduce等大数据技 术受到追捧, Hadoop平台开始大行其道 规模应用期2010年以后大数据应用渗透各行各业,数据驱动决策, 第三阶段:大 信息社会智能化程度大幅提高 《大数据技术原理与应用》 山西农业大学信息学院 heqiang@cisau.com.cn
《大数据技术原理与应用 大数据技术原理与应用》 山西农业大学信息学院 山西农业大学信息学院 贺强 heqiang@cisau.com.cn heqiang@cisau.com.cn 1.4 BD History 大数据的发展历程 阶段 时间 内容 第一阶段:萌 芽期 上世纪90年 代至本世纪 初 随着数据挖掘理论和数据库技术的逐步成熟 ,一批商业智能工具和知识管理技术开始被 应用,如数据仓库、专家系统、知识管理系 统等。 第二阶段:成 熟期 本世纪前十 年 Web2.0应用迅猛发展,非结构化数据大量产 生,传统处理方法难以应对,带动了大数据 技术的快速突破,大数据解决方案逐渐走向 成熟,形成了并行计算与分布式系统两大核 心技术,谷歌的GFS和MapReduce等大数据技 术受到追捧,Hadoop平台开始大行其道 第三阶段:大 规模应用期 2010年以后 大数据应用渗透各行各业,数据驱动决策, 信息社会智能化程度大幅提高 表1-2 大数据发展的三个阶段