手机浏览器扫描二维码访问
第二节 核心技术（第1页）
““互联网+”医疗健康的应用与发展研究（..）”！
第二节
核心技术
一、技术起源
1．Google的三驾马车
Google在2003年到2004年公布了关于GFS、MapReduce和BigTable三篇技术论文，这三项技术成为后来云计算和大数据发展的重要基石，它们也被业界称为Google的三驾马车：
GFS（Google文件系统）是一个面向大规模数据密集型应用的、可伸缩的分布式文件系统。它运行于廉价的普通硬件上，并且提供容错功能。
MapReduce是一个编程模型，MapReduce架构的程序能够在大量普通配置的计算机上实现并行化处理。
Bigtable是一个分布式的结构化数据存储系统，被用来处理海量数据，这些数据通常是分布在数千台普通服务器上的PB级的数据。
2．Hadoop
从2005年开始至今，Yahoo资助的Hadoop团队按照Google公布的GFS、MapReduce和BigTable这三篇论文分别实现了它们的开源版本：HDFS（Hadoop分布式文件系统）对应GFS、HadoopMapReduce对应GoogleMapReduce、HBase对应GoogleBigtable。经过几年发展，目前Hadoop已经成为Apache开源组织的独立项目，并形成了由许多子项目组成的Hadoop族群。随着各个领域数据量的迅速增长，存储和处理大规模数据已成为迫切需求。Hadoop作为目前大数据处理的主流标准和关键平台，引起了学术界和企业的普遍兴趣。在学术界，Hadoop得到了各科研院所的广泛关注，许多著名的大学都加入到Hadoop集群的研究中来。在商业界，IBM、Oracle、华为、百度、淘宝等大公司也都有独立的团队开展Hadoop平台的应用及产品化。
二、技术框架
从数据管理和处理的生命周期来划分，大数据的管理和处理体系可以自下而上大致分为四层：数据存储层、数据处理层、数据整合层和数据挖掘层，如图5-1所示。
图5-1大数据的数据管理和处理体系
三、关键技术
1．大数据存储技术
大数据的出现以及结构数据的改变使常规技术的数据存储和管理面临新的挑战。在大数据环境下，存储解决方案主要包括分布式文件系统和数据库。
（1）分布式文件系统：
Google的GFS以及Hadoop族群中的HDFS都属于分布式文件系统，它们所管理的数据存储在分散的物理设备或节点上，存储资源通过网络连接。
（2）数据库：
目前，数据库系统主要的类型有满足传统信息化系统的数据规模的关系型数据库、满足计算机集群并行处理要求的非关系型（NoSQL）数据库以及满足医疗场景中实时性要求较高的实时数据库。
对照图5-1的数据管理和处理体系，关系型数据库属于结构化数据库，NoSQL数据库和实时数据库属于其中的灵活存储范畴。医疗大数据并不能采用单一的存储方式，而是需要根据数据特点及应用的需要综合运用关系型数据库、NoSQL数据库、实时数据库、分布式文件存储等多种存储技术。
最强练气师 都市逍遥医神 灵枢解难 都市最强狂婿 西游太小了 近世欧洲史 元降 人民日报70年消息选 双宝驾到：冷傲爹地太能撩 管遵惠针余笔谈 贵女楹门 主动脉及周围血管介入治疗学 唐宋词鉴赏课 天上掉下朵白莲花 山野汉子旺夫妻 中药传说 人民日报70年文艺评论选 高清日本战国史（套装全4册） 不说也罢 重生火影的修道者
天降双宝：总裁爹地宠上天
因被亲生母亲算计，她和陌生男人四年后，一对龙凤胎闪亮登场。陆余情忙着赚奶粉钱，每天忙得不可开交。厉少忙着追陆余情，花样百出，十八般武艺都用上。外界哗然，不是说厉少不近女色，清心寡欲，冷情无趣吗？大宝出来澄清，我爹地多情有趣，每天忙着和妈咪造娃娃。二宝也跟着澄清，我爹地说要给我们生三个弟弟妹妹！陆余情吓得魂不附体，连夜潜逃。厉少将人拦了回来，如今外界都知道，你要给我生三个娃，得坐实了这个传闻。陆余情欲哭无泪，从此夜夜笙歌，不消停。...
变成血族是什么体验
变成吸血鬼是什么体验？向坤没想到，这个不久前在知乎上被他把答案当成故事来看的问题，现在居然可以用亲身经历来回答了。...
超级仙尊在都市
重生回一千年前地球的凌天仙尊秦洛，身怀万般神通，上一世他怯弱可欺，这一世谁敢招惹他却要悔青肠子，神医国手，武道宗师，玄门至尊，来一个打一个！纵横天下，谁敢忤逆！仙尊重生，这一世谁人负我，我便覆灭，乾坤天地皆在我手！仙尊重生，纵横都市，简单粗暴，不服就干，上演最强传奇！武道医道玄法卜卦，三千大道随便你选，我是秦洛，我重生地球就是为了扮猪吃老虎，那些漂亮痴情娇媚的妹子，请矜持点...
报告驸马：公主又渣心了！
作者绵绵冬依的经典小说报告驸马公主又渣心了！最新章节全文阅读服务本站更新及时无弹窗广告小说报告驸马公主又渣心了！一个立志渣出新高度的小公主，在渣女的道路上不断摔跟头，不仅仅没有成功渣到一个除了肖长野之外的男人，还推广了一项又一项新技术，解决了一桩又一桩破事，最后还被骗生了一个又一个的娃！肖长野，我做了这么多蠢事，怎么对得起渣女的尊严！我这么好，却被勾得天天对你干坏事，你还想怎么渣，我的小公主？...
神血龙帝
孕育远古神血的洪铮，天生王者，却被青梅竹马的恋人联合他人陷害致死，神血被剥夺。十年后，他原地复活，亿万龙力加身，蜕变龙身，孕育黄金神骨，再次无敌天下！昔日的敌人，统统拍死！犯我神威者，一律轰杀！诸天万界，唯我独尊，万古龙帝，主宰八荒！...
透视邪医在山村
作者司徒小二的经典小说透视邪医在山村最新章节全文阅读服务本站更新及时无弹窗广告小说出身草根的马小虎，偶尔被闪电劈中，从而拥有特殊能力，没学过医，却能起死人而肉白骨，没务过农，却能在地里种出金疙瘩。闲来无事，就去认几个亲戚，干哥哥能替我挡刀，干姐姐能替我挣钱，便宜老岳父能替我背锅。痛饮狂歌空度日，飞扬跋扈为谁雄，日子过得逍遥又自在。有人看我不爽，那就教他怎么做人，想要找人报复，那就闹他一个天翻地覆。江左十四州，就因为这少年的横空出世，掀起了轩然大波，无数的阴谋和罪恶被暴晒在日光底...