
这是一个数据爆发的时代,尤其是在互联网+的风口上,大数据与云计算红得发紫,IT架构也随之演变,各种前瞻技术如雨后春笋般铺天盖地。大数据会给这个世界带来哪些影响?互联网+的时代下,如何重塑IT架构?如果你渴望答案,那么我相信你可以从这本书里找到启发。 风风火火的大数据与云计算到底是什么关系呢?它们就像一个硬币的两面,彼此相互依存,大数据离不开云计算的分布式处理、分布式数据库和云存储等技术。本书以对话的方式,邀请IT业界大咖坐镇访谈,以风趣幽默、通俗易懂的语言、形象具体的案例、励志感人的故事娓娓道来,为读者讲述了海量数据分析与处理、云计算架构与优化、数据库性能优化与实践、大型分布式软件架构、IDC与数据中心 运维、职业生涯与创业六大主要内容。相信读完此书,你会受益匪浅,从一名大数据世界的菜鸟华丽蜕 变成行家。 在皮皮访谈录中,我邀请到了来自百度、阿里、腾讯、京东、网易、奇虎、去哪儿、携程,58同城、滴滴、易车等互联网企业,IBM、微软、戴尔、SAP、华为、Hortonworks等软硬件巨头,以及听云、百分点、星环科技、永洪科技等云计算与大数据厂商的大咖坐镇,通过与嘉宾互动采访的形式来讲述IT精英的职场经历,希望读者能直观感受到不同企业的文化,能够体验诸如微信等优质产品以及电商等高可用架构背后的秘诀,洞察大数据、云计算、分布式架构、IDC运维等前沿热点话题的精髓,深入了解与借鉴CTO、技术总监、架构师、DBA等技术大咖的成功经验和人生感悟。
序言 IT 圈子里流行着两大社区——ITPUB 和 ChinaUnix,国内数一数二的架构师、DBA、运维师、技术专家大抵集结于此,好比江湖圈子流行一个光明顶,集结了各路英雄好汉、武侠高手。金庸用他的小说体记录了光明顶上群雄逐鹿和飞檐走壁。而我,作为 ITPUB 和 ChinaUnix 两大社区运营负责人,利用“ IT 名人堂”这个专门针对架构师、 DBA、运维专家等 IT 牛人的访谈类栏目,采访了来自百度、阿里、腾讯、京东、网易、奇虎、去哪儿、携程、 58 同城、滴滴、易车、 IBM、微软、戴尔、SAP、华为、 Hortonworks,以及听云、百分点、星环科技、永洪科技等 IT 豪门的CTO、技术总监、架构师、 DBA、运维专家等。 很多人问我,为什么策划“ IT 名人堂”?和很多的北漂族一样,我也曾呐喊,也曾努力,在寻找怒放的生命,在刷新自己的存在感。千里之行,始于足下。我放飞梦想,也带着传递正能量的信念,开始走上了皮皮访谈录的生涯,花了一年多的时间来策划 IT 名人堂。 有些话,年轻的时候羞于启齿,等到张开嘴时,已经人近中年,且远隔万重山水。同样,有些人,有些事,经历了如果没有留下痕迹,以后再回忆就淡忘了。每一个值得传播的观点都有一个值得讲述的故事,每一个神秘的故事背后其实是一幕幕真实的励志人生。我试图从一个女性和 IT 媒体人的角度,去深入了解这些被贴上“技术控”、“宅男”、“码农”、“极客”标签的 IT 成功人士。 本书六脉精通,涵盖了“海量数据分析与处理篇”,“云计算架构与优化篇”,“数据库性能优化与实践篇”,“大型分布式软件架构篇”,“ IDC 与数据中心运维篇”,“职场生涯与创业篇”。 如果你是一名 DBA,如果你是一名架构师,如果你是一名运维人员,又或者只是一名 IT 从业者,那么无论你是职场老兵,还是新人菜鸟,当你遇到挫折时,当你需要安慰时,当你乘公交坐地铁时,当你饭后困顿时,在这本书里,总有那么一瞬间,你会被某个嘉宾的采访所感染 ;也总会有那么一瞬间,因为他们的故事,你会爱上某个企业,对某款产品、某个技术背后的架构而心生好奇,或微信,或电商。 最后,我要特别感谢我的父母和我的哥哥皮光明给予我的各种支持与帮助,感谢洪钊峰、王蓓、黄围围、石松、周荣茂、高可、王莹欣、张辉、张梦雨、张莹、刘刚等对我的帮助,感谢 ITPUB 和 ChinaUnix 社区的所有网友,感谢所有帮助过我的人!
第1章 海量数据分析与处理篇 1 1.1 百度地图大数据科学家吴海山:从百度地图到百度迁徙看时空大数据演变 1 1.2 Intel特邀大数据技术顾问谭磊:百度、阿里、腾讯、360、乐视、京东,其实都需要我 6 1.3 Hortonworks亚太技术总监Jeff Markharm:他们贡献了 80%的Hadoop源码 11 1.4 星环科技CTO孙元浩:上海外滩踩踏惨案背后的大数据反思 19 1.5 百分点研发总监刘国栋:不止于平台,大数据操作系统重磅来袭 24 1.6 华为中间件首席架构师彭渊:他发明了 Hadoop的双胞胎 32 1.7 商业智能开拓者永洪科技CEO 何春涛:大数据小数据,一天实现可视化分析 45 第2章 云计算架构与优化篇 52 2.1 阿里巴巴资深平台架构师九峰:他们部门是“去IOE”的始作俑者 52 2.2 腾讯云资深技术专家于江:腾讯云的两大杀手锏 57 2.3 网易云技术总监陈谔:网易云如何支撑云音乐+云课堂+云笔记+云阅读 62 2.4 网易云存储架构师来东敏:他设计的网易云存储支撑了网易30多个产品 67 2.5 戴尔任意云专家NewMan Wong/Lijun Zhang:他为什么说,云计算不是双刃剑 71 2.6 戴尔任意云专家NewMan Wong/Lijun Zhang:戴尔任意云如何做到“任意” 79 2.7 SAP中国顾问协会创始人伍昊献: SAP未来是否更名为SAP HANA Cloud 86 2.8 柴静“穹顶之下”的网友献计献策:云计算如何治理雾霾 91 第3章 数据库性能优化与实践篇 96 3.1 阿里巴巴RDS首席产品架构师何云飞:阿里云数据库RDS架构的演进之路 96 3.2 阿里巴巴架构师杨传辉:双11支付宝核心数据库OceanBase的前世今生 103 3.3 阿里巴巴分布式数据库负责人沈询: 6年间他只做一件事——淘宝分布式数据库TDDL/DRD 108 3.4 微软技术中心架构师韩凯: SQL Server 2014与Windows Azure云的整合 116 3.5 微软技术中心架构师韩凯:看完SQL Server 2014的ITPUB网友互动,想不升级都难 125 3.6 携程网高级DBA任赟婷:携程DBA女神如何管理300台MySQL和Mongo 133 3.7 58同城架构师沈剑:一切抛开业务的数据设计都是耍流氓 137 3.8 易车网高级DBA高继伟: MySQL比SQL Server差在哪儿 140 3.9 达梦董事长冯裕才:坚持30年,只为数据库中国梦 146 3.10 达梦国产数据库DBA黄海明:选择达梦,国家情感优先还是客户价值优先 154 3.11 全球母婴第一社区宝宝树运维总监刘秋歧: 2亿张宝宝照片背后的DBA 之道 157 3.12 Oracle ACE杨志洪: 12年DBA心得——数据库故障三分天注定,七分 是人为 166 3.13 蓝色曙光数据库总监史跃东:房子、车子、妻子、孩子,做DBA一切 都有 171 3.14 前东软高级DBA敬勇:为什么这7年他一直钟情于“社会保障系统” 180 3.15 ITPUB版主DBA怀晓明:是什么让他对DBA坚守十年 185 3.16 80后摇滚DBA高强:做音乐的人如何做IT 190 3.17 ITPUB DBA网友热议国产数据库:国产数据的雄起,靠去IOE还是自身实力 196 3.18 ITPUB DBA网友热议首家银行系统“去IOE”: Oracle渐去,阿里巴巴来袭 205 第4章 大型分布式软件架构篇 213 4.1 阿里巴巴高级架构师强琦:淘宝天猫双11秒杀背后的高并发核心架构 213 4.2 腾讯社交运维专家周小军: 2亿QQ峰值在线并发背后的分布式存储架构 218 4.3 京东高级架构师袁航:双11秒杀背后的NoSQL数据库与分布式存储 226 4.4 京东开放云高级总监:京东618零宕机背后的京东云核心架构 230 4.5 京东云平台架构师桂创华:他主导的京东分布式存储平台,支持京东数百个业务 235 4.6 1号店技术总监黄哲铿:大型电商网站的IT架构 238 4.7 奇虎360高级专家王超: 360如何做到任意一款产品开发周期不超过一个月 244 4.8 美团网业务核心系统架构师陈义宏:美团“狂拜访,狂上单”背后的高并发核心架构 249 4.9 滴滴打车技术总监杨振麟:管理靠盯、技术靠练、办法靠想、潜力靠逼 254 4.10 超级课程表CTO茹云峰:他如何做到23岁成为网易最年轻系统架构师 259 4.11 PMC存储架构师张冬:大话存储 264 4.12 ITPUB网友热议淘宝数据吹牛: TPS最大是工行不是淘宝, QPS最大是移动不是淘宝 269 第5章 IDC与数据中心运维篇 274 5.1 听云总裁张涛:抛开性能问题谈体验都是耍流氓 274 5.2 沃趣科技创始人陈栋:数据库运维高枕无忧之秘诀 279 5.3 ITPUB网友热议IBM开放POWER:是好事还是坏事 . 284 5.4 ITPUB网友热议IT运维:运维就是消防员,只要宕机夜里3点也得“救火” 291 5.5 ITPUB网友热议去哪儿网:“真假保单”系统故障Or逐利玄机 296 5.6 ITPUB网友热议密码泄露风波:密码不安全,换脸靠谱吗 300 第6章 职场生涯与创业篇 304 6.1 Linux创业达人陈荣友:青春岁月,身不由己 304 6.2 SaaS创业达人陈磊:创业方向最重要 310 6.3 机器人创业达人皮光明:我眼中的机器人 315 6.4 智能家居创业达人周成虎:创业是一种人生信仰 319 6.5 让我们一起追忆IT男女的那些苦与乐,酸与甜 325
皮丽华,在互联网业界积累了五年工作经验,是一名资深媒体人,采访过国内外IT领域的多名专家,撰写过数百篇IT中英文文章,创办了大话IT、IT名人堂栏目,并担任这两个栏目的主持人。