专题: 基础架构之技术演进

Day of week:

IT基础架构的合理规划和安排是对各项信息化基础设施的科学管理,并使之形成良好的IT环境,让各种业务解决方案、应用系统和数据不受约束地在其上实现有效地配合。当然,IT基础架构中服务器、存储和网络的安全问题也是基础架构中需要考虑的关键点。本专场活动将邀请多位来自大数据服务商的技术架构、技术管理、大数据处理、Docker等领域的技术专家,分享最新的基础架构技术的演进实践,一起探索在当前技术要求复杂,网络安全面临严峻考验的前提下,基础架构遇到了哪些挑战,如何应对业务的转型。内容包括电商平台技术架构探索、不同阶段技术架构策略、SQL-on-Hadoop方案等比较热门的话题。

专题出品人:
薛梁
InfoQ策划编辑

2012年开始在IT中文网站任职撰写软件研发、团队管理和开源软件相关的文章,热衷于对IT产品的报道,业余时间写写自己对互联网产品的想法。目前是InfoQ策划编辑,用我自己对“干货”的理解方式来服务各大厂商的专题演讲。


by 叶新江
个推研发CTO

顺势而为,替天行道是事物发展最为快捷的道路。任何一个公司的产品/产品系列均存在其生命周期和发展规律。在什么阶段采取什么技术,什么时候提供不同的产品给不同的客户,同样也需要具有针对性。个推经过3年多的产品开发和运营,对此有了切身的体会和独特的体验。此主题将结合个推产品和技术的演进,来逐个展开我们遵循了哪些规律和法则,虽然中间依然存在着极大的困难,但是我们相信这是一条循道之路,希望最终能让听众从另外一个角度来思考作为一个架构师依据公司战略和客观法则来进行综合考量。

听众收益:

  1. 个推在这方面的实践和经验;
  2. 在不同产品阶段技术架构的演进策略;
  3. 遵循的关键法则。

by 林明
飞维美地数据平台主任工程师

FreeWheel是一家主要服务于北美和欧洲客户的视频广告技术公司,为大型电视媒体和优质内容供应商提供企业级的视频广告解决方案,每天完成近10亿次视频广告投放,积累了大量的视频观看和广告投放数据。

如何从海量数据中挖掘有价值的信息,帮助客户分析并改进其广告业务,是FreeWheel数据平台需要解决的主要问题之一。为此,我们引入了基于Presto查询引擎的SQL-on-Hadoop解决方案,为客户提供一种在秒到分钟的时间级别上灵活分析PB量级数据的能力。

根据业务需要,我们对数据存储、分片以及查询速度等方面做了诸多优化,并提供了对半结构化数据的查询接口。同时我们还把Presto集群与YARN集成,提高了Hadoop集群资源利用率,实现了集群资源的统一管理以及Presto集群的动态伸缩。本次分享主要介绍我们在以上方面的一些经验。

听众收益

  1. 了解基于Hadoop的交互式查询整套方案的实施;
  2. 了解基于Hadoop的大数据分析平台的优化措施;
  3. ...

by 谢乔
野狗联合创始人&架构师

未来应用架构会有两大发展趋势。首先是后端服务的云化。这是由于随着技术的发展和积累,技术的垂直领域越来越多,且每个垂直技术领域内的深度也越来越大。因此一定会出现越来越多垂直领域的云服务,提供更专业的技术和产品服务。其次是长连接在架构设计中将会占据越来越重要的地位。随着移动互联网和物联网的发展,应用对双向实时的数据通信的需求越来越大。

野狗的云服务,不同于市面上的其他的Baas云端架构,不仅是提供用户快速开发、快速部署、长连接实时服务等,而且提供一种新型的模式,采用基于数据同步的模式,能满足很多应用服务的场景。野狗的数据同步看起来和消息推送如出一辙,但是我们认为数据同步是优于消息推送的模式的,注重数据状态的变化以及实时特性,在技术架构上也有很大的不同。这次我们将与大家分享下,在数据同步中遇到的技术问题与架构解决方案。


by 王桐
永洪科技副总裁

现有的大数据平台,从数据层、处理层到交互层,需要引入的产品很多。从数据存储、数据准备、离线计算、实时计算、探索式分析,到深度分析等等需求,分别对应一款或者多款产品。这对企业构建数据化运营体系,从大数据中快速稳定地获取回报带来了巨大的障碍:

  1. 每种产品的学习曲线陡峭,学习成本高,但投入风险也高;
  2. 每种产品之间相互独立,需要很长的时间和很大的投入去打通各种产品,以构建一体化的大数据平台;
  3. 大数据平台使用难度高,对数据分析师而言都难度极大,更不能推广到企业里的普通商业用户,而他们才是数据化运营的主体。 能不能通过一个产品,让企业能快速打造自有大数据平台? 能不能在一周之内,就能让数据团队的数据科学家、数据分析师和每位普通商业用户获取数据洞察力,最终创造巨大的商业价值?

听众受益:

  1. 大数据平台的模块构成是什么?
  2. 大数据平台的正确路径是什么?
  3. 通过最佳实践,了解到业界领先企业他们是如何快速构建大数据平台的...

by 李源
途牛副总经理

途牛立足于在线旅游行业,通过近10年深耕细作,完成了从少量、单维旅游业务形态到海量、多样化、自主生产旅游资源的快速飞跃。供应链系统架构对旅游的标准化和海量数据支撑也做了数代探索与变迁。

本次给大家分享途牛是怎样建设旅游业的供应链,针对非标的海量数据又是如何设计系统架构并能保持快速迭代。也将从供应链系统后台与国内NoSQL数据库SequoiaDB巨杉数据库的结合中,展现途牛供应链系统的创新性。


by 王振威
Coding 系统架构师

Docker 作为一门新兴技术出现,一开始就引起了我们团队的注意,我们努力了近一年的时间把整个服务架构从传统的部署运行方式转变到了 Docker 化的私有云平台。这个过程中,Docker 给我们带来了前所未有的便利,却也带来一些困难和挑战。Docker 本身并不是一个完整的云平台技术栈,所以,这就意味着,在架构云平台的过程中,如何使用 Docker 变得尤为重要,而Docker既然新,必然会有一些坑,我们团队也在填这些坑的过程中总结了不少经验,例如容器标准输出大量数据会导致docker daemon OOM 问题,docker管理大量容器性能急剧下降,最终导致 docker deamon 崩溃问题等等。此外,我们团队为提升开发效率使用 Docker构建了整套的开发环境。

此次演讲设计主题主要有如下内容:

  1. Docker 实现应用级别仓库级资源隔离;
  2. 海量容器管理;
  3. 计算资源效率优化;
  4. docker 与标准化容器 runc;
  5. Docker...

by 阮小明
蘑菇街架构师

蘑菇街业务快速发展,我们的技术团队一直遵循着简则优的原则,以快速支持业务发展为目标,在前期业务的野蛮生长过程中,对业务的高速成长提供了有力的支撑。但是业务量的增长,伴随而来的高并发、海量数据、运维复杂度、用户体验感知、大促峰值应对等等一系列的问题,也非常现实地摆在了我们面前,如何应对这些问题,我们做了哪些探索和时间,将是我们本次分享的主要内容。

演讲主要内容:

  1. 蘑菇街技术架构演进之路;
  2. 蘑菇街技术发展过程中遇到的问题及探索实践经验,以及已经形成的技术产品;
  3. 蘑菇街未来技术发展要做的东西。

听众收益:

  1. 初期的技术团队建设思路和策略;
  2. 技术团队以及技术架构演进的一些成功实践和思考。

演讲专题

Covering innovative topics

12月18日,星期五

  • 研发体系构建管理

    孤胆英雄的时代早已过去,如何在组织内建立合适的体系,从而充分利用组织内聪明的大脑创造最大的价值,是每个组织都不得不关心的问题。

  • 新金融形态的“颠覆”与创新

    互联网金融虽然刚刚兴起,但已火到不行。互联网公司和传统的金融企业纷纷投身其中,各种低门槛的投资业务也仅仅是个开始。如何应用互联网技术补充金融技术提升整体金融业务。本专题将从互联网和传统金融公司的实际案例和场景出发,试图讨论和解答这些问题,探讨互联网金融的颠覆和创新。

  • 揭秘双十一背后的技术较量

    双十一是各个电商平台一年中最繁忙的一天,也是系统压力最大的一天。在高频、高额、高密度的交易场景下,如何为用户提供稳定而流畅的购物流程,无疑是重中之重,而双十一也恰恰成为检验这一年工作成果的试金石。本专题将邀请一线的技术大咖,分享双十一背后那些关于技术的事儿。

  • 信息安全保障最佳实践

    在主推“互联网+”发展的今天,如何保障中小企业、企业移动设备、互联网金融、云应用等安全?如何取得需求和风险的平衡?本专题将汇聚信息安全保障的最佳实践案例,力求给与会者提供最好的参考方案。

  • 物联网+智能设备

    以智能硬件为代表的物联网势不可挡,也引领着新一波的创业浪潮。传统的开发模式无法应对互联网时代的快速开发需求。本专题中,我们将联合在物联网领域的新兴企业,基于他们的产品和技术,分享自己的真知灼见,共同探讨物联网技术在国内的发展创新。

  • 云平台应用选型与建设实践

    本专题将邀请来自主流云平台及服务公司的系统工程师、架构师,以及技术顾问等相关领域专家,从架构设计、服务应用等角度结合实际业务场景,分析目前云平台发展趋势,展示最新云服务技术创新实践,为服务选型提供参考。

  • 海外专场:硅谷之谜

    对于技术人员来说,硅谷技术是一个备受关注的区域,Google、Facebook、Twitter、Marvell、Uber等等,这些技术驱动公司推出的每一个新技术都可能对业界产生巨大的影响,因而它们也备受瞩目。在一探其技术奥秘的同时,硅谷的管理之道以及文化也同样撩拨着中国技术人员的心。本专题将邀请海外技术专家,从对技术的探求之路以及对硅谷文化的深层次认识揭示硅谷之谜。

12月19日,星期六

  • 互联网+在线教育

    百花争鸣,名花争艳,各种在线教育抢占浪头,把玩教育在手掌中,颠覆传统教育作为目标。在线教育进入前所未有的激烈“战国时代”,本专题汇聚了国内在线教育创新公司并分享他们在线教育平台在平台架构、学习分析和用户体验等方面等技术创新和实践成果。

  • 云服务架构探索

    云计算产业经过这些年的发展已经越来越深入人心,容器技术的出现又给这一行业注入了更加 新鲜的活力,不同种类不同特性的云服务及产品不断涌现,其背后依托的技术及架构也是多种多样,本专题将带您深度探索 这些云计算产品及服务背后的技术。

  • 高效运维案例剖析

    网站流量越涨越高,系统规模越来越大,同时业务对产品交付速度要求越来越快,网站稳定性要求越来越高,高效运维的呼声也越来越高。很多优秀的团队也在不同的路上对运维工作进行着自己的改造或变革,本专题讲师将在现场给你分享他们成功的经验。

  • 移动应用架构

    移动互联网带来了新的一波创业潮,业务的飞速发展需要技术团队的良好支撑。面临不同时期不同量级的业务时,移动应用架构技术选型和策略可能会完全不同。让我们来看看业内的一些团队是怎么做的。

  • 新型电商:O2O及其他新型电商模式

    多数电商平台都会经历相似的过程,流量和业绩每年以几倍至十几倍的速度增长,每年都要接受几次大规模、全方位的系统检阅,产生的峰值对平台形成极其强烈的冲击,对电商平台的架构带来巨大的考验,本专题将讨论这些电商平台服务架构演进背后的故事。

  • 基础架构之技术演进

    IT基础架构的合理规划和安排是为了打造良好的IT环境,更是为了有效的实现各种业务解决方案和应用系统。本专场邀请多位来自大数据服务商的架构师、大数据处理专家、Docker专家,分享最新的基础架构技术的演进实践,以及基础架构在企业内的升级之路,同时在网络安全面临严峻考验的前提下,如何找到对策!

  • UCloud技术专场:企业容器化应用实践

    在不断寻求性能更好、速度更快、成本更低的云计算核心技术中,容器技术是目前最吸引人注意的技术之一。尽管除去效率、速度和成本等方面的优势以外,容器技术还存在一些安全上需要斟酌的问题,但是其实际表现仍然得到了肯定。在本专题中,UCloud将邀请多位容器技术应用实践者,分享企业在容器化过程中的实践经验,以便可以为即将或正在实施容器化的企业IT管理人员提供技术参考。