为了这套技术方法论,腾讯用了十七年时间反复打磨

标签: 技术 方法论 腾讯 | 发表时间:2015-09-18 13:29 | 作者: 张宇婷
出处:http://www.geekpark.net/
作者: 张宇婷

微信、手机 QQ、手机 Qzone、游戏和应用宝,是腾讯移动端的五大平台。这些有着海量用户的产品运营时,涉及到无数细小琐碎的技术细节。比如《腾讯方法》一书中提到,微信和手机 QQ 的 SDK(Software development kit,软件开发包)决定了第三方游戏的接入以及用户数据隐私。移动游戏的支付系统和数据开分析则需要大量的跨部门技术协作。统筹这些技术细节的正是腾讯自己一套完整的技术方法论。

在首届腾讯云技术峰会上,腾讯公司副总裁姚星完整的介绍了腾讯整体技术发展脉络。

海量阶段 :1998~2004 年  代表产品:QQ 和腾讯游戏

腾讯技术演进的第一个阶段是「海量阶段」。

2001 年,QQ 的在线用户总数就超过了 100 万。2004 年 QQ 的用户量是 500 万。同年,QQ 游戏用户也超过了 100 万在线。

虽然用户在快速增长,但实际腾讯并没有探索出能战胜同期对手的盈利模式。1998 年,新浪和网易都在做 IM。因此腾讯只能选择用更好的技术、更低的成本去支撑服务,和对手拼成本。

当时,在后台单机支撑能力上, 当 QQ 用户从 10 万到 100 万时,单机处理能力在行业里超过对手的 10 倍以上。这个数字相当于别人的一台机器只能做 1000 个在线连接,腾讯能做到 1 万。这就是海量阶段时一个比较重要的技术创新——PCT 架构。

腾讯非常讲究在一些关键的支撑点把技术上的好钢用在刀刃上。

QQ 有一个具体的案例。QQ 有很多关于会员的标记,腾讯舍不得为每一个标记用 1 个字节 Byte,而用的是 1 比特 Bit。在主要存储上用的都是文件存储。

腾讯认为很多的场景未必要用通用的数据库来解决问题,用一些简单的数据技术处理方式,反而会成本更低效率更高。这种对技术的精打细算,将更好的技术资源节约出来,留给关键使用场景。

在这一点,谷歌和腾讯有着相似的判断。Google 的第一个网页多年始终如此,非常简单。大家认为这是一种极致的表现。实际上通过「抓包」发现,谷歌的首页是小于 1.5K 的,一个以太网包就能把它打开。

面对海量,能做到的是化繁为简。

运营阶段: 2004~2008 年  代表产品:QQ 空间

2004 年后,QQ 空间产品诞生。

QQ 空间里的用户不只关注自己发布的内容,还要看别人发布的内容。用户的有交叉访问带来技术挑战和难度。QQ 空间的应用跟 QQ 或者游戏这种窄带应用有很大的差别,QQ 空间是一个宽带应用,对带宽等基础设施要求更高。

当时中国的互联网基础设施还不发达,很多用户都是拨号上网。北边是网通,南边是电信,还有现在归属电信的教育网,交叉访问效果没有现在好。

腾讯花了非常大的技术力量做三网融合。在当时是很难,分布过碎,成本会很高,数据一致性很难保证。但是分布得不够,用户体验不够好。在整个运营的过程当中,这是一个非常难的技术。

另外一个挑战是产品需求变化逐渐变大,外界环境变化也非常大。

比如 2004 年显示器的屏幕是 800×600 的,后来屏幕逐渐变高端,变宽。QQ 空间原来一排设置 5 个图片,总共有 4 行,20 张。现在变成一排 7 张,但再用 4 行,28 张图片带来的访问量就比原来要加大,可能会导致页面显示速度的下降。

图片的规格也在变化,原来只保存一个缩略图和或者原图大小就足够了,后来为了适应各种手机,图片规格越来越多。当产品需求的变化,客观环境变化的时候,运营上、技术上就有了极大挑战。

伴随这些技术细节的变化,腾讯的机房也从小变大。原来以为千兆可以解决一切问题,现在要万兆机房。

柔性阶段 :2008 年~2012 年 代表产品:微信

2008 年以后,QQ 和微信的日活跃量之和已经超过 10 亿。QQ 和微信对用户而言,就像是水和电的基本生活需求。基础性的产品,即使出现微小的使用问题都会影响到用户的正常生活。腾讯面临的新技术问题是:规避「天灾人祸」,把产品做得更加的牢靠。

人祸很容易产生,比如研发人员写了一个 BUG,或者运营人员操作失误。

天灾也会经常遇到,一些地方城市建设,挖断了光纤,或者出现一些自然灾害,洪水、台风或地震。不可预知和无能为力是面对天灾最大的难度。

腾讯逐渐发现,其实用户对产品的需求有一个适应的过程。对于灾害要倾尽全力防范风险,但是当你无法超越自然灾害,就要逐步降级柔性。

比如 QQ,最重要的功能要要保证能登录。其次用户要知道自己的信息是完整的,没有被篡改。然后看到好友的资料还在,好友列表没掉。接下来能够进行一些简单的文本的通讯,通讯的时候还能发一些图片,启动视频的会话。从基础体验到复杂体验逐层保证,技术控制的艺术和难度不断攀升。

开放平台阶段: 2012 年至今  代表合作产品:滴滴、58

2010 年腾讯提出开放平台的概念,连接不同行业的解决方案,到现在腾讯开放自己的云平台,典型有两个例子——滴滴和 58。滴滴是出行行业的老大,58 是分类信息的老大,腾讯为这些合作伙伴提供了十几年积累的云服务,比如 IDC 机房、基础网络和跨运营商 BGP 接入资源。以及一些高性能组件,比如安全、图像处理、自然语音的工具。

但腾讯贡献的最大价值其实是从 1998 年开始,经历 QQ、QQ 空间、微信积累的技术方法论。

腾讯技术方法论分为三点:动态运营、云中成长、有损服务

1 动态运营的关键要素:1 小步快跑,快速求证用户猜想。2、灰度发布,在黑与白之间,平滑过渡的一种发布方式。3、大系统小做:分进程,尽量保证进程的功能单一。4、边运营边重构,细分实施,持续服务。5 干干净净:建立信息,勇于承担,边打扫边生活。6、工具齐备:自动化部署、监控,大数据分析。

追求小规模团队,成功的产品多由小团队开始尝试,简单的产品不断创新。缩短上线时间,不断迭代。

2 云中成长的含义:每个团队虽然有很多牛人,但却存在一定的局限性,把更多的技术交给更专业的人做,使用云架构。

3 有损服务。如何在遇到灾难或者用户突发高峰,继续服务好用户?在条件不允许的情况下腰降级处理,进行「有损手术」,并非最重要的功能弱化,在压力过高的时候做逻辑性处理,减轻后端服务器压力。

本文部分内容结合 《腾讯海量产品之道》

题图:海洛创意

相关 [技术 方法论 腾讯] 推荐:

为了这套技术方法论,腾讯用了十七年时间反复打磨

- - 极客公园-GeekPark
作者: 张宇婷 微信、手机 QQ、手机 Qzone、游戏和应用宝,是腾讯移动端的五大平台. 这些有着海量用户的产品运营时,涉及到无数细小琐碎的技术细节. 比如《腾讯方法》一书中提到,微信和手机 QQ 的 SDK(Software development kit,软件开发包)决定了第三方游戏的接入以及用户数据隐私.

腾讯陈军:腾讯云平台与技术实践分享

- Sepher - 服务器运维与网站架构|Linux运维|互联网研究
[第三届中国云计算大会]2011年最受瞩目的IT业界盛会——第三届中国云计算大会于2011年5月18-20日在北京国家会议中心隆重举行. 本次大会由中国电子学会主办,中国电子学会云计算专家委员会、中国云计算技术与产业联盟承办,CSDN网站、《程序员》杂志和电子工业出版社协办. 5月20日,在第三节云计算大会分论坛二“云计算平台与应用实践”中,腾讯网络平台部技术总监陈军带来了主题为《腾讯云平台与技术实践》精彩演讲.

腾讯新闻如何以技术支撑海量服务

- - 极客公园-GeekPark
[核心提示]腾讯新闻海量用户访问的背后有着怎样的技术支持. 编者注:本文转自  InfoQ. 在 2014 年 4 月 11 日的腾讯分享日活动上,腾讯 OMG 移动媒体产品部助总郑坚分享了有关腾讯新闻海量服务的一些技术技术原则. 腾讯很多海量服务的意识和规则都是从 QQ 演化出来的,即使从移动互联网的角度来看,当时的很多规则也很贴切.

走出腾讯:一个80后技术人的信仰

- - IT瘾-tuicool
栏目简介:激荡六十年,人工智能已经起航. 然而在未来面前,我们都还是孩子. 为了解惑,《AI名人堂》将汇聚领航者智慧,和你一起探索前行的方向. 出品 | AI科技大本营(ID:rgznai100). 18 年前,如果没有 Foxmail 卖给博大,博大后又被腾讯收购,或许也就没有李明强如今的模样. 从 2005 年到 2012 年期间,偏居广州的张小龙团队四处突围,QQ 邮箱由死向生,微信从零至一.

腾讯万亿级 Elasticsearch 内存效率提升技术解密

- - IT瘾-dev
作者:morningchen,腾讯 TEG 后台开发工程师. Elasticsearch( ES )是一款功能强大的开源分布式实时搜索引擎,在日志分析(主要应用场景)、企业级搜索、时序分析等领域有广泛应用,几乎是各大公司搜索分析引擎的开源首选方案. Tencent ES 是内核级深度优化的 ES 分支,持续地进行高可用、高性能、低成本等全方位优化,已支撑的单集群规模达到千级节点、万亿级吞吐.

腾讯信息流热点挖掘技术实践

- - IT瘾-dev
分享嘉宾:罗锦文 腾讯 研究员. 编辑整理:Jane Zhang. 出品平台:DataFunTalk. 导读:当前各大资讯社交类APP都在显著的版面展示或者推荐热点相关内容,信息流应用能否快速发现热点、引导用户阅读热点,是影响用户体验的重要因素. 本次分享主要介绍腾讯在热点挖掘方面的工作. 基于搜索数据和自媒体文章,通过时序分析方法和内容聚类相结合的方法挖掘热点,并将热点聚类成事件和话题.

腾讯微博技术总监张松:响应速度是第一体验

- - 微博之博
腾讯科技讯 8月12日消息,从2010年4月上线,到2012年,短短两年时间, 腾讯微博已经拥有超过4亿用户,不少用户的听众都已经突破千万,面对快速的增长,腾讯 微博在架构方面有哪些变化呢. 8月10日下午,在全球架构师峰会上,腾讯微博事业部技术总监张松国对腾讯微博的架构成长做了详细的阐述. 腾讯微博事业部技术总监张松国分享腾讯微博架构变化(腾讯科技配图).

腾讯在信息流内容理解技术上的解决方案

- - IT瘾-tuicool
作者:weidongguo,腾讯 PCG 应用研究员. 目前信息流推荐中使用的内容理解技术,主要有两部分构成:1、门户时代和搜索时代遗留的技术积累:分类、关键词以及知识图谱相关技术;2、深度学习带来的技术福利:embedding. 但是分类对于兴趣点刻画太粗,实体又容易引起推荐多样性问题,而 embedding 技术又面临难以解释的问题.

腾讯微信技术总监周颢:一亿用户增长背后的架构秘密

- - 互联网的那点事
微信——腾讯战略级产品,创造移动互联网增速记录,10个月5000万手机用户,433天之内完成用户数从零到一亿的增长过程,千万级用户同时在线,摇一摇每天次数过亿…在技术架构上,微信是如何做到的. 日前,在腾讯大讲堂在中山大学校园宣讲活动上,腾讯广研助理总经理、微信技术总监周颢在两小时的演讲中揭开了微信背后的秘密.

腾讯发布战略产品“智能云” 向外界开放人工智能技术平台

- - 穿过记忆的河流
腾讯发布战略产品“智能云” 向外界开放人工智能技术平台. 澎湃新闻2017-06-21 . 在BAT(百度、阿里巴巴、腾讯)互联网三巨头中,腾讯是最后一家向外界开放人工智能技术平台的公司. 6月21日,腾讯(00700.HK)旗下的云计算公司腾讯云在深圳举行腾讯云 未来峰会上,发布战略产品“智能云”,宣布开放腾讯在计算机视觉、智能语音识别、自然语言处理的三大核心能力.