专访Testin张鹏飞:节俭才是最大的放纵,期待CP重视测试      

编辑:Holly 发布时间:

“测试的目的是什么?测试的目的就是为了说当产品发出去以后,我的玩家拿到的是一个精品,这是一个没有问题的瓷花瓶。”

  近几年,呈现于市场之上以及用户面前的手游产品越来越精品化,而在精良游戏画面之外,是一串串庞大的数字,动辄百万千万的投入成本、营销成本以及大量人力财力物力投资的背后,开发者却往往忽略了其中一项——测试环节,甚至可以说现在行业内大多数人还没有测试这一概念。正如龙虎豹近期走访Testin云测联合创始人张鹏飞,他所讲的:“手游测试就像我们现实生活中的体检一样,经常会被人有意无意地忽略掉,测试和体检一样,需要重视。不少人还没有这个意识主动去检查,这并不是一种常态。”甚至很多CP认为省去测试的成本就能为产品的开发省去一大笔钱,殊不知,往往所以为的节俭却变成了最大的浪费。

 

  手游测试已成趋势,CP意识需转变

  在当下的手游市场,产品发布之前往往要经过内测、公测等多个环节,邀请玩家内测等测试方式也屡见不鲜。但即便如此,手游产品在推出之前要先经历Q&A测试这一环节也并不是被所有开发者都接受或重视。谈及这一原因,张鹏飞认为多数的CP对于测试的理解存在误区,主要基于两方面原因:第一,意识问题。CP往往没有意识到手游测试这一环节的必要性以及在其后的产品盈利过程中的重要性;第二,多数的CP认为测试需要相当高的成本,往往自己将产品进行人工测试后就结束这一环节。

  面对这样的误区,张鹏飞将其归结为人的逃避性。“就像我们每一年的体检,如果不是公司的催促,我们也不会主动去。这就是人的天性,会无意识或有意识忽略掉一些事情,减少工作量。”

  面对竞争激烈的手游市场,CP忽略掉的并非是测试这件事,而是当下手游市场严苛的环境以及复杂的形态。如今早已不是开发者掠夺资源的蓝海期---玩家可以包容游戏所出现的问题。移动互联网发展到现在,对于玩家而言,俨然已经是“带着挑剔的眼光下载,随着易变的心情卸载”的状态。而这种环境对于CP而言,意味着用户导入成本会越来越高,而这也是张鹏飞一直强调的,在这种环境下,手游测试就显得更加有意义和必要性。

  “测试的目的是什么?测试的目的就是为了当产品发出去以后,玩家拿到的是一个精品,一个没有问题的瓷花瓶。”

  采访过程中,张鹏飞不止一次强调,现在有些CP对于测试的认识并不是一种“常态”。对于开发者而言,他们更看中游戏上线后的表现,测试这一环节根本不在考虑范畴。而手游测试部门在CP眼中的地位在张鹏飞看来多少有一些尴尬。“产品做得好就是产品本身给力,产品一旦出了问题或崩溃,老板一定是责问测试是怎么做的。但我个人并不认为这是正常现象,从行业的角度来讲,这是一种不成熟的表现。”张鹏飞如是说。

  获取用户的手段有千万种,但用户的流失却在不经意间。“现在用户从一款游戏中流失太容易了,随便一点,就卸载了。很多开发商都在谈用户流失,但是其实他们根本不知道也不关心用户流失的真正原因。我的一个特别舍得在手游上花钱的朋友在用手机玩一款游戏的过程中,由于其性能不佳,导致半小时不到,手机就很烫,很影响他的心情,到最后不得不退出,没过多久他就在这款游戏中流失了。他说玩得很爽,但就是手机太热了,想在游戏中消费都没办法。我觉得很可惜,因为很可能一个大R用户就这样流失了。但是开发商不知道,这只是一个小问题,电量及电池温度Testin也可以测,就是监测如何让这个游戏更好地去消耗系统资源以及不过分去消耗系统资源的能力。”张鹏飞感叹道。

  手游测试其实并非近一两年才有的概念,而对于Testin云测来说,手游测试这一服务最早其实可以追溯到2011年。

  张鹏飞透露,Testin云测从2011年开始就提供手游测试的服务,彼时手游市场规模不大。“当时宝开《植物大战僵尸》也是由我们来测试的,包括后来《捕鱼达人》、《二战风云》,之后的《保卫萝卜》《刀塔传奇》和近期的《梦幻西游》以及《有杀气的童话》等。”在与龙虎豹的交谈中,张鹏飞表示,这些产品之所以能够在市场上获得成功和用户的认可,与这些产品公司创始人对于以服务用户为先的意识不无相关。提及这些产品的成功,不得不说与对高端机型用户以及低端机型用户全部覆盖有着莫大关联,而这些机型的覆盖,测试又是其中最为重要的一环。

  “我发现这些企业能够成功是有原因的,很重视服务,他们会为用户负责。在那段时期,你会发现做得比较好的游戏,都比较重视产品的质量。他们知道玩家下载一个100兆左右的产品真的是对产品有期待,但是一旦下载到手机上安装不了或者出现任何的问题,对用户的伤害真的很大。”

  你以为的节俭其实是最大的放纵

  正如前文所提到的,现在有些CP对于手游测试的理解还存在一定的误区,总是会将测试与花大钱画上等号,这在张鹏飞看来,是一种误解。

  张鹏飞透露说,他也曾经问过一些开发者不进行测试的原因,多半的回答是成本规划。“我认为这个误解是真要改善的。过去大家都是讲先生存下来,现在应该想的是如何让产品的质量提升。”

  不少CP还没有完全接受手游云测试这一概念。“很多人认为测试完全可以自己做,往往觉得招几个实习生,大概买几台设备,自己做一下人工测试就可以节省测试成本。另一些人则认为测试不用自己来做,快速迭代,把beta版送给用户去做。”而这在张鹏飞看来却是问题的症结所在,“首先没有人会愿意成为你游戏bug的受害者,其次你感觉省了钱,但你所面临的问题有可能会更大。当游戏马上要过千万流水的时候突然崩掉了,崩得很惨烈,然后你的产品可能就不值钱了。这些损失的钱比起在前期做一些必要的测试要昂贵得多,这个代价是不能比的。所以我觉得那句话非常好玩:‘你以为的节俭,其实是最大的放纵’。”

  而CP自己进行测试环节在张鹏飞看来存在三点问题。

  第一,建立自己的测试队伍意味着要承担很大一部分的人力以及硬件设备成本。按照张鹏飞所言,设备的更新换代速度之快让CP难以想象,如果想要跟上市场的步伐,意味着这一部分的成本将大大提高,而人力测试其难以想象的痛苦往往也阻碍CP自我检测的过程;

  第二,测试的准确性难以保证。张鹏飞透露,缺乏真实环境和用户的测试遗漏环节高达20-50%。“机器的效率远高于人工。计算机以统一格式真实地记录整个测试过程。比如一个游戏,它在哪里崩掉了,测试可以截图,精确到毫秒。但人却记录不了这个事情,只能记录在哪个环境下发生这个问题,到底是第几秒也不能很快知道。除此之外,机器还可以分析错误发生前后的代码部分,很容易去排错。但是人力很难做到这一点,要去看日志,要对图,这无形中加长了周期。当然,机器就是机器,不会有情感测试,它不会说你的图好看与否,但是它检测出来的Bug或者问题是一定存在的。”

  第三,耗费时间成本,以至于会影响产品的上线。

  而这些问题在张鹏飞看来其实都是可以避免的,Testin平台有超过270个手机品牌,市面上各种主流型号手机、平板、智能手表、电视等智能硬件设备都有所覆盖。而对于CP担忧的成本问题,张鹏飞也坦言,Testin也会为CP提供免费的基础服务。

  “实际上我们的Free服务并不会限制你什么,也不是说你要花了钱才能用服务。基础的免费服务和精益求精的商业服务是并行的。我们希望开发者能够有测试的意识,而不要认为测试不重要,或者觉得难就不去做或者做得不彻底。所以我们有一系列的免费服务提供给开发者,而这种免费服务也足以让开发者从中受益。”

  除了免费服务,张鹏飞表示Testin云测还在手游内测、功能测试、压力测试以及产品发布之后性能质量监控等环节提供服务,这些测试环节直接或间接影响CP的收益。“这些我们会有持续的质量监控,而至于后期的服务,选择与否,完全取决于CP本身的意愿。我们是非常欢迎手游CP来体验我们的免费服务的,而且是在非常安全的黑盒测试情况下,你无须担心产品的泄漏问题。” 

  累积经验,唤醒更多开发者测试意识    

  按照张鹏飞所讲,Testin云测自2011年成立起,就推出了移动游戏云测试业务。从正式推出产品上线,到2015年达到1亿测试,一直在积累手游测试的经验。张鹏飞向龙虎豹透露了一组数据:累计测试服务手游企业20000个,测试的游戏换算单人测试工时1650年,年节省9亿测试成本花费,使用者从几千名跃到45万。

  同时,张鹏飞介绍,Testin云测还有另外一个比较大的变化就是细分化。“从2012年起Testin就把手游测试以及移动互联网的APP测试做了细分,而今,Testin希望能够为手游开发者带来更好的服务,因此成立了专门的手游测试事业部,从测试服务产品到研发,从后端运维到市场推广,专门建立了一支有手游研发以及运营的团队,以提供针对性的专业手游测试服务。而市场方面则不断通过行销让更多CP逐渐认识到手游测试的意义以及在手游的盈利过程中的重要性。

  除此之外,张鹏飞介绍到,Testin云测手游测试服务还将推出手游评测、版本改进、以及在湾区建立海外测试机房,目前已经建立了一条完整的手游测试服务体系。

  “接下来我们就是努力做到各个方面的测试技术都要跑在CP前面,无论是测试能力还是智能设备的涉猎范围,现在Testin云测也已经着手在VR技术上做准备。我们要跟上技术变化的节奏,首先就要具备能力,别人有任何问题,我们才能在帮助他的时候做好事情。”

  就像一名医生一样,第一年的时候做什么都紧张,所运用的技能或知识都是书本上学来的。第二年第三年会见到很多病例,接触很多病人,可能有些病人站在门口,医生还没把脉就知道病人有什么问题。而这正有点像Testin的写照,随着逐渐积累与沉淀,测试的准确度会越来越高。张鹏飞也表示,虽然现在有些CP的意识还没有完全转变,但这只是时间的问题。诚如张鹏飞所讲:你以为的节俭其实是最大的放纵,任何环节都一样重要,何必省钱吃大亏呢?