测试工程师的福利!各远程移动测试平台对比分析

61次阅读

共计 4838 个字符,预计需要花费 13 分钟才能阅读完成。

欢迎大家前往腾讯云 + 社区,获取更多腾讯海量技术实践干货哦~
本文由腾讯移动品质中心 TMQ 发表于云 + 社区专栏

背景
随着移动设备和系统的碎片化程度越来越高以及复杂的移动网络情况, 兼容性测试以及远程真机测试的重要性越来越突出。根据远程测试机 / 人员与开发者间的合作方式,可以分为以下几种服务:云测试服务、内测服务以及众测服务,相应的平台支持如下图。

云测试平台
云测试平台提供了远程租用真机的服务,通常是利用自动化框架来实现真机上的脚本自动化运行,或远程租用真机人工测试,或真人真机测试。由于 Android 端设备的种类众多,云测试服务在 Android 端应用广泛。国内外都提供了多种云测试平台。
1、Pefecto
http://PerfectoMobile.com
Pefecto 将真实移动设备放到 cloud 端 , 并提供通过 web/Eclipse 插件的形式进行访问与测试。同时,Pefecto 开放了基于 selenium 的第三方 API:MobileDriver,支持自动化测试人员通过 Eclipse 访问 Perfecto 上的真机设备,通过 MobileDriver 远程识别与调用被测应用,快速实现自动化,并与 RQM 结合实现对 devops 的支持。测试脚本可以跨平台(Android/iOS/Blackberry…)执行。
2、LessPainful
http://lesspainful.com/
LessPainful 提供了一个多设备平台自动化测试的服务。用户上传应用 (*.apk) 和用 Cucumber 编写的测试文件,选择测试运行需要的设备配置,最后测试将自动执行并生成测试报告。它支持的设备包括 Garmin Asus,几款 HTC,LG,Samsung Galaxy,Sony Xperia 和 Motorola Motodefy。
3、TestDroid
http://testdroid.com/
Testdroid 是由 Bitbar 公司推出的手机应用测试的云端服务。TestDroid 云端提供了 200 多种机型,你可以选择你需要的测试机型进行适配测试。通过 Testdriod 的测试,还能收集 CPU 运转以及内存使用情况,从而帮助工程师们提高应用的表现性能,和以防内存被过多占用。此外,用户还可以选择测试机型的语言测试环境,避免由于跨语言导致的潜在漏洞。Testdriod 还有一项 app 爬虫功能,类似于网页爬虫,对你的应用高频次地查看并同时进行图像输出,来模拟真实的浏览过程。TestDroid 应用了 Robotium /MonkeyRunner 生成系列工具,但需要有被测应用的源代码。
4、Testin
http://www.testin.cn/
Testin 云测试平台是一个基于真实终端设备环境,基于自动化测试技术的 7 ×24 云端服务。Testin 在云端部署了 300 多款 1000 多部测试终端,并开放这些智能终端给全球移动开发者进行测试,开发者只需在 Testin 平台提交自己的 App 应用,选择需要测试的网络、机型,便可进行在线的自动化测试,无须人工干预,自动输出含错误、报警等测试日志、UI 截图、内存 /CPU/ 启动时间等在内的标准测试报告。支持 Android 与 iOS,业务较为全面。
5、百度 MTC
http://mtc.baidu.com/
MTC 是百度云面向移动和 web 开发者提供的服务,能够满足一般的测试需求,包括当前的热门机型,还支持云端客户端回放。它还提供一个云众测服务,就是开放者上传 App,百度提供给用户下载测试,然后将反馈收集返回给开发者。
6、腾讯优测
http://utest.qq.com/
腾讯优测试专业化的移动云测试平台,为广大开发者提供移动应用一站式测试服务与解决方案。提供缺陷分析、应用测试、云手机等主要功能,用户通过平台上传安装包,就可进行全面的兼容性和性能测试,还并可以在线使用多台云端真机,满足更多开发和测试需要。腾讯优测真机实验室目前已配备上千款手机,覆盖市面 98% 主流机型,7*24 小时在线运行,覆盖亿级用户。构建的数万个适配问题特征库,可以快速准确定位问题。
7、阿里 MQC
https://mqc.aliyun.com/
MQC 是阿里移动质量中心推出的真机测试服务的云平台,拥有大量热门机型,提供 7 ×24 全天候服务。MQC 可以涵盖 Android、iOS、YunOS、H5 等不同的平台体系,主要服务阿里系和阿里内部如手淘、天猫、聚划算、支付宝等 App。
8、易测云
http://www.yiceyun.com/
易测云由国内知名软件公司东软出品,是一个专业为移动 APP 产品提供适配测试、性能测试、遍历测试、功能测试等多种服务的真机自动化云测试平台,主要为所有移动 APP 产品的开发者和测试者、以及需要定制化服务的企业级用户,提供安全、专业、高效、易用的自动化云测试服务;强大的录制脚本插件;详细实用的测试报告;以及简单人性化的操作体验。
关于云测试平台对比分析的文章已经很多,这里不作赘述。
众测平台
众测的目的是利用大众的测试能力和测试资源,在短时间内完成大工作量的产品体验,第一时间将体验结果反馈至平台,再由平台管理人员将信息搜集,交给开发人员;同时是从最前端用户拿到的第一手信息,就能从用户角度出发,改善产品质量。
1、uTest
https://www.utest.com
uTest 是一家来自以色列的创业公司,该公司主要的业务是通过自己构建的一个全球测试员网络为开发人员和技术公司提供软件测试以帮助这些开发人员更好的找到并解决软件中的问题。拥有来自 200 多个地域国家超过 15 万专业测试人员。根据测试人员数量的不同,收费也各异,最低 499 美元,最高可达 1999 美元。uTest 提供了 uTest 课堂提供了专业软件测试者授权课程的学习使用方法,还提供了工具平台供测试人员提交测试工具或对已有工具评分。总之,uTest 给专业测试人员提供了一个社区的氛围。很多大公司都在使用 uTest 的服务,包括谷歌、微软、Groupon、AOL 和 BBC 等。要想参与 uTest 测试任务,需要注册并提供详细的测试环境,比如测试机型、测试工作经验、软硬件环境等信息,便于 uTest 高效分配任务。
2、腾讯 tesly
http://tesly.qq.com/
腾讯众测是腾讯公司开发的一款基于众包概念的平台。支持应用、游戏、H5 混合应用等。
多种产品形态,具有 Bug 探索、产品调研、数据收集和产品评测四种业务模式。
3、百度众测
http://test.baidu.com.cn/crow…
百度众测也是众包模式的典型应用,它将企业产品的相关测试工作交由网络社区大众来完成。百度众测是百度公司开发的众包在软件和产品测试上面的延伸。百度众测“隶属”百度质量部,是一个使广大的互联网用户能够第一时间体验到百度的新产品,从用户体验的角度出发,对百度的新产品提出改进建议,以及各种 bug 反馈,以便于百度公司及时地改善产品质量。目前,百度众测包括“外部用户测试平台”,“内部员工测试平台”和“开发者平台云众测”。注册用户达到 1500 万。
4、testin
http://zc.testin.cn/
http://www.mtestin.com/
为开发者提供一种完全开箱即用、按需付费的 SaaS 服务,不仅提供了测试规划、功能测试、兼容性测试、可用性测试、Beta 测试等测试服务,开发者还可以直接使用 Testin 众测平台的 Bug 管理、用例管理、项目管理、崩溃监控等在线工具,帮助中小开发者无需招聘专业的测试团队也可以轻松将应用质量管理好。
5、乌云众测
http://ce.wooyun.org/
乌云众测是另一种众测类型,是在专业性很强的领域——安全领域深入的一种众测模式,它对众测人员的专业性要求很高,俗称“白帽子”。在乌云众测,企业可在短时间内组建虚拟的安全团队,通过邀请顶尖白帽子模拟黑客对网站、系统或产品进行测试,企业可迅速排查各种安全隐患。同类型的众测公司还有漏洞盒子、Sobug 白帽众测,他们是目前国内最大的三家安全众测平台。
众测平台总结:
众测平台可以分为三种类型, 一种是大众任务型, 主要利用数量来收集数据或模拟特殊情境, 如不同网络环境等, 百度众测和腾讯 bugly 都属于这一类; 第二类是以具有专业知识的测试人员来定向完成任务的模式, 这类的代表是国外的 uTest 和国内的 Testin;第三类是应用于对测试人员专业度要求更高的某类业务——目前主要是安全业务——的模式, 著名的乌云众测、漏洞盒子、Sobug 白帽众测就是利用白帽子的“攻”的水平来实现“防”的目的的。

内测平台
内测平台允许开发者选择合适的测试人员,并允许其与测试人员进行沟通。IOS 应用分发多采用这种方式,以苹果收购的 TestFlight 为代表。这种模式操作起来稍微繁琐,如果是 iOS 应用的话需要制作特殊的内测版本,获取内测设备的 UDID 并制作证书,并且有 100 人的人数限制。
1、TestFlight
https://developer.apple.com/t…
TestFlight 提供了 iOS App 测试分发服务,它主要解决的是 iOS 应用测试分发困难问题,可向指定的人分发应用,双方需要注册 TestFlight 账号,以及下载 TestFlight App,即可在 App 里测试应用。TestFlight 已被苹果收购,因此其 UDID 证书限制人数可达到 1000 人。
2、HockeyApp
https://www.hockeyapp.net
HockeyApp 是以 TestFlight 的替代者的身份出现的,其集成了 TestFlight 的所有优点,同时增加了自己的一些亮点功能,比如支持更多的平台,服务稳定性也比 TestFlight 高,并且能够通过 SDK 方式帮助开发者获取必要的测试信息。HockeyApp 被微软收购,是收费应用。
3、Fir.im
http://fir.im/
Fir.im 全名 Fly It Remotely,是一个为移动开发者服务,针对应用开发内测阶段,提供应用托管分发,崩溃分析以及反馈收集等一系列帮助开发者提高开发测试效率服务的平台。它提供了开放 API,开发者可以将 fir.im 集成到开发流程中。此外,fir.im 还提供了指令工具 CLI,日志查看工具 LogGuru、崩溃分析工具 BugHD 和网速测试等工具。Android 端还提供了 AndroidStudio 插件,方便 Android 开发者上传应用。
4、蒲公英
https://www.pgyer.com/
蒲公英也提供了面向 IOS 和 Android 平台的内测托管和任务分发服务,同样提供开放 API。它提供了移动端 SDK 用于应用内测数据收集分析、版本更形提示、数据分析统计等多种功能。除此之外,它还提供了专家测试的选项,提供人工遍历测试,IOS 审核加速等服务。并且,蒲公英提供了测试管理的平台,使得开发者在单平台上做到收集内测用户问题并得到问题分析。
5、Bugly
http://bugly.qq.com/
Bugly 是腾讯对外开放使用的移动应用崩溃检测服务,同时支持 iOS 和 Android 平台。移动开发者在自己的 App 中接入 Bugly 的 SDK 后,就能在应用崩溃后获得信息上报。目前还推出了内测分发服务,但还没有提供收集用户测试结果的方法。
内测平台总结:
国内的内测平台都还属于起步阶段,更多应用场景在于帮助 IOS 应用快速发布。

远程移动测试平台正在向综合云测、众测、内测甚至远程数据收集工具的方向发展,比如国内领先的 Testin 平台,在云测、众测攻占城池之后,也推出了内测平台 https://pre.im/。蒲公英平台则在内测的基础之上,将 bug 管理融入平台。
读者互动环节
你工作中还有用到其他测试平台吗,期待你能给大家分享一下。

问答如何并发 JUnit 测试?相关阅读 Android 单元测试 kafka 安装与测试性能测试知识总结【每日课程推荐】机器学习实战!快速入门在线广告业务及 CTR 相应知识

正文完
 0