参考:移动App性能评测与优化

chapter4讲了地图怎么测,虽然不测地图,但是里面有关竞品分析的部分写得非常好,很多解决方案真的很精彩。记录一下。

我之前的竞品分析测试,通常是很简单的竞品数据层面的测试,比如和YY是竞品时,我只会做流量测试当作竞品分析项,和微信是竞品的时候只关注弱网时延,和H5集成游戏商城做竞品的时候只关注耗电量。并且数据支撑非常浅薄。

chapter4的地图评测讲了几个点:路线规划,语音播报。

我首先自己确认一下路线规划的测试方案,1.算法测试 2.路况测试(拥堵,集会等) 3.公共设施测试(红绿灯,禁行路标)4.道路类型测试(大路/小路/步行街/高速) 5.天气测试(雨雪雷电等)

语音播报:1.语言类型 2.语序和语句通顺度 3.播报延时 4.其他AI交互 4.播报的立体感(复杂道路的播报准确性)

根据测试方案来设置不同的测试用例,我可能会做该项目的测试用例集合。这些用例设置场景的选取上,值得专门拿出来讲。

  

书上面提到了几个内容:1.case无穷尽,2.但看自己的产品很难给出评价(是否优秀),3.人工评测人力耗时大,且达不到量。

1.case无穷尽,那么首先要做倒尽可能筛选有效的并且高效的主流用例,用兼容性测试的方案,筛选范围就是top100或者主流品牌/机性/版本 覆盖,这里用导航软件的筛选方式,是通过后台日志筛选用户访问量大的用例,作为评测的用例,以有限的量覆盖更多的用户。

2.只看自己很难给出评价,就取业内优秀的多个产品进行对比。

3.人工评测耗时太大,就采用自动化评测方案。

具体细节:

1.后台筛选的用例,部分为bad case(坏用例),这些路径规划有问题,需要优化。

2.路径规划分为:考虑路况的路线规划/不考虑路况的路径规划,分别评测;

针对算法,测试无路况数据;针对考虑路况,也要测试。

版本测试方案如下:

前提:选取1w个用例评测,看下路径规划和旧版本相比有没有达到优化效果;

具体过程:
城内用例:
1.从用户数据中获取用例,筛选后台日志一段时间中最热门城市。从最热门城市里再堆用例进行聚合,对聚合用例按照访问量排序,取访问量最高的用例作为测试集。
跨城用例:
2.以城市到城市为一对统计热度,选择热门的城市对,作为跨城测试用例。 bad case的判断标准:怎么判断一个路径规划对不对?
绕路的测试方法:
1.路线长度/直线距离
2.找竞品测算,如果差不多,就OK,如果相差多且路线偏长,需要分析,这种需要首先获取竞品数据。 路径相似度计算方法:
1.将路线堪称折线段总和,计算折线段重合的长度/总长度,得到相似度
2.计算两条路线围起来区域的面积/路线长度 =两条路线的平均距离 ≈相似度 自动化评测方案-无路况
case生成->数据获取->数据处理,计算相似度和->判断相似度->判断长度->找到bad case(长度>竞品,且相似度低) 自动化评测方案-有路况
1.加入竞品之外的第三方数据-出租车
2.对三方数据建模比较(我不行。。。)

  

TODO 竞品分析方法——关于导航评测的一些笔记的更多相关文章

  1. 关于Jaccard相似度在竞品分析中的一点思考

    上个月对一个小项目的效果进行改进,时间紧,只有不到一周的时间,所以思考了一下就用了最简单的方法来做,跟大家分享一下(项目场景用的类似的场景) 项目场景:分析一个产品的竞品,譬如app的竞品.网站的竞品 ...

  2. Jaccard相似度在竞品分析中的应用

    上个月对一个小项目的效果进行改进,时间紧,只有不到一周的时间,所以思考了一下就用了最简单的方法来做,效果针对上一版提升了5%左右,跟大家分享一下(项目场景用的类似的场景) 项目场景:分析一个产品的竞品 ...

  3. 记账类APP竞品分析-挖财与随手记

    注:本文更新中. 一.概览 1.  产品名称及版本 l  挖财11.2.0.0 免费版(2016/9/6发布) l  随手记10.2.8免费版(2016/8/22发布) 2.  设备信息 设备型号:i ...

  4. 公有云厂商DDoS防护产品竞品分析——内含CC的一些简单分析,貌似多是基于规则,CC策略细粒度ip/url//ua/refer

    公有云厂商DDoS防护产品竞品分析 from:http://www.freebuf.com/articles/network/132239.html 行文初衷 由于工作关系,最近接触了很多云上用户,对 ...

  5. 同城速递 & 同城跑腿 & 竞品分析

    同城速递 & 同城跑腿 & 竞品分析 toC / toB 闪送 https://www.ishansong.com/ https://www.tianyancha.com/compan ...

  6. 天天果园,中粮我买网等生鲜APP竞品分析

    奈何对生鲜行业的品类,价格,供应链不熟悉,想先从APP开始来了解生鲜行业和各个生鲜企业,若有不足之处,还望海量,也请帮忙指正. 选取了以下竞品:天天果园,易果生鲜,一米鲜,中粮我买网,爱鲜蜂,每日优鲜 ...

  7. 竞品分析」项目协作管理平台-Teambition和CORNERSTONE--深度体验

    一.分析目的 通过分析2B产品中的团队协作管理软件的对比分析,用于为公司团队协作软件的选型做产考. 二.竞品归属市场概况 2.1.目标用户群及需求 主要面向企业用户,用于解决企业不同地域以及不同职能部 ...

  8. 【竞品分析】Android音乐播放器的竞品分析

    迄今为止最长的一篇博客,各位看官笑纳~~ 本次分析基于Android平台,选取了几款我体验过的播放器进行比较分析.主要分为两类,一类是大而全的,功能全面,可满足用户管理歌曲.导入导出歌单等多方面需求, ...

  9. AI体验类产品竞品分析

    1.业界状态 人工智能(Artificial Intelligence),简称AI.上个世纪50年代就有一批年轻的科学家提出了这一概念,经历过50多年的长足发展,信息化建设的脚步不断加快,机器人战胜人 ...

随机推荐

  1. Consul1.5.0 带ACL控制集群搭建

    Consul Cluster with ACL1.机器规划2.先配置好三个Server,并启动一遍.3.生成并配置agent-token,解决server agent ACL block问题4.启动一 ...

  2. Android属性动画-简单实例

    1.ValueAnimator //在2000毫秒内,将值从0过渡到1的动画 ValueAnimator anim = ValueAnimator.ofFloat(0f, 1f); anim.setD ...

  3. python 数据库导入excel

    import MySQLdb import xlwt def outMySQL(file_name): wb = xlwt.Workbook() sh = wb.add_sheet('sheet 1' ...

  4. seaborn做横向条形图

    数据格式如下 这里选择fold值最大的前20个作图进行展示 代码如下 import seaborn as sns import pandas as pd import numpy as np impo ...

  5. 【LeetCode】无重复字符的最长子串【滑动窗口法】

    给定一个字符串,请你找出其中不含有重复字符的 最长子串 的长度. 示例 1: 输入: "abcabcbb"输出: 3 解释: 因为无重复字符的最长子串是 "abc&quo ...

  6. 总结IDEA和VS常用实用的快捷键

    整理了我一般撸码时使用下面两个IDE最常用到的快捷键: IntelliJ IDEA: 快捷搜索:Ctrl+F (Match Case:区分大小写,Words:全字匹配,Regex:正则匹配) 批量替换 ...

  7. linux命令及相关配置

    hostname # 查看 hostname vim /etc/hostname # 修改hostname,重启后生效 vim /etc/resolv.conf 写入 nameserver 192.1 ...

  8. golang 实现定时任务

    在实际开发过程中,我们有时候需要编写一些定时任务.当然我们可以使用crontab命令实现我们的需求.但是这种方法不满足一些定制化场景,同时会依赖具体的操作系统环境. 定时任务 在golang中我们可以 ...

  9. 一个长耗时SQL在TiDB和Mysql上的耗时测试

    之前看到的TiDB和MySql的性能对比都是大量短耗时请求下的压测,单机情况下TiDB和MySql的确有些差距,不过笔者最近碰到的场景更多是sql要扫描的行数不小的情况下单sql比较耗时的问题,所以自 ...

  10. 【LEETCODE】40、1051. Height Checker

    package y2019.Algorithm.array; /** * @ProjectName: cutter-point * @Package: y2019.Algorithm.array * ...