采访当天，黄翔一身休闲装扮：深色短T、牛仔裤、运动鞋，神色中带点知识分子气质，不像一位CEO，更像一名休假中的律师。

       他说话不疾不徐，音调偏轻，语速较慢，不过，一旦谈及产品的细节处，他仍会情不自禁地激动起来，告诉你，他为何要这么做，以及这么做有什么好处。

       黄翔的履历令人称羡：法学本科毕业后，就进入律师行业，从此沉浸近十年——他在2009年进入国内某大型律所，先后代表该律所在厦门与深圳两地创建并管理两家分所，是该律所历史上最年轻的合伙人，此后与友人联合创立瀛和律师机构，宣扬“以互联网的方式进行法律服务”。

       他告诉猎云网，自己就两个爱好：创业和长跑，在他看来，此前创建律所的经历，也是一种“创业”，不过，一个有意思的矛盾是，恰恰因为创业，他跑得越来越少，因为“太忙”。

       目前，黄翔生活中的大部分时间是在出差中度过的：洽谈合作或者融资，最直观的例子是，在本次采访结束后，黄翔便立马要奔赴机场。

       是的，这名工作狂从律所合伙人跨界成企业创始人，他开了一家公司，打造了一个SasS平台，面向互联网场景下的投资与交易行为，提供电子合同及电子文件在线签署服务。

       产品名字很好记，就叫法大大，slogan是“守护互联网时代的契约精神”，2014年11月份上线，截至目前，平台已累计签署合同500万份，日均签署7-9万份，注册用户共142万名，服务企业110家，其中P2P公司占比90%。

       与此同时，在2015年1月份，法大大团队便已获得上海复励及瀛和律师机构联合创始人400万元的天使投资，并于2015年8月份完成信天创投领投、复励跟投的1500万元A轮融资，另据透露，其A+轮融资亦已基本敲定。

       而有关长跑与创业，黄翔最终还是找到了一个契合点——经营好一家企业，需要长跑的坚持、毅力以及韧性，他表示，法大大身处互联网浪潮，固然是要跑得快一点。

我只是法律圈里比较爱折腾的那波人

       在大学毕业后的十余年时间里，黄翔做了一系列在外人看来已经“蛮成功”的事情，而就在足以坐享其成之时，他却选择跳出律师行业这个舒适圈，投入互联网创业浪潮，这在他人看来，或许有些“不可理解”。

       黄翔并不完全同意猎云网对他的定位，他自解道：“我在法律圈里也谈不上成功，只能说，我是这个圈子里比较爱折腾的那波人。”

       正因为“爱折腾”，他早早便开始关注互联网、关注新趋势，与另外6名伙伴联合创立的瀛和律师机构，就是第一次尝试。

       成立于2013年的瀛和律师机构倡导互联网精神，并以O2O形式提供法律服务，在全国各地已设立分所50多家，律师队伍超1000人。

       在创建瀛和的过程中，黄翔与其他几名联合创始人一直在探索法律的互联网转型，他们认为这是不可避免的趋势，所需找到的只是一个可靠的切入点。

       因此，瀛和除了试验O2O法律服务外，还起到项目孵化作用，几名创始人基本都有互联网创业方面的尝试，“可以说，法大大也是瀛和孵化出来的。”

       而“创立一个互联网法律平台”的想法萌生于2013年年底，黄翔找来失联多年、且擅长技术与销售的高中同学林开辉，以及早期律所的合伙人兼电子证据专家梅臻律师，于14年初便敲定好产品雏形，确定做电子合同，到该年11月份，法大大的Beta版本就正式上线了。

      “签订一份合同，意味着一个新的法律关系开始。”黄翔说。

        简而言之，开始任何法律服务之前，都必须签订合同，所以电子合同是一个“入口”，并且相比通常的法律服务模式，电子合同的签订更加高频和场景化，因为高频，所以有机会。

       与此同时，国家在2004年便已制定《电子签名法》，但一直以来，电子签名却没有得到更好的推广和普及。

       黄翔指出，此中最大的原因是：以前的电子签名行业一般以底层技术获利，用技术服务于某个项目，如银行的U盾，这不仅造成购买成本过高，也使合同/证据只被一方当事人所掌握，是一种不平等关系。

       于是，一个平等、中立的第三方电子合同签署、证据托管SaaA平台便有了机会。

电子合同应该成为基础设施

       在黄翔眼中，我们身处这样的时代——互联网改变了商业格局，“颠覆”了部分行业，打破了原有规则，人们为此而喝彩，但有一个问题：规则被打破之后必须重建，不然商场成丛林，暴戾而无序，因此，“合规”是趋势，也是发展之道。

       那么，互联网企业如何合规？契约可以为其出一份力。至于如何缔造契约，与互联网最契合的形式自然是“电子”，以电子形式呈现的合同，是黄翔心中的那个“趋势”。

       有关纸质合同的劣势与电子合同的“趋势”，黄翔举了两个例子，比方说，法大大日均签订合同8万份，若换成纸质版，每份合同平均需要3张纸，一共就是24万张，这不仅效率低、托管难，还非常不环保。

另一个例子是，法大大服务的一家大型企业，此前每年用于合同的快递费用为500万元，“这个成本完全没必要花。” 

       对于未来，黄翔作出了自己的预测：“随着电子商务范畴的扩大、线上交易行为的增多，电子合同会成为电子商务的基础设施，如互联网金融以及做大了的O2O旅游、团购等，他们都需要签订大量合同，以我们服务的某OTA平台为例，他们每年跟下游供应商签订的合同就有100多万份。”

我们签订合同，最终是为了保障权益

       在黄翔看来，相比签约行为，更重要的是签署合同的目的，“我们签订合同，最终是为了保障权益。”

       对于法大大而言，用户的权益从两方面得到保障：一是合同背后的有效性和安全性，这是产品的核心；二是服务流程的衍生与体验的优化。

        电子合同的法律效力由《电子签名法》赋予，在此基础上，法大大为每位实名认证用户提供与身份证绑定的数字证书（CA），证书具有唯一性，同时，已经签署并生效的合同文本会存储在法大大云端，用户随时可以下载来取阅、调用，起到证据托管作用。

       至于安全性，法大大已通过ISO/IEC国际信息安全管理体系认证、公安部信息系统安全等级保护测评二级，并获得了国家密码管理颁发的《商用密码产品销售许可证》。

       值得一提的是，为免用户之忧，法大大还与众安保险展开合作，由众安为其电子合同进行承保，假如信息泄露或电子签名被裁判无效，用户均可获赔。“我们是首家获得保险公司承保的电子合同平台，”黄翔说，“这可并不违反广告法噢。”

       另一方面，合同还是众多法律服务的“入口”，因此签订合同之后的衍生服务便顺理成章，而服务的目的，就是在优化体验的基础上，保障用户权益。

       目前法大大设有法律呼叫中心和合同模板库，前者为用户提供律师在线咨询服务，后者收录有两百多份合同模板供用户选择。同时，法大大还会不定期为用户开办培训课程，传授维权知识。

       此外，为进一步保障用户权益，自2016年1月起，法大大与中国广州仲裁委员会达成合作，只要用户在平台上签订合同并选择添加对应的仲裁条款，若出现合同争议纠纷时，即可在线提交申请，实现“一键仲裁”。

       所以，黄翔对法大大的最终定位是以契约为中心的工具-服务型平台，他强调产品的工具性，且不以众多法律服务交易平台为竞品，但也确信法大大不仅仅是一个第三方工具，它自有其服务模式与理念。

（法大大“三点一刻”栏目）

        互联网金融是法大大切入的第一个领域，黄翔从P2P的交易流程中看到契机，这是一个对合同存有巨大需求的行业，更便携与高效的电子合同对其具有天然吸引力。

       当然，万事开头难，团队刚成立时仅有7个人，产品上线之后，获客全靠几名成员动用自身资源，一开始的进展不算顺利——作为CEO的黄翔，也加入了产品的“推销队伍”。

       直到第一家P2P企业被吸引，继而达成合作，事业才算真正起步，接下来，产品开始在该圈子内形成口碑，好比一个滚动的雪球，它会越来越大，且大得越来越快，在15年3-9月间，法大大完成了用户的原始积累。

       目前法大大服务有PPmoney、投哪网、积木盒子、有利网、银豆网、鹏金所、随手记等互联网金融企业，总数近100家。而法大大的A轮领投方信天创投，也是因为对互联网金融和SaaS行业多有关注，才与法大大迅速达成协议。

        不过，法大大既得益于此，也因此而遭受质疑，事因是自去年以来，P2P行业频繁出事，一股倒闭浪潮令人心颤，一名业内人士便曾向猎云网记者提出疑问：“法大大还能靠P2P发展下去吗？”

       黄翔对质疑并不担忧：“P2P出事风波对法大大影响其实不大，这是因为，既然对方已经有意来使用电子合同了，那么一定是在意’合规’的企业，另一方面，我们也会对所服务的企业进行评估。”

       与此同时，黄翔表示，积累P2P用户只是法大大的第一阶段，在15年9月之后，法大大已开始接触旅行、O2O、B2B行业，目前携程、美团、同程旅游皆是法大大的用户，“法大大当然不会只局限于互联网金融。”

市场里的人多了才不会孤独

       放眼西方，电子合同虽同属新兴市场，但已日益成熟，生活中的应用场景越来越多，第三方签署平台发展迅速，如美国的电子签约领先者Docusign，在去年便已获得F轮融资，估值20亿美元。

       而反观国内现状，《电子签名法》虽在12年前便已颁布，但真正的第三方在线签署平台，也是近两年才正式起步，至15年下半年开始加速发展。

        黄翔坦言：“15年上半年，法大大刚上线不久，那时电子合同这个概念还很少有人提及，于是我们逮住人就讲什么是电子合同，这东西有什么好处啊，那时候在市场里还挺孤独的。”

      “孤独”是黄翔对当时市场的体察与描述——热度低、对手少、略显冷清，但短短半年之后，情况就不一样了，竞品开始增多，竞争日渐激烈。

       在黄翔眼中，一个新兴市场，首先要有足够多的人进来，不然玩家太少，发展潜力就存疑，“让别人开始关注这个领域，它才会有更大的机会，所以，竞品多了其实不算坏事嘛。”

       当然，竞争仍无法回避，相比云签一类的竞品，黄翔认为法大大的核心差异性在于其背后的理念，及由理念带来的用户体验优化，“法大大看重合同背后的安全性和有效性，它不单纯为签订电子合同而生，它更重要的作用是，帮助用户解决由合同而产生的一系列需求。”

互联网、契约精神与独角兽

       科技与互联网改变了商业格局，也改变了我们的行为方式乃思维模式，至于我们对各类“法律”的理解，或许亦已在悄然改变中。

      正如知识版权是印刷时代的产物，互联网时代之后，人们开始提倡信息免费共享，对网络版权之保护与处理的争议至今未熄。

      在黄翔看来，答案是肯定的。他承认，互联网对法律提出了许多新要求，有些法律问题在之前根本不可想象，这需要从业者们重新思索。但所谓的契约精神，其背后的核心是诚信与秩序，诚信是任何时代的任何个体都需要的，进一步讲，恰恰因为现今互联网的混乱，我们才需要用契约去规范它。

       同时，也是为了将契约精神发扬光大，黄翔才给产品取名法大大：“法大大，其实就是将法律与契约精神最大价值、最大范围传递出去的意思。”

       而法大大的Logo亦寄寓了黄翔对法律的热情——一只独角兽，独角兽又名獬豸，是古代神裁制度下产生的著名神兽，又称法兽，它能辨是非曲直、识善恶忠奸，是“正义”的化身。

       显而易见的是，独角兽还是一个双关语，它的另一个所指是大多数创业者的终极目标——成为一家估值10亿美元的企业，黄翔说：“电子合同的签署过程具有交互性，由此也带来用户黏性，所以这个行业是会出现巨头的。”

为引导和方便党员、群众、网民和媒体积极参与监督，2014年7月7日，中央纪委监察部网站开设党风政风监督举报曝光专区，在“作风监督举报”板块直接受理对“四风”等问题的举报投诉。中央纪委监察部网站党风政风监督举报曝光专区还设有“点名曝光”板块，发布全国查处违反八项规定精神问题的情况，曝光违反八项规定精神的典型案例。 结合材料，分析中央纪委上述做法的意义。

【分析】本题属于为什么类型题，此类简答题是针对某一“做法”或“事件”的意义来设问的，一般用“积极影响”、“经济、政治意义”、“意义”作引导词。答题时一般采用“才能…；才能…”或者“有利于…；有利于…”这样的排比句。

在多党合作中，由于中国共产党处于领导和执政地位，更加需要自觉地接受民主党派的监督。中共党委要切实完善民主监督机制，自觉接受监督。

【解答】解：此题考查中国共产党接受监督的意义的运用，难度不大，大部分是该知识的再现与材料结合起来作答。解答本题的关键将中央纪委归结为中国共产党的部分来回答，中央纪委的做法就是中国共产党的做法，即中央纪委接受监督就是中国共产党接受监督。中国共产党是中国工人阶级的先锋队，同时是中国人民和中华民族的先锋队，是中国特色社会主义事业的领导核心，代表中国先进生产力的发展要求，代表中国先进文化的前进方向，代表中国最广大人民的根本利益。

故答案为：（1）中央纪委是中国共产党的一个组成部分 ，中央纪委接受监督就是中国共产党接受监督。在多党合作中，中国共产党处于领导和执政地位，有利于中国共产党自觉地接受民主党派的监督。（2）中国共产党是中国工人阶级的先锋队，同时是中国人民和中华民族的先锋队，是中国特色社会主义事业的领导核心，代表中国先进生产力的发展要求，代表中国先进文化的前进方向，代表中国最广大人民的根本利益。这有利于中国共产党廉洁自律，永葆先进性，与时俱进

，与之匹配的创意设置的访问URL是，且关键词、创意的状态均有效，则以下说法正确的是： A 两个URL冲突，所以实际推广中无法进行正常跳转 B 实际推广跳转

C 实际推广中一半按照跳转，一半按照跳转 D 实际按照跳转

| 9 条评论| 作者Jack 产品测试QA百度用户体验

摘要：作者在测试工作中，遇到很多新IT技术的产品并将其应用到测试中。典型的代表是被百度称为的产品评测。这类测试主要是发现产品设计的不足。基于大数据思想进行相关性分析自动挖掘数据、产品评测体系等技术方法。

本文由百度测试架构师Jack所作，在第一篇里( 百度测试架构师眼中的百度QA（一))主要谈到百度QA的特点与核心价值，在第二篇里，他谈到了百度用户体验提升的产品评测。 以下是第二篇的内容： badcase挖掘的评测方法

今天我先分享下在百度学到的如何自动进行badcase挖掘的评测方法，因为我觉得这是我在百度遇到的最有趣的一种新测试类型，很好地解答了我内心关于算法效果测试方法的疑惑。 先介绍下什么是badcase——“badcase是一个不符合用户心理预期的产品输出结果集”，例如：搜索结果中出现的“文不对图”现象，以及低质量的输出结果排在前面等现象。传统测试方法中并没有对此类问题现成的技术或方法，因此为了从数千万的输入数据中找出那些输出结果集质量不满足用户体验的问题，靠人工的方式对每个输出结果进行人眼判断显然是不行的。

百度的QA应用了大数据思想从数据的相关性入手，从大量的badcase中找到A现象与B结果的相关性，当我们得到一个可以达到80%以上相关性的准确率时就可得到一个靠谱的测试模型，当然这个测试模型天生就是自动化的，从而支持我们从海量的数据中自动地挖出海量badcase，而测试人员要做得就是设计这个自动挖掘badcase的测试模型。 以前我们应用人工的方式进行相关性测试模型的规则抽取与验证，后来开始应用机器学习的思想和方法，实现先自动训练相关性测试模型达到一定准确性后，再应用这个测试模型自动的进行badcase挖掘。以前此类产品评测的最大困难是靠人工方式进行产品效果评估，一个PM一天能评估的输入数据也就最多几百个，而现在我们可以实现一天评估数十万的输入数据，工作效率提升上千倍。而这一切就是大数据思想和机器学习新技术应用到测试设计中的效果，自动化测试的概念又提高了一个新的层次。也许未来测试人员的工作方式会像我们的工作方式一样：先基于业务专家经验设计一个测试模型的架构和主要因子，然后通过真实数据集自动训练测试模型得到测试模型中每个变量因子合适的取值范围，最终自动得到一个测试结果高准确率的测试模型。未来是大数据时代，我认为利用大数据思想不去追求精准的因果关系，而是追求相关性的准确性，将是未来测试设计师们必须要掌握的一种IT技能。 在过去挖出足够数量的badcase是QA最大的挑战，现在的新挑战则变成了我们如何用最快的速度和最低的成本完成这些大量badcase的分析定位工作。通常第一步会自动地针对挖掘出来的badcase进行影响严重度的评级（依然是使用大数据思想和机器学习的方法），这样可自动选出影响较严重的badcase集。第二步：如果产品形态支持通过构建决策树模型自动地定位分析问题根因，那么将通过设计自动分析定位系统对badcase集进行处理。如果某些产品形态不支持通过构建决策树实现自动分析定位，则会通过百度的众测平台，引入用户资源通过一些众测活动来对badcase再次进行标注，这样也能大大降低工程师分析定位的成本与时间。

我先简单介绍下：百度众测是国内第一个基于众包思想实现的一种“人工测试云”，它充分发挥公司产品爱好者的资源价值，不仅帮助发现产品bug还可以为产品优化设计体验提供用户数据，例如：通过百度众测用户对badcase的标注可帮助QA收集大量标注数据为改善产品效果贡献价值。目前网页搜索、地图搜索、图片搜索等产品都已通过众测的用户标注活动优化产品的效果设计质量和降低badcase的分析定位成本。

Badcase的自动挖掘和分析工作对于强算法类产品的用户体验改进帮助很大，而对于弱算法类产品如一些应用APP产品而言，百度QA则通过建立各自产品的评测体系的技术活动以量化方式对产品进行用户体验评测，产品经理和开发人员将根据评测结果输出产品改进的story和非功能质量属性的优化方向。 产品评测报告与传统测试报告

产品评测报告与传统测试报告的区别在于：传统测试报告是测试用例执行结果和bug数据的分析材料是用于分析软件存在的实现错误。而产品评测报告更多是产品在不同用户功能应用场景和非功能属性应用场景的评价数据（例如不同用户场景下的性能响应值和不同用户环境场景下的兼容性表现），以及与同类产品的对比数据，因此对产品设计者（PM）会更有用户体验提升的指导价值，通过更直观的产品用户体验数据支撑产品设计决策。QA则通过设计产品的评测体系对产品价值的贡献不仅在于发现bug，还扩展延伸到直接为产品设计和产品用户体验提升提供有量化数据支撑的改进方向。在百度内部移动APP的评测工作中会对APP在不同网络质量、不同机型、不同软件平台版本下进行产品基础功能、APP响应性能（业务级和系统级）、APP资源消耗性能（耗电量/流量/OS资源等）、UI流畅度等领域进行评测数据收集，QA会在评测数据基础上先进行第一轮的数据分析给出定性的结论，给出改进的建议和技术方案提供给PM或RD参考。为了最大化的提升移动APP的评测效率在内部除了各产品组独立开展的评测活动外、还有支持一键评测的百度评测平台对内部评测技术进行技术共享与重用帮助各产品QA提升评测工作效率。 可靠的用户体验评测体系

测试人员要设计出一个靠谱的产品用户体验评测体系，必须先要对所负责产品的主要用户场景（功能和非功能）有充分的了解和理解，以及用户对产品体验的需求有足够完善的整理，才能对产品整体的用户体验进行科学客观地评价。然后评测体系还需要做“横向”同类产品、“纵向”历史版本的对比测试，并根据产品的“设计思想”进行评测验证是否达到预期的设计定位。最后通常一个好的评测体系一定是一个松耦合的产品测试平台，在这个测试平台上无论是自有产品还是其他公司的相似产品都能得到统一标准的测试数据评估，这样能帮助QA/PM/RD对产品用户体验数据的价值进行更好的分析，从而提升产品竞争力。从某种角度看QA要做好产品评测体系就必须拥有至少“半个产品经理”的用户需求场景知识，从这方面来看对QA的要求又提高了，不仅要懂软件技术会挖掘程序错误，还要有丰富的产品领域用户场景的知识（功能的/性能的/兼容性/稳定性等）。虽然对QA的技能要求提高了，但是无论对产品竞争力的提升还是对QA自身价值的提升都是有着很积极地作用。

另外我认为在公司内只有QA最适合做产品评测体系设计这件事，产品经理PM更擅长功能性需求的设计和创新，对如何设计严谨和完善的测试系统并不是很专业（QA出身的PM除外）。RD则更擅长产品架构的设计和实现，擅长从白盒层面来理解产品，对于用户应用行为黑盒层面的理解则相比QA有限。而QA却因为长期从事功能和非功能的黑盒测试活动的经验积累了很多产品在用户体验方面的知识，因此QA相比PM和RD更适合设计一个用户体验层面严谨的产品评测体系，而这也是QA在公司中独特价值之一的体现。

最后我的感慨是大数据思想、机器学习、众包、基于用户体验量化的产品评测这些所谓时髦的名词已不只是虚幻的理论或概念，把这些新的IT技术和理念应用到质量保障工作中为产品用户体验提升提供测试方法论，改变旧有的测试模式是已被实践证明可行的、是有价值的。希望我此次分享的百度QA在用户体验提升领域的实践经验能帮大家更好地提升产品用户体验和测试人员在公司中的产品价值。

转载：我眼中的百度QA（第二篇）----百度用户体验提升的产品评测

分类： 软件测试 20:2549人阅读评论(0)收藏举报

转载地址：/blog/?p=1129 作者：百度质量部测试架构师 董杰

我在百度做软件测试工作的趣味性在于可以接触到很多新IT技术的产品和把新IT技术知识应用到测试中，这些是我在百度最有趣的事。典型的代表就是如何尽可能找出不是bug但影响用户体验的设计问题，在百度被称为效果测试或产品评测。从测试目的而言这类测试不是发现软件编码的错误，而是发现产品设计的不足。应用的技术和方法有：基于大数据思想进行相关性分析自动挖掘数据badcase、众测、百度TIP中的AB testing、产品评测体系。以我所了解的信息来看目前百度很多产品已开展了产品效果评测，如网页搜索、图片搜索、地图搜索、视频搜索、商业搜索、众多的移动APP产品等。QA们在完成产品bug的挖掘后，会继续进行产品validation的工作为提升产品设计的用户体验继续贡献测试人员的价值。

今天我先分享下在百度学到的如何自动进行badcase挖掘的评测方法，因为我觉得这是我在百度遇到的最有趣的一种新测试类型，很好地解答了我内心关于算法效果测试方法的疑惑。先介绍下什么是badcase——“badcase是一个不符合用户心理预期的产品输出结果集”，例如：搜索结果中出现的“文不对图”现象，以及低质量的输出结果排在前面等现象。传统测试方法中并没有对此类问题现成的技术或方法，因此为了从数千万的输入数据中找出那些输出结果集质量不满足用户体验的问题，靠人工的方式对每个输出结果进行人眼判断显然是不行的。因此，百度的QA应用了大数据思想从数据的相关性入手，从大量的badcase中找到A现象与B结果的相关性，当我们得到一个可以达到80%以上相关性的准确率时就可得到一个靠谱的测试模型，当然这个测试模型天生就是自动化的，从而支持我们从海量的数据中自动地挖出海量badcase，而测试人员要做得就是设计这个自动挖掘badcase的测试模型。以前我们应用人工的方式进行相关性测试模型的规则抽取与验证，后来开始应用机器学习的思想和方法，实现先自动训练相关性测试模型达到一定准确性后，再应用这个测试模型自动的进行badcase挖掘。以前此类产品评测的最大困难是靠人工方式进行产品效果评估，一个PM一天能评估的输入数据也就最多几百个，而现在我们可以实现一天评估数十万的输入数据，工作效率提升上千倍。而这一切就是大数据思想和机器学习新技术应用到测试设计中的效果，自动化测试的概念又提高了一个新的层次。也许未来测试人员的工作方式会像我们的工作方式一样：先基于业务专家经验设计一个测试模型的架构和主要因子，然后通过真实数据集自动训练测试模型得到测试模型中每个变量因子合适的取值范围，最终自动得到一个测试结果高准确率的测试模型。未来是大数据时代，我认为利用大数据思想不去追求精准的因果关系，而是追求相关性的准确性，将是未来测试设计师们必须要掌握的一种IT技能。

在过去挖出足够数量的badcase是QA最大的挑战，现在的新挑战则变成了我们如何用最快的速度和最低的成本完成这些大量badcase的分析定位工作。通常第一步会自动地针对挖掘出来的badcase进行影响严重度的评级（依然是使用大数据思想和机器学习的方法），这样可自动选出影响较严重的badcase集。第二步：如果产品形态支持通过构建决策树模型自动地定位分析问题根因，那么将通过设计自动分析定位系统对badcase集进行处理。如果某些产品形态不支持通过构建决策树实现自动分析定位，则会通过百度的众测平台，引入用户资源通过一些众测活动来对badcase再次进行标注，这样也能大大降低工程师分析定位的成本与时间。对百度众测感兴趣的同行可以到平台上去了解更多相关信息。在此我先简单介绍下：百度众测是国内第一个基于众包思想实现的一种“人工测试云”，它充分发挥公司产品爱好者的资源价值，不仅帮助发现产品bug还可以为产品优化设计体验提供用户数据，例如：通过百度众测用户对badcase的标注可帮助QA收集大量标注数据为改善产品效果贡献价值。目前网页搜索、地图搜索、图片搜索等产品都已通过众测的用户标注活动优化产品的效果设计质量和降低badcase的分析定位成本。

Badcase的自动挖掘和分析工作对于强算法类产品的用户体验改进帮助很大，而对于弱法类产品如一些应用APP产品而言，百度QA则通过建立各自产品的评测体系的技术活动以量化方式对产品进行用户体验评测产品经理和开发人员将根据评测结果输出产品改进的story和非功能质量属性的优化方向。

产品评测报告与传统测试报告的区别在于：传统测试报告是测试用例执行结果和bug数据的分析材料是用于分析软件存在的实现错误。而产品评测报告更多是产品在不同用户功能应用场景和非功能属性应用场景的评价数据（例如不同用户场景下的性能响应值和不同用户环境场景下的兼容性表现），以及与同类产品的对比数据，因此对产品设计者（PM）会更有用户体验提升的指导价值，通过更直观的产品用户体验数据支撑产品设计决策。QA则通过设计产品的评测体系对产品价值的贡献不仅在于发现bug，还扩展延伸到直接为产品设计和产品用户体验提升提供有量化数据支撑的改进方向。在百度内部移动APP的评测工作中会对APP在不同网络质量、不同机型、不同软件平台版本下进行产品基础功能、APP响应性能（业务级和系统级）、APP资源消耗性能（耗电量/流量/OS资源等）、UI流畅度等领域进行评测数据收集，QA会在评测数据基础上先进行第一轮的数据分析给出定性的结论，给出改进的建议和技术方案提供给PM或RD参考。为了最大化的提升移动APP的评测效率在内部除了各产品组独立开展的评测活动外、还有支持一键评测的百度评测平台对内部评测技术进行技术共享与重用帮各产品QA提升评测工作效率。

测试人员要设计出一个靠谱的产品用户体验评测体系，必须先要对所负责产品的主要用户场景（功能和非功能）有充分的了解和理解，以及用户对产品体验的需求有足够完善的整理，才能对产品整体的用户体验进行科学客观地评价。然后评测体系还需要做“横向”同类产品、“纵向”历史版本的对比测试，并根据产品的“设计思想”进行评测验证是否达到预期的设计定位。最后通常一个好的评测体系一定是一个松耦合的产品测试平台，在这个测试平台上无论是自有产品还是其他公司的相似产品都能得到统一标准的测试数据评估，这样能帮助QA/PM/RD对产品用户体验数据的价值进行更好的分析，从而提升产品竞争力。从某种角度看QA要做好产品评测体系就必须拥有至少“半个产品经理”的用户需求场景知识，从这方面来看对QA的要求又提高了，不仅要懂软件技术会挖掘程序错误，还要有丰富的产品领域用户场景的知识（功能的/性能的/兼容性/稳定性等）。虽然对QA的技能要求提高了，但是无论对产品竞争力的提升还是对QA自身价值的提升都是有着很积极地作用。

另外我认为在公司内只有QA最适合做产品评测体系设计这件事，产品经理PM更擅长功能性需求的设计和创新，对如何设计严谨和完善的测试系统并不是很专业（QA出身的PM除外）。RD则更擅长产品架构的设计和实现，擅长从白盒层面来理解产品，对于用户应用行为黑盒层面的理解则相比QA有限。而QA却因为长期从事功能和非功能的黑盒测试活动的经验积累了很多产品在用户体验方面的知识，因此QA相比PM和RD更适合设计一个用户体验层面严谨的产品评测体系，而这也是QA在公司中独特价值之一的体现。

最后我的感慨是大数据思想、机器学习、众包、基于用户体验量化的产品评测这些所谓时髦的名词已不只是虚幻的理论或概念，把这些新的IT技术和理念应用到质量保障工作中为产品用户体验提升提供测试方法论，改变旧有的测试模式是已被实践证明可行的、是有价值的。希望我此次分享的百度QA在用户体验提升领域的实践经验能帮大家更好地提升产品用户体验和测试人员在公司中的产品价值。

转载：我眼中的百度QA（第三篇）----版本发布阶段百度QA的EP职责提升研发效率

分类： 软件测试 10:4738人阅读评论(0)收藏举报

转载地址：/blog/?p=1150 作者:百度质量部测试架构师 董杰

上一篇关于通过EP职责提升研发效率的文章提到了百度QA在开发阶段和测试阶段提升研发效率的主要EP工作实践。本篇给大家最后分享百度QA在版本发布阶段是如何支持研发效率提升的。

首先：谈谈持续集成在百度的应用。无论在哪个产品组工作每天早上都会收到最新产品代码持续集成的测试报告。持续集成作为一个每天都进行的例行工作，最大化的保障了产品每天能都有一个可交付的可用版本，节省了很多开发自验和入口测试的时间，尽早发现产品缺陷。在百度持续集成平台的建设和维护是由QA来负责，各产品都有QA在默默地支撑着整个产品的持续集成，维护着持续集成中运行的测试脚本和测试程序。

其次：为了保证上线质量和覆盖一些免测的项目，有些重点产品还会有高仿真的线下系统进行预上线测试评估，这能帮助我们有效覆盖上线单、系统错误以及跨子系统的接口问题，使得上线效率和质量大幅提升，此外线下高仿真系统还对外提供各种系统环境的需求，其中包括重点产品在重点版本发布前QA还会进行故障演习（自动化或半自动化），减少版本发布后回滚的发生，减少版本发布的返工就是提升版本发布效率。

(TIP)，是百度目前QA对整个研发流程影响最大的一个EP工程成果，它直接改变了公司传统的产品发布习惯和模式，不是直接全流量发布，而是从小流量开始逐渐发布，深刻地影响了公司的产品发布阶段。通过TIP平台的分级发布功能、流量控制功能、流量测试分析功能、线上监控功能等不但能尽早发现产品问题、而且还能帮助RD和QA简化裁剪部分发布前的测试流程，不但能很好的减少版本回滚数，还能端到端的缩短测试周期，是一个提升版本发布效率的优秀工程手段。

另外在版本发布早期阶段，为了帮助产品经理PM尽早的分析和评估产品的用户体验效果，QA通过开发A/B testing系统、应用机器学习进行badcase自动挖掘、以及其他线上数据监控的系统自动地帮助PM完成产品效果从量化分析到定性决策的过程，相比传统PM靠人工收集和分析数据的方式，提升了PM在版本发布后工作效率，使得PM可以更快地完成下一个版本的产品设计 改进，加快产品效率迭代速度。

搜赢大数据时代 2013年百度营销中国行 搜赢大数据时代

---2013年百度营销中国行

先生/女士 篇三：邀 请 函

尊敬的各位口腔界同仁：

为了更好地促进我市口腔医疗事业发展，提高诊疗水平，江苏省口腔高级专家巡诊宣教团定于本周日来我市举行学术讲座及义诊、会诊活动，诚邀各位口腔同仁前来学习、交流。

二○一二年七月二十五日篇四：邀请函

明阳风电产业集团有限公司：

我公司试制的贵公司2.0mw轮毂铸件（编号：my034-）初检合格，请贵公司派遣质量检验人员到我公司对此件轮毂毛坯进行现场复检。

我公司检验报告及明细见附件。 2015 甘肃酒钢集团西部重工股份有限公司

年3月3日 my034-轮毂交工资料明细表 篇五：邀请函

赵楼煤矿职工男浴室大修及工广道路扩建等工程

商务洽谈会议邀请函 : 兖煤菏泽能化有限公司拟举行赵楼煤矿职工男浴室大修及工广道路扩建工程商务洽谈会议，现将邀请函电传贵方，邀请贵方参加商务性洽谈，望接到邀请后，根据我公司的要求编制维修工期、报价、质量保证等相关文件，加盖公章并密封。我公司将于2013年6月4日上午9时在赵楼矿井召开商务性洽谈会议，望贵公司派人准时参加。有关事宜简述如下：

一、 概况：赵楼煤矿职工男浴室大修及工广道路扩建工程

1、参加会议时请携带贵单位法人证书，法人营业执照，资质证书，授权委托书，被授权人身份证等相关证件原件或复印件并加盖公司公章。

2、投标人对工程现场及周围环境进行踏勘，以便投标人获取有关编制投标文件和签署合同所涉及现场的资料。投标人承担踏勘现场所发生的自身费用。

3、投标人应根据招标人提供的招标文件、施工图纸、相关资料及工程现场实际状况，充分考虑施工期间的各种风险，结合投标人的自身状况，自主报价。

4、投标人的投标报价，应是材料费、运输费、措施项目费、其他项目费及规费、税金、风险及国家政策规定的各项费用。

5、投标人应对设备充分了解工地位置、情况、道路、储存空间、装卸限制及任何其他足以影响承包价的情况，任何因忽视或误解工地情况而导致的索赔或工期延长申请将不被批准。

6、针对招标人所划分标段分别编制投标书6份，正本1份，副本5份，投标书及报价单均加盖公司公章。

7、投标截止时间：2013年6月4日上午8时30分。 8 、联系人：骆 颜 张淑芳 电话： 传真： 技术咨询： 郭徽 电话： 兖煤菏泽能化有限公司

赵楼煤矿职工男浴室大修及工广道路扩建等工程

要求洽谈单位的报价包括施工材料价值、运输费用、保险费用、税费、装卸费、专用工具费、技术服务费、技术考察费、售后服务费等一切费用。

合同编号： 工程名称：

签订时间： 201 年 月 日

依照《中华人民共和国合同法》、《中华人民共和国建筑法》及其他有关法律、行政法规，遵循平等、自愿、公平和诚实信用的原则，双方就本建设工程施工事项协商一致，订立本合同。

开工日期：201 年 月 日（实际开工日期以发包人的开工报告为准） 竣工日期：201 年 月 日

合同工期总日历天数 天。

3、通用条款（gf-）；

4、双方协商同意的变更纪要、协议；

5、标准、规范及有关技术资料；

上述文件应互为补充和解释，如有不清或互相矛盾之处，以上面所列顺序在前的为准。

七、本协议书中有关词语含义与本合同第二部分《通用条款》中分别赋予它们的定义相同。

八、承包人向发包人承诺按照合同约定进行施工、竣工并在质量保修期内承担工程质量保修责任。

九、发包人向承包人承诺按照合同约定的期限和方式支付合同价款及其他应当支付的款项。

合同订立时间：201 年 月 日

合同订立地点：山东省郓城县

本合同双方约定 双方签字盖章后 生效。