【会议纪要】第六次 OPS 例会
【召开时间】2022-12-06 15:00~17:30
【参会人员】:
海量:李兴斌
华为:贺承汉、黄凯耀、胡正超
国创:曾色亮、杨子浩、彭斐灵
利他:王亚龙、张绍鹏、谢立波、刘信、杨森、贺帅
QA: 侯少龙、李洪基、杨毅翔
议题1:可视化开发与运维平台 - 测试方案评审 a、Web Datastudio 1230版本测试方案评审 b、可观测可诊断 1230版本测试方案评审
评审建议:
a、DS并发数数量定为1000,相对较高,建议渐进式进行并发数测试,结合场景与用户量、及测试出的情况进行调整。会议暂定并发数为100。(黄凯耀老师) b、关注多人使用数据库时是否出现死锁、相互阻塞等待的场景。(黄凯耀老师) c、现有TPS对于DS实际使用来说,不需要这么高,无确定数值,根据测试出的情况再进行考量。(黄凯耀老师) d、测试策略需要体现测试数据准确性测试。(贺承汉老师) e、测试用例需要关注用户信息泄露、密码信息泄露、ssl证书连接等问题,在测试策略中也需体现。(贺承汉老师) f、测试界面需要关注界面、操作是否合理、过于复杂等。(贺承汉老师) g、测试需要关注插件的移植性:部署、加载、卸载。(贺承汉老师) h、DS的压力测试要重点关注函数/过程/sql执行的并发情形。(贺承汉老师) i、测试需要验证提示建议内容的正确性、按该建议是否可执行(海量)。(贺承汉老师) j、建议一轮测试关注功能、二轮测试关注场景是否便于定位问题。(贺承汉老师)
补充内容(侯少龙老师):
a、交付形式:建议与一体化平台仓库一起存放。 b、交付资料:① 特性设计说明书 ② 测试报告 ③ 用户操作说明书:markdown文档 c、特性设计说明书在下次OPS会议进行评审,用户操作说明书在测试报告评审前给到(建议提前一周)并给QA SIG组演示功能(时间另约)。
目标确认(贺承汉老师):
a、集成测试:无需执行,直接进入系统测试。 b、版本定位:宣传时间:12.30、正式发布:3.30。 版本质量高于DEMO,按照TR5执行,达到POC测试标准,正常功能要覆盖到,异常情况可以不完全。
议题2:可视化开发与运维平台 - 可观测可诊断需求评审
a、可观测可诊断目前功能演示 b、可观测可诊断需求评审
会议结论:
a、明确后续开发需求优先级 b、下次OPS评审提供特性设计说明书进行评审