App签名坊 24小时在线客服
全部签名指南

App签名坊 · 开发者指南

用 TestFlight 邀请测试,还是在登记设备上验证?

“小团队只有四个人,算内部测试吗?”关键在这四个人如何参与。TestFlight 的内部测试者是对相应内容有访问权限的 App Store Connect 用户。四位普通客户仍是外部体验者。若团队的目标是把一份确定的包交给几台已登记的 iPhone,Ad Hoc 是另一条可评估的路径。人数相同,合适的交付方式也可能不同。

Apple · TestFlight 测试组与构建

先把“人”和“设备”各写一行

第一行写人的变化。谁能在 App Store Connect 管理构建?谁只需要体验和提意见?下轮会不会换一批客户?第二行写设备的变化。手机是否归团队管理?新机能否提前登记?在客服群里收齐了姓名,并不等于已经收齐了 Ad Hoc 所需的设备资料。Stack Overflow 上关于内部和外部测试者的讨论,问的正是“内部”这个词到底指谁。

社区原帖 · 怎样界定内部和外部测试者

TestFlight 按测试组交付构建,Ad Hoc 按设备描述文件和导出批次交付。
同样是“新增一位同事”,两种路径要更新的记录不同。(App签名坊制图)

同一项需求,两条路径分别要做什么?

  • 新增一个人。走 TestFlight 时,把人邀请到能访问目标构建的组,再确认邮件或公开链接可以使用。走 Ad Hoc 时,先问新成员是否沿用一台已获覆盖的设备;如果他用自己的新手机,才涉及新增设备和更新安装包。
  • 新增一个版本。TestFlight 需要上传构建,并检查相应测试组是否已经获得这一版。Ad Hoc 需要按该轮设备范围导出和分发,再确认大家拿到的是新文件。归档完成的时间和测试者实际能安装的时间应分开记录。
  • 收到一条错误报告。TestFlight 可以把测试者反馈与构建对应起来。自行分发给登记设备时,要另行约定反馈入口。两种情况下都要知道安装的构建号,单写“最新版有问题”很难交给开发者复查。

固定测试台和客户体验组,可以同时存在

设想团队有三台固定测试机,每次需要重复验证蓝牙配件的配对和断连。设备编号、系统版本和配件型号都已经知道,能在同一台机器上反复重现是这轮的价值。开发者如果要打断点,可直接用 Xcode;若质检同事只需独立验收一份交付包,可评估对这三台设备做 Ad Hoc 分发。

Apple · Ad Hoc 分发条件

另有六位客户要试用配对界面的文案,其中一位下周换手机,还有两位只在周末有时间。此时团队最在意的是谁收到哪一版、怎样收集反馈,以及修复后怎么邀请他们再试。单独建外部测试组更容易跟踪。两组可围绕同一个功能工作,但在反馈表中要注明分发路径,复查时才能复现与安装方式有关的问题。

哪些信号说明该换路径了?

如果大部分时间花在追问新机标识、重发安装包,而每周都换一批体验者,可先拿下一轮的小组试行 TestFlight。反过来,如果问题只发生在工位上一台接了特定外设的机器,外部测试者提供再多截图也难以观察现场,先把该问题交回真机调试。迁移时先跑通一位体验者和一个新构建,保留原问题单的设备、版本和复现条件,以便比较结果。

给交付会议用的一句话

请负责人填完这句话:“本轮由谁在什么设备上验证哪项功能,通过什么入口收到哪个构建,下一版由谁通知。”如果其中一项没有负责人,先补齐再发包。尤其别为了让客户参加测试就给客户后台管理权限。能通过外部邀请完成的工作,可由原有项目成员负责管理构建和反馈。准备首个外部构建时,继续看构建已上传但还不能邀请,按什么顺序查。