对质量失去信心:计算机视觉服务的隐性演化
软件工程
2019-08-01 v2 人工智能
摘要
人工智能 (AI) 与机器学习 (ML) 的最新进展,如计算机视觉,现已作为智能服务可用,其易用性与简洁性颇具吸引力。多家供应商现将该技术作为云服务推出,开发者希望借助这些进展为终端用户提供价值。然而,对于使用这些智能服务所产生的维护与演化风险——尤其是其行为一致性与功能透明度——尚无坚实调查。我们使用3个不同数据集,在11个月内评估了三种不同智能服务( specifically 计算机视觉)的响应,对照各自文档验证响应并评估演化风险。我们发现:(1)这些服务的行为存在不一致;(2)响应中存在演化风险;(3)缺乏记录这些风险与不一致性的清晰沟通。我们向开发者和智能服务提供商提出一组建议,以告知风险并辅助可维护性。
引用
@article{arxiv.1906.07328,
title = {Losing Confidence in Quality: Unspoken Evolution of Computer Vision Services},
author = {Alex Cummaudo and Rajesh Vasa and John Grundy and Mohamed Abdelrazek and Andrew Cain},
journal= {arXiv preprint arXiv:1906.07328},
year = {2019}
}