Kolena 宣布了一个用于测试人工智能模型及其微调变体的平台。该平台提供数据质量、模型测试、A/B测试监控、数据漂移和模型退化监控以及调试功能。这家成立三年的旧金山初创公司由亚马逊前高级工程经理共同创立。
Kolena 的 AI 质量平台使软件开发人员和 IT 专业人员能够构建针对现实世界用例安全、可靠且公平的 AI 系统。客户将他们的人工智能模型连接到 Kolena 的 API，并提供数据集和模型在部署时如何工作的“功能要求”。客户还可以衡量多样性和偏见属性，例如年龄、种族和民族。
Kolena 运行了模拟数百到数千次交互的测试，以了解模型产生不良结果的频率以及在什么情况和条件下。更新、重新训练和微调后重新测试模型。
Kolena 在过去 24 个月里一直处于封闭测试阶段，根据客户使用案例、需求和反馈完善平台。客户包括初创公司、财富 500 强公司、政府机构和人工智能标准组织。这些内测客户已经通过 Kolena 的平台对 AI 模型进行了“数万次”测试。
Kolena 的 AI 质量平台根据软件即服务 (SaaS) 模式定价，具有与 AI 增长一致的三个价格点。
【新闻评论】
Kolena 宣布了一个用于测试人工智能模型及其微调变体的平台。该平台提供数据质量、模型测试、A/B测试监控、数据漂移和模型退化监控以及调试功能。这是一家成立三年的初创公司，总部位于旧金山，由亚马逊前高级工程经理共同创立。
Kolena 的 AI 质量平台使软件开发人员和 IT 专业人员能够构建针对现实世界用例安全、可靠且公平的 AI 系统。客户将他们的人工智能模型连接到 Kolena 的 API，并提供数据集和模型在部署时如何运行的“功能要求”。客户还可以衡量多样性和偏见属性，例如年龄、种族和民族。
Kolena 通过模拟数百到数千次交互来运行测试，以了解模型产生不良结果的频率以及在什么情况和条件下。我们还会在模型更新、重新训练和微调后重新测试模型。
Kolena 在过去 24 个月中一直处于封闭测试阶段，根据客户使用案例、需求和反馈完善平台。客户包括初创公司、财富 500 强公司、政府机构和人工智能标准组织。这些内测客户已经通过 Kolena 的平台对 AI 模型进行了“数万次”测试。
Kolena 的 AI 质量平台采用软件即服务 (SaaS) 模式定价，具有与 AI 增长一致的三个价格点。
该平台的推出，是确保人工智能技术安全、可靠、公平的重要一步。当人工智能模型应用于现实世界时，它们必须准确预测各种情况和条件下的行为，并避免出现不适当的结果。 Kolena 考虑了这些模型对社会的影响，并帮助更负责任地部署人工智能。
它还将标准化人工智能模型的测试和评估，使开发者和企业能够更快速、更高效地部署人工智能技术。这可以加速人工智能技术的创新和采用。然而，使用此类平台也伴随着数据隐私和安全方面的担忧。制定法规和指南以确保客户数据的处理和测试结果的透明度非常重要。
从长远来看，我们预计像Kolena这样的平台将在促进人工智能技术融入社会、建立公众对人工智能的信任方面发挥重要作用。随着人工智能的发展，测试和评估它的方法也需要不断发展。