OctoML CEO:MLOps 需要让位给 DevOps

OctoML CEO:MLOps 需要让位给 DevOps

MLOps 领域的出现是为了了解人工智能工业应用的复杂性。

Luis Ceze 是初创公司 OctoML 的联合创始人兼首席执行官,该公司开发自动化机器学习工具,但到目前为止,这种努力都以失败告终。

“将 ML 变成一种常见的做法还为时过早,”Ceze 在通过 Zoom 接受采访时告诉 ZDNet。

“这就是我批评 MLOps 的原因:我们正在为一些定义不明确的东西命名,而有一些定义非常明确的东西,称为 DevOps,这是一个非常明确的将软件投入生产的过程,我 认为我们应该使用它。”

“我个人认为,如果我们做得对,就不需要 ML Ops,”Ceze 说。

“我们可以只使用 DevOps,但为此你需要能够像对待任何其他软件一样对待机器学习模型:它必须是可移植的,它必须是高性能的,并且做所有这些都是 这在机器学习中非常困难,因为模型硬件、框架和库之间存在紧密的依赖关系。”

Ceze 认为,我们需要的是解决因机器学习堆栈高度分散的特性而产生的依赖关系。

OctoML 正在推动“模型即函数”的概念,指的是 ML 模型。 它声称该方法平滑了跨兼容性,并综合了机器学习模型构建和传统软件开发的其他不同开发工作。

OctoML 开始提供开源 Apache TVM 编译器的商业服务版本,这是 Ceze 和其他联合创始人发明的。

周三,该公司宣布扩展其技术,包括解决依赖性的自动化功能等,以及“来自 80 多个部署目标的综合车队的性能和兼容性见解”,其中包括来自 AWS 的无数公共云实例, GCP 和 Azure,并支持来自多个供应商的不同版本的 CPU(x86 和 ARM)、GPU 和 NPU。

Ceze 说:“我们希望有更多的软件工程师能够在没有任何机器学习系统专业知识的情况下在主流硬件上部署模型。”

该代码旨在解决“行业中的一个巨大挑战”,Ceze 说,即“创建模型的成熟度已经提高了很多,所以,现在,很多痛苦正在转移嘿,我有一个模型, 怎么办?”

Ceze 指出,从一个新的机器学习模型开始的平均时间是 12 周,并且所有模型中有一半没有得到部署。

“我们希望将其缩短到数小时,”Ceze 说。

Ceze 说,如果做得好,这项技术应该会产生一类新的程序,称为“智能应用程序”,OctoML 将其定义为“将 ML 模型集成到其功能中的应用程序”。

Ceze 说,这种新型应用程序“正在成为大多数应用程序”,并举例说明了允许背景效果的 Zoom 应用程序,或进行“连续 NLP”或自然语言处理的文字处理器。

“ML 无处不在,它正在成为我们使用的不可或缺的一部分,”Ceze 观察到,“它应该能够非常容易地集成——这就是我们着手解决的问题。”

Ceze 说,MLOps 的最新技术是“让人类工程师了解要运行的硬件,选择正确的库,使用 Nvidia 库,比如正确的 Nvidia 编译器原语,并得出他们可以做到的东西 跑步。

“我们将所有这些自动化,”他谈到 OctoML 技术时说。 “得到一个模型,把它变成一个函数,然后调用它,”应该是新的现实,他说。 “你通过 URL 获得一个拥抱脸模型,然后下载该功能。”

该软件的新版本特别努力与 Nvidia 的 Triton 推理服务器软件集成。

Nvidia 在准备好的评论中表示,Triton 的“便携性、多功能性和灵活性使其成为 OctoML 的理想伴侣”。

当被问及 OctoML 作为一项业务的潜在市场时,Ceze 指出“DevOps 与 AI 和 ML 基础设施的交集”。 DevOps 是“近千亿美元”,而 AI 和 ML 基础设施是每年数千亿美元的业务。

本文内容由互联网用户自发贡献,该文观点仅代表作者本人。商机网仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌抄袭侵权/违法违规的内容, 请发送邮件至 tenspace2022@163.com 举报,一经查实,本站将立刻删除。 本文链接:https://www.315965.com/n/66724.html 聚才发 母婴好物

(0)
上一篇 2023年12月31日 上午3:32
下一篇 2023年12月31日 上午3:42

相关推荐

  • 传说中玉皇大帝叫什么名字(第一任玉皇大帝叫张友人的科学依据)

    宗教信仰很早就伴随着人类探索自然而产生了,但和西方信仰”上帝”、”真主”不同,我国古代的人们在信仰神灵这方面可以说是来者不拒。沿海的百姓祭拜妈祖,祈求出海顺利,而道观、佛寺等宗教场所则能够在各地并存,让不管是道教的神明还是佛教的菩萨都能得到人们的供奉。 后来,人们还将本土的道教和外来的佛教相结合,再吸收各地方的…

    2023年12月2日
    146
  • 郭子仪救李白的故事是怎样的?郭子仪为何救李白?

    郭子仪,唐朝的名将,李白,唐朝的诗仙。他们两人在历史上并没有直接的交集,但关于郭子仪为何救李白的故事却流传甚广。 故事发生在唐玄宗天宝年间,那时的李白已经是一位享有盛名的诗人,他的才情横溢,作品广为流传。然而,他的性格豪放,不拘小节,因此与朝廷中的一些人产生了矛盾。一次,李白因为酒后失态,得罪了权臣杨国忠,被杨国忠陷害入狱。 郭子仪是唐朝的一位重要将领,他忠…

    2024年2月18日
    32
  • 著名科学期刊编辑表示,ChatGPT“缺乏深度和洞察力”

    最近,关于 OpenAI 的 ChatGPT 程序在响应人类提示时生成自然语言话语的巨大前景,已经流传了很多墨迹。 关于该系统的缺点也有很多文章,包括在已发表的文章中产生彻头彻尾的谎言。 《自然》杂志报道称,该项目不符合学术文章作者身份的标准,“因为他们无法对科学论文的内容和完整性负责”,也就是说,这些项目。 一些学者正在发现 ChatGPT 的另一个更微妙…

    2024年1月1日
    140
  • Microsoft OneNote 备忘单源代码

    笔记应用程序可能会有所帮助,尤其是当它能让您和您的同事就想法进行协作时。 Microsoft OneNote 是完成这项工作的绝佳工具。 它预装在 Windows 10 和 11 上,包含在 Microsoft 365 订阅中。 但任何人都可以免费下载并使用该应用程序。 本指南将引导你完成使用 OneNote 的基础知识,重点介绍 OneNote for W…

    2024年1月12日
    136
  • 健康码变黄码了怎么恢复绿码(解除黄码最快办法)

    还记得这只可爱的小“绿马”吗? 最近一会儿变黄 一会儿又变绿? 到底怎么回事? 速看 在新冠肺炎疫情防控工作中,健康码赋“黄码”是对与病例存在“时空交集”的风险人员的重要健康管理措施,可以促使其减少社会活动、主动接受核酸检测,降低疫情传播风险。 “为什么黄码、绿码会反复变化?” “为什么我的健康码会被赋黄码?” “为什么核酸检测阴性了,黄码还不转绿?” 1 …

    2023年8月13日
    206
  • Windows 11 老式 Windows 桌面的终结源代码

    我称 Windows 11 为毫无意义的升级。 我的理由是它带来了兼容性问题,并没有给 Windows 10 添加任何内容。当然,它包括更好的安全性。 但是,剧透警告,这些改进中的大部分已经在 Windows 10 20H2 版本(2020 年 10 月更新)中。 你只需要打开它们。 那么,Windows 11 的意义何在? 我认为这是为了让您慢慢习惯 Wi…

    2024年1月12日
    136
  • Windows 版 iCloud 它是什么(以及如何使用它)源代码

    如果您同时使用 Apple 和 Windows 设备,那么您也应该使用 Windows 版 iCloud。 这是一款适用于 Windows 系统的应用程序,可让您从 PC 访问 iCloud 数据和功能。 苹果的 iCloud 是什么?iCloud 是整个 Apple 世界的重要组成部分。 它用于共享 iCloud Drive 文件、同步联系人、设备和其他个…

    2024年1月10日
    122
  • 音乐酒吧装修风格描述(酒吧气氛音乐风格有哪几种)

    现在很多年轻人的工作压力都很大,当压力到了一定程度之后就需要释放出来,于是酒吧就成为了很多人释放压力的地方,酒吧也就有了很大的市场。投资开一家酒吧也是相对不错的选择,那么吸引人的酒吧设计装修风格有哪些呢? 1、原始风情 随着现在人们思想的发展,复古一些中式风格和田园风格的事物备受的人们的喜爱,一是喜欢其中的环境氛围,二是一种身份和对高品味生活的追求。此类酒吧…

    2023年8月9日
    141
  • 文档,一个随身携带的应用程序

    大流行迫使许多移动专业人士在试图在办公室外完成工作时过于担心。 他们有吗? 他们可以使用已有的应用程序打开该项目吗? 他们能否安全高效地连接到他们的云服务? Readdle 改进的文档应用程序可能会帮助解决这些问题。 什么是文档?Documents 现在可用于运行 M1 Apple Silicon 处理器的 Mac,被认为是提高工作效率的瑞士军刀。 您可以打…

    2024年1月5日
    140
  • 回到未来 微软将 Windows 10 用户推向云端源代码

    随着岁月的流逝,微软一直在稳步摆脱其旧的 PC 操作系统模型,该操作系统首先于 1981 年 7 月买了 Seattle Computing Products 的 86-DOS,又名 Quick and Dirty DOS,并将其重命名为 MS-DOS 1.10, 桌面即服务 (DaaS)。 如果您的家庭办公室还没有快速的互联网连接,那就买一个吧。 你会需要…

    2024年1月10日
    135

发表回复

您的电子邮箱地址不会被公开。 必填项已用*标注