企业如何快速实现AI应用落地?红帽给出“三步走”AI部署路径
11月4日消息,过去两年,全球资本大举投入AI基础建设,目前AI的基础架构已经基本完善,但许多企业应用仍未落地。不少企业曾尝试用大模型提升效能,但发现大模型不适合生产场景,因为一点小错就可能带来风险。
在2024红帽论坛上,企业级开源解决方案提供商红帽公司展示了其如何用开放混合的AI和开源方法加速企业AI应用。红帽全球副总裁兼大中华区总裁曹衡康表示,用混合开放的模式来开发AI已成为一个必然趋势,红帽在基础架构上采用混合云模式,支持本地数据中心、公有云和边缘计算环境的运行,并支持开源和闭源模型,从而为企业提供灵活选择。
在过去几年,红帽提出了“小模型”概念,即专属模型(faithful purpose),让企业的数据驱动AI模型的生成,确保模型稳定、安全,并符合企业的特定需求。同时还引入“社区版”小模型,通过合成数据大幅减少对真实数据的需求,将数据量降至原来的千分之一。这种方式不仅降低了算力需求,节约了成本,能耗也大幅减少,对环境更加友好。
场景应用是ISV(独立软件开发商)和应用供应商最擅长的领域。由于许多企业和行业都有各自的特点,红帽加速了与本土ISV及方案开发商的合作,这合作涵盖芯片和软件等方面,同时也确保红帽的开源路线在国内得到更多本土化支持。红帽大中华区资深市场总监赵文斌透露,红帽最近与NVIDIA等全球合作伙伴开展了新项目,特别是在加速场景应用落地方面。
值得一提的是,实际应用中,企业在AI预算方面非常谨慎,通常需要看到效果后才会进一步投入。对此,曹衡康表示,红帽的混合云理念鼓励客户在合适的场所部署算力,比如公司内部数据中心、公有云,甚至跨多云环境。去年红帽推出了“Unlock”理念,就是希望避免客户被锁定在特定云上,开源架构为客户提供更多弹性和自由度。
具体来看,红帽提出了“分步实施”的策略,即企业AI应用三步曲。第一步,客户可以在最小资源配置下试用开源模型和工具,比如在笔记本电脑上用CPU试跑,而不需要额外的GPU卡。
如果第一步测试效果满意,客户可以进入第二步,通过云租用算力进行进一步扩展。红帽平台几乎可在任何云上运行,客户可以选择公司数据中心或外部公有云资源,这样在确认模型适合需求后,才进入第三步的大规模部署。
第三步,红帽的架构支持跨云混合部署。例如,客户可以在中国使用阿里云,在美国使用AWS,这种多云方案既灵活又经济。我们的目标是帮助客户实现最佳的投资回报率(ROI),并在每一步提供适配的支持。
红帽大中华区方案架构部总经理王慧慧介绍称,自2019年IBM成为红帽母公司以来,IBM在开源方面的投入愈发积极,在工作方式和平台选择上越来越倾向开源。IBM将其最初的Watson平台(现称Watson X)逐步开源,接下来IBM和红帽将共同致力于维护开源模型的持续迭代。
曝Arm明年量产AI芯片并获软银支持 公司回应:不发表评论5月13日消息,据媒体报道,Arm已经成立了专门的AI芯片部门,并设定了在2025年实现量产的目标。此外还有消息称,Arm将为此支付高达数千亿日元的初期资本,其主要股东软银集团也计划出资支持,软银目前持有Arm约90%的...
OpenAI在印度开始招聘,以尽早制定监管OpenAI正式启动了在印度的招聘计划,旨在早期塑造人工智能(AI)监管政策。据悉,OpenAI已经任命一位政府关系负责人,负责领导公司在印度的公共政策事务。这一举措被认为是OpenAI在该国市场上的战略性举措,旨在通过...
消息称马斯克xAI寻求融资60亿美元 估值180亿美元5月24日消息,据外媒报道,由马斯克创立并领导的人工智能初创公司xAI,在寻求融资60亿美元,对公司的估值为180亿美元。外媒是援引消息人士的透露,报道xAI寻求融资60亿美元的。但也有外媒称180亿美元的估值,是不包...
掌阅科技利用生成式AI技术解决阅读路上的3道“拦路虎”5月23日消息,当下,生成式AI技术正在以其强大的创造力和生成能力给数字内容生产带来全新变化,诸多文生图、图生图等沉浸式、高互动性的阅读创新场景加速落地,赋予用户前所未有的阅读感官体验。成立于2008年的掌阅...
Sora降世,短视频真的会更好吗?去年年初,ChatGPT横空出世,瞬间点燃了全球科技圈,今年,科技圈再次迎来重磅消息,OpenAI公司发布了旗下的文生视频大模型Sora,Sora能够根据文本提示生成最长60秒的视频,从公开的样片效果来看,堪称惊艳。从文本...
如何选购kawai电钢琴??2023年kawai选购攻略大全来了!
哈喽!最近有超多小伙伴问我:怎么选一台kawai性价比高的电钢琴?为了解决大家在选择kawai电钢的困惑,我专门...
苹果招募生成式AI人才 提供数十个大模型岗位
根据最新的招聘信息,苹果正在扩大其生成式人工智能领域的专业团队,并计划将这项技术应用于iPhone和iPad等...
昆仑万维旗下Opera生成式AI服务海外用户数突破100万
昆仑万维旗下Opera宣布,生成式AI服务Aria海外用户数突破100万。2023年5月24日,Opera正式推出生成式AI助理...
创始人王慧文退出 美团成AI公司光年之外唯一股东
8月7日消息,据国家企业信用信息公示系统显示,北京光年之外科技有限公司在近期完成工商变更,创始人王慧文...