字节跳动发布豆包视觉理解、3D生成等新模型,加速多模态应用落地

小微 2024年12月18日 阅读:46836

字节跳动发布豆包视觉理解、3D生成等新模型,加速多模态应用落地
图片来源于网络,如有侵权,请联系删除

12月18日,在火山引擎 Force 大会上,字节跳动正式发布发布豆包视觉理解模型,为企业提供极具性价比的多模态大模型能力。豆包视觉理解模型千tokens输入价格仅为3厘,一元钱就可处理284张720P的图片,以更低成本推动AI技术普惠和应用发展。

豆包大模型全面升级

据火山引擎总裁谭待介绍,豆包视觉理解模型不仅能精准识别视觉内容,还具备出色的理解和推理能力,可根据图像信息进行复杂的逻辑计算,完成分析图表、处理代码、解答学科问题等任务。此外,该模型有着细腻的视觉描述和创作能力。

火山引擎总裁谭待

此前,豆包视觉理解模型已经接入豆包App和PC端产品。豆包战略研究负责人周昊表示:“豆包一直在努力,让用户的输入更快更方便。”为此,豆包产品非常注重多模态的输入和打磨,包括语音、视觉等能力,这些模型都已通过火山引擎开放给企业客户。

会上,豆包3D生成模型也首次亮相。该模型与火山引擎数字孪生平台veOmniverse结合使用,可以高效完成智能训练、数据合成和数字资产制作,成为一套支持 AIGC 创作的物理世界仿真模拟器。

豆包大模型多款产品也迎来重要更新:豆包通用模型pro已全面对齐GPT-4o,使用价格仅为后者的1/8;音乐模型从生成60秒的简单结构,升级到生成3分钟的完整作品;文生图模型2.1版本,实现精准生成汉字和一句话P图的产品化能力,该模型已接入即梦AI和豆包App。

即梦Dreamina张楠认为,生成式AI技术可以把每个人脑子里的奇思妙想快速视觉化,“像做梦一样”。即梦希望成为“想象力世界”的相机,记录每个人的奇思妙想,帮助每个有想法的人轻松表达、自由创作。

即梦Dreamina 张楠

大会正式宣告,2025年春季将推出具备更长视频生成能力的豆包视频生成模型1.5版,豆包端到端实时语音模型也将很快上线,从而解锁多角色演绎、方言转换等新能力。谭待表示,豆包大模型虽然发布较晚,但一直在快速迭代进化,目前已成为国内最全面、技术最领先的大模型之一。

大模型应用加速落地

数据显示,截至12月中旬,豆包通用模型的日均tokens使用量已超过4万亿,较七个月前首次发布时增长了33倍。大模型应用正在向各行各业加速渗透。

据悉,豆包大模型已经与八成主流汽车品牌合作,并接入到多家手机、PC等智能终端,覆盖终端设备约3亿台,来自智能终端的豆包大模型调用量在半年时间内增长100倍。

与企业生产力相关的场景,豆包大模型也获得了众多企业客户青睐:最近3个月,豆包大模型在信息处理场景的调用量增长了39倍,客服与销售场景增长16倍,硬件终端场景增长13倍,AI工具场景增长9倍,学习教育等场景也有大幅增长。

谭待认为,豆包大模型市场份额的爆发,得益于火山引擎“更强模型、更低成本、更易落地”的发展理念,让AI成为每一家企业都能用得起、用得好的普惠科技。

在公布豆包视觉理解模型超低定价的同时,火山引擎升级了火山方舟、扣子和 HiAgent 三款平台产品,帮助企业构建好自身的 AI 能力中心,高效开发 AI 应用。其中,火山方舟发布了大模型记忆方案,并推出 prefix cache 和 session cache API,降低延迟和成本。火山方舟还带来全域 AI 搜索,具备场景化搜索推荐一体化、企业私域信息整合等服务。

云原生是过去十年最重要的计算范式,大模型时代则推动着云计算的变革。火山引擎认为,下一个十年,计算范式应该从云原生进入到AI云原生的新时代。

基于AI云原生的理念,火山引擎推出了新一代计算、网络、存储和和安全产品。在计算层面,火山引擎GPU实例,通过vRDMA网络,支持大规模并行计算和P/D分离推理架构,显著提升训练和推理效率,降低成本;存储上,新推出的EIC弹性极速缓存,能够实现GPU直连,使大模型推理时延降低至1/50、成本降低20%;在安全层面,火山将推出PCC私密云服务,构建大模型的可信应用体系。基于PCC,企业能够实现用户数据在云上推理的端到端加密,而且性能很好,推理时延比明文模式的差异在5%以内。

谭待说:“今年是大模型高速发展的一年。当你看到一列高速行驶的列车,最重要的事就是确保自己要登上这趟列车。通过AI云原生和豆包大模型家族,火山引擎希望帮助企业做好AI创新,驶向更美好的未来。”

【责任编辑:王岩】
    阅读下一篇:
              热门文章
              • A500观察丨核心资产爆发,A500ETF基金(512050)成交额超8亿,景嘉微大涨

                A500观察丨核心资产爆发,A500ETF基金(512050)成交额超8亿,景嘉微大涨
                图片来源于网络,如有侵权,请联系删除今日A股开盘后震荡走强,大小盘分化严重,核心资产爆发,银行、交运等板块表现较好,A500ETF基金(512050)成交额超8亿元。持仓股中景嘉微大涨超11%,海光信息、巨星科技大涨超6%,深南电路、欧普康视纷纷跟涨。 中信建投证券认为,债市利率快速下降,中国资本市场股债双牛格局继续。近期数据显示地产销售改善,且综合看政策仍有加码空间。我们认为明年初宽松政策仍有望加码,降准降息值得期待,资金有望进一步流入A股市场,且各部委具体政策也有望陆续...
              • 新加坡海峡时报指数涨幅扩大至1%

                新加坡海峡时报指数涨幅扩大至1%
                图片来源于网络,如有侵权,请联系删除每经AI快讯,12月23日,新加坡海峡时报指数涨幅扩大至1%。...
              • 人保财险 ,人保护你周全_2025年家居建材产业现状及发展趋势分析

                人保财险 ,人保护你周全_2025年家居建材产业现状及发展趋势分析
                图片来源于网络,如有侵权,请联系删除人保财险 ,人保护你周全_2025年家居建材产业现状及发展趋势分析 2024年12月9日 来源:互联网 659 38 北京用户提问:市场竞争激烈,外来强手加大布局,国内主题公园如何突围? 上海用户提问:智能船舶发展行动计划发布,船舶制造企业的机 江苏用户提问:研发水平落后,低端产品比例大,医药企业如...
              • 人民同泰龙虎榜数据(12月13日)

                人民同泰龙虎榜数据(12月13日)
                图片来源于网络,如有侵权,请联系删除(原标题:人民同泰龙虎榜数据(12月13日)) 人民同泰(600829)今日涨停,全天换手率7.61%,成交额4.06亿元,振幅7.13%。龙虎榜数据显示,营业部席位合计净买入1087.74万元。 上交所公开信息显示,当日该股因日涨幅偏离值达12.05%上榜,营业部席位合计净买入1087.74万元。...
              • 1万亿元!安排完毕!

                1万亿元!安排完毕!
                图片来源于网络,如有侵权,请联系删除  据国家发展改革委消息,截至目前,用于“两重”建设的7000亿元超长期特别国债已分三批全部安排到项目,另安排3000亿元用于加力支持“两新”工作。至此,全年1万亿元超长期特别国债已全部安排完毕,正在加快推进实施。   国家发展改革委投资司有关负责人表示,近一段时间以来,各地区、各部门认真贯彻落实党中央、国务院决策部署,统筹推进“硬投资”和“软建设”,把项目建设和配套改革结合起来,集中力量支持办好一批国家重大战略实施和重点领域安全能力建设...