智谱发布新一代大模型,推出视频通话功能,下半年,开卷了。(附申请链接)


你好啊,我是雨飞,见字如面感谢阅读,期待我们下一次的相遇。


添加微信:1060687688   领取一份 AI 知识库

8 月 29 号,在 KDD 2024 的大会上,智谱偷偷的发布了自己最新一代的大模型,并且上线到了自家的应用开发平台,直接可以使用。如下图所示,这次更新主要包括语言理解、文生图、视频理解等多个领域


此外,GLM-4-Flash 的 API 已经免费开放给所有人,值得点赞和支持




简单总结下这次的更新,

1、语言大模型 GLM-4-Plus

2、文生图模型 CogView-3-Plus

3、图像、视频理解模型 GLM-4V-Plus

4、视频生成模型 CodeVideoX

5、APP 端上线视频通话功能

6、GLM-4-Flash API 免费开放,并提供微调服务


GLM-4-Plus


GLM-4-Plus 是智谱新推出的高智能旗舰级模型,目前已经上线到了 https://open.bigmodel.cn/,可以进行体验。



根据官方提供的指标数据,该模型在主流指标上基本和 GPT-4o 持平,达到了国际领先的水平。



如果是调用 API 的话,每一千 token 需要花费 0.05 元,总的来说,成本比之前有所下降,利好开发者



下面让我们亲自体验下这个模型,


这个经典的动物过河问题:“农夫需要把狼、羊和白菜都带过河,但每次只能带一样物品,而且狼和羊不能单独相处,羊和白菜也不能单独相处,问农夫该如何过河。”



回答正确。


关于之前非常火热的 9.9 和9.11 那个大的问题。实测,和提示词有关系,能正确理解,但是修改提示词后就理解不了,还是有待加强


这次回答没有问题。


这次回答,推理过程出现了比较明显的错误。




CodeView-3-Plus


在文生图模型上,智谱采用了 Transformer 结构代替了传统的 UNet 架构,通过高效图像微调,其生成效果接近MJ-V6、Flux 等模型。


关于文生图模型的原理可以看,浅析 Stable Diffusion 模型的底层原理



实际效果展示,



下面是可灵出图的效果。



从上面两个模型的效果来看,可灵展示的效果,对于摩天大楼、行人刻画的不是很好,而智谱的模型,人莫名的有点多了些。整体对比下来,智谱的画面更加舒服点。


英文提示词也可以较好的识别,不过文字功能有待加强。这个提示词,可灵直接提示异常了,不知道啥情况。




GLM-4V-Plus


 基于对 CogVLM 的理解和研究,智谱进一步推出了具备图像和视频理解功能的多模态模型GLM-4V-Plus。



直接测下,最近火热的黑神话悟空,模型很好的识别出了人物的着装风格,并且多轮对话进一步推理出了这个人是孙悟空,真的牛逼!



可惜的是,现在后台暂不支持视频的上传,期待后面更新这个功能吧。



清言-视频通话功能


这个功能也算是重头戏了,非常荣幸能在第一时间体验到这个功能。


路径在此,点击红圈所示的电话功能就可以使用。



会出现下面这个打电话的界面,就是这个头像好像是小飞象?不仅支持电话,还可支持视频录制。



我也录制了一段视频,大家可以体验下。实测非常惊艳,连化妆品的品牌,效果都识别出来了。



还没有申请上的,也可直接打开这个链接申请:

https://zhipu-ai.feishu.cn/share/base/form/shrcnqpIx9q5ILEFeT2cPNhyuSf


这应该是国内第一个类ChatGPT的视频通话功能。


不过,整体语音的实时性以及 TTS 相关的功能从体验来说,还是和真人的声音有所差距,而且没有办法唱歌。期待后面进一步发展。


写在最后,


智谱这家公司真的一直在默默做事,然后偷偷整了一波大的,低调的发布了自己的模型。虽然从整体实力来讲,可能不是最强的,但这种实打实的努力是会被开发者和用户看在眼里的。


我很早之前就是智谱 API 的使用者,他们不仅有自己的 SDK 还快速支持了 OpenAI、LangChain等开发框架,节省了我们很多开发的时间。


真的,好喜欢这家公司呀,希望有机会可以合作哈哈。



欢迎点赞,评论,留下你的名字,祝,心想事成?。


❤️AI智能体Coze提效❤️

AI 智能体|进阶教程,用 Coze 做一个多背景图的黑神话悟空换脸 Bot,赶紧去试试。

AI 智能体|用 Coze 做一个黑神话悟空的换脸 Bot,保姆级教程

AI 智能体|Coze 项目开营,解答三个新人最关注的问题

AI 智能体|手把手教你用Coze搭建一个知识库问答助理

手把手教你用Coze搭建一个属于自己幸运色的海报

手把手教你用Coze搭建一个星座运势智能体


Coze基础教程之定制天气查询助手

尝试用 Coze 复刻点赞 10w+ 的猫猫守护神写真!赶紧冲!

深度使用Coze之后,想告诉你几个容易踩坑的地方,赶紧了解了,越过去。

手把手教你1元钱购买扣子Coze收费前最后的套餐,可以再用一年,赶紧冲!

AI时代,新人必看的Coze入门教程之概念篇

❤️AI 工具❤️

AI 爱好者必看,AI发展的四个范式究竟指的是什么。弄懂了,就超越 99% 的人。

从第一性原理谈起,我们在使用和学习 AI 工具的时候,最应该看重那几点。

分享几个我一直在用的AI编程工具,免费且好用。

AI工具:体验了一下天工AI,我想这才是未来该有的样子。99%的需求都可以一键满足。

❤️AIGC咨询❤️

必看,给 AI 时代新人的11条建议

12条价值上千的AI咨询案例

❤️感谢阅读❤️


目前我致力于AI工具拆解、AI工作流提效相关的解决方案咨询、落地以及AIGC培训,如果有相关问题,可以加我备注「公众号」,进行免费咨询,并领取一份AI学习资料和常用AI工具集



部分资料截图:


雨飞陪你玩赚AI」,知识星球,欢迎来围观,交个朋友。



你的每一个点赞,都是鼓励我进步的勇气,点个在看,加油吧,一起成长!



声明:文中含有雨飞的广告


「雨飞同行」这是雨飞的介绍(第7版,交个朋友,限时送福利)

请使用浏览器的分享功能分享到微信等