2025-06-10 12:15:58 | 来源: AICG工具箱
6月4日报道丨6月1日,阿里云举行AI产品应用发布会,宣布通义大模型进展,聚焦音视频内容的AI新品“通义听悟”正式上线,成为国内首个针对音频视频内容转制文本的大模型应用产品。
“通义听悟”接入了“通义千问”大模型的理解与摘要能力,可成为用户工作学习中的得力AI助手,帮助随时随地高效完成对音视频内容的转写、检索、摘要和整理,比如用大模型自动做笔记、整理访谈、提取PPT等。公测期间,用户可领取100小时以上免费音视频转写文字的时长。
“换一种方式,让音视频可以被轻松阅读、整理和分享。”阿里云CTO周靖人介绍,“通义听悟”是一款工作与学习的AI助手,它瞄准具有高知识附加值的音视频内容场景,比如开会、上课、访谈、培训、面试、直播、看视频、听播客等,能通过大模型等最新AI技术快速提炼和沉淀知识。
根据现场演示,听悟融合了10多项AI服务功能,可以全面提升知识从音视频向图文形态转化的效率。除了“听力好”,能高准确度生成会议记录、区分不同发言人,这个AI助手“悟性也极高”,大模型可以一秒给音视频划分章节并形成摘要、总结全文及每个发言人观点、整理关注重点和待办事项。大模型一键提取PPT、针对多个音视频内容向AI提问、概括特定段落等功能近期也将上线。
“通义听悟”可自动为音视频生成全文摘要、章节概括、发言总结。针对一些细分场景,听悟还设置了不少“宝藏功能”:打开阿里云开发的“通义听悟”Chrome插件,外语学习者和听障人士可以借助双语悬浮字幕条随时随地看无字幕视频,日程冲突时,听悟还可成为职场人士的“开会替身”,在静音情况下入会AI可代为记录会议、整理要点;转写结果可下载为字幕文件,方便新媒体从业者视频后期制作;听悟梳理的问答回顾可以让记者、分析师、律师、HR等群体整理访谈更高效。
值得一提的是,“通义听悟”的另一显著优势是,听悟与阿里云盘打通,支持一键导入阿里云盘音视频文件,一键就能转写云盘上的音视频内容,公测期间注册的听悟用户后续还将获得更大的阿里云盘存储空间,在云盘内在线播放视频时也可自动出字幕。
周靖人介绍,听悟集成了阿里最先进的语音和语言技术。其内置阿里新一代“工业级语音识别模型”,识别准确率在多个权威中文数据集上名列第一;融合自研语音语义多模态说话人算法,能对10人以上说话场景进行角**分;接入“通义千问”大模型后,能够对上万字的音视频内容进行摘要总结,事实准确与要点完备性国内领先,支持跨多音视频内容的精准问答理解。
继史无前例的大降价后,阿里云再次送出人人都能用上的AI“大礼包”。此前国内语音厂商AI转写定价达19.8元每小时,而听悟用户可通过每日登陆等多种任务领取免费转写时长。公测期间,阿里云官方微博、微信及各大平台社区还会发放大量20小时的一次性转写口令码,用户获得的福利权益可累积叠加,免费时长可叠加高达100小时以上,价值上千元的产品。
据了解,除了个人版本外,阿里还准备了企业应用。此前,“通义千问”企业版已在阿里集团内部被广泛使用,帮助减少了大量会议记录和整理的工作,受到好评。同时,“通义千问”的能力也可嵌进各类音视频平台,形成实时字幕、智能摘要等,比如钉钉APP的“钉闪记”背后其实就集成了“通义听悟”的能力。据悉,未来阿里还将在夸克APP、阿里云盘等端口提供相关服务。
热门榜单
星火绘镜
常用AIG3D.AI
常用AIInteriorAI,ai室内设计
常用AIChefGPT,根据现有食材推荐食谱
常用AIAnimeAI
常用AIGemsouls,和虚拟人物交友
常用AIOpus,生成游戏、电影、故事
常用AIAskNow,向名人提问
常用AIPodcast,人工智能生成的播客
常用AI热门资讯
谷歌Gemini文生图翻大车:生成人像过度追求种族多元性,涉嫌“歧视白人”,这可能是马斯克被“黑”得最惨的一次
04-26TensorRT插件安装_TensorRT插件怎么提升SD生图速度_stable diffusion插件
05-08神州问学深入大模型微调技术研究,小参数的模型在特定任务场景中表现超越大模型
01-31DeepL推出新一代翻译编辑大模型:翻译质量超越竞争对手谷歌微软ChatGPT
02-13落地发绿卡?微软加速AI团队撤出中国,加码布局投资东南亚市场
03-27微软Build 2024发布Copilot多项服务升级丨通义主力大模型API定价暴降97%丨文心大模型两大主力模型API免费
03-27vivo发布行业首个视障人士辅助多模态大模型,AI智能识别物体,为视障人士开启智能“电子眼睛”
03-28三星新一代旗舰手机Galaxy S24遭到沃尔玛「意外」提前上架:主打AI翻译功能,搭载高通骁龙8 Gen 3处理器
05-03开源版Gemini诞生_全能多模态模型Emu2登热榜_最新Emu2
05-03「微信AI」功能终于要来了:腾讯官宣2024微信公开课PRO定于1月11日开讲,还携手OPPO战略合作
05-03