北京青年报
可直接为音视频做思维导图 阿里大模型产品“通义听悟”迎来多项升级
北京青年报客户端 2024-03-19 18:34

3月19日,阿里大模型产品“通义听悟”发布多项新功能。音视频问答助手“小悟”上线,在业界首次实现单记录、跨记录、多语言自由问,支持对单个最长6小时、一次性上百条音视频的内容理解问答,用户可对超长音视频随心提问,让AI 总结任意知识点。此外,针对学习科研场景对AI工具的强烈需求,通义听悟推出“高校公益计划”,向所有中国大陆高校师生直接赠送价值数千元的500小时音视频转写时长。

音视频承载了密集的信息内容,但因涉及多模态理解、自然语言处理、搜索等多项复杂技术,长期以来内容查找难、回顾难、提炼难。通义听悟接入通义千问大模型,融合了十多项AI功能,包括转写、翻译、角色分离、全文摘要、章节速览、发言总结、PPT提取等,并支持标重点、记笔记,被许多用户称为“宝藏AI工具”。

阿里通义听悟产品负责人杨帆介绍,通义听悟为这一需求而生。“作为一款工作学习AI助手,通义听悟希望让高知识附加值的音视频被轻松阅读、整理和分享。”

通义听悟本次升级上新了六大功能点。最重磅的是音视频问答助手“小悟”,关键信息直接“问”出来。小悟通过多语言Query处理、长篇章文本理解、指令演化框架优化及检索增强生成算法,在业内首次实现对超长音视频的单记录、跨记录、多语言自由问答,支持内容问答的音视频时长和文件数均突破业界上限。

用户不仅可在单一记录页呼唤小悟,对最高6小时、6G大小的音视频提问任何相关话题,或直接小悟要求整理金句、梳理结论、写会议纪要;更可在首页针对用户所有记录提问,支持一次性扫描理解上百条音视频内容;也可花式对英文视频用中文提问,小悟将直接给出中文回答,省去翻译。作为一个“懂你”的AI,小悟还会智能推荐问题。

针对用户需求,通义听悟还上线了一键AI改写、思维导图生成等新能力。例如,一键AI改写,将口语转为书面表达,尤其适合整理采访;思维导图自动生成,最多支持五级xmind脑图,适合播客摘要。

产品细节体验也进一步升级,包括笔记支持一键插入视频时间戳及截图、音视频文件语种自动识别等。

学生和科研群体对AI新工具有普遍需求,但目前音视频AI转写工具普遍收费,或仅提供如每月1小时的少量免费时长。通义听悟推出“高校公益计划”,推动AI算力普惠。所有中国大陆高校师生通过后缀edu.cn的教育邮箱进行认证后,均可直接获赠500小时转写时长,存储空间从20G拓展至200G。按目前市面上语音厂商9.9元每小时的折扣价,这一教育福利价值数千元。

成都一位管理学博士生蔡同学在社交媒体上写道,“通义听悟绝对是最强科研神器”,她向身边几乎所有亲朋好友推荐了这款产品。通义听悟发布才9个月,她的使用时长已近7000小时,平均每天转写20小时以上,包括分析网络视频进行学术研究,以及日常学习工作随时使用,这款软件已成为她沉淀知识和科研成果的重要平台。

数据显示,去年6月发布以来,通义听悟累计已有上百万用户,包括学生、老师、白领、记者、律师、金融分析师等群体,活跃用户日均转写音视频3次以上,平台每天处理字符数约20亿字。

文/北京青年报记者 温婧
编辑/田野

相关阅读
哈啰AI交易机器人顺风车判责准确率超87%
北京青年报客户端 2024-09-20
记者观察:大模型逐鹿下半场,超级应用仍未“敲门”
中新经纬 2024-07-06
2024全球数字经济大会|71款大模型运行到底咋样 ?你想了解的人工智能都在这里
北京青年报客户端 2024-07-05
钉钉发布全新AI搜索,同时接入六家大模型
北京青年报客户端 2024-06-26
智源评测了100多个大模型:头部模型接近国际一流 但还存在“偏科”
第一财经 2024-05-21
阿里云发布通义千问2.5,APP免费开放通义全栈能力
北京青年报客户端 2024-05-09
启动调查!五月天被指假唱,演唱会音视频已提交稽查部门
每日经济新闻 2023-12-04
AI合成郭德纲、于谦外语说相声,技术能否真正改变文艺创作传播方式?
上观新闻 2023-11-02
最新评论