AI热点 7小时前 109 阅读 0 评论

ListenHub 视频绘本,把每个人的想象都变成视频故事

作者头像
AI中国

AI技术专栏作家 | 发布了 246 篇文章


缘起


我们为什么要做视频绘本呢?它源于一位父亲小小的愿望。


ListenHub 的 CTO Kris 是一名新手爸爸,他每天在家听到孩子说的最多的三个字就是:讲故事


孩子永远有数不清的故事想听,同一个故事讲了几十遍,孩子腻了,他也腻了。


市面上真正适合孩子的绘本故事并不多,他开始自己编故事,但想出好点子,编出连贯的故事,还要对孩子有教育意义,真的挺难,更别说为故事配上有趣的画面了。


他想:ListenHub 擅长内容生成,可以用我们这个产品完成这个任务吗?如果能把孩子喜欢的工程车,小动物都变成一个个有趣的故事,还能寓教于乐,那该多好?



他在跟团队讲这个想法的时候,我们突然意识到


其实每个人心中都有想讲述的故事。


无论是为孩子编织梦境,还是向大众解释复杂概念。


在 FlowSpeech 让 AI 拥有了“人味儿”的声音之后,我们决定更进一步,让 ListenHub 成为一个集编剧、画师、配音演员于一身的全能故事家。


从一个想法到一本图文并茂、声音动人的故事绘本,这中间的步骤有很多。


我们很担心产品做出来太复杂,让普通用户无从上手。


但是在看到 Nano Banana 和 Seedream 4.0 这样强大的图像模型发布之后,我们终于看到了一键生成视频绘本的曙光。


我们终于可以,把每个人的想象都变成绘本故事。


这就是 ListenHub 视频绘本,现已上线,限时免费体验地址 https://listenhub.ai


ListenHub 视频绘本是什么?


要了解 ListenHub 的视频绘本,首先不得不提一下什么是绘本。


让我们直接用视频绘本来介绍一下绘本是什么:



而 ListenHub 的视频绘本,就是让 AI 同时成为绘本的编剧、画师、配音演员。


绘本制作的全流程,一次统统搞定。


你只需要输入一个故事的想法,选填一张参考图片,ListenHub 就能为你生成一本声情并茂的故事绘本。


ListenHub 的视频绘本功能的三个主要特性:


  • 一致性的画面:无论是角色形象还是美术风格,都能在整个故事中保持高度统一。你甚至可以上传自己的图片作为参考,让 AI 画出你想要的主角。
  • 沉浸感的声音:自动集成 FlowSpeech 的口语配音,用最自然、最富感情的“人味儿”声音,将故事娓娓道来,让你声临其境。
  • 个性化的创作:从角色名称、外观,到美术风格、故事情节,一切都由你定义。你的故事,你来做主。


从一个想法到一个故事绘本,全程只需要一分钟。


它还可以一键导出视频让你方便地分享到抖音、视频号、小红书、B站等平台。


让你的想象,被更多人看见。


接下来,让我们来看一些我们团队内部制作的视频绘本:


绘本1:把孩子的玩具做成视频绘本


视频绘本功能上线后,Kris 就开始用它给家里2周岁的小孩子制作视频绘本。


这个视频是他把家里小孩子的挖掘机玩具做成了绘本故事。



音色选择:故事精灵。


提示词:给我家两周岁的男孩写一个挖掘机工程车的故事


哪个小男孩能抵抗挖掘机的故事呢


何况还是他爸亲手为他制作的(从 coding 到 prompting)。


他家娃把这个绘本故事听了五遍还要继续听。


绘本2:当皮卡丘闯入马里奥的幻想世界


我们经常幻想,不同世界的角色相遇会擦出怎样的火花,比如马里奥和皮卡丘相遇会成为发生什么故事。


ListenHub 视频绘本可以让这个幻想成真。



音色选择:故事精灵。


提示词:“写一个关于皮卡丘智取马里奥的短篇故事。在故事中,皮卡丘非常聪明,而马里奥则决心抓住他。马里奥使用他经典的招式,但皮卡丘每次都机灵地躲避并戏弄他。故事应该有一个有趣的结尾,让他们成为朋友。”


ListenHub 的视频绘本,不仅还原了两个经典形象,并让他们在整个故事中保持了一致性。


绘本3:用绘本学英语、学知识


ListenHub 的视频绘本,不仅可以用来听,还可以用来和小朋友一起读故事。


不仅支持中文,还支持英文,可以通过绘本故事让小朋友学习英语。



我们在网页上精心制作了翻页效果,拖动书籍的四个角,就可以跟随鼠标翻页,放佛真实书籍。


在网页上播放故事时,点击翻页,就会自动播放当页的内容。


在底部的控制条,可以随时暂停,让家长带读,小朋友跟读,享受寓教于乐的亲子时光。


语言选择:英文


音色选择:Storyteller Eleanor


参考图:前置使用 Nano Banana 制作,可进一步增强可控性。



提示词:请为我写一个儿童睡前故事。主角是一个名叫莉莉的小女孩,她非常好奇且勇敢。一天,她被吸入了一个旧的电子游戏主机中,进入了一个由像素和数据流构成的虚拟世界。在这个神奇的世界里,她克服了一些小挑战,最终遇到了正在数字森林深处探索的莉娜贝尔。莉娜贝尔用她的智慧帮助莉莉找到回家的路。这个故事应该温馨感人、充满想象力,并且有生动的视觉描写。


绘本的无限可能


听故事,是写在人类基因里的爱好。


绘本作为一种强大的叙事媒介,它的场景远不止于儿童故事。


你可以用它来演绎那些成人世界的经典、浪漫的情怀、疯狂的幻想。


比如,用惊艳的中国剪纸艺术,重现电影《让子弹飞》的传奇开场。


ListenHub 视频绘本,支持从角色到风格的完全自定义。


期待你能发现视频绘本的更多玩法!



提示词:用中国剪纸艺术风格,呈现电影《让子弹飞》的经典开场。画面核心是张麻子骑在马上,带领队伍劫持“马拉火车“。必须强调动态感:飞驰的马匹,张麻子坚毅的表情,以及马拉着蒸汽火车的荒诞场面。整个构图要像一幅精巧的纸雕艺术品,主体使用大胆的黑色剪影,背景是醒目的正红色。所有元素,从火车的烟雾到马匹的鬃毛,都要有精细的镂空图案和边缘细节。


ListenHub 视频绘本适合谁用?


ListenHub 视频绘本具备强大的故事生成能力和绘本制作能力,特别适合这些人群:


  1. 孩子家长:为孩子们定制专属的、寓教于乐的睡前故事或科普绘本,激发他们的想象力和学习兴趣。还可以把家人、宠物、玩具的图片作为参考图,制作独一无二的故事集。
  2. 教育工作者:将枯燥的课本知识、复杂的科学原理,转化为生动有趣的图文故事。无论是历史事件还是自然科学,都能成为吸引学生的课堂素材,让教学事半功倍。
  3. 自媒体创作者:快速将创意、段子、脚本转化为独特的“故事绘本”视频,在社交媒体上获得海量关注。


简单来说,凡是需要讲故事的场景,就可以用到 ListenHub 视频绘本。


有了 ListenHub,你就是真正的故事大王。



如何使用 ListenHub 视频绘本?


使用 ListenHub 制作视频绘本非常简单,只需要三步:


  1. 在电脑浏览器中访问 http://Listenhub.ai,在功能列表中找到【视频绘本】
  2. 在输入框写下你要讲述的故事,从角色名称、外观,到美术风格、故事情节,一切都可以自定义
  3. 如果想用特定角色作故事主角,可以上传一张图片作为故事的参考图,完成之后,点击【创作】按钮开始创作



就这样,一分钟之后,一个绘本就做好了。


如果需要导出视频,可在右上角点击【生成视频】,等待一分钟后就能下载了。


目前 ListenHub 视频绘本正在限时免费体验中。


使用浏览器访问 https://listenhub.ai 即刻体验!


免费计划的用户,每天可制作一个视频绘本。


付费计划的用户,每天可制作五个视频绘本。


限免结束后,我们将解除数量限制,并改为按实际模型的消耗量进行计费。


写在最后


大约在7万年前,人类经历了一场认知革命。


让我们能够使用一种不同于其他动物的全新的语言。


这种语言的独特之处不在于描述客观事物,而在于谈论不存在的事物。


是的,我们开始创造和相信虚构的故事。


神话、宗教、国家、民族、人权、法律、道德、金钱、公司。


这些都是虚构的故事。


但虚构的故事却实际地改变了人类的社会。


故事,让我们置身于千姿百态的想象世界。


故事,让我们能够跨越语言和文化的障碍。


故事,让我们凝聚为意识共同体一起协作。



ListenHub 最早上线的功能是 AI 播客,通过两人的自然对话来讲故事。


后来是 FlowSpeech,用活人感的语音,帮你把任何文字都讲出来。


现在的  视频绘本,让你用绘本的方式来给孩子讲故事。


那未来 ListenHub 要做什么?


让我们忘掉那些抽象的概念,什么 Agent,多模态,垂直通用的。


我们想做的,就是用最简单的创作工具,把你的想象变成独一无二的故事。


marswave 团队


敬上


参考资料


关于绘本的百科:https://baike.baidu.com/item/绘本/6863846


《故事:材质·结构·风格和银幕剧作的原理》

https://book.douban.com/subject/25976544/


ListenHub 视频绘本官网

https://listenhub.ai/?tab=storybook


ListenHub API 

https://listenhub.ai/settings/api-keys



文章来自于微信公众号 “有机大橘子”,作者 “有机大橘子”

作者头像

AI前线

专注人工智能前沿技术报道,深入解析AI发展趋势与应用场景

246篇文章 1.2M阅读 56.3k粉丝

评论 (128)

用户头像

AI爱好者

2小时前

这个更新太令人期待了!视频分析功能将极大扩展AI的应用场景,特别是在教育和内容创作领域。

用户头像

开发者小明

昨天

有没有人测试过新的API响应速度?我们正在开发一个实时视频分析应用,非常关注性能表现。

作者头像

AI前线 作者

12小时前

我们测试的平均响应时间在300ms左右,比上一代快了很多,适合实时应用场景。

用户头像

科技观察家

3天前

GPT-4的视频处理能力已经接近专业级水平,这可能会对内容审核、视频编辑等行业产生颠覆性影响。期待看到更多创新应用!