缘起
我们为什么要做视频绘本呢?它源于一位父亲小小的愿望。
ListenHub 的 CTO Kris 是一名新手爸爸,他每天在家听到孩子说的最多的三个字就是:讲故事。
孩子永远有数不清的故事想听,同一个故事讲了几十遍,孩子腻了,他也腻了。
市面上真正适合孩子的绘本故事并不多,他开始自己编故事,但想出好点子,编出连贯的故事,还要对孩子有教育意义,真的挺难,更别说为故事配上有趣的画面了。
他想:ListenHub 擅长内容生成,可以用我们这个产品完成这个任务吗?如果能把孩子喜欢的工程车,小动物都变成一个个有趣的故事,还能寓教于乐,那该多好?
他在跟团队讲这个想法的时候,我们突然意识到
其实每个人心中都有想讲述的故事。
无论是为孩子编织梦境,还是向大众解释复杂概念。
在 FlowSpeech 让 AI 拥有了“人味儿”的声音之后,我们决定更进一步,让 ListenHub 成为一个集编剧、画师、配音演员于一身的全能故事家。
从一个想法到一本图文并茂、声音动人的故事绘本,这中间的步骤有很多。
我们很担心产品做出来太复杂,让普通用户无从上手。
但是在看到 Nano Banana 和 Seedream 4.0 这样强大的图像模型发布之后,我们终于看到了一键生成视频绘本的曙光。
我们终于可以,把每个人的想象都变成绘本故事。
这就是 ListenHub 视频绘本,现已上线,限时免费体验地址 https://listenhub.ai
ListenHub 视频绘本是什么?
要了解 ListenHub 的视频绘本,首先不得不提一下什么是绘本。
让我们直接用视频绘本来介绍一下绘本是什么:
而 ListenHub 的视频绘本,就是让 AI 同时成为绘本的编剧、画师、配音演员。
绘本制作的全流程,一次统统搞定。
你只需要输入一个故事的想法,选填一张参考图片,ListenHub 就能为你生成一本声情并茂的故事绘本。
ListenHub 的视频绘本功能的三个主要特性:
- 一致性的画面:无论是角色形象还是美术风格,都能在整个故事中保持高度统一。你甚至可以上传自己的图片作为参考,让 AI 画出你想要的主角。
- 沉浸感的声音:自动集成 FlowSpeech 的口语配音,用最自然、最富感情的“人味儿”声音,将故事娓娓道来,让你声临其境。
- 个性化的创作:从角色名称、外观,到美术风格、故事情节,一切都由你定义。你的故事,你来做主。
从一个想法到一个故事绘本,全程只需要一分钟。
它还可以一键导出视频,让你方便地分享到抖音、视频号、小红书、B站等平台。
让你的想象,被更多人看见。
接下来,让我们来看一些我们团队内部制作的视频绘本:
绘本1:把孩子的玩具做成视频绘本
视频绘本功能上线后,Kris 就开始用它给家里2周岁的小孩子制作视频绘本。
这个视频是他把家里小孩子的挖掘机玩具做成了绘本故事。
音色选择:故事精灵。
提示词:给我家两周岁的男孩写一个挖掘机工程车的故事
哪个小男孩能抵抗挖掘机的故事呢?
何况还是他爸亲手为他制作的(从 coding 到 prompting)。
他家娃把这个绘本故事听了五遍还要继续听。
绘本2:当皮卡丘闯入马里奥的幻想世界
我们经常幻想,不同世界的角色相遇会擦出怎样的火花,比如马里奥和皮卡丘相遇会成为发生什么故事。
ListenHub 视频绘本可以让这个幻想成真。
音色选择:故事精灵。
提示词:“写一个关于皮卡丘智取马里奥的短篇故事。在故事中,皮卡丘非常聪明,而马里奥则决心抓住他。马里奥使用他经典的招式,但皮卡丘每次都机灵地躲避并戏弄他。故事应该有一个有趣的结尾,让他们成为朋友。”
ListenHub 的视频绘本,不仅还原了两个经典形象,并让他们在整个故事中保持了一致性。
绘本3:用绘本学英语、学知识
ListenHub 的视频绘本,不仅可以用来听,还可以用来和小朋友一起读故事。
不仅支持中文,还支持英文,可以通过绘本故事让小朋友学习英语。
我们在网页上精心制作了翻页效果,拖动书籍的四个角,就可以跟随鼠标翻页,放佛真实书籍。
在网页上播放故事时,点击翻页,就会自动播放当页的内容。
在底部的控制条,可以随时暂停,让家长带读,小朋友跟读,享受寓教于乐的亲子时光。
语言选择:英文
音色选择:Storyteller Eleanor
参考图:前置使用 Nano Banana 制作,可进一步增强可控性。
提示词:请为我写一个儿童睡前故事。主角是一个名叫莉莉的小女孩,她非常好奇且勇敢。一天,她被吸入了一个旧的电子游戏主机中,进入了一个由像素和数据流构成的虚拟世界。在这个神奇的世界里,她克服了一些小挑战,最终遇到了正在数字森林深处探索的莉娜贝尔。莉娜贝尔用她的智慧帮助莉莉找到回家的路。这个故事应该温馨感人、充满想象力,并且有生动的视觉描写。
绘本的无限可能
听故事,是写在人类基因里的爱好。
绘本作为一种强大的叙事媒介,它的场景远不止于儿童故事。
你可以用它来演绎那些成人世界的经典、浪漫的情怀、疯狂的幻想。
比如,用惊艳的中国剪纸艺术,重现电影《让子弹飞》的传奇开场。
ListenHub 视频绘本,支持从角色到风格的完全自定义。
期待你能发现视频绘本的更多玩法!
提示词:用中国剪纸艺术风格,呈现电影《让子弹飞》的经典开场。画面核心是张麻子骑在马上,带领队伍劫持“马拉火车“。必须强调动态感:飞驰的马匹,张麻子坚毅的表情,以及马拉着蒸汽火车的荒诞场面。整个构图要像一幅精巧的纸雕艺术品,主体使用大胆的黑色剪影,背景是醒目的正红色。所有元素,从火车的烟雾到马匹的鬃毛,都要有精细的镂空图案和边缘细节。
ListenHub 视频绘本适合谁用?
ListenHub 视频绘本具备强大的故事生成能力和绘本制作能力,特别适合这些人群:
- 孩子家长:为孩子们定制专属的、寓教于乐的睡前故事或科普绘本,激发他们的想象力和学习兴趣。还可以把家人、宠物、玩具的图片作为参考图,制作独一无二的故事集。
- 教育工作者:将枯燥的课本知识、复杂的科学原理,转化为生动有趣的图文故事。无论是历史事件还是自然科学,都能成为吸引学生的课堂素材,让教学事半功倍。
- 自媒体创作者:快速将创意、段子、脚本转化为独特的“故事绘本”视频,在社交媒体上获得海量关注。
简单来说,凡是需要讲故事的场景,就可以用到 ListenHub 视频绘本。
有了 ListenHub,你就是真正的故事大王。
如何使用 ListenHub 视频绘本?
使用 ListenHub 制作视频绘本非常简单,只需要三步:
- 在电脑浏览器中访问 http://Listenhub.ai,在功能列表中找到【视频绘本】
- 在输入框写下你要讲述的故事,从角色名称、外观,到美术风格、故事情节,一切都可以自定义
- 如果想用特定角色作故事主角,可以上传一张图片作为故事的参考图,完成之后,点击【创作】按钮开始创作
就这样,一分钟之后,一个绘本就做好了。
如果需要导出视频,可在右上角点击【生成视频】,等待一分钟后就能下载了。
目前 ListenHub 视频绘本正在限时免费体验中。
使用浏览器访问 https://listenhub.ai 即刻体验!
免费计划的用户,每天可制作一个视频绘本。
付费计划的用户,每天可制作五个视频绘本。
限免结束后,我们将解除数量限制,并改为按实际模型的消耗量进行计费。
写在最后
大约在7万年前,人类经历了一场认知革命。
让我们能够使用一种不同于其他动物的全新的语言。
这种语言的独特之处不在于描述客观事物,而在于谈论不存在的事物。
是的,我们开始创造和相信虚构的故事。
神话、宗教、国家、民族、人权、法律、道德、金钱、公司。
这些都是虚构的故事。
但虚构的故事却实际地改变了人类的社会。
故事,让我们置身于千姿百态的想象世界。
故事,让我们能够跨越语言和文化的障碍。
故事,让我们凝聚为意识共同体一起协作。
ListenHub 最早上线的功能是 AI 播客,通过两人的自然对话来讲故事。
后来是 FlowSpeech,用活人感的语音,帮你把任何文字都讲出来。
现在的 视频绘本,让你用绘本的方式来给孩子讲故事。
那未来 ListenHub 要做什么?
让我们忘掉那些抽象的概念,什么 Agent,多模态,垂直通用的。
我们想做的,就是用最简单的创作工具,把你的想象变成独一无二的故事。
marswave 团队
敬上
参考资料
关于绘本的百科:https://baike.baidu.com/item/绘本/6863846
《故事:材质·结构·风格和银幕剧作的原理》
https://book.douban.com/subject/25976544/
ListenHub 视频绘本官网
https://listenhub.ai/?tab=storybook
ListenHub API
https://listenhub.ai/settings/api-keys
文章来自于微信公众号 “有机大橘子”,作者 “有机大橘子”