我上篇才写了剪映的“小云雀”，这周就在媒体号里发现了另一款短片创作agent—— seko。这款agent是商汤科技的一款新的生成式AI产品。它于7月内测，于本月正式上线。它和“小云雀”在功能上有相同地方，也有不同的地方。相同在于它俩都有生成剧本策划、生成视频、生成配音和bgm的功能。区别在于，小云雀是一键同时生成上面的要素，而seko是分步生成，能对某块单独调整，让你对细节有更好的把控。这个我已经把seko的结果罗列好了，大家可跟着我一起来看看。看了之后，你心中便就有答案了。这是我看到别人的简短的提示词后，输入“三圣母与刘彦昌之子沉香，自述自己的一生。东方神话画风”，没有干预剧本策划、分镜视频的生成结果。
第一次用它，花费20分钟、不用技巧生成这样的视频，我觉得还是挺不错的。
都是统一的画风，没有画风乱入的情况。沉香有少年沉香和成年沉香两个形象，且两个形象在多图中没有出现形象混乱的情况。而且第一人称的旁白台词比较顺畅，没有出现问题。
要说不好的地方，那就是自动生成AI音乐很慢，半个小时过去了仍没有生成完成，我只有手动选择bgm。之前自动选择的旁白音色不符合形象，我手动调整了。
接下来给大家展示操作流程与注意事项。
这里需要提到它的整个工作流程：收到你的指令或脚本-进行剧本策划（同时生成bgm）-生成分镜图-分镜图生成视频/配音设置-导出完整视频。
一切的开始还得从首页着手。
复刻别人指令这点，和小云雀挺像，能直接做同款。
它开始处理后会自动跳转到这个剧本策划界面，进行结构性的策划，若你对它策划结果不满意，等它策划生成完毕后，可在对话框发出修改指令。
当你选择好视频比例，点击“生成分镜”按钮后，它就进入到分镜处理界面。
分镜界面的所有分镜生成的都是图片。若只是想快速看效果或者快速出简单短片，可直接点击右上角“一键转视频”。它就自动将所有图片变成视频了。
可以发现，“画面”有自动生成视频的过程，配音也自动填写了信息。若你对配音某些设置不满意，可以手动修改，应用于单个分镜或者所有分镜。
这里bgm可以选择样本音频，也可以自己上传。
所有配置完成后，点击“导出视频”即可。
添加出演主体的短片-盘古开天辟地
中国风平面插画，工艺简约版画，角色设计为皮影的效果质感，场景设计为青花瓷霁蓝和鎏金渲染为主的色调，对比度强烈，色彩浓郁，中国风细节纹饰和抽象风格的融合呈现，新中式国潮画风。
故事讲述了一段太古时期天地混沌，盘古孕育万八千年。盘古持斧劈开混沌，轻清为天，重浊为地。盘古顶天立地，每日长高一丈，又万八千年后力竭而亡。其身躯化为万物：眼睛成日月，头发为星辰，四肢为支撑天地的四方边际，血液化江河，肌肉变田土，气息成风云，造就世间生机。重点是展现盘古每部分肢体变化为万物的过程。变化后的形态均为中国风平面插画的皮影风格，且不带有盘古原本的形象特征。
10个分镜就足够。需要出现盘古的人物形象，也只有盘古这一个人物形象，前后的形象保持一致。意识流的构图和人物互动，不需要非常具体的场景设定，场景主要为氛围感。艺术感极强的色彩和画风。多个分镜之间的色彩和场景风格要统一。没有台词也没有旁白。
这个视频创作花费了我1天的工作时间，在所有视频中耗时最长。当有了对视频精细控制的欲望后，整个过程都变得漫长起来。
以下是我在生成这个短片过程中的血泪总结：
1.首页给指令的时候，分镜个数也需要写进去，否则之后它自己策划的分镜很多，要么需要你多花积分，要么只有耗时间重新生成。
2.它的语意理解能力差，分镜生图中，提示词要求绝对不能出现什么，它偏要出现什么。
3.生图时候，为节省时间，建议遇到不满意的图片时复制原图保存，然后用其他生图工具修改，再上传。
4.可以自己上传图片，但因没有自带提示词需要单独选择此分镜、单独生成视频，不然一键生成的视频可能不符合要求。即便重新生成，你不能在首次重新生成的视频之前输入提示词，只能等它生成后才能输入提示词第二次重新生成。
5.左栏镜头策划一定是先生成图，再输入提示词生成视频。
6.图不能从无到有，你的图是什么样子，你想让其中的元素从消失到出现是不行的。
踩过上面的坑，我的积分大大流失，时间也不够用了，所以我后面几个分镜只能复制上传之前生成的几组分镜图片。凑合用吧！
所以看到后面，若你不结合提示词看，你可能不太理解画面要表达的意思。而且它这个短片的分镜之间没有衔接，像ppt切换的效果（后面首尾帧会解决这个问题）。
虽然它的语意理解能力一度让我崩溃，让我写提示词都特别小心翼翼，但为了不磨灭大家对它的好奇心，我还是带图给大家讲一下选择主体、上传本地图片作为分镜和生成视频的操作。
首尾帧短片-书生遇见牡丹精
中国丝网版画风格、线条艺术、中国古代传说绘本、插图，以亚麻水墨色调为主。用这种风格去创建一个书生遇到牡丹花精的故事，把所有元素抽离出来，我需要做成首尾帧视频，他们之间有一些意识流的互动剧情。极其夸张的构图，艺术感和抽象感极强的色彩和画风。多个分镜之间的色彩和场景风格要统一。没有台词也没有旁白。只有12个分镜，书生和牡丹花精都是中国古风形象。书生和牡丹精的主体形象都需要中国水墨动画画风，其中牡丹精的形象是黑发，不要红发，穿着不要太暴露，魏晋南北朝时期的女装，飘逸又不失庄重。
做这个视频比盘古开天辟地轻松多了，主要避开了之前提到的“坑”。而且加上了首尾帧联动，视频总算连贯许多。这次AI音乐顺利生成，我也用上了。
但最后2帧还是成为了我的遗憾。
本来想让书生向前走一段距离再回头，牡丹精保持不动，结果seko就是听不懂，老是让牡丹精往回走。
本来想让书生回头看见牡丹精由人变成牡丹花瓣消失，但它生成的结果搞得好像牡丹精使劲勾引书生，书生不待见牡丹精一样。
当然它也有生图工具的通用bug——没有附加参考图的情况下，对人物着装不能保持一致。这里我没有上传出演主体，所以你多个分镜里见到的牡丹精，衣裙都不太一样。
之后大家有打扮精致的角色需要出演短片，就一定要上传主体图片。
达到目前这样的效果，消耗了我400多的积分（新人注册送350，每日登录送50，每邀请1人送100，每让1个分镜转普通视频就花费10积分，每让1个分镜转首尾帧视频，就花费20积分）。
积分不多，还有下一个功能要讲，且用且珍惜！我先奉上这个链接，大家互帮互助吧！
seko官网：https://seko.sensetime.com/explore
回到正题，下面给大家讲一下首尾帧的操作，这个让短片丝滑的功能，我觉得大家还是很愿意看的！
在每个分镜还是图片的时候，所有分镜都这么设置，就能得到丝滑的转场了！
口播短片-白素贞介绍杭州景点vlog
当我像《沉香自述》短片一样输入简单的提示词后，它的回答令我大跌眼镜。
台词干巴巴，不像热情介绍和交流的vlog博主，倒像上班态度消极或者对景点生疏又内向的工作人员。而且景点讲述顺序不符合逻辑。
于是我转而使用了“旁白成片”功能，也就是上传完整脚本让它生成短片。
然后在不断调整中得出了如下心得：
1.口型和首尾帧不能同时使用。先对口型就不能再用首尾帧生成视频了；先用首尾帧生成视频，再对口型会导致只能用首帧生成视频。
2.对口型模式不能全部应用于分镜，画外音可以。台词不一定出现在对应的配音模式里（比如适合对口型的台词出现在了“画外音”模式里），一定要先保证配音的台词在“对口型模式”下，再来生成视频。
3.只能对单人使用对口型模式，若想要2人及以上同时开口说话，就不能实现了。
但由于积分不够，无法生成完整视频，大家将就看吧
！
最后奉上设置配音的操作流程：
写在最后
测试下来，seko优点和缺点都很明显。
优点比如它能让用户通过参数设置精准把控视频，让用户自身设计台词更方便，能够让运镜丝滑流畅。它是国内为数不多的视频agent中，能分享、登录白嫖积分的产品。
缺点比如它的语言理解能力很差，你让它不出现什么，它偏要出现什么。它响应时间慢，追求短片精细的人使用它所产生的耗时可能和其他非agent相差无几。它的模板bgm很少，若你不想一直等为短片内容量身打造的AI音乐生成，那你只能自己上传音乐。
相比于“小云雀”agent，seko目前更适合生成场景多、画面精美、运镜丝滑流畅的短片，也更适合时间充裕、短片生成量小或愿意氪金的用户群体。
而“小云雀”agent，目前就更适合快速完成创意、对短片场景和人物刻画要求较低、短片生成量适中或愿意付费的用户群体。
你用过这两款短片创作agent吗？对它俩有什么看法呢？欢迎在评论区留言一起讨论~
若还想了解更多的AI产品，可登录如下AI导航网站，可选择自己对应的岗位看到适合自己用的AI产品哦，还可投稿赚稿费！
https://www.chooseai.io/withLogin
（我们后台有智能体，可直接对话，就能查工具教程或者测评）
AI 速览
！
