每个人都能成为多模态梦想的导演，就像《盗梦空间》中的建筑师一样。
一、Pika是什么？
Pika是热门的人工智能初创公司Pika Labs推出的AI视频生成和编辑工具，该工具可以将任何创意转化为视频，用户只需输入文字或图像，即可快速生成3D动画、动漫、卡通、电影等风格的视频。该AI视频生成工具最早于2023年4月下旬推出测试版，累计已经超过50万名早期用户使用，每周都在生成数百万个视频。不过，目前Pika还在进一步完善中，实际使用来看离大规模投入到真正的生产环境中还有一定的距离。
最近的 AI 圈的饭局上，大家聊到多模态 AI ，往往都会提到一家硅谷的初创公司—— Pika Labs。
公司初创团队只有 4 个人，创始人兼 CEO 郭文景有“女学霸”“斯坦福退学创业”“上市公司创始人女儿”等个人标签； Pika 三轮融资已筹款 5500 万美元，估值在 2-3 亿美元之间；投资者包括 Quora 创始人兼CEO Adam D’angelo 、 OpenAI 科学家 Andrej Karpathy、Hugging Face 联合创始人兼CEO Clem Delangue、YC 合伙人 Daniel Gross 等人。
联合创始人兼 CTO Chenlin Meng 是斯坦福大学计算机科学博士生，对生成 AI 的广泛应用很感兴趣，导师是 Stefano Ermon。
二、Pika的网站地址：
1、官方网站：
2、Discord频道：
https://discord.com/invite/pika
国内IP无法正常登录！！请自备魔法上网/科学上网工具。
三、Pika的主要功能：
1、文本转视频 Text-to-video：
只需输入几行文本或上传图像，即可利用AI创建简短的高质量视频。
2、图片转视频 Image-to-video：
让Pika将您最喜欢的照片、绘画和图画变成身临其境的动人场景。
3、视频转视频 Video-to-video：
将现有视频转换为不同的风格，包括不同的角色和对象，同时保持视频的结构
4、视频修改区域 Modify Region：
只需说出您想要更改的内容，Pika 就会将其无缝地融入到框架中。
5、唇形同步 Lip Sync：
给你的角色一个声音。输入你想听的话，皮卡就会把你的话放进他们的嘴里。
6、AI声音特效 Sound Effects：
让气氛更热烈。要么提示你想要的声音，要么让皮卡自动生成。
7、视频画面比例扩展 Expand Canvas：
Pika从来不会把你限制在框架之内。只需一个简单的命令即可创建视频周围的世界。扩展视频的画布或宽高比，比如从9:16竖屏智能转换为16:9横屏，AI模型将预测超出原始视频边界的内容
四、Pika的主要特色：
- 快速生成：PIKA可以在一秒钟内生成动画版的人物形象，大大提高了视频制作的效率。用户只需输入相关信息，即可快速获得所需的视频内容。
- 多样化风格：PIKA支持生成各种风格的视频，包括3D视频、卡通风格、写实风格等。用户可以根据需求选择适合的风格，丰富视频的表现形式。
- 高质量输出：通过先进的AI模型和技术，PIKA可以生成高质量的视频内容，细节丰富、色彩鲜艳，给观众带来更好的视觉体验。
- 灵活编辑：PIKA提供了丰富的编辑功能，用户可以对生成的视频进行剪辑、调整音效、添加字幕等操作，打造出个性化的视频作品。
- 简单易用：PIKA具有简洁直观的操作界面，用户可以轻松上手并快速掌握使用方法。无需专业的视频制作技能，即可创作出令人惊艳的视频作品。
五、Pika的适用人群：
- 个人消费者：即使完全不懂任何视频制作的人，也可以轻松使用AI创作和编辑视频
- 短视频创作者：快速生成病毒性传播的短视频，在TikTok上带有#pikalabs标签的短视频累计超过3000万次观看
- 电影专业人员：AI将剧本生成分镜初稿，激发摄影灵感并辅助后期电影视频编辑
六、Pika的应用前景：
- 创意产业：PIKA可以为广告、媒体、影视等创意产业提供强大的支持。通过快速生成各种风格的视频内容，帮助创作者实现更多的创意和想法。
- 教育领域：教师可以利用PIKA制作生动有趣的教学视频，提高学生的学习兴趣和效果。同时，学生也可以利用这一工具进行创作和展示。
- 社交媒体：公众号博主可以使用PIKA制作精美的视频内容，吸引更多的关注和粉丝。通过丰富多样的视频形式，提升公众号的影响力和传播效果。
- 个人创作：个人用户或自媒体创业者可以利用PIKA发挥创造力，制作个性化的视频作品，记录生活、分享经验或者表达观点。
七、Pika的产品价格：
1、按月支付：
- BASIC套餐：免费，250积分初始，每月30积分，唇形同步视频生成2个积分，提供视频下载，有Pika水印；
- BASIC套餐：10美元/月，每月700积分，免费生成唇形同步视频，提供视频下载，高分辨率，无Pika水印，可延长视频长度；
- UNLIMITED套餐：35美元/月，每月2000积分，无限快速生成时间，免费生成唇形同步视频，提供视频下载，高分辨率，无Pika水印，可延长视频长度；
- PRO套餐：70美元/月，每月无限积分，无限快速生成时间，免费生成唇形同步视频，提供视频下载，高分辨率，无Pika水印，可延长视频长度，商业授权。
2、按年支付：
- BASIC套餐：免费，250积分初始，每月30积分，唇形同步视频生成2个积分，提供视频下载，有Pika水印；
- BASIC套餐：96美元/年，每月700积分，免费生成唇形同步视频，提供视频下载，高分辨率，无Pika水印，可延长视频长度；
- UNLIMITED套餐：336美元/月，每月2000积分，无限快速生成时间，免费生成唇形同步视频，提供视频下载，高分辨率，无Pika水印，可延长视频长度；
- PRO套餐：696美元/月，每月无限积分，无限快速生成时间，免费生成唇形同步视频，提供视频下载，高分辨率，无Pika水印，可延长视频长度，商业授权。
由于主流AI产品均需要Visa国际信用卡，山鲸AI提供注册/代充服务。欲了解更多信息，请点击以下链接↓↓↓
八、如何使用Pika？
1、官网使用
- 注册账号：打开官网https://pika.art/，点击右上角 Try Pika，可以通过邮箱或Google账户快速注册。
- Pika的使用非常简单，在首页输入框里就可以输入你想生成的指令，点击✨️生成按钮，等待几十秒就可以生成4张图像，选择你喜欢的下载即可使用。如果不满意，点击按钮即可重新生成。
1）、文生视频创作
①、输入提示词
我们参考的是 sora 相同的提示词进行对比，看看 Pika 生成的效果。
A movie trailer featuring the adventures of the 30 year old space man wearing a red wool knitted motorcycle helmet, blue sky, salt desert, cinematic style, shot on 35mm film, vivid colors
一部电影预告片，讲述了这位 30 岁的太空人的冒险故事，他戴着红色羊毛针织摩托车头盔，蓝天，盐沙漠，电影风格，用 35 毫米胶片拍摄，色彩生动。
②、选择屏幕长宽比和每秒帧数
输入提示词后，可以选择比例和视频每秒帧数。这边我选择默认的 16:9，比例有六种尺寸分别为：16:9、9:16 、 1:1、5:2、4:5、4:3；视频每秒帧数，最高可输入24帧，我们按最高帧数输入。
③、选择开启音效制作
我们这里开启声音制作，不然视频还得另外配音。
④、镜头设置
- 平移 (Pan)：向左、向右
- 倾斜 (Tilt)：向上、向下
- 旋转 (Rotate)：向右旋转、向左旋转
- 变焦 (Zoom)：放大、缩小
- 运动强度（Strength of motion）：最高4
⑤、负向词、种子、种子参考权重
Negative prompt：跟Midjourney一样，可以输入不需要的内容，让视频中不存在这些内容。
Seed：跟Midjourney一样，每一个生成的视频都会有个Seed编号，以供再次生成或者参考，我们可以设置参考的权重，最高25。
⑥、点击✨️生成按钮，等待生成。
⑦、Pika 和 Sora 视频对比。
2）、图/视频生视频创作
①、AI出图
首先，我们先用Midjourney 生成需要「鲸鱼」图片。接下来我们就实际体验一下图生视频的步骤和方法。
②、点击✨️按钮开始生成
在主操作界面中，可以选择直接上传图片，把我们的「鲸鱼」图片上传进来。
输入关键词：
Whales roam the seabed, trying to shake off their barnacles and make loud noises.
鲸鱼在海底遨游，试图甩掉身上的藤壶，发出很大的声音。
③、等待生成，由于视频转视频一致，操作方法就不赘述了。
2、Discord使用：
1）、注册登录DIscord账号：
如果使用过Midjourney的小伙伴已经有Discord账号了，我们就不赘述注册方法了。
接受邀请加入Pika的官方频道，https://discord.com/invite/pika
2）、将 Pika 加入个人对话
将Pika机器人添加到自己频道时会没有权限，这个时候可以按如下方法将 Pika 机器人加入到自己服务器里。
- 在 Discord 社区中进入Creations的子频道Generate-1，点开右侧用户列表，找到Pika机器人
- 点击Pika机器人，在弹出的界面下面的输入框，随意输入文字，按回车即可。
- 这时候我们就可以开始跟Pika私密聊天了，后续重新打开Discord，只需点击左上角Discord LOGO，即可进入私密聊天。
3）、基础指令
①、文字生成视频
在 Pika 中，生成视频的过程非常直观。只需要在对话框中输入斜杠 “/”调出指令菜单输入create，然后输入相应的提示词。文字提示是生成视频的关键，可以让你对生成的视频内容进行更精细的控制，后面会进行模版规范，让生成的内容更加符合自己的想法。
输入关键词咒语，等待服务器渲染生成即可。
提示词指令模板：
- 场景：描述主体物所在场景，比如：在一个阳光明媚的海滩上；
- 主体物+动作：尽量出现动词，比如：有一个小朋友在沙滩上奔跑；
- 镜头视角参数：拍摄角度，比如：广角，中焦，鱼眼镜头，鸟瞰镜头等；
- 视频风格：比如：复古电影，黑白，冷色调，高饱和度风格；
- 参考词汇：比如：-fps/gs/seed/neg/ar等
最后我们拼接成成品：
有一个小朋友在阳光明媚的沙滩上奔跑，中焦镜头，80年代复古风格 -neg morphing,erratic fluctuation in motion,noisy,bad quality,distorted..
②、图片生成视频
你不仅可以利用文字提示来生成视频，还可以在对话框中输入斜杠 “/”调出指令菜单输入 animate，上传图片后根据图片内容生成视频。
③、图+提示词生成视频
有时我们上传图片后，图片的动态处理结果并不是我们想要的，那怎么办呢？
可以图片+关键词这种输入方式，会更好的控制图片延伸的视频方向。
④、生成结果按钮：
九、Pika指令汇总：
工欲善其事,必先利其器，参数的命令大都是对摄像机的镜头进行调整，先来说我们最常用到的一个
1、neg 负面提示词
负面提示：
neg 后续跟的词汇是不想在视频中出现的词汇，比如说 模糊，多根手指，低质量等，这里为大家提供一个模板，可以在生成视频时根据需求来删减
例如:
-neg lack of detail, erratic fluctuation in motion, noisy, bad quality, distorted, poorly drawn,morphing blurry, grainy, low resolution, oversaturated
2、motion 增强画面动作
默认是 1，0 是没有动作，4 是动作幅度最大
数值越高，会让视频中的动作更加的强烈，建议多进行调试，3 是最不稳定的，如果出现破相等相关问题，可以在负面提示词里进行规避
3、gs 画面（提示词）相关程度
数值越高，与提示词的相关性越强，在 8-24 之间，默认为 12
4、seed 种子
和 MJ 里一样，可参考种子视频
5、-camera zoom 画面放缩
比提示词更加对镜头可控，氛围 zoom，Pan，Rotate，每次只能使用其中一个
- camera zoom in 画面放大
- camera zoom out 画面缩小
6、camera pan 画面平移
将画面趋势进行不同方位的平移，这里可以配合 rotate 和 -motion# 来实现多种不错的效果
①、向上平移
- camera pan up 向上平移
- camera pan up left 向左上平移
- camera pan up right 向右上平移
②、向下平移
- camera pan down 向下平移
- camera pan down left 向左下平移
- camera pan down left 向右下平移
③、向左&右平移
- camera pan left 向左平移
- camera pan right 向右平移
7、camera rotate 画面旋转
这里需要注意下，旋转的幅度也是可以配合 -motion#来同步改变的
- 顺时针旋转:camera rotate clockwise / -camera rotate cw
- 逆时针旋转：camera rotate counterclockwise / -camera rotate cc
