元峰AI笔记 · AI绘画与视频

LeiaPix Converter :免费将图像 2D 转换为 3D

LeiaPix Converter是一款免费的在线图像处理工具,可帮助用户将2D图像实时转换为精美的3D光场图像。它使用由Leia开发的专有算法,为照片、插画和艺术作品等2D图像添加深度和立体感。目前,LeiaPix Converter 是完全免费的。下面让我们使用LeiaPix Converter探索...

LeiaPix Converter :免费将图像 2D 转换为 3D

图片展示了LeiaPix Converter的相关内容。背景为色彩斑斓的爆炸效果,中间是LeiaPix Converter的标志。左侧是ChatGPT的标志,右侧是LeiaPix Converter的图标。该图片位于介绍LeiaPix Converter特点的上下文之前,可能是用于引出或强调LeiaPix Converter与其他工具或平台的关联,为后续介绍其特点做铺垫。

LeiaPix Converter是一款免费的在线图像处理工具,可帮助用户将2D图像实时转换为精美的3D光场图像。它使用由Leia开发的专有算法,为照片、插画和艺术作品等2D图像添加深度和立体感。目前,LeiaPix Converter 是完全免费的。下面让我们使用LeiaPix Converter探索照片中的3D世界!

本文包括两个部分:

LeiaPix Converter 的介绍及基础使用

ChatGPT + Midjourney + LeiaPix 实操做一个视频

LeiaPix Converter 的特点

多格式转换:LeiaPix Converter支持将多种图像文件格式转换为LeiaPix格式,包括JPEG、PNG、BMP、GIF等。

高质量深度图像转换:LeiaPix Converter使用深度学习算法根据场景计算深度信息,将2D图像转换为具有逼真景深感的3D深度图像。

自定义调整:LeiaPix Converter提供各种参数(如视差和景深)供用户自定义所转换图片效果。

快速转换: LeiaPix Converter采用高效算法快速将2D图像转换为3D深度图像。

用户友好界面: LeiaPix Converter 的用户界面简单直观,易于使用而不需要专业技能。

LeiaPix Converter 如何使用

访问 LeiaPix Converter 官网

图片展示了LeiaPix Converter官网的主界面。上方有“LeiaPix Converter”标志及“Converter”字样。中间大标题为“Bring your images to life 让您的图像栩栩如生”,下方文字介绍LeiaPix Converter可将图像转换为深度动画。界面左侧有“Upload”“Edit”“Map”“Share”“Reset”五个功能按钮。右侧背景为紫色渐变,右上角有“Get LumePad 2”按钮及用户头像。该图与上下文介绍的LeiaPix Converter使用流程相关,直观呈现了官网界面。

点击“上传”按钮上传,或者直接拖拽一张要转换的2D图像进来。

图片展示了LeiaPix Converter软件界面,左侧有“Upload”“Edit”“Depth Map”“Export”“Info”“Share”“Settings”“Help”等选项。右侧弹出文件选择窗口,显示“Hubble”文件夹及“meditation_A_material_arkham_for_Blur.jpg”图片。图片中红色箭头指向“Upload”选项,与上下文介绍的“单击‘Upload’或拖拽图片开始”相呼应,直观呈现了上传图片的操作位置。

单击“编辑”,调整几个选项以获得所需效果,包括:

图片展示了LeiaPix Converter软件界面,左侧为功能选项栏,包括上传、编辑、深度图、分享等。右侧是编辑界面,有动画时长、动画风格、运动量、焦点位置、边缘膨胀等参数设置,如动画时长有1 - 6秒可选,动画风格有横向、宽圆形等,运动量有小、中、高,焦点位置有右、中、左,边缘膨胀有0 - 1.5可调,还有高级编辑器选项。右侧还显示一张带有立体效果的图像。该图与上下文介绍的LeiaPix Converter使用方法相关,直观呈现了编辑功能的操作界面。

动画长度:1,2,3,4,5,6秒

动画风格:横向,宽圆形,圆形,高圆形,纵向,透视

运动量:小,中,高

焦点位置:右,中,左

边缘膨胀:0--1.5

高级编辑器:振幅-X,相位-Y

单击“深度图”,调整图像深度和立体效果等。

单击 “分享” 按钮查看生成的3D效果,支持多种格式下载。

图片展示的是LeiaPix Converter中“分享”功能界面。界面上方提示“Share your image on:”,并有Facebook、Twitter、Pinterest、邮件图标对应图标。下方提示“Remember to use #Leia #Lightfield when you share.”,并有“Or click the link below to copy and share it wherever you want”字样。中间显示链接“https://convert.leiapix.com/s/0aefd913-d610-4fd0-8447-833ab3491caf.png?expo”。下方有“Save to your device:”字样,列出GIF、MP4、LIF、SBS、Depth Map、Facebook 3D等格式选项。该图与文档中“单击‘分享’按钮查看生成的3D效果,支持多种格式下载”内容对应。

图片展示了一幅科幻风格的画面,画面中央是一枚带有比特币标志的金色硬币,硬币周围散发着光芒。背景是宇宙场景,有多个星球,前景是类似熔岩和岩石的地貌,色彩丰富,有橙色、蓝色等,营造出奇幻的氛围。这张图片位于介绍LeiaPix Converter使用方法之后、应用场景之前,可能是作为该工具可转换的图像示例,展示其能处理的图像类型和效果。

应用场景

动态壁纸

图片展示了一位女性的面部特写,背景为深绿色调,带有橙色飞溅效果。女性面部有橙色斑点,头发为浅色,部分头发垂下。她穿着红色外套,外套上有蓝色装饰。此图用于说明LeiaPix Converter在艺术与摄影应用场景中可生成的3D效果,展示了其在动态壁纸、动态头像、动态logo等场景下的应用可能性。

动态头像

图片展示了一位戴着大圆眼镜、头戴金属头盔的女性角色。她有着橙色的头发,面带微笑,眼神中透露出一丝坚定。背景为绿色,右侧有一个红色的心形图案。该图片位于文档“应用场景”部分的“动态头像”标题下,可能是LeiaPix Converter在动态头像应用场景中生成的3D效果示例,直观呈现了其将图像2D转换为3D的功能效果。

动态logo

图片展示的是LeiaPix Converter应用场景中的动态头像效果。画面中是一只卡通风格的蓝色狗狗,背景为浅色,狗狗周围环绕着大小不一的蓝色圆点,部分圆点带有白色高光,整体呈现出一种动态的视觉效果。该图片与文档中“应用场景”部分的动态头像内容相关,直观呈现了LeiaPix Converter在动态头像方面的应用效果。

建筑与室内设计

图片展示的是一个室内场景,背景为沙漠景观。室内有木质橱柜、餐桌椅、圆形地毯等家具,地面铺有地毯。窗外是开阔的沙漠,远处有岩石山丘,天空晴朗。该图片位于文档“应用场景”部分,用于展示建筑与室内设计的应用场景,体现了LeiaPix Converter在建筑与室内设计方面的应用效果。

广告和营销

图片展示了一款汉堡,背景为纯黑色。汉堡由金黄色的面包夹着绿色生菜、黄色酱料、棕色肉饼和绿色泡菜组成,肉饼上淋有黄色酱汁,边缘有白色芝麻点缀。图片位于文档“应用场景”部分,用以展示LeiaPix Converter在广告和营销等场景下的应用,如制作吸引眼球的汉堡广告图等。

艺术与摄影

图片展示了一位身着蓝色服饰的女性,背景为蓝色调的海景,右侧有一匹马。女性长发飘逸,发色为蓝绿色,眼神深邃。画面整体色调柔和,带有梦幻色彩,与文档中“艺术与摄影”应用场景相契合,体现了LeiaPix Converter在艺术创作方面的应用效果。

游戏

图片展示的是Newland Fusion Core的宣传图。左侧以黄色为主色调,上方大字“OUR CORE VALUES”突出核心价值观,下方文字介绍FUSION CORE为传奇设施,其功率来源为原子核。右侧是Fusion Core的3D模型,呈现为一个带有发光圆环的建筑结构,周围有树木装饰。底部有Newland的标志及“NEWLAND”字样。该图与文档中应用场景部分相关,展示了Fusion Core这一建筑与室内设计应用场景的视觉效果。

等等。。。

LeiaPix Converter 技术原理

LeiaPix Converter 的实现原理基于Leia 公司的专有技术和硬件,包括LeiaLoft软件和LeiaDisplay硬件。 LeiaLoft软件可以将2D图像转换为3D光场图像,而LeiaDisplay硬件可以显示3D光场图像。用户可以直观地感受到图像的立体效果。

图片展示的是Leia Inc.官网中Lume Pad 2的页面。画面中Lume Pad 2平板电脑屏幕显示了一位宇航员在紫色花朵环绕的环境中伸手触碰花朵的3D图像,画面色彩鲜艳。屏幕下方显示价格为$1,099*,并有“Learn more”和“Buy”按钮。页面顶部有“Leia Inc.”标志及导航栏,底部还标注了购买须知。该图片与文档中介绍LeiaPix Converter应用场景部分内容相关,直观呈现了其可生成的3D图像效果。

LeiaPix Converter对行业的影响

  • 降低 3D 内容创建的成本和障碍

LeiaPix 的出现使得将2D图像转换为3D效果的过程变得简单高效。它降低了3D内容创作的成本和技术门槛,让更多公司和个人轻松地创建高质量的3D内容。这有助于在各个领域推广和应用3D技术。

  • 促进创新和多样性

LeiaPix 通过将2D图像转换为3D效果,为艺术家、设计师、摄影师和其他创意人才提供了一种新的创作方式。这有助于激发创新思维,促进各行业的发展,并为观众提供更丰富、更多样化的视觉体验。

  • 提高工作效率和产出

LeiaPix 的快速处理速度和易用性可以帮助企业和个人在更短的时间内完成3D内容创作。这有助于提高工作效率,降低生产成本,并增加总体产出。

  • 扩大3D技术的应用范围

随着LeiaPix Converter的推广和应用,越来越多的行业采用3D技术来改善产品和服务。从电影制作、游戏开发到建筑设计和广告制作,LeiaPix Converter为这些行业带来了新的机遇和挑战。

  • 推动人工智能技术发展

LeiaPix 的成功应用展示了人工智能和深度学习技术在图像处理领域中巨大的潜力。这将进一步促进人工智能技术的研究和开发,为未来科技创新提供更多可能性。

实战:做一个小视频

步骤流程如下:

首先,使用ChatGPT创作一段小故事。接着,将该故事转化为视频脚本,并将其分割为各个镜头。通过镜头描述,运用Midjourney提示词来绘制每个画面的想象图,然后将每个画面输入LeiaPix,将2D图像转变为3D立体效果的视频。重复这个过程,直到得到所有3D画面的视频。最后,将所有视频片段连接在一起,并添加字幕进行朗读。同时,为视频添加背景音乐以增添氛围。完成这些步骤后,就大功告成了。

步骤一:创作小故事

使用ChatGPT编写一段小故事。

图片展示的是ChatGPT与用户关于小故事创作的对话界面。用户要求ChatGPT根据描述编写一个有三位主人公的故事,分别是艾莉斯、本和卡尔,他们目标是通过使用无人机、探测车等恢复星球的绿色和蓝色。ChatGPT回复了故事内容,讲述了一个被废弃物覆盖、充满废气的星球上,三位勇敢主人公为恢复星球生机而努力的故事,包括艾莉斯设计无人机小队收集废弃物、本驾驶探测车清理地下毒物质、卡尔研究星球生态并设计建筑方案等内容。

步骤二:编写视频脚本并切分镜头

将小故事转化为视频脚本,包括场景、音乐和镜头描述。每个镜头描述一个特定的画面。

图片展示的是一个ChatGPT界面,用户要求将故事写为视频剧本并切片每个镜头描述。画面中呈现了多个镜头描述,如片头场景、科学家艾丽娜的实验室、工程师马克的工作室等,每个场景有对应音乐和镜头描述。画面底部有“Send a message”按钮。该图片与文档中“步骤三:绘制Midjourney提示词”内容相关,是使用ChatGPT输出Midjourney描述词的示例,辅助理解如何为每个镜头绘制想象图。

步骤三:绘制Midjourney提示词

使用Midjourney提示词为每个镜头绘制想象图,以便更好地理解和表达镜头的内容。

图片展示的是一个AI小应用界面,左侧为Midjourney参数设置区域,包括Model_avatar、Model_name、Key等参数,其中Model_name和Key处有红色星号标识。右侧是聊天窗口,输入了“一个男人,正设计新的机器人,工作室里充满了机器人和工具,超黑风格”等提示词,下方有多个对应的/imagine prompt指令,如“一个男人在昏暗的工作室里设计机器人”等,最后有“确认”按钮。该图片与上文“步骤三:绘制Midjourney提示词”相关,展示了使用该工具输出Midjourney描述词的过程。

上图中这个工具,是一个我写的用来输出 Midjourney 描述词的 ChatGPT prompt,已经打包为了 AI 小应用(微信打开):https://zelinai.com/s/kavvHSjs2nZSiufjajw2vT

图片展示的是使用Midjourney绘制想象图的界面。画面中可见Midjourney界面里输入的提示词,如描述一个人在工作室创作强大而时尚机器人等内容,还配有相应生成的图像。下方还有另一段提示词,描述人驾驶宇宙飞船穿越星际空间等,同样有对应的生成图像。该图片与上下文“绘制Midjourney提示词,为每个镜头绘制想象图”的内容相契合,直观呈现了使用Midjourney依据提示词生成图像的过程。

步骤四:将画面转为3D立体

利用LeiaPix将每个画面转换为3D立体效果的视频。

图片展示的是LeiaPix Converter界面,左侧有“Updated”“Edit”“Depth Map”“Share”“Zoom”“Rotate”等选项。右侧是3D立体效果的视频画面,画面中一位长发女子正在专注地操作,周围环境昏暗,有燃烧的火焰和复杂的机械装置。该图片与文档中“步骤四:将画面转为3D立体”内容相关,用于直观呈现利用LeiaPix将画面转换为3D立体效果的操作结果。

图片展示的是LeiaPix工具中分享图片的界面。界面上方提示可分享至Facebook、Twitter、Pinterest等平台,或复制链接分享。下方有“Save to your device”选项,可选择GIF、MP4、SBS、Depth Map、LIF、Facebook 3D等格式保存,其中MP4格式被红色框突出显示。该图片与上文“步骤四:将画面转为3D立体”相关,用于说明在LeiaPix中将画面转换为3D立体效果时,可选择MP4格式保存转换后的视频。

步骤五:重复步骤三和步骤四

重复步骤四和步骤五,直到所有画面都被转换为3D立体视频。

图片展示了15个视频片段,每个片段以电影胶片框呈现,左下角标注文件名(如1.mp4 - 15.mp4),右下角有“iQIYI”标识。这些视频片段是利用LeiaPix将画面转换为3D立体效果的视频,用于后续步骤中将所有3D画面视频片段连接在一起,根据故事情节及实际出图效果排序。该图片与上文“步骤四:将画面转为3D立体”及“步骤五:重复步骤三和步骤四,直到所有画面都被转换为3D立体视频”紧密相关,直观呈现了3D视频片段的样式和数量。

步骤六:连接所有视频片段

打开剪映,将所有3D画面的视频片段连接在一起,根据故事情节以及实际出图效果将它们排序。

图片展示的是剪映软件界面,用于连接所有3D画面视频片段。画面中显示了多个视频片段缩略图,排列在时间轴上,当前播放的是第118秒的视频片段,画面呈现外太空场景。右侧有视频预览窗口,显示了外太空中的星球和山峦。右侧还有视频信息栏,显示视频时长、分辨率等信息。该图片与上文“步骤六:连接所有视频片段”相关,直观呈现了在剪映中连接3D画面视频片段的操作界面。

步骤七:添加字幕和朗读

为视频添加字幕,并进行朗读以便观众更好地理解故事内容。

选择文本,智能字幕,文稿匹配

图片展示的是视频编辑软件界面,左侧为功能导航栏,选中“智能字幕”选项。右侧有“识别字幕”和“文稿匹配”两个功能区域,其中“识别字幕”区域有“开始识别”按钮,可识别音频字幕;“文稿匹配”区域有“开始匹配”按钮,可输入文稿自动匹配画面。图片与上下文紧密相关,上下文提到在添加字幕和朗读步骤中,需选择“文本”“智能字幕”“文稿匹配”,将故事复制粘贴进去等待匹配完成,此图直观呈现了相关操作选项。

把我们的故事复制粘贴进去,等待匹配完成。

图片展示了LeiaPix Converter软件界面中添加字幕和朗读的步骤。画面中,视频剪辑时间轴上排列着多个视频片段,下方是音频波形图。画面顶部有多个字幕条,如“在一个废弃的”“充满了废”等,这些字幕条被红色框线突出显示。该图片与文档中“步骤七:添加字幕和朗读”部分对应,直观呈现了添加字幕的操作界面,帮助用户了解字幕添加的具体位置和样式。

PS:输入文稿之前,需要先随便添加个音频进去,否则会识别失败。

图片为LeiaPix Converter软件界面中添加字幕和朗读步骤的提示信息。画面背景为黑色,白色圆形框内显示“请先开启音量或添加音频,再进行识别”。该提示位于文档“步骤七:添加字幕和朗读”之后,用于指导用户在添加字幕和朗读前,先确保音量开启或添加音频,以便后续操作,避免因未开启音量或未添加音频而导致识别失败等问题。

朗读字幕,全选所有字幕,到朗读标签下,选择一个音色,开始朗读,即可为所有字幕匹配声音。

图片展示了LeiaPix Converter软件界面中“朗读”功能的操作。画面右侧弹出“朗读”窗口,有“字幕”“文本”“动画”“跟踪”“朗读”选项卡,当前选中“朗读”。窗口下方展示了多个音色选项,如“西安掌柜”“东北老铁”“重庆小伙”等,其中“知性女声”被蓝色框突出显示。该图片与文档中“步骤七:添加字幕和朗读”内容相关,用于说明为视频添加朗读字幕的操作步骤。

图片展示了LeiaPix Converter软件界面中视频编辑时间轴部分。画面中有多帧带有红色边框的视频帧,下方有红色框线突出显示的字幕内容,字幕包含“新星”“新星”“新星”等重复词汇。该图片与文档中“步骤七:添加字幕和朗读”内容相关,直观呈现了添加字幕后的视频编辑状态,帮助用户了解字幕添加效果。

步骤八:添加背景音乐

为视频添加合适的背景音乐,以增强氛围和情感。

图片展示的是一个视频编辑软件界面,左侧为功能分类栏,如收藏、抖音、旅行等。右侧是音乐素材板块,有搜索框及“VLOG”分类下的多个音乐素材展示,如“Flute piccolo”“秋”“Sorrow, lo-fi, chill out, loop”等,每个素材下方有时长显示、收藏和下载图标。该图片与文档中“步骤八:添加背景音乐”内容相关,用于说明为视频添加背景音乐的操作界面。

步骤九:完成最终视频

添加一些其他标题,转场,滤镜之类的内容。将所有步骤完成后导出视频。

整个流程结束,Show time!

整个过程下来,思路都是比较清晰的,只不过 Midjourney 出图是随机性的,要想达到自己脑海中想要的风格,可能要花点心思。我是利用 ChatGPT 来帮我写提示词,这里面我认为就是大力出奇迹,要么就得自己提示词功底特别强,能准确描述自己想要的画面。

LeiaPix Converter快速易用,提高了工作效率和产出,并扩大了3D技术的应用范围。它的成功应用推动了人工智能技术的发展,为未来科技创新提供了更多可能性。通过使用ChatGPT、Midjourney和LeiaPix Converter,我们可以创作令人惊艳的3D视频作品,探索图像背后的立体世界。期待未来LeiaPix Converter和类似工具的创新,为我们带来更多视觉艺术的惊喜和创造力。

参考资料:

https://aitoolmall.com/image/leiapix-converter/