秦且逸作画,OpenVINO助你在上随心创作》中,我们介绍了OpenVINO Nobook运行环境搭建,并利用OpenVINO优化和加速Stable Diffusion模型的推理,在英特尔独立显卡上能够根据我们输入的指令(prompt),快速生成我们喜爱的AI画作。
今天,我们对这一应用场景再次升级,除了能够作画,利用OpenVINO对Stable Diffusion v2模型的支持及优化,我们还能够在在英特尔独立显卡上快速生成带有无限缩放效果的视频,使得AI作画的效果更具动感,其效果也更加震撼。话不多说,接下来还是让我们来划划重点,看看具体是怎么实现的吧。
英特尔锐炫 显卡基于Xe-HPG 微架构,Xe HPG GPU 中的每个 Xe 内核都配置了一组 256 位矢量引擎,旨在加速传统图形和计算工作负载,以及新的 1024 位矩阵引擎或 Xe 矩阵扩展,旨在加速人工智能工作负载。
本次无限缩放Stable Diffusion v2视频生成的全部代码请戳这里。OpenVINO Notebooks运行环境的安装请您参考我们的上一篇《AI作画竟如此简单!蝰蛇峡谷OpenVINO开发者实战》。
此次我们应用的深度学习模型是Stable Diffusion v2模型,相比它的上一代v1模型,它具有一系列新特性,包括配备了一个新的鲁棒编码器OpenCLIP,由LAION创建,并得到了Stability AI的帮助,与V1版本相比,此版本显著增强了生成的照片。另外,v2模型在之前的模型基础上增加了一个更新的修复模块(inpainting)。这种文本引导的修复使切换图像中的部分比以前更容易。也正是基于这一新特性,我们可以利用stabilityai/stable-diffusion-2-inpainting模型,生成带有无限缩放效果的视频。
在图像编辑中,Inpainting是一个恢复图片缺失部分的过程。最常用于重建旧的退化图像,从照片中去除裂纹、划痕、灰尘斑点或红眼。但凭借AI和Stable Diffusion模型的力量,Inpainting可以实现更多的功能。例如,它可以用来在现有图片的任何部分渲染全新的东西,而不仅仅是恢复图像中缺失的部分。只要发挥你的想象力,你可以做出更多炫酷效果的作品来。
我们在配备英特尔锐炫独立显卡A770m的蝰蛇峡谷上加载模型并运行推理,因此推理设备我们选择“GPU”。默认情况下,它使用“ AUTO”,并会自动切换至检测到的 GPU。代码如下:
在这一步中,我把步骤设置为 20。理想情况下,我将使用 50,以提供最好看的结果。另外,这里还可以自行设置生成的图画数量,所有生成的图画将组合起来构成最后的无限缩放效果视频。当然,我们同样还生成了 GIF 文件,以便大家多种形式可视化展示生成结果。
当下,如果您想了解“Stable Diffusion”的工作原理,以及英特尔硬件的加速方式,OpenVINO Notebooks 无疑是首选。如果您有任何疑问或想要展示您的一些最佳成果,请在这里或通过我们的 GitHub 讨论板发表评论! 祝您编码快乐。
编辑?谢谢。亚历克斯以上来自于谷歌翻译以下为原文Hi Intel, Greetings.
控制面板保持“初始化”但不会打开我该怎么办?以上来自于谷歌翻译以下为原文Hello i have a problem intel HD graphic card
部署模拟人类视觉的应用程序和解决方案。 该工具包基于卷积神经网络(CNN),可扩展
产品线 年正式推出,而且该产品线也将采用全新的 Xe GPU 品牌。对此,外媒报导,日前
在资料中心等级的产品上将追赶竞争对手,采用光线追踪技术,这也使得市场也感
桌面版两种版本,前者将会用于搭载11代酷睿处理器的轻薄笔记本,在2021年初上市。官方宣称,这款
在CPU上使用的Xe架构核显显然更加受到大家的欢迎,目前已经有几家厂商开
套件开发推理系统,服务于从 DL 增强型嵌入式系统一直到在多个 FPGA 加速的服务器上运行的高级数据中心应用工作负载。
上部署 YOLOv5 实时实例分割模型的全流程,并提供完整范例代码供读者使用。
受困于消费电子低迷和存储芯片价格下跌 三星2023年Q1净利润暴跌95%
TI Q1财报:消费电子和数据中心降30%;汽车增长大约5%;工业芯片持平
拆解三个不同品牌的录音笔,看懂令人称妙的索尼USB弹出机械结构.#硬核拆解
吴恩达《深度学习》系列课 - 123.网络中的网络以及 1×1 卷积#深度学习
TMS320VC5402A-160,pdf(Fixed-Point Digital Signal Processor)
|