当前位置:首页 » 《资源分享》 » 正文

AI LLM文生图|文生视频初探与使用

18 人参与  2024年05月16日 13:29  分类 : 《资源分享》  评论

点击全文阅读


引言

        如今AI大模型已实现文本理解、文本生图、文生视频等操作。那么,普通程序员如何充分利用工具为自己添加业余乐趣呢(zhuan qian)?今天,就让我们一起快速走读下LLM给我们带来便捷和AI应用场景。

AI效率工具

        使用AI进行图文视频合成,需要prompt,故事脚本,前期语音工具,搜索工具,后期剪辑工具,去水印工具。本文仅罗列几个笔者使用的,如下:

文字转语音合成      

        在线配音站:  琅琅配音 (限免)

        微软TTS语音

        讯飞语记

AI时间线

        AI时间线(根据关键字输出关联图片)

示例:输入 “五一劳动”

输出:

AI关键搜索秘塔

         秘塔AI搜索  (关键字结果输出,时间梳理并生成PPT的网站)

Prompt生成-词魂

        https://icihun.com/AIGC (一个精品提示词库的网站)

网站图片提取 

        extract.pics   (从公共网站中提取、查看和下载图像)

AI图片资源库

https://www.lummi.ai/ (免费的AI图片资源,网站里所有的图片都是用AI生成的)

文字生成视频

        Pika:  https://pika.art   (付费可用)

        扣子 :  ​​​​​​https:www.coze.cn/ (制作智能体或Bot)

        Pixverse:  https:pixverse.ai/  (AI文字生成视频)

文字生成图片

        智谱清言:https://chatglm.cn/   (AI绘图)

        文心一言: https:yige.baidu.com/  

         Dreamina画图:  https:dreamina.jianying.com/ai-tool/home

        豆包:  https:chatglm.cn/

        讯飞星火:https:xinghuo.xfyun.cn/   (图文,语音合成)

AI生成个性卡通头像

        打开网站后, 按照提示输入提示词,然后点击合成,最后就生成了可以虚拟化的卡通头像人物。(示例网站: 堆友) 生成如如下:

AI生成个人Q版头像

        利用Midjourney通过简单的关键词教你快速创作各种风格的定制头像,生成后的效果展示:

prompt思路如下:

魔法词:Pop style 、Pixar style、Hong Kong comic style、comic style、costume photo style

公式: 垫图 + pop mart style(头像风格)+ 主题背景 + 环境氛围 + 风格参考

辅助词:mockup (模型),fine luster(光泽好),clean background(干净的背景),soft colors(柔和的颜色),3D render(3D渲染),Soft focus(软焦点), exquisite details(细节清晰),ultra high definition(超高清), oc , blender(搅拌机), IP , best quality(最佳质量),8k

去水印工具

生成的图片,右下角会有水印,一般可使用下面方法去除水印:

         美图秀秀,在线PS抠图,去去去

那么,文字生成的视频,也有水印,该怎么办呢? 下面提供一种思路:

 使用FFmpeg工具去除视频的水印

 安装:打开官网  FFmpeg , Download Windows版本。

解压后使用:

使用它对视频进行添加水印,去除水印等操作。

添加水印,再去除水印操作命令如下:

ffmpeg -i demo.mp4 -ss 1 -f image2 -vframes 1 out.jpg  // 原视频截图

ffmpeg -hide_banner -i demo.mp4 -i logo.png -filter_complex "overlay=x=xxx:y=xxx" with_watermark.mp4 -y // 原视频添加水印

ffmpeg -i with_watermark.mp4 -ss 1 -f image2 -vframes 1 with_watermark.jpg  // 对添加水印视频截图

ffmpeg -i with_watermark.mp4 -vf "delogo=x=xxx:y=xxx:w=xxx:h=xxx:show=0" -c:a copy no_watermark.mp4 // 给添加水印的视频,去除水印

AI 提示词(中文版)

宫崎骏风格的城市 湖水 蓝天 白云 樱花树 (生成背景图)

提示词: 一位老师站在仪表板前,仪表板上有数据图表,平面插图,线条和形状柔和,抽象的孟菲斯风格,蓝白相间,渐变色,透明纹理,白色背景,极简主义。 (复杂指令,图片细节更详实)

开源数字人平台

        推荐一个开源数字人框架Fay,它集成了语言模型和数字角色。它为虚拟购物指南、广播员、个人助手、服务员、教师以及基于语音或文本的移动助手等多样化应用提供带货版、助手版和代理版。AI数字人作为无形态的韧性机器人存在,更接近人类的生活,也将是一种改变方式。  

Fay 开源地址: 

AI Agent:

https://github.com/xszyou/Fay/tree/fay-agent-edition

直播带货:

https://github.com/xszyou/Fay/tree/fay-sales-edition

数字人助理:

https://github.com/xszyou/Fay/tree/fay-assistant-edition

 

参考连接:  ​​​​​​​​​​​​​​

        https:mp.weixin.qq.com/s/2FubPDMEw-7u3oqmuFSjKg, 开源数字人平台项目

        https:mp.weixin.qq.com/s/8ztRZ92xGxQM--_0hONikg, 常用精彩网站

        https:mp.weixin.qq.com/s/bfq_lbQ2C3RNztLxbGZiiw, Pika:AI文生视频工具

        https:mp.weixin.qq.com/s/EyKRw9WyddvIg6Qf6EB0Zg, 用 VITS-fast-fine-tuning 进行语音合成和声音克隆

        https:mp.weixin.qq.com/s/KN7HigX4dNIbwb0aJ7TmmQ,AI生成备课用的插图

        https:mp.weixin.qq.com/s/lZkTbzplX8TKNrfwzHOsvA,如何让Kimi免费成为自己的


点击全文阅读


本文链接:http://zhangshiyu.com/post/109483.html

<< 上一篇 下一篇 >>

  • 评论(0)
  • 赞助本站

◎欢迎参与讨论,请在这里发表您的看法、交流您的观点。

关于我们 | 我要投稿 | 免责申明

Copyright © 2020-2022 ZhangShiYu.com Rights Reserved.豫ICP备2022013469号-1