AI图像工具

这是一个借助大语言模型（LLM）处理音频的工具，可以： – 生成音乐 – 背景音效 – 音频生成字幕 – 文字生成音频 – 文字生成音频并模拟声音 – 根据图片生成音频 – 对音频进行inpaint（局部屏蔽） – 根据音频和人脸照片合成视频 – 检测音频中的事件，以及开始和结束时间 – 单声道变双声道 – 通过文本描述检测特定声音发生的时间 – 抽取某种声音 – 去除背景噪音 多人混合声分离出单人声音 语音翻译 http://github.com/AIGC-Audio/AudioGPT 演示：https://huggingface.co/spaces/AIGC-Audio/AudioGPT 论文：https://arxiv.org/abs/2304.12995

将微信或企业微信个人号接入ChatGpt、文心一言、FastGpt、LinkAI等，实现文字对话、语音对话、图片交互、文件交互等功能

LLaVA是一个大型多模态模型，旨在实现通用视觉和语言理解。它端到端训练，可以理解文本和图像，并在聊天中灵活运用这些信息。LLaVA在多模态指令跟随数据集上与GPT-4表现相似，相对分数达到85.1%。在Science QA上，其准确率达到92.53%。LLaVA模型将预训练的视觉编码器（CLIP ViT-L/14）与大型语言模型（Vicuna）通过简单投影矩阵连接。训练分为两个阶段：阶段1只更新投影矩阵，基于CC3M子集进行特征对齐预训练；阶段2更新投影矩阵和大型语言模型进行端到端微调，适应日常用户导向应用和科学问答场景。

免费开源的AI画质提升、无损放大图片工具

Shutter Encoder是一款视频、音频和图像转换软件，基于FFmpeg和其他优秀工具设计，旨在尽可能方便和高效。它被视频编辑人员设计，目标是尽可能方便和高效。Shutter Encoder支持几乎所有你听过的编解码器，以及许多你没听过的编解码器。 Shutter Encoder提供了一系列功能，包括： 你可以在Shutter Encoder的官方网站https://www.shutterencoder.com/en/上下载该软件。根据你的操作系统选择相应的版本进行下载，比如Windows系统的INSTALL VERSION和PORTABLE VERSION，它们的区别在于一个需要安装，一个解压后就可以使用。 在使用过程中，如果发现软件启动时进度条卡住不动，可以检查路径是否含有中文字符。此外，为了获得最佳性能，建议开启底部的GPU解码，如果使用的是Nvidia显卡，可以选择cuda进行解码。

sd-webui-faceswaplab是一个扩展功能强大的面部替换工具，其功能特点如下： 多功能面部替换：sd-webui-faceswaplab可以进行多个面部的替换操作，使用户能够对多个人脸进行替换，实现不同面部的互换。 修复涂鸦：该工具还具有修复功能，可以对图像中的涂鸦进行修复，使图像看起来更加干净和自然。 检查点功能：sd-webui-faceswaplab支持检查点功能，用户可以在进行面部替换操作时保存检查点，方便随时恢复和继续进行操作。 开源许可证：该工具使用AGPL-3.0许可证，这意味着它是开源的，用户可以自由地使用、修改和分发该工具的源代码。

一个基于深度学习的视频超分辨率（SR）和视频增强（VE）框架，由北京大学元培学院的研究团队开发。该框架旨在提高低分辨率视频的质量和视觉效果，使其更接近高分辨率视频。Video-LLaVA 采用了多尺度融合、残差学习、自适应注意力机制等技术，以提高视频超分辨率和视频增强的性能。 主要特点： 1. 多尺度融合：通过在不同尺度上进行特征融合，提高了模型对细节和全局信息的捕捉能力。 2. 残差学习：引入残差连接，使网络能够更好地学习输入和输出之间的映射关系。 3. 自适应注意力机制：根据输入视频的特点，自动调整注意力权重，使模型能够关注到更重要的区域。 4. 端到端训练：整个框架可以作为一个整体进行端到端训练，简化了模型的训练过程。 5. 支持多种视频格式：Video-LLaVA 支持多种常见的视频格式，如 YUV、RGB 等。

一个定制化的人工智能图片生成工具。 它可以让您用文本描述来生成您想要的图片，无论是视频制作、产品展示还是概念艺术。您可以使用它提供的数千个开源模型，或者用自己的图片数据集来训练一个专属的模型。您还可以使用增强按钮功能来调整和优化生成的图片。

pulse 是一个基于隐式空间的图像超分辨率算法。该算法的作者来自杜克大学。图像超分辨率任务的目标是将低分辨率图像转换为对应的高分辨率图像。 PULSE 算法利用生成式对抗网络（GAN）和自动编码器（AE）进行图像重建，通过学习隐式空间中的图像表示，实现高分辨率图像的生成。它具有去除图片上马赛克的功能，并且可以用于图像超分辨率任务。 具体的使用方法可以参考该项目的说明文档。使用 PULSE 进行图像去马赛克或超分辨率处理的过程需要运行 run.py 文件，并提供相应的参数。在该文件中可以找到所需参数的具体描述和使用指南。 值得注意的是，PULSE 算法曾因其生成的高分辨率图像可能存在种族偏见的问题而受到一些争议。

GPT4Tools是一个可以控制多个视觉基础模型的集中式系统。它基于Vicuna（LLaMA），并71K自建指令数据。通过分析语言内容，GPT4Tools能够自动决定、控制和利用不同的视觉基础模型，允许用户在对话过程中与图像进行交互。通过这种方法，GPT4Tools提供了一个无缝高效的解决方案，以满足对话中各种与图像相关的需求。与以前的工作不同，我们支持用户通过自学指令和LoRA教授自己的LLM使用具有简单细化的工具。

Final2x 是由 Tohrusky 开发的一款图像超分辨率技术，它可以以更高的分辨率和质量重构图像。 功能特点： 1）可以快速实现显著的图像改善； 2）可以有效地消除毛刺和噪点； 3）可以提高图像的质量； 4）可以有效地提升对比度。

一个功能强大的开源图像处理工具，它能够实现真实感图像的超分辨率和个性化的风格化。该工具不仅可以将低分辨率的图像转换为高分辨率版本，而且还能保持或增强图像的真实感。它具备多种处理任务的能力，包括但不限于图像超分辨率、旧照片修复、个性化风格化（例如将照片转换为动漫风格）以及图像上色等。举个例子，你可以使用PASD来恢复家族旧照片的细节，或者将普通照片转换成具有独特艺术风格的作品。

使用文本描述创建动态电影艺术图像

dot是一个开源的深度伪造工具包，用于生成逼真的深度伪造视频和图像。该工具包是由Sensity AI开发的，可以在GitHub上免费下载和使用 。使用dot需要安装一些依赖库，如conda和pip，以及下载一些模型文件 。该工具包是基于多个开源项目构建的，包括first-order-model、avatarify-python、SimSwap和GPEN等 。Sensity AI是一个人工智能公司，其GitHub页面上还有其他的开源项目 。如果使用dot，需要遵守其所依赖的开源库的许可证 。

一键免费部署私人 ChatGPT+Midjourney 网页应用 支持原ChatGPT-Next-Web所有功能 还额外支持AI绘图、图片放大、识图、 混图、垫图等等功能