模型框架

Character-LLMs，它是一种可训练的角色扮演代理程序，可以从实际经验、特征和情感中学习。与提示代理程序相比，Character-LLMs是专门为角色扮演训练的代理程序，能够扮演具体的人物，如贝多芬、埃及艳后克娄巴特拉、凯撒大帝等，具有详细的角色相关知识和代表性的角色个性。为了实现这一点，作者提出了一种数据生成过程，即“经验重建”，可以生成详细且多样化的特定角色的经验数…

DB-GPT是一个基于数据库的开源GPT实验项目，旨在解决大模型在数据安全和隐私方面的挑战。该项目支持本地部署，可以应用于独立私有环境，并且可以根据业务模块独立部署隔离，确保大模型的能力绝对私有、安全和可控。通过DB-GPT，围绕数据库构建大模型应用会更简单、更方便。 git地址： https://github.com/eosphoros-ai/DB-GPT/ 来源：https…

这篇内容介绍了一种实时渲染技术，可以在移动舞台、ENeRF-Outdoor和DNA-Rendering数据集上进行渲染，分别使用了24、18和60个视角。通过提出的4K4D点云表示方法，可以实现4K分辨率下动态3D场景的高保真和实时视图合成。该方法在硬件光栅化的支持下，实现了前所未有的渲染速度。实验结果表明，使用RTX 4090 GPU，在1080p分辨率下，可以以超过400 …

AutoGen提供了多代理对话框架，可以方便地构建大型语言模型的工作流程。AutoGen还提供了一系列不同领域和复杂度的工作系统，可以用于构建多样化的应用程序。此外，AutoGen还支持增强型的大型语言模型推理API，可以提高推理性能并降低成本。 项目地址： https://microsoft.github.io/autogen/ 来源：https://mp.weixin.qq…

看得懂图片的多模态大模型MiniGPT4 MiniGPT-5是一个基于大型语言模型的图像和语言生成模型。它采用了一种创新的交错式视觉和语言生成技术，通过“生成vokens”作为图像和文本输出之间的桥梁。该模型经过两个阶段的训练，无需对图像进行详细描述，同时结合了无分类器引导的指导方法，提高了图像生成的效果。在多个评估数据集上，MiniGPT-5在人类评估中表现出优秀的多模态输出…

内容：DreamGaussian：用于高效3D内容创建的生成高斯点云。Arxiv 2023。 最近在3D内容创建方面的进展主要通过基于优化的3D生成来实现，采用分数蒸馏采样（SDS）。 尽管展示出了有希望的结果，但这些方法往往在每个样本的优化过程中速度较慢，限制了它们的实际使用。在本文中，我们提出了DreamGaussian，一种新颖的3D内容生成框架，同时实现了效率和质量。我…

内容：北卡罗来纳大学教堂山分校和微软Azure认知服务研究团队在微软实习期间开发了一种名为Composable Diffusion (CoDi)的创新生成模型。CoDi能够从任何组合的输入模态（如语言、图像、视频或音频）生成任何组合的输出模态。CoDi的输入不仅限于文本或图像，它可以并行生成多种模态。尽管许多模态组合的训练数据集不存在，但我们提出在输入和输出空间内对模态进行对齐…

看了下效果，还挺不错的~ 代码地址： https://github.com/Kosinkadink/ComfyUI-AnimateDiff-Evolved 来源：https://mp.weixin.qq.com/s/iX5mw5cH7fVpoFTBRsXGhQ