DeWave简单介绍
在得到一系列离散代码之后，就可以像处理语言词向量一样，输入到预训练的大语言模型，最终生成翻译的文本内容。
据悉，M2UGen采用了创新的方法，生成了大规模的多模态音乐指导数据集，用于训练模型。这包括MU-LLaMA模型生成的1.2k多小时音乐字幕数据集。模型结合了MU-LLaMA、BLIP图像字幕模型、MPT-7B-Chat模型以及VideoMAE字幕模型，以在各个领域生成对应的指导。
新鲜AI产品点击了解：https://top.aibase.com/
Paint3D 能够根据文本或图像输入，在无纹理的3D模型上生成高分辨率、无光照的多样化纹理贴图。这项技术的主要目标是使生成的纹理能够被重新照明或重新编辑，并直接应用于现有的渲染管线。