体验地址:https://top.aibase.com/tool/shipinfanyipeiyin
3）端到端微调，解冻大语言模型允许端到端训练。在编码器引导下微调BART模型，实现EEG到文本的生成。需要注意的是，对词级特征输入并不需要第一阶段的预训练，可以直接从第二阶段开始。
项目代码:https://top.aibase.com/tool/wikichat
除了可以从文字生成音乐外，它还支持图像、视频和音频生成音乐，并且还可以编辑已有的音乐。该项目利用了MERT等编码器进行音乐理解，ViT进行图像理解，ViViT进行视频理解，并使用MusicGen/AudioLDM2模型作为音乐生成模型（音乐解码器）。用户可以轻松移除或替换特定乐器，调整音乐的节奏和速度。这使得用户能够创造出符合其独特创意的音乐作品。
站长之家(ChinaZ.com) 1月3日 消息:阿里巴巴宣布其项目DreamTalk已经开源。这个项目可以让人物照片说话，支持包括歌曲、多种语言的语音、嘈杂的音频在内的各种声音匹配。