首页 > 其他分享 >利用AI大模型实现个性化视频配音

利用AI大模型实现个性化视频配音

时间:2025-01-16 21:11:48浏览次数:1  
标签:视频 配音 AI 合成 dashscope 语音 个性化

打造个性化AI视频配音

image

  最近,我萌生了拍摄短视频的念头,希望通过这个平台与大家分享一些AI技术的实际应用。

  然而,在准备过程中,我遇到了一个难题——配音。

  家里的环境嘈杂,收音设备也不够专业,这让在录制配音时感到非常难受。

  一开始,我考虑使用机器配音来解决这个问题。然而,当我试听了一些机器音色后,发现它们的机器感太重,完全不像人类的声音。

  这种效果无法满足我对配音的幻想,让我感到非常失望。我甚至一度想要放弃这个想法。

  然而,就在我准备放弃的时候,

  突然想到,既然AI大模型支持语音识别,那肯定也有语音合成的模型吧。

  于是,我开始在网上搜索相关的信息,最终在阿里云百炼平台上找到了

  通义千问-语音合成CosyVoice大模型。

image

  经过试听,发现多个音色都符合我的要求,完全可以作为视频的配音。

  这让我非常兴奋,终于找到了解决配音问题的方法。

  经过多次试听,最终选择了“龙小淳”作为视频的音色,因为它听起来既自然又亲切,非常适合我的短视频风格。

image

  在选择好音色后,我准备根据文本生成配音。最开始,我想到用百炼平台提供的“自定义文本试听”功能来生成音频文件。然而,我发现这个功能有一个很大的限制——它限制了生成的字数,无法满足中长视频的要求。

  这让我非常沮丧,开始寻找其他方法。

  就在我陷入困境的时候,突然想到可以用API来生成音频

  这样就不会有字数限制了。说干就干,我打开VSCode,开始写一段Python代码来生成音频。

  在编写代码的过程中,遇到了一些问题,通过查阅相关文档和搜索网上的解决方案,成功地解决了这些问题。

  最终,我完成了视频的配音,效果非常满意。

  通过这次经历,深刻体会到了AI技术的强大和便捷。不仅解决了配音问题,还让我学到了很多新的知识和技能。

  我相信,在未来的日子里,我会继续探索和应用AI技术,为大家带来更多有趣和有价值的内容。

  ‍

  附代码和本文章的音频

# coding=utf-8

import dashscope
from dashscope.audio.tts_v2 import *

# 将your-dashscope-api-key替换成您自己的API-KEY
dashscope.api_key = "your-dashscope-api-key"
# 语音模型
model = "cosyvoice-v1"
# 音色
voice = "longxiaochun"

# 初始化
synthesizer = SpeechSynthesizer(model=model, voice=voice)
# 读取需要合成语音的文本文件
with open("1.txt", 'r', encoding='utf-8') as f:
    text_content = f.read()
# 开始合成语音
audio = synthesizer.call(text_content)
# 打印请求ID
print('requestId: ', synthesizer.get_last_request_id())
# 保存合成的语音到 合成结果.mp3 文件
with open('合成结果.mp3', 'wb') as f:
    f.write(audio)

  最后 欢迎关注公众号【AI技术开发者】

image

标签:视频,配音,AI,合成,dashscope,语音,个性化
From: https://www.cnblogs.com/runyuai/p/18675758/use-ai-to-dub-your-video-qjwi0

相关文章

  • 分享10个好用的AI工具网站
    一、DeepSeek地址:DeepSeek简介:DeepSeek-V3在推理速度上相较历史模型有了大幅提升。在目前大模型主流榜单中,DeepSeek-V3在开源模型中位列榜首,与世界上最先进的闭源模型不分伯仲。二、网易见外地址:网易见外-AI智能语音转写听翻平台简介:网易见外是一个由网易人工智能......
  • JSP罗曼蒂克网上花店平台37xai(程序+源码+数据库+调试部署+开发环境)
    本系统(程序+源码+数据库+调试部署+开发环境)带论文文档1万字以上,文末可获取,系统界面在最后面。系统程序文件列表开题报告内容一、研究背景随着电子商务的蓬勃发展,线上购物已成为人们日常生活的重要组成部分。鲜花作为一种常见的礼品,广泛应用于各种场合,如生日、结婚、母亲节......
  • Gemini 多模态功能:七大应用场景,解锁 AI 无限可能
    你是否想象过,一台机器可以像人类一样,同时理解图像、视频和文字? GoogleGemini的诞生,让这一想象成为现实。作为GoogleAI的最新成果,Gemini的多模态能力为企业带来了前所未有的机遇。本文将以性能卓越的Gemini1.5Pro为例,分享Gemini在七大实际应用场景中的表现,并重点关注......
  • 当我用中国柔术对付AI恶徒
    近年来有很多AI对话情景模拟软件,小试牛刀当我用中国柔术对付AI恶徒: 结果:把昏君系统颠覆成明君和鼎盛国运,获得隐藏任务奖励:仙人卡把三分钟让你破防系统整破防,灰溜溜离开攻略约架对象萌化怪兽哥斯拉让骂人的萝卜怪脸红让前一万亿句话只会说o的玉米不说o把柯南聊害羞......
  • docker containner挂掉,无法exec进入bash,如何修改文件的终极解决方法.210730
    场景:Nginx在bash里面配置的时候挂掉了,然后dockerstart不起来,execbash进不去,造成无法再改里面的文件了解决方法:1,dockerps–a可以查到所有docker,包括没有运行的,找到containnerID[root@hecs-29489~]#dockerps-aCONTAINERIDIMAGECOMMANDC......
  • Flutter使用FractionallySizedBox组件报错Failed assertion: line 2164 pos 12: 'hasS
    这里从解决方法那里直接给出个有效的方式。就是如果你使用了FractionallySizedBox组件,第一是这个组件只能在固定宽高下或者Row,Flex,Column组件下使用。第二就是这个组件需要在Flexible下使用.结构就是:Row->Flexible->FractionallySizedBox给出简单的代码示例......
  • .Net的AppDomain
     一、AppDomain的作用 AppDomain(应用程序域)是一种在.NET中提供的隔离机制,用于将应用程序的不同部分隔离开来,以提高安全性、可靠性和可管理性。以下是其主要的功能和用途: 隔离性:允许在一个进程中运行多个应用程序,同时使它们相互隔离。这样可以避免一个应用程序中的错......
  • 打破写作瓶颈!2025年最好的AI免费写作工具全在这里
    AI写作工具推荐:从初学者到专业创作者,总有一款适合你!近年来,AI技术的发展可谓突飞猛进,尤其是在写作领域,许多AI写作工具已经成为内容创作者的重要助手。从灵感激发到长篇创作,再到SEO优化,无论是业余作者还是专业撰稿人,都能从这些工具中受益匪浅。今天,我就来为大家盘点几款国内......
  • IAR编译工程报错:CreateProcess failed:The system cannot find the file specified
    IAR安装完成后,编译STM32的工程时报如下错误信息:CreateProcessfailed:Thesystemcannotfindthefilespecified全网检索各种答案都有,尝试重新安装、版本升级等都没能解决。因为之前有过安装8.32版本,卸载后又进行安装的9.2版本,抱着试探的心理,打开注册表将和IAR相关......
  • Pre-training vs Fine-tuning
    Pre-trainingvsFine-tuninghttps://developer.volcengine.com/articles/7399549896799780874Fine-tuning微调的技术原理是什么?在预训练模型的基础上,针对特定任务或数据领域,通过在新任务的小规模标注数据集上进一步训练和调整模型的部分或全部参数,使模型能够更好地适应新......