滚动新闻 | RSS订阅 | 网站地图 |
你好,游客 登录 注册 搜索

只需 1 分钟,这个网站用 AI 分离歌曲的人声、伴奏和乐器声

发布时间:2020-02-10 10:47:18  来源:CSDN 企鹅号   采编:郭椿砾  背景:

  整理 | Just

  疫情期间,在家待着闲来无事,一些技术人员就喜欢以技术的方式找点乐子,顺带赚钱最好了。

  将歌曲中的人声和乐器声分离是一件让想使用音乐伴奏的人头疼的事情,传统的音乐制作软件使用门槛较高,处理起来不光费时而且效果不一定好。

  团子DanGo.ai(https://dango.ai/)——微博网友@无吔学生近期利用AI技术做的这个能分离音频轨道的网站火了。

  在音乐分离这一领域,实际上已经有一些免费的AI工具。比如,由法国音乐流媒体服务公司Deezer为研究目的而开发的Spleeter开源工具,只需要提供一个音频文件,然后Spleeter就会将它分成两个、四个或五个独立的音轨,非常有用。

  团子DanGo.ai就是基于Spleeter开源工具做的。利用AI技术并通过上千首歌曲数据的训练,用户只需要上传歌曲,等待1分钟,目前就可以提取歌曲中的伴奏、人声、钢琴、贝斯、鼓点等多音轨压缩文件,效果要好于Au或者GoldWave之类的传统音频处理软件。

  @无吔学生表示,这是他秃了一个月头的成果。

  据网站作者介绍。团子主要由基于MIT协议的开源项目Spleeter制作的,同时在其之上增加了一些功能魔改使效率与音质得到提升。团子基于深度神经网络(DNN)实现的音轨分离所诞生的人工智能,它使用Python/Tensorflow开发。

  那么,团子 DanGo.ai 与传统的音乐分离软件有什么不同?

  一般而言,传统音乐分离软件所谓的“消音”一般是简单的带阻滤波,用人话说就是把人声所在的频率直接暴力擦除,这就会导致消音后的歌曲变得特别“糊”——表现为鼓点、某些乐器的消失。作者解释,这是因为人声会和某些相同频率的乐器重叠,单纯的抠除这个频率,不光会消除人声,也会消除在这个频率里的乐器。而根据歌曲的不同,人声/和声所在的频率也并非固定,这就导致提取出的伴奏不但效果糟糕,而且仍然带着部分残余的人声。

  “当然,也有一些人发现,歌曲中的人声录音一般是单声道的,而歌曲的乐器未必是这样。于是人们也尝试使用左右声道“相减”(如Au中的中置声道提取器)来提取伴奏或人声。但是提取的效果基本仍然很差,因为无法保证乐器不是多声道的,也无法保证人声是否被混音师加了后期处理效果器而变成多声道,所以它并不适合多数歌曲(尤其是现代音乐)。”

  作者称,团子DanGo.ai 则不用考虑上述让人心智损伤的事情。该软件用了大量的音乐数据进行训练,“我们可以把团子想象成一个大脑——我们让它听了非常多的歌曲用来“训练”它。现在它非常懂得歌曲,理解歌曲中各个乐器的存在,也能谨慎细心的剥离开人声和伴奏,从而最大程度的保留各个音轨的质量。”

  目前,用户可用团子 DanGo.ai 网站试听5首分离的多音轨歌曲。当然,如果你想要更多高质量的生成歌曲还需付费,付费歌曲会保留30天的歌曲文件让用户下载。

  最后给出作者的制作网站的一个demo视频,可以听出歌曲不同多音轨的效果,你感受下?


本文来源:CSDN 企鹅号

本文评论
红外测温仪供不应求,AI技术助力智慧抗疫
伴随复工潮的来临,红外体温检测仪一时间成为紧俏产品。无论是高速ETC通道的自动检测口,还是机场、火车站、地铁、社区等场景,红外体温检测仪使用尤为普...
日期:02-13
只需 1 分钟,这个网站用 AI 分离歌曲的人声、伴奏和乐器声
整理 | Just
  疫情期间,在家待着闲来无事,一些技术人员就喜欢以技术的方式找点乐子,顺带赚钱最好了。
  将歌曲中的人声和乐器声分离是...
日期:02-10
皮查伊很头疼 美国各州启动对谷歌反垄断调查
一个由美国各州总检察长组成的两党联盟正对谷歌除广告以外的其他业务展开反垄断调查,重点是Android和搜索业务。
日期:02-10
疫情下的元宵节怎么过?借助 AI 给家人做顿团圆饭!
作者 | 蒋宝尚
  编辑 | 贾伟
  元宵节,春节后的小团圆,也是一年中第一个月圆之夜,AI科技评论在这儿祝大家贪吃不胖,美梦不空。
...
日期:02-10
应对疫情期间返城人流高峰 AI与红外结合测温系统上线
随着春节假期结束,大批人流返城已是必然趋势。新型冠状病毒仍然肆虐,如何有效地保障人民群众的生命安全,同时在人流中有效地识别到高温体征的个体,成...
日期:02-07
微软宣布投入4000万美元开展人工智能健康计划
随着 AI 技术逐渐走入我们的生活,日前,微软方面宣布为AI for Good计划中新增一个项目——AI for Health,该项目是一个投入4000万美元的人工...
日期:02-07
日本首个机器人酒保正式上岗,售价为人类同行3年工资
据路透社报道,日本首个机器人酒保近日开始在东京一家酒吧内服务,为顾客斟酒。日本面临老龄化社会,餐馆和商店难以招到人手,而机器人酒保的测试使用可...
日期:02-07
一分钟测300人,AI系统北京地铁站口测“高温”
每分钟精准测试300人,高热报警每秒15人;佩戴口罩照样能识别,即走即测不阻碍通行;一套系统可部署16个通道,一个地铁口全管控……
日期:02-07
人在家中坐,“货”从天上来!酝酿多年的无人配送服务迎来大机会?
全国抗击新型冠状病毒肺炎的战斗还在继续。这场突如其来的疫情给全国各城市的餐饮休闲、商超便利、文化娱乐、旅游出行等行业带来了巨大严峻挑战。而在全...
日期:02-05
英伟达DALI加速技巧:让数据预处理速度比原生PyTorch快4倍
你的数据处理影响整个训练速度,如果加上英伟达 DALI 库,处理速度比原生 PyTorch 也能快上四倍。
日期:02-05
让谷歌折戟的AI流行病预测,在今天如何被创业公司攻占?
预测未知,一直是人类十分向往的能力。远不说国人熟悉的周易八卦、唐代道士编写的《推背图》,还有西方人熟知的占星术、中世纪流行起来的塔罗牌,近的比...
日期:02-05
2035年整个世界都将通过区块链技术实现协同工作
6年前,一帮声名狼藉之徒想利用现金的匿名性在网上贩卖毒品,于是便想找到一种没有政府插手的货币。而一些拥护人权的可敬人士也在苦苦寻找一种货币系统,...
日期:02-05
“消毒机器人”在德阳定点医院隔离病区上岗
2月2日下午,四川德阳地区第一台消毒机器人在定点医院隔离病区上岗。这是一个不需要戴口罩、不会被病毒感染的智能机器人。
日期:02-04
Miso Robotics 为快餐店打造了下一代机器人厨房助手
根据麦肯锡公司(McKinsey&Company)的分析,食品服务人员从事的活动 73% 具有自动化的潜力。
日期:02-04
共抗疫情,小i机器人向公众无偿推出“防疫外呼”“疫情防控问答”服务
当前新型冠状病毒肺炎正在全国蔓延,疫情防护工作形式严峻。各级政府、企事业单位、社区、相关机构每天都需进行大量的调查访问,极大的消耗人力且很难有...
日期:02-04
在为配钥匙发愁吗?无人AI钥匙机帮你配Hello Kitty定制钥匙
图片来源@全景视觉
  钛媒体注:本文来自于微信公众号硅谷洞察(ID:guigudiyixian),作者为Shumin,钛媒体经授权发布。
  从小到大,不少...
日期:02-04
抗击冠状病毒疫情 AI能否有所作为
新型冠状病毒肺炎疫情还在持续,世界卫生组织(WHO)紧急委员会日内瓦时间1月30日召开会议,宣布中国新型冠状病毒疫情构成国际关注的突发公共卫生事件(PHEI...
日期:02-04
AI每日精选:思必驰疫情防控机器人免费服务;科大讯飞营收破100亿
以下新闻选自人工智能信息平台“机器之心Pro”:花最少的时间,看最重要的新闻。
日期:02-04
JS环球生活今年将在国内推出Shark高端厨电及扫地机器人
“Shark ninja与九阳产业协同提升。”
日期:01-20
国际权威分析机构沙利文发布AI白皮书 百度AI实力全球第四中国第一
中新网1月17日电 人工智能发展60余年,全球格局日渐清晰,在各国政策的支持引导和大型AI厂商的主导下,人工智能正在进一步释放能量。近日,全球最大的企...
日期:01-19