2023年政策修订增补工作正在进行中,欢迎参与!
  • Moegirl.ICU:萌娘百科流亡社群 581077156(QQ),欢迎对萌娘百科运营感到失望的编辑者加入
  • Moegirl.ICU:账号认领正在试运行,有意者请参照账号认领流程

奈乐谱

萌娘百科,万物皆可萌的百科全书!转载请标注来源页面的网页链接,并声明引自萌娘百科。内容不可商用。
跳转到导航 跳转到搜索
大萌字.svg
萌娘百科欢迎您参与完善本条目☆Kira~
欢迎正在阅读这个条目的您协助编辑本条目。编辑前请阅读Wiki入门条目编辑规范,并查找相关资料。萌娘百科祝您在本站度过愉快的时光。
奈乐谱 Project Nanoscore
奈乐谱钢琴2020.png
奈乐谱(深蓝水下苍苍梦)专辑封面
作者 深蓝水下苍苍梦
原作 取决于原曲
连载网站 ABY,T(天使二次元),S(soundcloud)等
发表期间 2017年12月至今
相关作品 黑乐谱,VOCALOID,特效钢琴,MIDI音乐,8-bit

奈乐谱(英语:Nanoscore)是由深蓝水下苍苍梦(当前)制作中,以动漫歌曲为主的多风格歌曲改编。改编的内容包括主旋律改编,混音逻辑,人声转钢琴,转钢琴曲,风格化Remix等范围。针对复杂原曲开发的小型,大型高精度泛音列乐谱扒谱与混音技术,满足将各种原曲乐谱化,动机类似黑乐谱MIDI乐的音乐类型。

歌词还原,中音发声高音咬字
宽屏模式显示视频

记载

  • 2017年,通过机器扒谱+人力整理,世界上第一首奈乐谱《超级钢琴还原 火葬曲》(AV17640218,AC4157510)被制作出来。这种钢琴曲实现了早期黑乐谱梦寐以求的还原度,也实现了“耳copy”达不到的速度。
  • 2018年,约有35首平均4分钟的曲子完成,但由于技术和设备欠佳,更多的作品成为废案,没有发布。其中最佳的视频是还原了原曲不同音量下,如何做好打击乐扒谱的The Snippet
原曲打击乐不变的情况下,根据低音不同做了四种以上的演奏方案,以还原原曲
  • 2019年,约有9首曲子完成,设备升级完成。由于一直在克服混音问题,所以中间有3首大型泛音列钢琴曲成为废案。
  • 2020年,混音问题得到克服,(截止到2月12日)已经有2首大型泛音列钢琴曲,8首小型泛音列钢琴曲完成,4首小型泛音列钢琴曲处于扒谱阶段。
  • 2022年,几乎解决了以往的所有技术性问题,开发出了超大型泛音列钢琴曲,且由于作品间代差(音响效果和扒谱技术)过大,所以不再推荐2022.1之前的乐谱
  • 2022年中旬,发布了首个全曲配器+钢琴人声的类商业级乐谱。在配器,听感和混音都达到或运气好时超出原曲级别的情形下仍然通过旋律,段落,混音逻辑上的改动保持了原创性

名字来源

奈乐谱的名称来自普通话中的纳秒:奈秒,以及暗示开发新技术过程中的各种无奈和辛酸。奈乐谱看中精确的原因是人声的咬字细节最少也要在1/4毫秒的精度下才能从琴声中听出歌词,而稳定的发挥则要求1/8~1/16毫秒的扒谱精度才能提取出大部分细节。技术角度上称为“泛音列乐谱音乐”。

泛音列

描述“任何一个音符的发声,都是由一组音量不同的和弦组成”的乐理知识。
实践中,赋予极高的精度后,即可用于让钢琴发出“不可能的声音”,比如通过超高音泛音和弦+本音可以让钢琴弹出电音,通过高音咬字+本音让钢琴还原不同歌手的腔调口型。

中音快速连奏还原笛声,低音极不和谐音程还原长混响鼓声

小型泛音列钢琴曲

工程平均20小时,一架钢琴,通过一般混音来使其接近原曲(亮度激励和低音激励)并尽可能还原主要的声音,音频制作时间平均为10小时,加上视频,上传时间平均为12小时。

大型泛音列钢琴曲

工程平均50小时,多架不同的钢琴(音源),在每个音源所擅长的音高演奏。例如,Truepianos能够完美还原初音未来的咬字和歌声;
Kawaii Grand还原高音,Keyzone Classic还原弦乐,Choomay Piano还原Hat,扫弦,砸琴和重低音,SGPN还原贝斯等等。

6架钢琴同时演奏,并且听起来像是一架钢琴

超大型泛音列钢琴曲 (失败)

工程平均160小时,多架不同的钢琴,振荡器,小提琴,打击乐器,8-bit乐器。使用双声道panning,多重侧链压缩,EQ筛选,副乐器音头延迟让位,母带混音,明亮度控制,瞬时冲击响应(transient)控制等技法打破钢琴演奏不能发出更多声音的限制,扒谱成功率只有40%,失败的理由都是多架钢琴和声的冲突导致听感骤降,已经扒谱工程量过大(3~6个月)以至于无法坚持下去的失败。
超大型钢琴乐谱对混音的要求极高,也开发出了大量技术手段。其中的原因就是2/3的乐器是钢琴,而它们演奏的频率相同,即需要繁琐的处理来消除干涉和爆音,以至于后面多乐器扒谱的混音轻松就达到了类商业级的听感。大师级混音的配图:日本电车高峰期的推人工

奈乐谱2022.2

曲长与段落

  • 动漫OP分为TV-SizeFull-Size两种,对应1分30秒以及3~5分钟。
  • 由于需要反复循环听原曲扒谱,所以曲长不同会因为洗脑效应指数倍地影响扒谱,混音的时长,最终成品的统一质量。
  • 一般情况下,动漫片头OP片尾ED曲实际长度/段落为1.5分钟/AB段(主歌和过渡-副歌),而完整的曲长/段落为3~4分钟/ABABCBB段(主歌和过渡-副歌-主歌和过渡-副歌-其它-副歌-副歌)
  • 在2022.8中,开发出了abAB段落结构:主歌-副歌-主歌改-副歌改,保证了还原度和原创性

困境

  • 视频部分必须做的很好看才能有播放量,进一步因为渲染视频增加了制作周期。
最终鬼畜妹SS T380
  • 人声钢琴/Vocaloid部分完全脱离了传统乐理的范畴,因此扒谱做的一旦不好听就会损失大量潜在观众,因此乐谱的发展过程经历了几个低谷期。
  • 由于尝试和红石作对比以增加受众面在bilibili引发了争议,争论结果是红石是不可比较或评价之物;因此取消了红石音乐的转型方式,且声明今后与国内红石音乐Minecraft爱好者划清界限。
  • 在2022.2中发生了理念上的彻底失败,原因是长期一味的尝试将纯钢琴曲大型化的结果;导致了后作的转型。

听感

  • 将扬声器利用到极致,让所有参与的乐器都清楚发出本音的程度,一般通过母带混音或音乐商专门的混音师完成。在技术手段和软硬件先进程度两方面竞争。奈乐谱的制作中主要用到以下几点:
  • EQ削减每个乐器不需要的频率
  • 侧链压缩来消除同频乐器的干涉(主盖过次)
  • 左右声道控制同频率乐器间于左右耳的主次
  • 冲击响应(Transient)处理控制同频率乐器在演奏瞬间的主次
  • 包络控制来实现如哇音的效果
  • 叠乐器并通过EQ分配频率来合成两件乐器(或弥补主要乐器的功能缺陷,如添加原本不存在的颤音等)
  • 明亮度控制(增加频率复杂度)来让乐器的色彩更明亮,使其配得上主旋律;目前使用电子管Tube激励插件实现
  • 高频比低频优先控制:由于小体积扬声器(手机,普通耳机等)发不出低音和重低音,所以通过降低其音量,明亮度,冲击响应强度来将大量乐器间挤兑时,剩下有限的音量分给高音,解决了副歌音量超载到需要降低主歌音量补偿的问题

断音未来V1 (失败)

奈乐谱往Vocaloid方向发展的契机,设定是尝试维修损坏初音未来的成果,发声和咬字极其接近初音未来。乐器包括萨克斯,OSC,钢琴,单簧管和初音在5k-10k音高上残留的一点呼吸声组成。需要一定程度的混音来消除乐器频段之间的干涉。目前已经有了世界第一的公主殿下的"翻唱",但已经被奈乐谱2022.8淘汰:

宽屏模式显示视频

V2使用8-bit音源,加延迟叠在钢琴后面,解决了钢琴音量衰减(失去人声特征)快的问题,但演奏高音音符的失真较为严重。已经在奈乐谱2022.1中完美还原了IOSYS某歌手的声音。但要求人声明亮,相对模糊的咬字就弹不出来了。

宽屏模式显示视频

V3[1]通过钢琴还原人声的音头,搭配分别处理不同音高的多个波形振荡器来还原人声音身,统一演奏解决了钢琴沿音短,而其它乐器无法完美替代沿音的问题,由于振荡器已经分了音高,高音OSC的音量调小即可。

宽屏模式显示视频

最终失败的理由是音频无法稳定发挥,且没有绘画功底完成视觉设定的限制;至少两到三年后才能考虑重启。

淘汰的技术

  • 泛音和弦是为了用钢琴和弦波还原原曲乐器特征而存在的。由于被认为难听,所以在已经以还原人声为新特色的情况下淘汰
  • 打击乐器不使用,仅使用钢琴还原打击乐器的技术大幅延长了扒谱时间,听感也不如普通钢琴曲添加打击乐的效果,所以淘汰
  • 由于IEEE规定不能转换超过1760Hz音高的MIDI,所以应对开发出了源音频降低8或16度变换出MIDI文件,再导入音频编辑软件把音符升上去的技术。然而事实证明确实不好听,故淘汰
  • 和弦异性过滤:分为空间和时间过滤,空间代表限制和弦的最高-低音,空间权限取决于还原度;时间代以表旋律/和弦旋律走向发展为本,否则不允许时间范围内出现任何其它声音。该技术是在大型乐谱连续失败的绝望中开发出来的破坏性方案,所以紧接着在2022.2的重大失败后被淘汰了

待验证技术

  • 低音乐器明亮度权限:如果中高音乐器明亮,则完全砍掉低音乐器的中高频段音量,或者降低中高乐器的中高频段音量。

已验证技术

  • 左右耳独立扒谱技术:用于左右声道间移动乐器的扒谱,简化多乐器扒谱中仅存于左/右声道乐器造成的干扰。通过音频编辑软件将左右声道单独作为音轨导出实现。
  • 人声高精度机器扒谱:通过高精度插值算法将音频拉长4~8倍,然后将机器扒谱给出midi文件的曲速除以4~8实现。
  • 配器 + 钢琴人声:在其它所有方案宣告失败后剩下的唯一方法,难度最高但结果最成功。
  • 完整左右声道转移:FL Studio中,单纯用旋钮调节左右声道只会提升一边音量,降低一边音量。立体声音源的左右声道本来就不同,这样处理会丢失很多信息,这种情况下利用立体声编辑器/FL Stereo Shaper就可以把另一声道的信息搬过来了。
  • 减法颤音:2022.2中开发,将调性内的颤音音符转变为长音,剩下的颤音不变或降低音量,实现了更逼近人声连续性的颤音表现。
  • 人声钢琴与乐器钢琴去干扰:人声钢琴用偏软的频响曲线;乐器钢琴用偏硬的频响曲线和混音;人声通过侧链压缩压制同频率的乐器;人声钢琴在300Hz增加音量,其他所有乐器在300Hz降低音量等。
  • 三段式人声分层扒谱:2022.8中开发,将人声部分的机器扒谱结果分为高频咬字,中高频口型,中频鼻喉音的区分化;其中鼻喉音的部分可以选择性的拷贝到歌词不同但音调音长相同的段落;而不同段落需要的整理精度也不同,节省了人工用时且增加了乐谱还原度。

文件管理

视频

  • 按作品名分为多个文件夹,位于照创建时间排序的目录下:
视频-封面工程文件夹
  • Wallpapers文件夹内含有制作视频和封面所需图片,如工程截图,原曲MV或相关作品壁纸等素材,一般4分钟的工程含20~30个文件
  • 两个Photoshop工程分别用于制作视频网站和音乐网站(目前仅Soundcloud)所需的16:9和1:1宽高比封面
  • 几张不同的封面版本分别用于不同视音频网站
  • 两个.bat文件分别用于QAAC编码器将视频编辑软件所导出波形转码为AAC;以及ffmpeg将Premiere用Voukoder所导出的视频,加上编码好的AAC封装到mp4中的命令
  • 两个视频渲染截图用于制作封面,由于Photoshop工程能将图片存起来,所以导入Photoshop后即可删除。

音频

  • 按作品名分为多个文件夹(旧工程会被删除),位于照创建时间排序的目录下:
音频素材-MIDI素材工程文件夹
  • 两个未处理原曲音频用于备份,一般为flac,mp3,aac等格式
  • 用原曲或网上提供的纯伴奏音频反转原曲,提取出纯人声波形,然后用音频插值工具(此处为Audition)将人声放慢到1/4或1/8,得到"曲名" "Vocal_曲速或编号".wav
  • 用节拍器手工匹配原曲速度,用速度探测软件加以确认后,将原曲通过音频编辑软件做小节对齐,裁剪空白,立体声拆解后解压缩为波形,命名为"LL或RR声道" "曲名" "速度".wav
  • 用音频插值工具(此处为Audition)将原曲放慢,得到"LL或RR声道" "曲名" "速度÷2".wav,此处为70
  • 剩下的就是机器扒谱结果,同样按照放慢后的速度设置MIDI本身的速度,以及文件名"伴奏或人声" "速度.版本".mid(此处伴奏文件已被删除)

硬件需求

  • 首选薄膜键盘,其次是有恒定阻力,没有咔哒声的机械键盘,如樱桃红轴等。
  • 使用数小时而不会造成疲劳的人体工学鼠标,摩擦力高于FPS竞技用的布质鼠标垫。
  • 27寸或更大面积,达到3840×2160的显示器,以同时监视多个音频插件的状况而不累眼,及正常使用Kontakt这种字号小到哭的音频插件。
  • 32GB,至少2933Mbps/MTps下达到1T命令频率(不是2T或Geardown模式)的双面双条芯片内存(内存PCB正反面都有颗粒,且是双条2×16GB 配置),8~10层PCB(裸条明显更重)以确保显卡热风持续吹12小时下的稳定性。
  • 能轻松运行8核CPU重度负载12小时的主板,奈乐谱视频渲染曾因为主板差出现过有规律的死机,C盘电压失控报废等严重故障。
  • 重视纯算力而不是新优化技术的CPU,因为渲染视频时同时会运行视频编码(以至于系统都腾不开够用的CPU周期),所以一开始就要从BIOS里关掉自动超频(睿频,PBO,XFR等),用传统的频率电压控制以确保稳定;因为渲染时出的硬件故障就不是蓝屏的小打小闹了。
  • 能运行水银加速的显卡,显存容量至少8GB,由于游戏显卡的价格非常高,所以可以考虑专业卡。
  • 能365×24×7运行的机械硬盘,至少需要近企业盘。
  • 能带动以上硬件的电源,由于HEDT平台的瞬时电压变化大,所以对电源做工的要求较高。
  • 能随手拿来清灰的小型吸尘器,吸尘器太重会导致清灰频率变低。

软件需求

由于百科页不是收录教程的地方,所以此处只会留下需要的软件,以及制作流程。

获取资源

Torrent网站

音频预处理

Adobe Audition,主要用于筛选特定频段,反转提取人声,将原曲拉长来提高音频转MIDI的精度几种用途

音频转MIDI

Tallstick TS-AudioToMIDI

DAW与乐器

Imageline FL-Studio
4Front Truepianos
KVRAudio Keyzone Classic
Kontakt The Grandeur
Kontakt Ivory Bosendorfer 290 Imperial

3xOSC

https://www.looperman.com/media/software/0000366/looperman-software-0000366-main.jpg
‌外部图片
Creepy Piano (免费)
VSCO2 Violin (免费)

Fruity LSD(罗兰GM/GS可下载声音,主要用于打击乐器和弦乐)

混音工具

Fruity Stereo Shaper
Fruity Limiter

https://vladgsound.files.wordpress.com/2014/08/limiter6-env1.jpg
‌外部图片
Limiter No.6 (免费)
https://www.voxengo.com/cdn/img/14/14fqd9lww.jpg
‌外部图片
SPAN(免费,检查音量大小)

Fruity Parametric EQ 2
Fruity Delay 2
Fruity Stereo Enhancer(特殊情况)

SF2音源播放器

Plogue Sforzando (免费)

SF2音源

Choomaypiano,Electric Grand HQ,FM Piano,Fazioli Grand Piano,Full GrandPiano,Giga Piano,Kawaii Grand Piano,Motif_Es6 Concert Piano,NiceKreys Steinway v2,Nokia 30,Piano Bass,Reverb Bell Piano,SC55 Piano,Stereo Piano,Timbres of Heaven,West Coast Piano,SGPN,Pianomix0921

MIDI可视化播放器与录屏

https://upload.wikimedia.org/wikipedia/commons/thumb/1/14/Open_Broadcaster_Software_Logo.png/600px-Open_Broadcaster_Software_Logo.png
‌外部图片
OBS录屏软件
MAMPlayer

Ultra Light MIDI Player
MIDITrail
Kiva MIDI Player
Synthesia
Piano From Above
一般情况下,能把背景修改为白色的MAMPlayer,MIDITrail相对好用。MIDITrail的配置文件在".\conf\PianoRoll3D.ini"中,通过修改ViewPoint参数并记录下来,用时设为Viewpoint-2,Viewpoint-3即可。不过由于位置和视角是纯参数设定,程序本身不现实设定,所以这个步骤需要一点点调,非常麻烦

视频特效与插件

Adobe Premiere
Adobe After Effects使用贝塞尔曲线变形将MIDITrail的轨道转弯,以及用色相滤镜将颜色反转,方便在查找边缘滤镜中翻转回来。然而,该插件需要32GB内存,否则速度会很慢且容易假死。

After Effects 贝塞尔曲线变形

MAGIX Vegas

https://www.voukoder.org/media/7-vk01-png
‌外部图片
Voukoder PR/AE/Vegas x264 x265导出插件

音频编码器

QAAC (CVBR模式,320kbps)
qaac64.exe --cvbr 320 -b 16 -r 44100 --threading -o "导出压缩为320kbps的aac.aac" "导入Premiere导出的波形.wav"

视音频文件封装抽取

ffmpeg
ffmpeg.exe -i "C:\文件夹\导入Premiere用Voukoder插件HEVC编码器yuv444p10导出视频.mp4" -i "C:\文件夹\导入Premiere导出波形然后用QAAC的CVBR压缩成320k的aac.aac" -c copy "封装出可上传版本.mp4"

视频封面制作

Adobe Photoshop

其他项目

版权与盗用

奈乐谱是原创同人作品,但除音频文件,工程文件外,仍受版权主张影响。如果视频内出现了原作的视频段,则会被判为盗用。

外部链接