本文提出了一种新方法NG-Midiformer，通过无监督复合法将MIDI音乐转换为类似单词的序列，并利用N-gram Transformer编码器提升音乐理解能力。实验结果表明，该方法在音乐理解任务中表现优异。

介绍了MidiTok开源库，可对符号音乐进行令牌化，以便于使用语言模型进行音乐生成、建模或转录。该库提供了灵活性和扩展功能，并具备最受欢迎的音乐令牌化和统一的API。