Катастрофически мало "чтива" по этому вопросу
Музычку проиграть пол беды, как это делать интерактивно....
Для SFX тоже свой формат придумывать нужно (не процедурно же они делаются) .. повторы, каналы итд.
Отдохнем, когда снова на карантин закроют.. будем думать.

- - - Добавлено - - -

Кстати, в чем и как делают паттерны, орнаменты, которые потом в мелодию собирают?
Только не говорите, что в голове