RetroJS - Escrevendo músicas da era 8-bits com JavaScript e Web Audio API
•
17 gostaram•4,195 visualizações
O documento descreve o desenvolvimento de um projeto chamado Retro Audio JS, que permite tocar músicas retro usando apenas JavaScript. O autor criou uma notação musical simplificada em JSON e um loop que interpreta as notas a cada ciclo, permitindo reproduzir canções completas como o tema do Super Mario Bros. A implementação enfrentou desafios como manter o ritmo e melhorar o desempenho, mas o autor conseguiu reproduzir com sucesso a música usando apenas o navegador.
Recomendados
Recomendados
Mais conteúdo relacionado
Mais de Eduardo Shiota Yasuda
Mais de Eduardo Shiota Yasuda (6)
Último
Último (8)
RetroJS - Escrevendo músicas da era 8-bits com JavaScript e Web Audio API
- 1. RETROJS Party like it's 1983 @shiota 2013
- 3. + +
- 4. Tudo começou na palestra do @almirfilho no OlhóSEO em Floripa sobre Web Audio API. O @fnando falou "Cara, dá pra fazer o JavaScript tocar o tema do Mario, imagina que foda?". Challenge accepted.
- 6. // Vendor prefixed var context = new webkitAudioContext();
- 8. var oscillator = context.createOscillator(); oscillator.connect(context.destination);
- 10. oscillator.frequency.value = 780; oscillator.start(0); oscillator.stop(context.currentTime + 0.5);
- 12. about me Estudei piano dos 8 aos 15 anos. Sou apaixonado por música clássica, e gosto de ler partituras. Nada como juntar um hobby antigo com uma paixão. =)
- 13. Voltando ao assunto: challenge accepted, né? =)
- 14. o projeto
- 15. & ? 4 4 4 4 Piano Allegro q»™ºº œ œ# œ œ ‰ J œ œ ‰ œ œ œ œ ‰ œ œ ‰ J œ ‰ œ œ ‰ J œ œœ ‰ Œ j œ ‰ Œ Ó J œ ‰ Œ & ? .. .. A3 j œ œ ‰ ‰ j œ œ Œ j œ œ ‰ J œ ‰ ‰ J œ Œ j œ ‰ ‰ œ œ ‰ œ œ ‰ œ œ b b œ œ ‰ ‰ œ ‰ œ ‰ œb œ ‰ œ œ œ œ œ œ J œ œ ‰ œ œ œ œ 3 œ œ œ J œ ‰ œ œ 3 ‰ œ œ ‰ œ œ œ œ œ œ Œ ‰ œ ‰ œ œ œ Œ & ? 7 j œ œ ‰ ‰ j œ œ Œ j œ œ ‰ J œ ‰ ‰ J œ Œ j œ ‰ ‰ œ œ ‰ œ œ ‰ œ œ b b œ œ ‰ ‰ œ ‰ œ ‰ œb œ ‰ œ œ œ œ œ œ J œ œ ‰ œ œ œ œ 3 œ œ œ J œ ‰ œ œ 3 ‰ œ œ ‰ œ œ œ œ œ œ Œ ‰ œ ‰ œ œ œ Œ & ? B11 Œ œœ œœ## œœnn œœ# ‰ J œœ j œ ‰ ‰ J œ Œ J œ ‰ ‰ œœ# œœ œœn ‰ œ œ œ œ œ œ J œ ‰ ‰ J œ œ ‰ œ ‰ Œ œœ œœ## œœnn œœ# ‰ J œœ j œ ‰ ‰ J œ Œ œ œ ‰ œœœ ‰ œœœ J œœœ ‰ Œ Ó Œ J œ ‰ Overworld Theme From Super Mario Bros. Koji Kondo Transcribed by BLUESCD http://www.gamemusicthemes.com/
- 16. primeira ideia
- 17. = 60 oscillator.frequency.value = 391; oscillator.start(0); oscillator.stop(context.currentTime + 1);
- 18. = 60 setTimeout(function () { oscillator.frequency.value = 391; oscillator.start(0); oscillator.stop(context.currentTime + 1); }, 1000);
- 19. = 60 setTimeout(function () { oscillator.frequency.value = 391; oscillator.start(0); oscillator.stop(context.currentTime + 1); }, 2000);
- 20. problemas manter track do tempo oscillator tem vida curta impraticável de escrever
- 21. solução criar notação musical criar loop de execução criar estrutura para lidar com tracks e notas
- 22. notação musical
- 23. & ? 4 4 4 4 Piano Allegro q»™ºº œ œ# œ œ ‰ J œ œ ‰ œ œ œ œ ‰ œ œ ‰ J œ ‰ œ œ ‰ J œ œœ ‰ Œ j œ ‰ Œ Ó J œ ‰ Œ & ? .. .. A3 j œ œ ‰ ‰ j œ œ Œ j œ œ ‰ J œ ‰ ‰ J œ Œ j œ ‰ ‰ œ œ ‰ œ œ ‰ œ œ b b œ œ ‰ ‰ œ ‰ œ ‰ œb œ ‰ œ œ œ œ œ œ J œ œ ‰ œ œ œ œ 3 œ œ œ J œ ‰ œ œ 3 ‰ œ œ ‰ œ œ œ œ œ œ Œ ‰ œ ‰ œ œ œ Œ Overworld Theme From Super Mario Bros. Koji Kondo Transcribed by BLUESCD http://www.gamemusicthemes.com/
- 24. { "title" : "Imperial March", "tempo" : 120, "time_signature" : "4/4", "score" : [ { "instrument" : "oscillator-square", "volume" : 0.5, "sheet" : [ "G.8D", "-.16", "G.8D", "-.16", "G.8D", "-.16", "Eb.8D", "Bb.16", "G.8D", "-.16", "Eb.8D", "Bb.16", "G.4", "-.4" ] } ] } Uma partitura, bem simplificada, tem o título, tempo, assinatura de tempo, e as notas. A implementação em JSON que bolei ficou assim.
- 25. [ "G.8D", "-.16", "G.8D", "-.16", "G.8D", "-.16", "Eb.8D", "Bb.16", "G.8D", "-.16", "Eb.8D", "Bb.16", "G.4", "-.4" ] Uma música é um array de notas. Mas como é a sintaxe dessas notas?
- 26. "G.4" frequência (391) duração (1/4) Uma função `getFrequency` interpreta a nota e retorna a frequência, dada uma fórmula matemática.
- 28. "G5.4D" frequência (783) duração (1/4 + 1/8)
- 29. "-.4" duração (1/4) Pausas são representadas com um "-".
- 30. criando o loop
- 31. conceito dividir a música nas menores marcações possíveis, e usar como marcação para iniciar as notas
- 32. & ? 4 4 4 4 Piano Allegro q»™ºº œ œ# œ œ ‰ J œ œ ‰ œ œ œ œ ‰ œ œ ‰ J œ ‰ œ œ ‰ J œ œœ ‰ Œ j œ ‰ Œ Ó J œ ‰ Œ & ? .. .. A3 j œ œ ‰ ‰ j œ œ Œ j œ œ ‰ J œ ‰ ‰ J œ Œ j œ ‰ ‰ œ œ ‰ œ œ ‰ œ œ b b œ œ ‰ ‰ œ ‰ œ ‰ œb œ ‰ œ œ œ œ œ œ J œ œ ‰ œ œ œ œ 3 œ œ œ J œ ‰ œ œ 3 ‰ œ œ ‰ œ œ œ œ œ œ Œ ‰ œ ‰ œ œ œ Œ & ? 7 j œ œ ‰ ‰ j œ œ Œ j œ œ ‰ J œ ‰ ‰ J œ Œ j œ ‰ ‰ œ œ ‰ œ œ ‰ œ œ b b œ œ ‰ ‰ œ ‰ œ ‰ œb œ ‰ œ œ œ œ œ œ J œ œ ‰ œ œ œ œ 3 œ œ œ J œ ‰ œ œ 3 ‰ œ œ ‰ œ œ œ œ œ œ Œ ‰ œ ‰ œ œ œ Œ & ? B11 Œ œœ œœ## œœnn œœ# ‰ J œœ j œ ‰ ‰ J œ Œ J œ ‰ ‰ œœ# œœ œœn ‰ œ œ œ œ œ œ J œ ‰ ‰ J œ œ ‰ œ ‰ Œ œœ œœ## œœnn œœ# ‰ J œœ j œ ‰ ‰ J œ Œ œ œ ‰ œœœ ‰ œœœ J œœœ ‰ Œ Ó Œ J œ ‰ Overworld Theme From Super Mario Bros. Koji Kondo Transcribed by BLUESCD http://www.gamemusicthemes.com/
- 33. semibreve 1
- 38. = 60
- 40. 1000ms = 16 cycles de 62.5ms Se uma música tem 60 bpm, uma semínima (uma "batida") tem um segundo. Uma semínima tem 16 semifusas, então tem 16 ciclos. Cada ciclo, portanto, tem 1000/16 = 62.5ms
- 41. parsedTrack["0"] = new Note("C.4"); parsedTrack["16"] = new Note("D.4"); parsedTrack["32"] = new Note("E.4"); parsedTrack["64"] = new Note("F.4"); Tracks são hashes que contêm como índice o ciclo, e a nota que deve ser tocada nesse ciclo.
- 42. parsedTrack["0"] = new Note("C.4"); parsedTrack["16"] = new Note("D.4"); parsedTrack["32"] = new Note("E.4"); parsedTrack["64"] = new Note("F.4"); var cycleDuration = 62.5 , currentCycle = 0 ; function renderCycle () { parsedTrack[currentCycle].play() currentCycle = currentCycle + 1; setTimeout(renderCycle, cycleDuration); }; Uma loop incrementa os ciclos e checa se há notas a serem tocadas ali.
- 44. tracks múltiplos
- 45. parsedTrack0["0"] = new Note("C.4"); parsedTrack0["16"] = new Note("D.4"); parsedTrack0["32"] = new Note("E.4"); parsedTrack0["64"] = new Note("F.4"); parsedTrack1["0"] = new Note("G.4"); parsedTrack1["16"] = new Note("A.4"); tracks[0] = parsedTrack0; tracks[1] = parsedTrack1; var cycleDuration = 62.5 , currentCycle = 0 ; function renderCycle () { for (var i = 0, l = tracks.length; i < l; i++) { tracks[i][currentCycle].play(); } currentCycle = currentCycle + 1; setTimeout(renderCycle, cycleDuration); }; Se o parâmetro de indexação de uma nota na música é o mesmo entre todos os tracks, é fácil fazer músicas com múltiplos tracks.
- 47. dificuldades e adaptações no caminho
- 48. oscillator tem vida curta cada nota é uma nova instância
- 49. quartifusas (1/128) performance ficou baixa Com múltiplos tracks, executar ciclos tomando uma nota quartifusa (1/128) de duração como base ficou muito pesado. Tive que voltar para uma semifusa (1/64).
- 50. notações não planejadas notas pontuadas, tercinas, acordes
- 51. estrutura adaptável novos instrumentos, controles modificáveis
- 52. futuro
- 56. keep having fun =)
- 58. Mas e o mario?
- 59. E nessa hora, foi tocado o tema do Mario completo, apenas com JavaScript. Achievement unlocked. ;D