La controversia se inició en los años 1830 cuando Hector Berlioz compuso su Sinfonía fantástica, que se presentó acompañada de extenso texto que describía el programa de la sinfonía, lo que causó que muchos críticos y académicos opinaran sobre la cuestión. Entre los primeros detractores se encontraba François-Joseph Fétis, director del recién creado Conservatorio de Bruselas, que declaró que la obra "no era música".
Las causas que provocaron esta controversia son complejas. Una de estas causas fue, indudablemente, la importancia creciente de la poesía romántica, así como un interés creciente por canciones que pudieran ser interpretadas en conciertos o en casa. También se ha mencionado la naturaleza misma de los conciertos, que pasaron de ser presentaciones de una amplia variedad de obras, a ser mucho más especializados, lo cual aumentó la demanda de obras instrumentales con mayor expresividad y especificidad.
Por otro lado, en el romanticismo creció la importancia del instrumentista virtuoso. El violinista Niccolò Paganini fue una de las estrellas musicales de principios de siglo. Liszt, además de ser un notable compositor, fue también un virtuoso del piano, muy popular. Durante las interpretaciones de los virtuosos, solían destacar más ellos que la música que estaban interpretando.