Además, como Warhol, también se involucró en el mundo del rock. Suya es la portada de uno de los más importantes discos de la historia: el 'Horses' de Patti Smith. Dice la leyenda que Patti hasta se enamoró de él y que le frustraba que Robert fuera gay. Y eso que al tiempo, de ella se decía que era bisexual.