La Rue des Panoyaux était encore, en 1812, un sentier ayant jadis traversé un vignoble dit le "Pas noyaux", ses raisins étant sans pépins ; ce sentier, transformé en rue en 1837, a été prolongé en 1863 jusqu'à la rue des Plâtrières ; le prolongement s'est appelé la rue Chaudron jusqu'en 1868. Source : Evocation du vieux Paris, volume 3, Jacques Hillairet.
L'accordéoniste Jo Privat (1919-1996) vécut 46, rue des Panoyaux.