L’Œuvre de l’association IRSAM est née en 1858 du Père Louis-Toussaint Dassy soucieux des enfants porteurs de handicaps sensoriels. Il crée alors la Congrégation Religieuse des Sœurs Marie Immaculée et aux côtés de Sœur Marie Bouffier, fonde le premier établissement pour jeunes aveugles, l’Arc en Ciel à Marseille. En 1866, de jeunes sourds sont également accueillis. Le développement se poursuit au-delà de Marseille avec l’ouverture d’établissements pour enfants à Lyon et Nice. En 1923, l’association IRSAM régie par la loi du 1er juillet 1901 se crée et elle est reconnue d’utilité publique en 1931.