Au coeur d'une activité agricole intense, Saint-André de Valborgne était une grosse paroisse rurale à l'habitat très dispersé. La commune a traversé les guerres de religion, sa population ayant embrassé le parti de la Réforme. Occupé par les troupes royales, il fut un village de garnison où se déroulèrent des batailles entre les camisards de Castanet et leurs persécuteurs. C'est surtout durant l'âge d'or du ver à soie que le paysage s'est transformé : plantation de mûriers, élévation des maisons pour abriter les magnaneries et élever les vers à soie. Dans le village, un ensemble de façades bourgeoises s'est élevé de part et d'autre des quais du Gardon.