Khu Vườn bên Giòng Suối (Jardins de la Fontaine) rộng hơn 15 hecta là khu vườn công lập đầu tiên tại Âu Châu. Chữ Pháp Jardins viết số nhiều là vì có hai khu vườn: một khu vuờn theo lối kiến trúc cổ điển được lập nên vào những năm 1800 và một khu vườn theo lối kiến trúc Địa Trung Hải được thiếp lập vào những năm 1900. Vườn Jardins de la Fontaine nằm gần bức tường thành bao quanh Nîmes, về phiá Tây của Căn Nhà Vuông, nó là sản phẩm của Dự Án làm đẹp thành phố Nîmes vào thế kỷ thứ 19. Người ta đã dự tính xây một hồ nước lớn và xây cất một cầu thang khổng lồ nhưng khi đào xới đất thì khám phá ra nhiều di tích cổ xưa cho thấy rằng nơi đây ngày xa xưa là một nơi thờ phượng nằm bên một con suối - do vậy vườn mới đặt tên là Jardins de la Fontaine. Được biết từ thời tộc Celt - một tộc dân sống ở Âu Châu và Tiểu Á trước cả thời La Mã - đã có một tôn giáo thờ phượng những nữ thần tại khu vực thành phố Nemausus, tức Nîmes ngày nay. Nhưng phải đợi tới thời kỳ La Mã mới có một đền thờ Augustus được xây dựng lên tại nơi đây với vô số những bức tượng nữ thần và đặc biết nhất là đền thờ Diane - một nữ thần thời Cổ La Mã, Thần Trinh Nữ của Mặt Trăng, thầnSăn Bắn, và thần Bảo vệ Đàn Bà, còn mang tên là thần Artemis trong thần thoại Hy Lạp.