Ένα από τα σωζόμενα ευρήματα της ρωμαϊκής περιόδου είναι τα λουτρά στο «Σπήλαιο του Σύλλα». Βρίσκεται πίσω από το λουτρό ΕΟΤ κοντά στην εκκλησία των Αγίων Αναργύρων στον οικισμό της Αιδηψού. Η «σπηλιά» Σύλλα είναι ένα μικρό κτίσμα με τρούλο. Ολόκληρο το κτίριο καλύπτεται από κοιτάσματα θειούχου νερού που αναβλύζουν και δίνει την εντύπωση ότι αυτή είναι η είσοδος του σπηλαίου . Στην είσοδο του «σπηλαίου» βρίσκονται δύο ογκώδη βάθρα αγαλμάτων με επιγραφές προς τιμήν του Ρωμαίου αυτοκράτορα Αδριανού και του Σεπτίμιου Σεβήρου αφιερωμένα από τον δήμο Ιστιαίας. Η πρώτη φέρει μεταγενέστερη επιγραφή προς τιμή του αυτοκράτορα Κωνσταντίνου του Βυζαντίου. Το «σπήλαιο» συνδέθηκε με τον Ρωμαίο στρατηγό Σύλλα, ο οποίος επισκεπτόταν το λουτρό.