Der Fermasee entstand, wie so einige Seen in Rheinnähe, aus einem Altrheinarm. Nachdem er lange als Baggersee genutzt wurde, zählen seine Ufer heute größtenteils zum Naturschutzgebiet "Altrhein Neuburgweier" und sind somit fürs Baden, Grillen etc. gesperrt. Eine Stelle des Ostufers (siehe Wegpunkt) ist für Badengäste zugänglich.