Vejlsø ligger lige syd for eller i udkanten af Silkeborg. Den er omkranset af [[Kobskov]], [[Myrehoved]], og mod sydvest af [[Horsensvej]]. Det betyder, at den har et stort opland hovedsagligt bestående af skov fælles med [[Almind Sø]] og Vejlbo Mose.
Ved søens nordøstlige bred ligger det store bygningskompleks med park, som under navnet [[Silkeborg Sanatorium]] blev opført i 1903 af [http://http://da.wikipedia.org/wiki/Nationalforeningen_til_Tuberkulosens_BekæmpelseDanmarks_Lungeforening| Nationalforeningen til Tuberkulosens Bekæmpelse].
1. februar 1959 blevet hele området overtaget af Åndssvageforsorgen, som her indrettede anstalten [[Vejlsøhus]]. I forbindelse med at beboerne blev flyttet ud i mindre enheder overtog Silkeborg Kommune bygningerne 1. november 1987. Vejlsøhus blev formelt nedlagt med udflytningen af de sidste beboere i efteråret 1990. Derefter begyndte [[Ferskvandscentret]] at flytte sine aktivitetersine aktiviteter her til. [[AQUA Ferskvands Akvarium]] blev bygget i årene 1992-93 af Ferskvandscentret og åbnede i juni 1993. I tilknytning til centret findes desuden institutioner som [[Danmarks Miljøundersøgelser]] og [[Danmarks Fiskeriundersøgelsers Afd. for Ferskvandsfiskeri]].