Deze burcht was ooit verdediger van Portus Ganda
Ondanks de naam en de sombere aanblik heeft de duivel nooit in deze 13e-eeuwse burcht verbleven. Het Duivelsteen werd in de 13de eeuw bewoond door Ridder Gheeraert van Ghent, bijgenaamd De Duivel.
Doorheen de eeuwen werd het als ridderverblijf, wapenarsenaal, klooster, school en bisschoppelijk seminarie gebruikt. In 1623 kwam er een dolhuis voor krankzinnigen en een tehuis voor mannelijke wezen. Een ander deel van het gebouw werd gebruikt als gevangenis of tuchthuis. Daarna werd het kasteel ook gebruikt als brandweerkazerne en Rijksarchief.
Nu is het privébezit dat wacht op een herbestemming, en in afwachting wordt het gebruikt voor tijdelijke projecten. Zo is er BROEI, een tijdelijk platform dat ruimte biedt om te doen, denken en experimenteren. Zowel organisaties, collectieven als particulieren die met jongeren werken, zijn welkom.
De nv Koiba, die het zes jaar geleden kocht, heeft begin 2022 een bouwaanvraag ingediend om er een jongerencentrum en vier huurappartementen in onder te brengen. Aan de Scheldekant komt een kaai.