De Borggraaf is een mooi en klein kasteel in Lottum. Het heeft vier vleugels en enkele bijgebouwen, waaronder een mooi poortgebouw en voorburcht. De bouwwerken zijn rondom een binnenplaats gebouwd.
Het kasteeltje is ongeveer rond 1550 gebouwd. De vierkante toren op de noordoosthoek werd pas bij de grondige restauratie in 1926 toegevoegd.
Het edelmanshuis werd mogelijk gebouwd door de Heer van Lottum, al is het niet onomstotelijk bewezen dat die inderdaad bestaan heeft. In de tweede wereldoorlog is het historisch archief van het kasteeltje volledig verloren gegaan. Om die reden is er veel onduidelijkheid over het wanneer en waarom rondom het ontstaan van De Borggraaf.
Tegenwoordig is De Borggraaf privé-eigendom van de familie Van De Voordt. Tijdens het Rozenfestival maken de prachtige oprijlaan, de kasteeltuin en de binnenplaats van De Borggraaf onderdeel uit van het festival.