In het jaar 1915 werd hij vanwege dementie onder de hoede van aartshertog Eugen geplaatst. Hij werd uiteindelijk door de beheerder van de stichting Hofrat Gautsch opgesloten in Klessheim Palace in drie kamers met getraliede ramen en weggehouden van het publiek. Op 18 januari 1919 overleed Ludwig Victor twee maanden na de val van de monarchie.