Замок Уши расположен на берегу Женевского озера примерно в 1,2 километра к югу от центрального железнодорожного вокзала Лозанны и в 2 километрах к югу от Кафедрального собора.
В 1170 году епископ Лозанны Ландри де Дюрн приказал возвести на этом месте башню. Веком позже ее перестроили, и она стала укрепленной резиденцией епископов. Кроме того, там располагалась тюрьма. Из окон парадных залов открывался вид на озеро. С суши подступы к замку защищала двойная крепостная стена с круглыми башнями.
В 16 веке в связи с приходом бернцев в Лозанну здание замка было заброшено. В 1609 году башню подожгли, однако вскоре она была восстановлена. Впоследствии она использовалась в качестве зернохранилища. Внутри крепостной стены также была построена печь, а на месте бывших парадных залов, обратившихся в руины, в конце 17 века росла шелковица.
В 1761 году в башне были проведены восстановительные работы, а в расположенных по соседству зданиях разместились магазины, служба по уплате дорожных пошлина и жилые помещения.
В 1885 году этот участок побережья приобрел местный предприниматель Жан-Жак Мерсье (1826-1903). При нем все обветшавшие постройки, кроме башни, были снесены, и в 1889-1893 годах вокруг нее был построен отель в неоготическом стиле, который действует по сей день. Появление этого отеля было связано с резко возросшей популярностью отельного бизнеса на берегах Женевского озера. Параллельно создавалась соответствующая инфраструктура. Так, в 1877 году был построен фуникулер, а к 1901 году завершилось устройство набережной, которая превратилась в излюбленное место прогулок горожан и приезжих.
Летом 1932 года замок Уши стал местом проведения Лозаннской конференции, на которой рассматривался вопрос о выплатах Германией репараций странам-победительницам в Первой мировой войне. По итогам конференции был подписан Заключительный пакт, в соответствии с которым Германия выкупала свои репарационные обязательства за 3 миллиарда золотых марок, что значительно сокращало сумму германского долга. Кроме того, она брала на себя обязательство погасить выкупные облигации в течение 15 лет. Однако приход к власти Гитлера в Германии в 1933 году привел к фактической отмене репараций.
Комментарии и оценки