国际奥委会总部坐落在一栋树林掩映的玻璃建筑中，靠近莱芒湖，周围风景秀丽。该办公楼十分低调小巧，似乎与奥委会的大名完全不搭，平时也不对外开放参观，但依然有不少游客来此打卡留念。在国际奥委会成立后的相当一段时间内，奥林匹克之父顾拜旦在巴黎的住所就是国际奥委会的总部。1915年，为避免战争对奥林匹克运动的干扰，顾拜旦将国际奥委会总部迁往瑞士洛桑。从此洛桑与奥林匹克运动结下不解之缘。1982年国际奥委会宣布洛桑为“奥林匹克之城”，1993年12月5日国际奥委会又宣布洛桑为“奥林匹克之都”。