Вилла Поли была построена в 1923 году в доме 57 по бульвару Петрусс, в центре Люксембурга, для хирурга доктора Норберта Паули; архитектором был Матиас Мартин. Дом с угловыми башнями имитирует замковую архитектуру позднего средневековья и эпохи Возрождения. Первоначально доктор Поли располагал свою практику в подвале здания.
Во время Второй мировой войны (август 1940 - сентябрь 1944) она использовалась в качестве штаб-квартиры гестапо в Люксембург под руководством Вильгельма Нелле (до 8 марта 1941 г.), затем Фрица Хартмана (до 9 апреля 1943 г.) и, наконец, доктора Вальтера Фоллмера. За это время, согласно записям в Яд Вашем, гестапо депортировало около 885 евреев из Люксембурга в различные нацистские концлагеря.
. Подвалы дома использовались для пыток и допросов. Во время войны на вилле Поли содержалось от 2000 до 3000 человек, многие из которых подвергались там пыткам. Дом стал символом нацистского сопротивления и угнетения в Люксембурге.
После войны, из-за состояния здания, доктор Норберт Поли не вернулся в него. До 1999 года он использовался Министерством здравоохранения Люксембурга.
11 августа 1989 года Вилла Поли была объявлена Историческим памятником. Сегодня это штаб-квартира «Comité directeur pour le souvenir de la résistance» и адрес «AMICALE L.P.L.» (Общество памяти Люксембургской лиги патриотов ). Здесь также находится центр документации по движению Сопротивления в Люксембурге, «Центр документации и исследований по вопросам сопротивления» (CDRR).