První písemná zmínka o obci je z roku 1349, ale již v roce 1398 je uváděna jako pustá. Znovu byla obec osídlena, v období kdy obec byla připojena k majetku kunštátského panství. Na území obce se dochovalo několik původních domů, tak zvaných dřevěnic. Dominantou obce je kaple Nejsvětější Trojice pocházející z roku 1887 a v jejím okolí rostou chráněné stoleté lípy. Lhota u Olešnice je velmi malou, částečně rekreační obcí se 40 stálými obyvateli a najdeme ji pod vrcholky Českomoravské vrchoviny, jihozápadním směrem od města Olešnice a severozápadním směrem od města Boskovice. Obec se rozkládá v oblasti přírodního parku Svratecká hornatina a je obklopena malebnými lesy. Západní částí obce protéká Tresný potok, jehož zajímavostí je červená barva, díky vysokému obsahu železa. Severozápadním směrem nedaleko obce je chráněné území přírodní památky Lhotské jalovce a stěny, kterou tvoří území s hojným výskytem chráněného jalovce a několik skalních útvarů. V jižní části obce je rekreační středisko a v jeho sousedství koupaliště. Obcí prochází značená trasa lokální cyklostezky. Dostupné autem po celý rok