Nie wiem jakiej dystrybucji używasz, ale bardzo często wraz z LXQt jest od razu instalowane albo obconf, albo lxappearance-obconf (lub jeszcze coś podobnego), a samo LXQt również ma narzędzia konfiguracyjne (LXQt Appearance); one mają różne możliwości, z czego chyba najwięcej ma obconf. Następnie szukasz paczek z tematami dla OpenBox, które często są w repozytoriach, albo na owym box-look.org znajdujesz temat dla OpenBox (nie dla innego, bo nie będzie kompatybilny). Fajne tematy dla LXQt i OpenBox można znaleźć również na deviantart.com. Powyższymi narzędziami ustawiasz sobie temat i finito.
Jeśli zainstalujesz z paczki - niczego innego nie musisz robić oprócz dokonania wyboru odpowiedniego tematu w konfiguracji. Jeśli z z jakiegoś pobranego z netu pliku - postępujesz jak napisał @1709. Często znajdziesz też instrukcję przy samym temacie, ot np.:
https://www.box-look.org/p/1342796/Z uwagi, że WM w LXQt może być inny niż domyślny, to jeśli go zmienisz np. na KWin, to oczywiście stosujesz tematy dla takiego WM (tu dla Plazmy) i wygodniej jest pobrać sobie jakieś narzędzie, które to ułatwia, ale wówczas samo LXQt rośnie.