Spolu se Svatoplukem Benešem a Radovanem Lukavským patřil Josef Langmiler k mužům, kteří měli pověst gentlemanů a o přízeň žen se ani nemuseli snažit. Langmiler přitahoval ženy i tajemným původem, protože mohl být nemanželským potomkem hraběcího syna Jana Nepomuka Harracha, na jehož panství žila Lagmilerova matka.