Στην συνείδηση του κοινού ωστόσο είναι πάντα συνδεδεμένος άρρηκτα με την Έλλη Λαμπέτη, ακόμα και σήμερα. Ο Δημήτρης Χορν με την Έλλη Λαμπέτη έζησε έναν παθιασμένο έρωτα, που έγινε ο λόγος που επισπεύσθηκε το διαζύγιό της με τον Μάριο Πλωρίτη, αλλά και του Χορν από την πρώτη του γυναίκα, τη Ρίτα Φιλίππου.
«Την πρώτη μου γυναίκα, τη Ρίτα Φιλίππου, την απατούσα συνεχώς και της το έλεγα», έλεγε ο ηθοποιός, ενώ για την Λαμπέτη αποκάλυπτε πως δεν ήταν εκείνη η γυναίκα της ζωής του. «Ήμασταν μαζί επτά χρόνια. Αφόρητη ζηλιάρα. Δεν τολμούσα ούτε βλέμμα να ρίξω σε άλλη γυναίκα. Γινόταν χαλασμός. Ζήλευα κι εγώ ελεεινά. Όταν με άφησε, ήμουν σαν ταύρος εν υαλοπωλείο. Πληγώθηκε ο εγωισμός μου. Δεν μπορώ να πω πως δεν την αγάπησα. Και τη θαύμαζα πολύ ως ηθοποιό. Αλλά δεν ήταν η γυναίκα της ζωής μου».
