Отцом Георгия Милляра, настоящая фамилия которого де Милье, был француз.

Он работал в Москве по приглашению, и здесь же обзавёлся семьёй, женившись на дочке русского золотопромышленника.
Когда Георгию было всего три года, отец умер, оставив своей семье хорошее состояние. Мальчика воспитывала французская гувернантка, он с детства изучал языки, но потом грянула Октябрьская революция и благополучная жизнь семьи закончилась. Взяв сына, мама уехала с ним в Геленджик, где у них был большой дом. Однако вскоре дом конфисковали, и женщине пришлось вернуться в Москву. Она сменила фамилию себе и сыну, так Георгий стал Милляром.
Актёр не любил рассказывать о личной жизни, скрывал своё аристократическое происхождение и настоящую фамилию.