Miał cztery żony
Aktor nie mógł też narzekać na powodzenie u kobiet. Żenił się cztery razy: pierwszą żoną, nieznaną szerzej z nazwiska, była koleżanka ze studiów, pozostałe również były aktorkami. Mowa o Marii Chwalibóg, Ewie Żukowskiej i Monice Dzienisiewicz-Olbrychskiej. Z tą ostatnią przeżył prawie 40 lat.
Poznali się na planie serialu "Życia na gorąco" w 1977 r. przy okazji odcinka kręconego na Krymie. - Andrzej grał latynoskiego senatora, ja jego kochankę, amerykańskiego szpiega. Jałta była przepiękna, szalenie romantyczna i... zakochaliśmy się w sobie – opowiadała aktorka w "Życiu na gorąco". Aktor odszedł wówczas od rodziny, zostawił córkę Katarzynę, czego trzecia żona Ewa Żukowska nie mogła mu wybaczyć.