Problemy zdrowotne
Gdy Lin zmarła w 2001 r., Fisher przez następne lata umawiał się, jak wspominała jego córka, "chyba z całym Chinatown" - ale nie zdecydował się na szósty ślub.
Artysta, zmagający się z uzależnieniem od narkotyków i hazardu, z czasem coraz bardziej podupadał na zdrowiu. Uskarżał się na dotkliwe bóle kręgosłupa i kolan, miał też problemy ze słuchem i wzrokiem.
Jesienią 2010 r. Fisher upadł i złamał sobie biodro. Zmarł 13 dni później, 22 września, w wyniku komplikacji po zabiegu. Miał 82 lata.