У січні 1981 року сестра Адель Астер померла від ускладнень інсульту у своєму будинку в Арізоні. Того ж року Астер був нагороджений Американським інститутом кіно та знявся в останній фільм у фільмі Джона Ірвіна "Історія привидів" (1981).

З роками Астер зберігав себе та свої власні здібності в перспективі завдяки своїй здатності до болісної самооцінки. Він припинив професійно займатися танцями приблизно 1970 рік, коли йому було вже більше 70 років.

У 1973 році він зустрів Робін Сміт, жокея, який заповнив порожнє місце, що залишилося після смерті його дружини. Вони одружилися в 1980 році, і багато хто вважає, що Сміт був запорукою щастя Астера в останні роки його життя. Він помер у неї на руках у вік 88 пневмонії.

Фред Астер, який незабутньо зіграв з Пауеллом у кількох фільмах, вказав на цю проблему в кількох інтерв’ю, а також у своїй автобіографії «Кроки у часі». «Елеанор Пауелл, один із наших найбільших талантів, для мене надто потужний», — сказав він. «Я люблю Елеонор Пауелл, але вона танцює як чоловік.

«Історія привидів» стала останнім фільмом для Астера та Фербенкса, останній завершений фільм для Дугласа (він помер за чотири місяці до виходу фільму) і перший фільм, в якому знявся Майкл О'Ніл.

Астер залишився в кіноіндустрії, а також вийшов на телебачення. Незважаючи на різні кар’єрні напрямки, дует залишився друзями до кінця життя.