Allmusic przyznał albumowi 4 gwiazdki, a recenzja Scotta Yanowa stwierdza: „To nagranie z 1980 roku jest doskonałym przykładem muzyki Davida Sanborna. Do bardzo wpływowego altoisty dołączają znani weterani studia (w tym gitarzysta Hiram Bullock i perkusista Steve Gadd) z basistą. /kompozytor Marcus Miller jest kluczową postacią w tworzeniu funkowych rytmów i kolorowych tła.”
Nagranie zdobyło w 1982 roku nagrodę Grammy za najlepsze wykonanie instrumentalne R&B za utwór „All I Need is You”. Była to pierwsza z siedmiu nagród Grammy, które saksofonista zdobył do tej pory. Buzz Feiten, grający wówczas na wysokich obrotach z Larsen-Feiten Band, dodaje swoje charakterystyczne brzmienie gitary do Let's Just Say Goodbye.