Provavelmente, você já deve ter recebido um “parabéns atrasado”. Afinal, quem nunca? Embora comum, a expressão apresenta um erro de concordância ignorado. Entenda:

“Atrasado” é um adjetivo e deve fazer concordância com o substantivo “parabéns”, que está no plural.

Exemplos:

“Receba meus parabéns atrasados.”
“Parabéns atrasados, querido.”

Existe também a forma singular, pouco usada, “parabém”.