色聲香味觸法等六塵，能衰耗人們的真性，所以叫做「六衰」。