Нужно ли удалять все плохие ссылки?

Не обязательно. Перед удалением важно понять происхождение ссылки, её реальное влияние и необходимость каких-либо действий.