Smer musí opäť strpieť partnerov, Maďarič pohrozil odchodom