Einar Frogner, Nei til EU