적반하장 상간남, 1·2심 모두 패소한 이유