콘투어 브랜즈, 부진한 재무 실적으로 흔들려