생산부서에서 사무직종 이직 질문드립니다

안녕하세요 23살 4년차 직장인 남자입니다.
최근에(4월 말) 산업요원 소집해제가 되었는데, 4년간 느낀건 현재 직종과 저와는 정말 안 맞는다는 분야라는 것입니다.

산업요원으로 편입되어 근무할 때에는 병역때문에 참으며 일했지만(그 동안에도 사내 분위기가 좋지 않고 스트레스도 많이 받아 스트레스성 위셤도 얻었더랬지요) 산업요원이 끝나니 월급도 짜고 사내 분위기도 나쁘고 배울 것도 없는 현 직장에 남을 이유가 무엇인가 생각이 들더라구요.(위에 사수가 심하게 어리바리한 분이라 좀 과하게 업무를 맡긴 했습니다. 사수 때문에 받은 스트레스도 많았구요)

자격증은 정보처리기능사.전자기기기능사.산업안전산업기사 있고 가스산기 위험물기능사 에너지관리기능사 공조냉동기계기능사 워드프로세서(7/3 실기)등은 필합 상태입니다.

전산회계 전산세무 FAT 등.. 회계/재무/결산 분야로 이직하고 싶은데 현 직장서 그만두고 알바를 하며(사정상 본가로 들어갈 수 없기에) 이직을 준비해도 이직 시에 왜 회사를 그만두었냐는 질문에 마이너스가 되지 않을지 고민이 있습니다.

퇴직 후 알바를 하며 자격증 취득 후 이직.. 어떻게 생각하시나요? 고등학교 막 졸업하고 나서도 진로에 막연하게 두려움이 있었는데, 아직도 많이 부족하네요.