근로소득과 연말정산, 종합소득세 신고에 대한 의문

근로소득과 근로소득이 둘 다 있는 경우,

주된 사업장에서만 연말정산을 하고 종료된 사업장은 연말정산을 하지 않는다면,

5월에 반드시 종합소득세 신고를 해야할까요? 혹은 신고를 하지 않아도 괜찮을까요?