영어 시험에서

우리말이 되도록 알맞은 영어문장을 쓰시오. 라고 적혀있는데

(너는 그곳을 방문했어야만 했었다. )

You should have gone to there. 도 맞지않나요?
어법이 완전히 틀린건 아니겟죠?
영어고수분들 답해주세요.
선생님한테 뭐라 말씀드려야할까요?