Правильно
Оставаться – представленный инфинитив имеет проверочным вопросом вопрос «что сделать?». Наличие в вопросе буквы «Ь» говорит о том, что в слове должна писаться буква «ь».
Оставаться здесь больше нельзя.
Нам придется оставаться здесь еще как минимум две недели.
Оставаться спокойной следует в любой ситуации.
В женщине должна оставаться загадка.
Неправильно
Оставатся, оставатьца, оставацца.