로컬에서 작업하지 않은 내용이 리모트 서버에 존재해서 그렇습니다.

git pull 해서 리모트 서버 코드를 내려받은 후 push 하세요.

push하는 과정에서 conflict가 발생할 것으로 예상되네요.