Git non-existing file push 문제 해결하기

django 앱을 깃헙에 전체 올리려고 하는데 지난 번, large size 파일이 있어서 불가능했다.

그때 뭔가 한참 꼬인 걸 알고 있었으나..

시간에 쫓겨 개발하고 있어서 그냥 기능 먼저 구현하고 나중에 해결하자!

라는 생각으로 진행했다.

근데 이제 aws에도 올려야 될 때가 가까워진 것 같기도 하고,,

매번 손수 ^^ 코드 수정하는 것도 컴공스럽지 않은 것 같아서 드디어 이슈를 해결해보고자 했다.

근데 생각보다 정말 오래 걸렸다.

 

깃헙 너란 녀석.. 꽤나 복잡하구나

 

우선, 내 문제는 딥러닝 모델 사이즈가 170MB에 가까운 파일이 기존 django 폴더에 들어있었다는 점인데,

그 때 깃헙이 large file에 100MB 제한이 있는 줄 몰랐다.

그때 해당 파일을 push하려고 했던 기록이 history에 남아서 계속 문제가 되었다.

 

$ git filter-branch --force --index-filter "git rm --cached --ignore-unmatch mytestsite/saved_models/u2net/u2net.pth" --prune-empty --tag-name-filter cat -- --all

드디어 History에서 해당 파일 정보를 지웠다!

 

$ echo 'u2net.pth' >> .gitignore

$ git add .gitignore

$ git commit -m "git ignore file"

$ git push origin --force --all

어제 비교적 큰 파일을 처리하는 Git LFS를 다운 받아서 u2netp.pth 파일은 따로 처리가 된다.

 

 

REFERNCE

1. Git 도큐먼트. git filter branch 부분 참고

docs.github.com/en/github/authenticating-to-github/removing-sensitive-data-from-a-repository

Removing sensitive data from a repository - GitHub Docs

2. Dealing with large files. Git LSF

git-lfs.github.com/

Git Large File Storage

3. git remote remove. 깃 연결 끊는 방법

ifuwanna.tistory.com/263#:~:text=github%20%EC%9B%90%EA%B2%A9%20%EC%A0%80%EC%9E%A5%EC%86%8C%EC%99%80%20%EC%97%B0%EA%B2%B0,%EA%B0%84%EB%8B%A8%ED%95%98%EA%B2%8C%20%EB%81%8A%EC%9D%84%20%EC%88%98%20%EC%9E%88%EC%8A%B5%EB%8B%88%EB%8B%A4.

[Git] 원격 저장소 연결 및 끊기 ( git remote )