Skip to content
New issue

Have a question about this project? Sign up for a free GitHub account to open an issue and contact its maintainers and the community.

By clicking “Sign up for GitHub”, you agree to our terms of service and privacy statement. We’ll occasionally send you account related emails.

Already on GitHub? Sign in to your account

[공지] NSML CLI update 진행 #35

Open
bluebrush opened this issue Oct 13, 2021 · 3 comments
Open

[공지] NSML CLI update 진행 #35

bluebrush opened this issue Oct 13, 2021 · 3 comments

Comments

@bluebrush
Copy link

제목 : NSML CLI update 진행

시간 : 10/13 15:14 ~ 15:40 사이

update 이후, CLI login 다시 해야함.

변경 사항

nsml status -vr 권한 level 변경

참가자 nsml status -vr 로 pool의 리소스 상태 파악 가능

@ZIZUN
Copy link

ZIZUN commented Oct 13, 2021

제가 테스트해봤는데
image
run 또는 submit 할 때마다 The total number of available GPUs 개수가 하나 작아집니다.
그런데 세션은 빌드되지않고 꺼지네요.
image

@bluebrush
Copy link
Author

@ZIZUN 님, 다시 시도해보시면 session 정상적으로 build될 것으로 예상됩니다.

자원 현황은
참여하시는 문제별 자원 Pool 정보입니다.
nsml ps와 함께 자원 상황을 파악하실 수 있을 것 같습니다.
session 종료 후, 자원 반납까지는 길때는 1~3분 정도 예상됩니다.
세션 종료 후 재실행에서 바로 다시 실행되지 않을 수 있습니다.

@ZIZUN
Copy link

ZIZUN commented Oct 13, 2021

@bluebrush 님 지금은 정상적으로 잘 됩니다. 감사합니다.
원인이 무엇이었나요..?

암튼 또 문제 생기면 말씀드릴게요 고생하셨어요.!

@devsungmin devsungmin unpinned this issue Oct 18, 2021
Sign up for free to join this conversation on GitHub. Already have an account? Sign in to comment
Projects
None yet
Development

No branches or pull requests

3 participants