• Tistory
    • 태그
    • 위치로그
    • 방명록
    • 관리자
    • 글쓰기
Carousel 01
Carousel 02
Previous Next

[Pytorch] multiGPU 에서 학습한 모델을 singleGPU에서 사용하자

전공관련/Deep Learning 2019. 3. 18. 10:04




일반적으로 테스트 환경이 아닌 실제 메인 모델을 학습 할 때에는 다중 GPU를 이용하여 학습하는 경우가 많다
이럴 경우 보통 pytorch에서 지원하는 nn.DataParallel ([Pytorch] Multi GPU를 활용 해 보자) 을 이용한다


이렇게 잘 학습을 하고 inference를 위해 모델을 load 할 때 map_location을 이용하여 single GPU를 지정했다
( [Pytorch] torch.load 에서 학습시와 환경이 달라서 못읽을 경우 )


이러면 동일하게 읽을 수 있을 줄 알았는데 "layer.0.weight, layer.1.weight, ... " 이런 형태의 key값을 찾지 못한다며 에러를 발생시켰다.


이럴 경우에는 저장 단계에서 

torch.save(net.state_dict(), savePath)

를 사용하지 말고 대신에

torch.save(net.module.state_dict(), savePath)

와 같이 .module을 붙여서 저장하면 일반적으로 사용하듯이 model 을 load 할 수 있다.


저작자표시 비영리 (새창열림)

'전공관련 > Deep Learning' 카테고리의 다른 글

[Pytorch] multiGPU 에서 학습한 모델을 singleGPU에서 사용하자2  (1) 2019.12.17
[Pytorch] pytorch 와 tensorboard를 같이 써보자.  (0) 2019.11.15
[Pytorch] tensor의 차원을 바꿔보자  (0) 2019.03.15
[Pytorch] Multi GPU를 활용 해 보자  (2) 2019.03.15
[Pytorch] network 결과물 사용시 주의사항!  (0) 2019.03.13
블로그 이미지

매직블럭

작은 지식들 그리고 기억 한조각

,

카테고리

  • 살다보니.. (449)
    • 주절거림 (3)
    • 취미생활 (36)
      • 지식과 지혜 (3)
      • 풍경이 되어 (4)
      • Memories (17)
      • 엥겔지수를 높여라 (2)
    • mathematics (6)
      • Matrix Computation (2)
      • RandomProcesses (3)
    • English.. (8)
    • Programming (147)
      • C, C++, MFC (51)
      • C# (1)
      • OpenCV (17)
      • Python (58)
      • Git, Docker (3)
      • Matlab (4)
      • Windows (3)
      • Kinect V2 (2)
      • 기타 etc. (8)
    • 전공관련 (80)
      • Algorithm (6)
      • Deep Learning (54)
      • 실습 프로그램 (4)
      • 주워들은 용어정리 (8)
      • 기타 etc. (8)
    • Computer (118)
      • Utility (21)
      • Windows (31)
      • Mac (4)
      • Ubuntu, Linux (58)
      • NAS (2)
      • Embedded, Mobile (2)
    • IT, Device (41)
      • 제품 사용기, 개봉기 (14)
      • 스마트 체험단 신청 (27)
    • Wish List (3)
    • TISTORY TIP (5)
    • 미분류. 수정중 (1)

태그목록

  • 칼로리 대폭발
  • DSLR
  • 오봉자싸롱
  • 포르투갈
  • review
  • Deep Learning
  • 매트랩
  • 에누리닷컴
  • utility
  • 후쿠오카
  • ColorMeRad
  • SVM
  • ReadString
  • 크롬
  • matlab
  • Computer Tip
  • function
  • matlab function
  • 매트랩 함수
  • 딥러닝
  • random variable
  • DeepLearning
  • CStdioFile
  • 스마트체험단
  • 일본
  • portugal
  • 갤럭시노트3
  • 큐슈
  • LIBSVM
  • Convolutional Neural Networks

달력

«   2025/06   »
일 월 화 수 목 금 토
1 2 3 4 5 6 7
8 9 10 11 12 13 14
15 16 17 18 19 20 21
22 23 24 25 26 27 28
29 30
06-05 09:25

LATEST FROM OUR BLOG

RSS 구독하기

BLOG VISITORS

  • Total :
  • Today :
  • Yesterday :

Copyright © 2015 Socialdev. All Rights Reserved.

티스토리툴바