ML/도서

13장 텐서플로에서 데이터 적재와 전처리하기

열심히해요 2021. 7. 25. 23:08
  • tensorflow에서 제공해주는 데이터 API를 알아본다.
  • 데이터 전처리 층을 만들어 본다.
  • etc..

 

1. 데이터 API

  • 데이터 셔플링
  • 데이터 전처리
  • Prefetch : 한 batch에서 알고리즘이 학습하는 동안 다음 batch를 준비하여 훈련 수행시간을 줄이는 방식

2. TFRecord 포맷

  • TFRecord 쓰기/읽기
  • TFRecord의 프로토콜 버퍼(protocol buffer) 포맷을 이용해 데이터 다루기

3. 전처리

  • one-hot Encoding
  • Embedding(representation learning)

 

4. etc..