[AI] 경험 리플레이 ( experience replay )

 

 

왜 학습은 나중에 해야하는가?

경험들을 기억 속에 저장해놨다가 나중에 학습해야하는 이유는 무엇일까?

 

그 이유는 맥락을 파악하기 위해서이다. 크게 보기 위해서다.

앞뒤 좌우를 판단해서 정말로 그 경험에 대한 결과가 맞는지 판단할 수 있다.

 

만약 일대일 대응으로 경험한 즉시 학습을 해버리면 사기를 당하게 된다.

집을 보러다니는데 집주인이 향수를 뿌려놓은 것에 기분이 좋아져서 집을 곧바로 계약해버릴 수 있다.

그저 잠시 내려놓고 시간을 보내는 것만으로 다른 집들에 대한 데이터가 쌓인다.

넓은 범위의 데이터를 하나의 단위로써 학습할 때 비로소 정말로 그 집이 좋은지 올바른 학습을 할 수 있게 된다.

보상을 많이 얻더라도 그것이 편향된 것이라면 학습데이터로 사용하지 않아야만한다.