신경망을 여러번 돌려가면서 MCTS를 돌릴만한 자원도 없고(i5-12400, 3060ti) MCTS 자체를 효율적으로 어떻게 짤지 궁리하려면 지금의 지식으로는 힘들 것 같아...

무엇보다 저번에 제시한 방법(필드 상의 각 점에서 계산된 Q 값 중 배치에 해당되는 평균을 배치의 가치로 결정)은 성능이 떨어지고 그렇다고, 상태-행동 쌍을 하나씩 평가하면서 하기에는 훈련에 너무 오랜 시간이 걸려서(forward pass가 60배 이상 증가) 어떻게 진행해야 할지 막혔음

그래서 일반적인 RL을 따라가서 화면을 보고 직접 조작하는 방식으로 학습시키자는 생각을 함
물론 블록 조작까지 같이 학습시키는 게 비효율적이긴 한데, 미리 계산한 가변적인 수만큼의 배치에 대해서 효율적이면서 정확하게 가치를 매기는 방법을 생각할 수가 없음,,,