SENET처럼 엄청나게 압축하고 확장하는 구조로 짠 하이퍼로 간단하게 2시간 학습시켜보았음.





결과는 매우 잘 나옴



Linear이라 좋은지 아닌지는 사실 알수없음.



이렇게 대폭발도 했어서 정말 좋은지는 검증이 더 필요한데, 특이한 점은 사실 이게 누가 CLIP 이슈 생겨서 테스트하다 만들어진 하이퍼임...


자세한건 이쪽을 참고