처음 AI로 게임 만들기를 하다 타워디펜스가 쉬워보여 이걸로 진행했었고
어느정도 실행이 되는걸 확인한 뒤 제가 계속 플레이해 가면서 밸런스 맞추기 귀찮아서 오토봇을 만들기 시작했슴미다
오토봇으로 바로 투입해서 학습과 밸런스를 찾아 달라 했는데 이게 메크로가 아니기 때문에 아무것도 몰라서 처음부터 새로 학습해야 한다고 해서 핑퐁부터 시작해서 게임들을 학습시켰슴미다
그러다 이왕이면 생산성이 있는 작업도 해 보자 해서 주식용 리포트 해 주는 모델 커스텀 해 보자 해서 여러 로컬 모델 다운받아서 사용해 봤는데 이걸 파인튜닝해 줘야 하는데 필요한 질 좋은 데이터들과 주가보는 방법 뉴스와 주가와 이벤트의 상관관계를 학습시키는데.....
phi4 14b 모델을 메인 모델로 정해서 학습을 시켰었슴미다 대략 12000개 정도 그런데 문제는 이게 컨택스트가 16k모델이고 32k모델이 있는데 이건 한글이 깨져나옴미다 그래서 다시 찾는데 qwen3 14b 모델이 128k라서 이걸 파인튜닝 새로 하는데 기존 phi4 보다 질이 떨어 짐미다
그래서 이건 질 좋은 데이터를 양으로 승부해서 집어 넣어야 한다라는 생각에 도달 phi4는 12000개 였지만 qwen3는 22000개를 목표로 데이터 정제 작업을 돌리고 있슴미다
그리고 오토봇이 게임을 계속 하는데 문제는 리워드를 제가 계속 미세조정을 해 줘야 해서 이것도 AI통해 자동화를 시도 했지만 로컬모델로는 지금 당장 감당을 하지 못 해서 클라우드모델로 미세조정을 하니 잘 됨미다 그래서 결론은 오토봇도 어짜피 AI고 로컬모델도 있으니 로컬모델을 당분간 리워드 데이터를 학습시켜서 괜찮은 방향으로 된다면 그걸 바탕으로 오토봇도 리워드 데이터 학습을 시켜서 올인원 제품으로 만들 수 있지 않을까???? 해서
제 AI에이전트에게 다 시키고 있슴미다
오래 걸릴거 같아요
