돌리가 GPT-J 6B 기반이라 했잖아 더 큰 버전은 없음? - Ai 언어모델 로컬 채널

Ai 언어모델 로컬 채널

알림 알림 중 알림 취소

구독자 3538명 알림수신 174명 @바바리맨

제한없는 언어모델을 위한 채널

질문 돌리가 GPT-J 6B 기반이라 했잖아 더 큰 버전은 없음?

추천 0 비추천 0 댓글 11 조회수 229 작성일 2023-03-26 06:17:29

⚠️ 이 게시물은 작성자가 삭제할 수 없도록 설정되어 있습니다.

https://arca.live/b/alpaca/72635436

오픈소스로 공개된 모델 중 30B 사이즈 모델은 없는거야??

댓글 [11] 글쓰기

2023-03-26 06:17:39 답글

*수정됨

LLaMA 제외

펼쳐보기▼

2023-03-26 06:25:02 답글

라마가 괜히 핫했던게 아님

펼쳐보기▼

hkhk

2023-03-26 06:30:20 답글

있음. OPT 같은 모델은 페이스북이 허깅에 그대로 올려놓음
https://huggingface.co/facebook/opt-66b

facebook/opt-66b · Hugging Face

We’re on a journey to advance and democratize artificial intelligence through open source and open science.

있음. OPT 같은 모델은 페이스북이 허깅에 그대로 올려놓음
https://huggingface.co/facebook/opt-66b

펼쳐보기▼

2023-03-26 06:31:39 답글

이거로 로컬용 만드는건 어렵나 쩝

펼쳐보기▼

hkhk

2023-03-26 06:32:52 답글

로컬용으로 돌아가려면 일단 8비트나 4비트 양자화를 돌려야 함. 그리고 파인튜닝도 해야 하고. 아직 라마 모델도 양자화나 파인튜닝을 이제 막 시작한지 얼마 안되서 결과가 쌓인게 많지 않으니 좀 기다려봐야 하지 않을까

펼쳐보기▼

2023-03-26 06:36:07 답글

어쨌든 저 OPT라는것도 양자화랑 튜닝이 가능은 한거지? 렙틸리언 새끼 저건 왜 공유해줌?ㅋㅋ

펼쳐보기▼

2023-03-26 06:52:06 답글

opt 이후에 나온 모델이 llama 모델아님? 같은 페북의 전 모델이라면 라마 대신 손 댈 가치가 있음?

펼쳐보기▼

2023-03-26 06:59:39 답글

*수정됨

Llama는 DMCA 먹을 수 있지만 저건 페북이 직접 뿌린거잖아 피그말리온 가지고 뻘짓하는것 보단 저거 손대는게 100배 빠르지 ㅋㅋ

펼쳐보기▼

2023-03-26 07:07:11 답글

*수정됨

라마 방주도 생겨서 딱히 문제없고 opt보다 llama가 후발주자 모델이라 난 큰 의미없다 생각함 현재 풀린 모델중엔 라마가 원탑이라 봄

펼쳐보기▼

2023-03-26 07:12:32 답글

*수정됨

ㅇㅇ 동의함. 그리고 내 생각엔 길게 잡아 3년정도면 꽤 쓸만한 놈이 나올거 같음
개인적으로 AI 채팅 채널이 진짜 중독자 마냥 이미 죽어버린 GPT4 이야기만 해서 아쉬움

펼쳐보기▼

2023-03-26 07:23:46 답글

챗챈은 즐기는 정보가 넘쳐서 ai모델 정보가 파편화 되더라고 그래서 여기다 정보 모아놓는중 일단 관심 있는 사람한테는 한눈에 들어와서 편할거아니야

펼쳐보기▼

전체글 개념글

최근 최근 방문 채널

최근 방문 채널

전체 일반 질문 정보 학습 자료 자작모델 스터디 공지 운영 공모

번호 제목

작성자 작성일 조회수 추천

공지 아카라이브 모바일 앱 이용 안내(iOS/Android)

*ㅎㅎ 2020.08.18 31481586

공지 Ai 언어모델 로컬 채널 이용규정

바바리맨 2023.04.18 6294

공지 뉴비에게 도움 되는 글 모음

바바리맨 2023.04.18 28627

공지 언어모델 관련 정보취득 /무료체험 가능 사이트

바바리맨 2023.04.18 9505

공지 여러분의 학습에 도움을 줄 수 있는 하드웨어 지원

바바리맨 2023.08.01 5490

공지 신문고

바바리맨 2023.04.18 2367

숨겨진 공지 펼치기(1개)

정보 llama_index - 언어모델에서 외부데이터에 접근할 수 있게 해주는 기술 [3]

hkhk 2023.03.26 183 3

정보 완전 무료로 3GB VRAM에서도 초고속으로 움직이는 14B 대규모 언어 모델 RWKV를 사용해 보세요. [8]

hkhk 2023.03.26 300 5

일반 llama.cpp 업데이트가 너무 활발해서 [1]

kukukaka 2023.03.26 267 0

학습 알파카 모델의 파인튜닝용 데이타를 만든 원리에 대한 간단한 설명 [3]

hkhk 2023.03.26 234 3

학습 나만의 챗봇 만들기 스타터킷 - Build your own ChatGPT starter kit [2]

hkhk 2023.03.26 348 1

학습 카카오 채팅 한글 데이터셋 [1]

hkhk 2023.03.26 313 1

질문 할아버지께서 컴퓨터 원하면 사주신다는데 [7]

ㅇㅇ 2023.03.26 318 0

일반 여기가 국내 최대의 AI로컬 커뮤니티 맞지? [3]

티큐스큐 2023.03.26 267 1

자료 LLaMA chat webui 제작중 (cpp기반-챈럼발) [8]

변태Lv1 2023.03.26 380 2

질문 나름 규격에 맞다고 생각해서 알파카 돌려봤는데 [18]

여린늅이 2023.03.26 338 0

질문 돌리가 GPT-J 6B 기반이라 했잖아 더 큰 버전은 없음? [11]

ㅇㅇ 2023.03.26 230 0

학습 소셜 네트워크상에서 오고간 텍스트 데이타셋 [4]

hkhk 2023.03.26 273 1

학습 한국어 파인튜닝 생각하는 사람은 이 사이트 참고해 [1]

티큐스큐 2023.03.26 370 3

학습 야인시대 전체 대본 모음집 게시물 링크 [1]

hkhk 2023.03.26 250 1

학습 서양 야설 사이트 liberotica 외 2종 링크 + 스크레이핑 스크립트 [3]

hkhk 2023.03.26 433 2

질문 라마 돌리는 법 질문 [23]

펭귀니조아 2023.03.26 246 0

일반 알파카나 돌리 한글 학습으로 해보고 싶은 목표 [4]

hkhk 2023.03.26 287 4

정보 KoAlpaca 30B 로라 배포 [2]

펭귀니조아 2023.03.26 297 2

일반 LLAMA gui로 돌려보는데 재밌다 [3]

펭귀니조아 2023.03.26 199 1

정보 [윈도우] text-generation-webui(우바부가)로 llama(라마)를 돌려보자 [96]

변태Lv1 2023.03.25 11734 11

전체글 개념글