허깅페이스 15T 데이터셋 공개ㄷㄷ - Ai 언어모델 로컬 채널

Ai 언어모델 로컬 채널

알림 알림 중 알림 취소

구독자 3310명 알림수신 163명 @바바리맨

제한없는 언어모델을 위한 채널

일반 허깅페이스 15T 데이터셋 공개ㄷㄷ

qnqnqn

추천 12 비추천 0 댓글 20 조회수 1329 작성일 2024-04-21 09:16:11

https://arca.live/b/alpaca/104195018

https://x.com/gui_penedo/status/1781953413938557276?s=46&t=wb8N3QmbKOwoEwsZ5Tg61g

https://huggingface.co/datasets/HuggingFaceFW/fineweb?fbclid=IwZXh0bgNhZW0CMTEAAR0HTkVtTC4Pdj4Gxues2H_yxaIVu8UQYea7V2h2bC8qk8cdQvEykYrKQlQ_aem_Aax8hY-izgop7wEcBJqDq_LIPgBv5MeY1oza4_8TdHYfOJbq4-BP_XScd_D7-nd07IaIyI4E9WEQjDKPraiDGnJp

ㄷㄷ

댓글 글쓰기

ㅇㅇ (14.37)

2024-04-21 09:36:44 삭제 수정 답글

홀리 쉿

펼쳐보기▼

그래요

2024-04-21 09:44:33 답글

h100 집에 한 10만개 있으면 베이스모델 학습할수 있겠네요

펼쳐보기▼

변태Lv1

2024-04-21 14:34:16 답글

집에서 10만개 돌렸다 아파트에서 집단폭행 당할듯...

펼쳐보기▼

그래요

2024-04-21 15:00:48 답글

10만개 들어가는 집에 사는데 아파트라뇨 ㅜㅜ

펼쳐보기▼

변태Lv1

2024-04-21 15:02:00 답글

*수정됨

데이터센터 지어놓고 집이라 우겨야 ㅋㅋ

펼쳐보기▼

ㅇㅇ (221.141)

2024-04-22 02:32:09 삭제 수정 답글

겉모습만 아파트고 사실 세대 하나하나가 컴퓨터 케이스 ㅋㅋ 아파트 통째로 사야겠네요

펼쳐보기▼

hkhk

2024-04-21 09:49:25 답글

저기서 한국어 부분만 떼서 볼 수 있나 궁금하네요

펼쳐보기▼

딸기맛봇치

2024-04-21 09:52:57 답글

영어 데이터셋이라네요ㅠㅠ

펼쳐보기▼

1945Y

2024-04-21 12:36:40 답글

100% 영어..

펼쳐보기▼

hkhk

2024-04-21 12:57:15 답글

제일 가까운게 이거네요 https://huggingface.co/datasets/lcw99/cc100-ko-only

huggingface.co

lcw99/cc100-ko-only · Datasets at Hugging Face

We’re on a journey to advance and democratize artificial intelligence through open source and open science.

제일 가까운게 이거네요

펼쳐보기▼

maywell

2024-04-21 13:03:13 답글

퀄리티가 너무 많이 아쉬운..

펼쳐보기▼

ㅇㅇ

2024-04-21 17:54:17 답글

> 꼭 찾으려 했던 황금의제국카지노 정보 잘보고 갑니다^~^
ㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋ

펼쳐보기▼

ㅇㅇ (210.91)

2024-04-22 04:44:35 삭제 수정 답글

번역 과정에 무슨 일이 있었는지 왠만한 row에 다 황금의 제국카지노가 들어갔네요
AI로 번역 돌리다 생긴일 같은데 원인이 궁금할 정도네요

펼쳐보기▼

변태Lv1

2024-04-21 14:33:20 답글

와 ㄷㄷ

펼쳐보기▼

이게예술이지ㅋㅋ

2024-04-21 16:04:55 답글

이런 미친;;; 얘네들 뭐 잘못먹음?

펼쳐보기▼

맥북에어좋아

2024-04-21 17:06:20 답글

이하비스

2024-04-21 18:37:15 답글

하늘의아리아

2024-04-22 07:32:39 답글

뮤구리

2024-04-22 11:19:58 답글

파일 사이즈가 45테라바이트 ...?

펼쳐보기▼

돌돌돌돌

2024-04-24 08:25:03 답글

개인이 쓸수있나요? 들어가는 저장장치도 못구할거같은데;

펼쳐보기▼

글쓰기

전체글 개념글

최근 최근 방문 채널

최근 방문 채널

전체 일반 질문 정보 학습 자료 자작모델 스터디 공지 운영 공모

번호 제목

작성자 작성일 조회수 추천

공지 아카라이브 모바일 앱 이용 안내(iOS/Android)

*ㅎㅎ 2020.08.18 27966318

공지 Ai 언어모델 로컬 채널 이용규정

바바리맨 2023.04.18 5740

공지 뉴비에게 도움 되는 글 모음

바바리맨 2023.04.18 25953

공지 언어모델 관련 정보취득 /무료체험 가능 사이트

바바리맨 2023.04.18 8393

공지 여러분의 학습에 도움을 줄 수 있는 하드웨어 지원

557 일반 ai expo 코리아 왔는데 사람 엄청 많음 + 관람 후기 [19]

hkhk 2024.05.03 835 17

556 정보 모델은 얼마나 벤치마크에 과적합 되어 있은가?: GSM-1k [10]

jackofmaster 2024.05.02 847 13

555 일반 Llama-3-8B-Instruct & 한국어 모델들에 "DJ DJ pump this party"로 테스트를 해봤습니다 [4]

ㅇㅇ 2024.05.01 1235 18

554 일반 라마3 토크나이저 기반 소형 모델 l3-211m [2]

maywell 2024.04.30 1052 22

553 일반 1-딸깍 is all you need. 컨텍 확장, 채팅 모델 제작을 단 한번의 클릭으로. [42]

maywell 2024.04.28 2969 50

552 정보 나이지리아 인들이 AI 에 독을 풀었다. [14]

hkhk 2024.04.27 1761 23

551 정보 교내 산학협력으로 직접 구축한 윤리, 편향 대응 일상대화 데이터셋 [11]

pyross 2024.04.27 922 31

550 일반 Llama-3-8B-Instruct 262k 컨텍스트 확장 출시 [16]

사과는맛있어맛있으면바나나 2024.04.26 1295 12

549 일반 초딩도 할 수 있는 컨텍 확장 가이드 [24]

maywell 2024.04.27 1811 23

548 일반 NurtureAI <- 여기 모델 사용하지 마시길 [7]

maywell 2024.04.25 1230 11

547 일반 vLLM 소형 모델 인퍼런스 느낀점 및 팁 [18]

maywell 2024.04.25 1033 20

546 일반 라마3 시대를 맞이하여 새로 정보 공지글 정리하려고 합니다. [25]

hkhk 2024.04.25 1380 29

545 정보 애플의 완전 오픈소스 모델: OpenELM [12]

jackofmaster 2024.04.24 1311 14

544 일반 젠장 또 라마3야 [11]

사과는맛있어맛있으면바나나 2024.04.23 1343 16

543 스터디 감쇠병합 - 모델의 레이어를 자기복제해서 추론능력을 향상시키는 방법 (feat. 3blue1brown) [5]

hkhk 2024.04.22 918 19

542 일반 허깅페이스 15T 데이터셋 공개ㄷㄷ [20]

qnqnqn 2024.04.21 1330 12

541 자작모델 llama3-uncensored모델을 파인튜닝 해봤습니다. [5]

Pi 2024.04.19 593 14

540 일반 chat 모델에 completion(raw) 데이터를 어떻게 학습 할 수 있을까? [16]

maywell 2024.04.20 1221 28

539 일반 효율적인 무한 컨텍스트 변환기(비공식) [4]

zzzzz5 2024.04.19 907 12

538 정보 meta가 향후 출시할 llama3모델들 [10]

ㅇㅇ 2024.04.18 1335 14

글쓰기

전체글 개념글

사용하고 계신 브라우저가 시간대 설정을 지원하지 않으므로 GMT 시간대가 적용됩니다.