Paust

Rank:

Average Model Cost: $0.0000

Number of Runs: 11,473

Models by this creator

pko-t5-large

pko-t5-large Source Code pko-t5 는 한국어 전용 데이터로 학습한 t5 v1.1 모델입니다. 한국어를 tokenize 하기 위해서 sentencepiece 대신 OOV 가 없는 BBPE 를 사용했으며 한국어 데이터 (나무위키, 위키피디아, 모두의말뭉치 등..) 를 T5 의 span corruption task 를 사용해서 unsupervised learning 만 적용하여 학습을 진행했습니다. pko-t5 를 사용하실 때는 대상 task 에 파인튜닝하여 사용하시기 바랍니다. Usage transformers 의 API 를 사용하여 접근 가능합니다. tokenizer 를 사용할때는 T5Tokenizer 가 아니라 T5TokenizerFast 를 사용해주십시오. model 은 T5ForConditionalGeneration 를 그대로 활용하시면 됩니다. Example Klue 평가 (dev) FT: 싱글태스크 파인튜닝 / MT: 멀티태스크 파인튜닝 Baseline: KLUE 논문에서 소개된 dev set 에 대한 SOTA 점수 License PAUST에서 만든 pko-t5는 MIT license 하에 공개되어 있습니다.

$-/run

8.0K

Huggingface

pko-t5-small

paust

No description available.

$-/run

2.4K

Huggingface

pko-t5-base

paust

pko-t5-base Source Code pko-t5 는 한국어 전용 데이터로 학습한 t5 v1.1 모델입니다. 한국어를 tokenize 하기 위해서 sentencepiece 대신 OOV 가 없는 BBPE 를 사용했으며 한국어 데이터 (나무위키, 위키피디아, 모두의말뭉치 등..) 를 T5 의 span corruption task 를 사용해서 unsupervised learning 만 적용하여 학습을 진행했습니다. pko-t5 를 사용하실 때는 대상 task 에 파인튜닝하여 사용하시기 바랍니다. Usage transformers 의 API 를 사용하여 접근 가능합니다. tokenizer 를 사용할때는 T5Tokenizer 가 아니라 T5TokenizerFast 를 사용해주십시오. model 은 T5ForConditionalGeneration 를 그대로 활용하시면 됩니다. Example Klue 평가 (dev) FT: 싱글태스크 파인튜닝 / MT: 멀티태스크 파인튜닝 Baseline: KLUE 논문에서 소개된 dev set 에 대한 SOTA 점수 License PAUST에서 만든 pko-t5는 MIT license 하에 공개되어 있습니다.

$-/run

862

Huggingface

pko-flan-t5-large

paust

No description available.

$-/run

110

Huggingface

pko-t5-base-finetuned-korquad

paust

Platform did not provide a description for this model.

$-/run

Huggingface

pko-chat-t5-large

paust

Platform did not provide a description for this model.

$-/run

Huggingface

Paust

Models by this creator

pko-t5-large

pko-t5-small

pko-t5-base

pko-flan-t5-large

pko-t5-base-finetuned-korquad

pko-chat-t5-large

Similar creators