HF-NLP-SHARING MODELS AND TOKENIZERS-The Hugging Face Hub
2023. 12. 26. 23:32 |
https://huggingface.co/learn/nlp-course/chapter4/1?fw=pt
The Hugging Face Hub - Hugging Face NLP Course
2. Using 🤗 Transformers 3. Fine-tuning a pretrained model 4. Sharing models and tokenizers 5. The 🤗 Datasets library 6. The 🤗 Tokenizers library 9. Building and sharing demos new
huggingface.co
The Hugging Face Hub
The Hugging Face Hub –- our main website –- is a central platform that enables anyone to discover, use, and contribute new state-of-the-art models and datasets. It hosts a wide variety of models, with more than 10,000 publicly available. We’ll focus on the models in this chapter, and take a look at the datasets in Chapter 5.
당사의 메인 웹사이트인 Hugging Face Hub는 누구나 새로운 최첨단 모델과 데이터 세트를 발견, 사용 및 기여할 수 있는 중앙 플랫폼입니다. 공개적으로 사용 가능한 모델이 10,000개 이상인 다양한 모델을 호스팅합니다. 이번 장에서는 모델에 중점을 두고, 5장에서는 데이터세트를 살펴보겠습니다.
The models in the Hub are not limited to 🤗 Transformers or even NLP. There are models from Flair and AllenNLP for NLP, Asteroid and pyannote for speech, and timm for vision, to name a few.
허브의 모델은 🤗 Transformers나 NLP에만 국한되지 않습니다. NLP를 위한 Flair 및 AllenNLP 모델, 음성을 위한 Asteroid 및 pyannote, 비전을 위한 timm 등의 모델이 있습니다.
Each of these models is hosted as a Git repository, which allows versioning and reproducibility. Sharing a model on the Hub means opening it up to the community and making it accessible to anyone looking to easily use it, in turn eliminating their need to train a model on their own and simplifying sharing and usage.
이러한 각 모델은 버전 관리 및 재현성을 허용하는 Git 저장소로 호스팅됩니다. 허브에서 모델을 공유한다는 것은 해당 모델을 커뮤니티에 공개하고 쉽게 사용하려는 모든 사람이 액세스할 수 있게 함으로써 스스로 모델을 교육할 필요가 없어지고 공유 및 사용이 단순화된다는 의미입니다.
Additionally, sharing a model on the Hub automatically deploys a hosted Inference API for that model. Anyone in the community is free to test it out directly on the model’s page, with custom inputs and appropriate widgets.
또한 허브에서 모델을 공유하면 해당 모델에 대해 호스팅된 추론 API가 자동으로 배포됩니다. 커뮤니티의 누구든지 사용자 정의 입력 및 적절한 위젯을 사용하여 모델 페이지에서 직접 자유롭게 테스트할 수 있습니다.
The best part is that sharing and using any public model on the Hub is completely free! Paid plans also exist if you wish to share models privately.
가장 좋은 점은 허브에서 공개 모델을 공유하고 사용하는 것이 완전히 무료라는 것입니다! 모델을 개인적으로 공유하려는 경우 유료 플랜도 있습니다.
The video below shows how to navigate the Hub.
아래 비디오는 허브를 탐색하는 방법을 보여줍니다.
https://youtu.be/XvSGPZFEjDY?si=5NkyqxOWObP4BKVb
Having a huggingface.co account is required to follow along this part, as we’ll be creating and managing repositories on the Hugging Face Hub: create an account
Hugging Face Hub에서 리포지토리를 생성하고 관리할 것이므로 이 부분을 수행하려면 Huggingface.co 계정이 필요합니다. 계정을 만드세요.
'Hugging Face > NLP Course' 카테고리의 다른 글
| HF-NLP-SHARING MODELS AND TOKENIZERS-End-of-chapter quiz (0) | 2023.12.27 |
|---|---|
| HF-NLP-SHARING MODELS AND TOKENIZERS-Part 1 completed! (1) | 2023.12.27 |
| HF-NLP-SHARING MODELS AND TOKENIZERS-Building a model card (0) | 2023.12.27 |
| HF-NLP-SHARING MODELS AND TOKENIZERS-Sharing pretrained models (0) | 2023.12.27 |
| HF-NLP-SHARING MODELS AND TOKENIZERS-Using pretrained models (0) | 2023.12.27 |
| HF-NLP-FINE-TUNING A PRETRAINED MODEL-Fine-tuning, Check! (1) | 2023.12.26 |
| HF-NLP-FINE-TUNING A PRETRAINED MODEL-A full training (1) | 2023.12.26 |
| HF-NLP-FINE-TUNING A PRETRAINED MODEL-Fine-tuning a model with the Trainer API (1) | 2023.12.26 |
| HF-NLP-FINE-TUNING A PRETRAINED MODEL-Processing the data (1) | 2023.12.26 |
| HF-NLP-FINE-TUNING A PRETRAINED MODEL-Introduction (0) | 2023.12.26 |