text-embeddings-inference documentation

استضافة النماذج الخاصة والمقيّدة

Hugging Face's logo
Join the Hugging Face community

and get access to the augmented documentation experience

to get started

استضافة النماذج الخاصة والمقيّدة

إذا كان النموذج الذي ترغب في تقديمه محميًا بوصول مقيد أو موجود في مستودع نماذج خاص على Hugging Face Hub، فستحتاج إلى امتلاك صلاحية الوصول إلى النموذج من أجل تقديمه.

بمجرد أن تتأكد من أنك تملك صلاحية الوصول إلى النموذج:

إذا كنتَ الطرف المسؤول عن سطر الأوامر، فاضبط متغير البيئة HF_TOKEN. على سبيل المثال:

export HF_TOKEN=<YOUR READ TOKEN>

بديلًا عن ذلك، يمكنك تقديم الرمز عند نشر النموذج باستخدام Docker:

model=<your private model>
volume=$PWD/data
token=<your cli Hugging Face Hub token>

docker run --gpus all -e HF_TOKEN=$token -p 8080:80 -v $volume:/data --pull always ghcr.io/huggingface/text-embeddings-inference:cuda-1.9 --model-id $model
Update on GitHub