Thenlper: GTE-Large
يحوّل Alibaba DAMO Academy GTE-large النص الإنجليزي إلى متجهات من 1024 بُعدًا للاسترجاع والتشابه الدلالي وإعادة الترتيب القائمة على التضمينات. وتستخدم طريقته المرجعية التجميع بالمتوسط والتطبيع الاختياري وطول تسلسل أقصى من 512 رمزًا.
عن النموذج
يغطي هذا الوصف قدرات النموذج. وترد أدناه المدخلات والمخرجات والخيارات المتاحة في Ailoot للطريقة المحددة.
GTE-large هو نموذج General Text Embeddings بحجم Large الذي درّبته Alibaba DAMO Academy. وهو مُرمِّز للنص الإنجليزي يعتمد أساسًا على إطار BERT، ويقدّم تمثيلًا كثيفًا من 1024 بُعدًا لكل مدخل. وتدرّب الشركة المصنّعة عائلة GTE على أزواج نصية مرتبطة من مجالات مختلفة، وتحدّد الاسترجاع والتشابه الدلالي للنصوص وإعادة ترتيب النصوص تطبيقاتٍ لاحقة.
مثّل محتوى القسم
جهّز المقطع الإنجليزي الذي ينبغي مقارنته باستعلام البحث. وفي مجموعة تقارير تقنية، احتفظ بموضوع القسم القصير والملاحظة الواردة فيه والشرط ذي الصلة. وينبغي لتقرير يصف اهتزازًا لا يظهر إلا تحت حمل معيّن أن يحافظ على ذلك الشرط، بدلًا من ترك عبارة عامة عن الاهتزاز.
احتفظ بمعرّفات المصادر وعناوين المستندات ومواضع الأقسام مع المتجهات المخزّنة. ويمكن لاستعلام استرجاع أقسام مرشّحة، بينما يظل التقرير الأصلي متاحًا للتحقق من المعدّات والشرط والاستنتاج. ويوفّر التضمين تمثيلًا رقميًا لمحتوى المقطع.
التجميع والتطبيع واستخدام المتجهات
تستخدم الطريقة المنشورة التجميع بالمتوسط لتمثيلات الرموز مع قناع الانتباه، مع استبعاد الحشو من المتوسط. وتعرض أيضًا تطبيعًا اختياريًا وفق L2، تتبعه مقارنة بالضرب النقطي للمتجهات المطبَّعة. ويستخدم مثال Sentence Transformers تشابه جيب التمام.
احتفظ بإعدادات التجهيز والتجميع والمقارنة نفسها عبر المجموعة وجانب الاستعلام. ويحتوي كل تمثيل على 1024 مكوّنًا. والعدد الأكبر من المكوّنات تفصيل يخص الإصدار؛ ولا يثبت إمكانية مزج متجهات GTE-large بتمثيل GTE-base ذي 768 بُعدًا أو بمُرمِّز آخر ذي 1024 بُعدًا.
يمكن لسير عمل إعادة الترتيب مقارنة تضمين الاستعلام بمجموعة من تضمينات المرشّحين المسترجعة مسبقًا وإعادة ترتيب تلك السجلات. وحافظ على التمييز بين مقارنة المتجهات هذه ونموذج منفصل يقيّم زوج الاستعلام والمقطع معًا.
طول المدخلات والقصر على الإنجليزية
تقصر البطاقة هذا النموذج تحديدًا صراحةً على النص الإنجليزي، وتقتطع المدخلات الطويلة إلى 512 رمزًا كحد أقصى. قسّم التقرير التقني الطويل إلى أقسام مترابطة، واحتفظ بسياق محلي كافٍ حتى يكون كل قسم مفهومًا بمفرده. وإذا اعتمدت جملة على قيد سابق، فاحتفظ بذلك القيد في الوحدة المفهرسة نفسها عندما يتسع له المدخل.
يختلف حد الرموز عن عدد الكلمات الظاهر. تحقّق من طول القسم المجهّز، وتأكد من أن التفصيل اللازم للبحث المقصود لا يقع بعد الجزء المحتفَظ به إثر الاقتطاع.
افحص الأدلة المسترجعة
في تطبيق للبحث في التقارير، اعرض الأقسام المرشّحة مع مواضعها في المصادر وافحص محتواها الفعلي. فقد تكون للملاحظات المتشابهة أسباب أو توصيات مختلفة. ويساعد تقييم المتجه على ترتيب المرشّحين وفق إعداد المقارنة المختار؛ لكنه لا يثبت انطباق استنتاج التقرير على حالة جديدة.
في RAG، استخدم الأقسام المختارة سياقًا مصدريًا لمرحلة كتابة الإجابة، واحتفظ بروابطها بالمستندات. ويوفّر ملف GTE-large المحدد هذا تضمينات إنجليزية كثيفة من 1024 بُعدًا وحد مدخلات من 512 رمزًا. ولإصدارات GTE اللاحقة المتعددة اللغات أو الموسّعة السياق هويات منفصلة، لذا لا تُستنتج تغطيتها اللغوية أو إعدادات مدخلاتها من اسم عائلة هذه النسخة.
Ailoot Ultra · التضمينات POST /v1/embeddings thenlper/gte-large
thenlper/gte-largeالبداية
يحوّل Alibaba DAMO Academy GTE-large النص الإنجليزي إلى متجهات من 1024 بُعدًا للاسترجاع والتشابه الدلالي وإعادة الترتيب القائمة على التضمينات. وتستخدم طريقته المرجعية التجميع بالمتوسط والتطبيع الاختياري وطول تسلسل أقصى من 512 رمزًا.
- المدخلات المقبولة
- النص · token_ids
- النتائج
- embedding
متاح في Ailoot · المدخلات والطرائق
Ailoot Ultra · التضمينات POST /v1/embeddings
- الإدخال
text,token_ids- الإخراج
embedding- صيغة الإخراج
- json
| الحقل | النوع | المتطلب | القيم والحدود | القيمة الافتراضية |
|---|---|---|---|---|
الحقلmodel | النوعstring | المتطلبمطلوب | القيم والحدود thenlper/gte-large | القيمة الافتراضية— |
الحقلinput | النوعstring|string[]|integer[]|integer[][] | المتطلبمطلوب | القيم والحدود الحد الأدنى للعناصر: 1 الشروط: دفعة متجانسة غير فارغة. معرّفات التوكنات أعداد صحيحة غير سالبة. سعة الإدخال: الحد الأقصى: 512 · وحدة النص: بايتات UTF8 · وحدة الرموز: عناصر مصفوفة الرموز | القيمة الافتراضية— |
الحقلencoding_format | النوعstring | المتطلباختياري | القيم والحدود float | القيمة الافتراضيةfloat |
الحقلdimensions | النوعinteger | المتطلبغير مدعوم | القيم والحدود الحد الأدنى: 1 | القيمة الافتراضية— |
الحقلuser | النوعjson_value | المتطلباختياري | القيم والحدود الشروط: يسمح المصدر بحقل البيانات الوصفية هذا بصيغة JSON؛ ويعتمد المعنى الدقيق لدى المزوّد الأصلي على النموذج. | القيمة الافتراضية— |
الحقلsession_id | النوعjson_value | المتطلباختياري | القيم والحدود الشروط: يسمح المصدر بحقل البيانات الوصفية هذا بصيغة JSON؛ ويعتمد المعنى الدقيق لدى المزوّد الأصلي على النموذج. | القيمة الافتراضية— |
الحقلtrace | النوعjson_value | المتطلباختياري | القيم والحدود الشروط: يسمح المصدر بحقل البيانات الوصفية هذا بصيغة JSON؛ ويعتمد المعنى الدقيق لدى المزوّد الأصلي على النموذج. | القيمة الافتراضية— |
الحقلprovider | النوعobject | المتطلباختياري | القيم والحدود الشروط: تم رفض provider.options | القيمة الافتراضية— |
تركيبات مواد الإدخال
text_to_embedding
معلمات الطريقة ودورة حياتها
| المعلمة | المواصفات |
|---|---|
المعلمةcontent_type | المواصفاتapplication/json |
المعلمةrequired | المواصفاتmodel, input |
المعلمةinput_shapes | المواصفاتstring, string[], nonnegative_integer_token_array, nonnegative_integer_token_array[] |
المعلمةencoding_format | المواصفاتfloat |
المعلمةdimensions_override | المواصفاتfalse |
المعلمةmax_input_budget_units | المواصفات512 |
المعلمةmultimodal_objects | المواصفاتfalse |
المعلمةmaterial_types | المواصفاتtext, token_ids |
دورة الحياة: synchronous_json
احتفظ بفهرس كل متجه وبُعده.
اسم النموذج متعدد الوسائط لا يتيح استخدام كائنات الصور على هذا المسار المحدد.
الباقات
مراجع التسعير لا تضيف خيارات للطلب. المعلمات المدعومة مذكورة للطريقة المحددة.
- الوضع السريع
- غير محدد عند اختيار الوضع السريع
- الوضع المرن
- غير محدد عند اختيار وضع flex
- أقصى جهد للاستدلال
- غير محدد عندما يُطبَّق الضبط الافتراضي default مع أقصى جهد للاستدلال
تعرفات Ailoot
الأسعار حسب الإعدادات
| الإعدادات | جدول التعرفة | الرسوم |
|---|---|---|
| الإعداداتالتعرفات الأساسية للرموز | جدول التعرفةالتعرفة الأساسية | الرسوم الإدخال · رموز الإدخال $0.00002 / 1K من الرموز الإخراج · رموز الإخراج $0 / 1K من الرموز الإدخال · قراءة ذاكرة التخزين المؤقت — / 1K من الرموز الإدخال · الكتابة إلى ذاكرة التخزين المؤقت — / 1K من الرموز الإدخال · الكتابة إلى ذاكرة التخزين المؤقت، 1 ساعة — / 1K من الرموز |
تحجز Ailoot مبلغًا تقديريًا قبل الطلب. وبعد ظهور النتيجة، تُسوّي الرسوم النهائية بناءً على الاستخدام المقاس. وتستخدم تسوية البث سجل الاستخدام النهائي. كيفية عمل حجز المبلغ وتسوية الرسوم →
أمثلة للطلبات
Ailoot Ultra · التضمينات
set -eu
: "${AILOOT_API_KEY:?Set your Ailoot API key}"
python3 - <<'PY_REQUEST'
import json,os
from pathlib import Path
p=json.loads('{"model": "thenlper/gte-large", "input": ["First document", "Second document"]}')
Path("request.json").write_text(json.dumps(p,ensure_ascii=False))
PY_REQUEST
curl --fail-with-body --silent --show-error https://api.ailoot.ai/v1/embeddings \
-H "Authorization: Bearer $AILOOT_API_KEY" -H 'Content-Type: application/json' \
--data-binary @request.json -D response-headers.txt -o result.json
python3 - <<'PY_RESULT'
import json
from pathlib import Path
r=json.loads(Path("result.json").read_text())
for x in r.get("data",[]): print(json.dumps({"index":x.get("index"),"embedding":x.get("embedding")}))
PY_RESULT
from openai import OpenAI
import os
client=OpenAI(base_url="https://api.ailoot.ai/v1",api_key=os.environ["AILOOT_API_KEY"],max_retries=0)
result=client.embeddings.create(model='thenlper/gte-large',input=["First document","Second document"])
print(result)
for item in result.data:print(item.index,item.embedding)
استلام النتائج وحفظها
Ailoot Ultra · التضمينات
json
الاحتفاظ بكل النتائج المكتملة
احتفظ بكل استجابة كاملة وكل ملف وجزء محتوى تم إرجاعه.
احتفظ بكل متجه مع فهرسه. يجب أن يساوي عدد المتجهات عدد المدخلات، وأن تكون الأبعاد متسقة.
عند الحاجة إلى التحقق من الاستجابة الأصلية
لا تُستحدث نقطة نهاية لمهام التضمين.
حقول الاستجابة
| الحقل | النوع |
|---|---|
الحقلobject | النوعstring |
الحقلmodel | النوعstring |
الحقلdata[].index | النوعinteger |
الحقلdata[].embedding | النوعfinite float[] |
الحقلusage | النوعobject |
الأخطاء والخطوات التالية
| الاستجابة | الشرط | الخطوة التالية |
|---|---|---|
الاستجابة400 · invalid_request_error | الشرطحقول مطلوبة أو تمثيل مادة أو قيمة معلمة غير صحيحة | الخطوة التاليةصحّح الحقول المحددة قبل طلب إنشاء جديد. |
الأسماء البديلة
الأسماء البديلة للنموذج
Ailoot Ultra thenlper/gte-large
الأسماء البديلة لمسارات الطرائق
استخدم مسارات الطرائق المعروضة أعلاه.
معرّفات النماذج ذات الصلة IDs
FAQ · Thenlper: GTE-Large
- ما المدخلات والنتائج المتاحة؟
POST /v1/embeddings·thenlper/gte-large:text,token_ids→embedding- ما الحقول التي يستخدمها الطلب؟
POST /v1/embeddings·thenlper/gte-large:model,input,encoding_format,provider- ما الحدود المطبقة؟
POST /v1/embeddings·thenlper/gte-large:input.budget.maximum:512(بايتات UTF8);input.min_items:1