---
title: "promptfoo openai:chat پرووائیڈر، کسٹم apiBaseUrl کے ساتھ"
description: "openai:chat پرووائیڈر، apiBaseUrl اور apiKeyEnvar سے BroadNet Inference پر promptfoo evals اور ماڈلز کے آمنے سامنے ٹیسٹ چلائیں، گریڈرز کے ساتھ۔"
url: https://broadrouter.com/ur/guides/promptfoo-openai-compatible/
lang: ur
updated: 2026-11-16
publisher: BroadRouter (a BroadNet site); API by BroadNet Inference, https://inference.broadnet.ai
---

یہ صفحہ انگریزی سے AI کی مدد سے ترجمہ کیا گیا ہے۔ [انگریزی اصل پڑھیں](https://broadrouter.com/guides/promptfoo-openai-compatible/) (اپ ڈیٹ: 2026-11-16).

# promptfoo سے BroadNet ماڈلز کی ایویلیوایشن کریں

اپ ڈیٹ 2026-11-16

promptfooconfig.yaml میں openai:chat:broadnet/glm-5.3 والی id کا ایک پرووائیڈر شامل کریں جس کی config میں apiBaseUrl ہو https://inference.broadnet.ai/v1 اور apiKeyEnvar ہو BROADNET\_API\_KEY۔ openai:chat پری فکس رکھیں تاکہ promptfoo ہمیشہ Chat Completions کال کرے، جو BroadNet فراہم کرتا ہے۔ max\_tokens خود سیٹ کریں، کیونکہ promptfoo کی ڈیفالٹ آؤٹ پٹ حد 1,024 ٹوکن ہے۔

promptfoo، پرامپٹس ٹیسٹ کرنے، ماڈلز کا موازنہ کرنے اور LLM ایپس کی red-teaming کے لیے ایک اوپن سورس CLI ہے۔ اس کا OpenAI پرووائیڈر `apiBaseUrl` کے ذریعے OpenAI-compatible گیٹ ویز کے ساتھ کام کرتا ہے۔ BroadNet Inference، `https://inference.broadnet.ai/v1` پر چیٹ کمپلیشنز فراہم کرتا ہے، اس لیے آپ ایک ہی YAML فائل سے BroadNet کے ماڈلز کا آپس میں، یا ان ماڈلز سے جو آپ پہلے سے استعمال کرتے ہیں، موازنہ کر سکتے ہیں۔ BroadRouter، BroadNet کی اپنی سائٹ ہے۔ یہ گائیڈ ریلیز 0.125.1 کے وقت کی promptfoo کی OpenAI پرووائیڈر دستاویزات کے مطابق ہے۔

## سیٹ اپ

```bash
npm install -g promptfoo     # or: npx promptfoo@latest
export BROADNET_API_KEY='your-broadnet-key'
```

## promptfooconfig.yaml

```yaml
description: BroadNet model comparison
prompts:
  - 'What is the capital of Saudi Arabia? Answer in one sentence.'
providers:
  - id: openai:chat:broadnet/glm-5.3
    label: GLM 5.3
    config:
      apiBaseUrl: https://inference.broadnet.ai/v1
      apiKeyEnvar: BROADNET_API_KEY
      max_tokens: 4000
  - id: openai:chat:broadnet/deepseek-v4.1-flash
    label: DeepSeek V4.1 Flash
    config:
      apiBaseUrl: https://inference.broadnet.ai/v1
      apiKeyEnvar: BROADNET_API_KEY
      omitDefaults: true
tests:
  - assert:
      - type: icontains
        value: Riyadh
```

حقیقی کنفیگز میں ٹیسٹ ان پٹس عموماً `tests.vars` میں رکھے جاتے ہیں اور پرامپٹ میں promptfoo کے ڈبل بریس ٹیمپلیٹ سنٹیکس سے استعمال ہوتے ہیں۔ ہم نے یہ کنفیگ فکسڈ رکھی ہے تاکہ یہ جیسی لکھی ہے ویسی ہی چل جائے۔

اسے چلائیں:

```bash
promptfoo eval
promptfoo view   # side-by-side results in the browser
```

## ہر سیٹنگ کیا کرتی ہے

-   **`openai:chat:` اور اس کے بعد BroadNet ID۔** `openai:chat:` کے بعد کا پورا حصہ بھیجا جانے والا ماڈل ID ہے، اس لیے `broadnet/` پری فکس رکھیں۔ واضح طور پر لکھا `chat` حصہ Chat Completions اینڈپوائنٹ طے کر دیتا ہے؛ BroadNet، Responses API فراہم نہیں کرتا۔
-   **`apiBaseUrl`** وہ base URL ہے جس میں `/v1` ہو، لیکن `/chat/completions` نہیں۔ پاتھ promptfoo خود جوڑتا ہے۔
-   **`apiKeyEnvar`** اس ویری ایبل کا نام ہے جس میں آپ کی BroadNet کلید ہے۔ یہ نہ ملے تو promptfoo، `OPENAI_API_KEY` پر واپس نہیں جاتا۔
-   **`max_tokens`**۔ non-reasoning درخواستوں کے لیے promptfoo کے ڈیفالٹس `temperature: 0` اور 1,024 ٹوکن کی حد ہیں۔ BroadNet کے DeepSeek، GLM اور Qwen ماڈلز جواب دینے سے پہلے ریزننگ کرتے ہیں، اس لیے 1,024 پر خالی جوابات آ سکتے ہیں۔ پہلے پرووائیڈر کی طرح زیادہ حد سیٹ کریں۔
-   **`omitDefaults: true`** promptfoo کا ڈیفالٹ temperature اور حد ہٹا دیتا ہے، جیسا کہ دوسرے پرووائیڈر میں ہے۔ تب درخواست میں promptfoo کی طرف سے کوئی آؤٹ پٹ حد نہیں ہوتی۔

## ماڈل سے گریڈ ہونے والی assertions

پرووائیڈر کی سیٹنگز `llm-rubric` جیسے گریڈرز پر لاگو نہیں ہوتیں۔ BroadNet ماڈل سے گریڈ کرنے کے لیے اسے گریڈر کے لیے دوبارہ شامل کریں:

```yaml
defaultTest:
  options:
    provider:
      id: openai:chat:broadnet/glm-5.3
      config:
        apiBaseUrl: https://inference.broadnet.ai/v1
        apiKeyEnvar: BROADNET_API_KEY
        max_tokens: 4000
```

## کن ماڈلز کا موازنہ کریں

| ماڈل | کس کام کے لیے اچھا |
| --- | --- |
| `broadnet/glm-5.3` | ٹول کالنگ اور اسٹرکچرڈ آؤٹ پٹ کے ٹیسٹ |
| `broadnet/qwen3.8-27b` | امیجز، عربی متن یا ٹولز والے ٹیسٹ |
| `broadnet/deepseek-v4.1-flash` | لمبے کانٹیکسٹ اور لاگت کے لحاظ سے حساس ٹیسٹ |
| `broadnet/gemma-4-26b-a4b` | $5 کے ابتدائی کریڈٹ پر مفت ٹیسٹ |

BroadNet کی دستاویزات ٹولز اور اسٹرکچرڈ آؤٹ پٹ صرف GLM 5.3 اور Qwen3.8 27B کے لیے درج کرتی ہیں۔ [ہر ماڈل کی قیمتیں](https://broadrouter.com/ur/pricing/)۔

## ہم نے اسے کیسے ٹیسٹ کیا

2026-11-15 کو ہم نے Node 24 کے ساتھ promptfoo 0.125.1 انسٹال کیا اور اوپر جیسی کنفیگ پر `promptfoo eval` چلایا، جو ایک لوکل موک سرور کی طرف تھی جو BroadNet کی chat-completions ساخت میں بات کرتا ہے۔ ٹیسٹ پاس ہوئے۔ لاگ کی گئی درخواستیں `/v1/chat/completions` پر گئیں، BroadNet ماڈل ID بغیر تبدیلی کے اور Bearer کلید کے ساتھ۔ پہلے پرووائیڈر نے `max_tokens: 4000` اور `temperature: 0` بھیجا؛ `omitDefaults: true` والے پرووائیڈر نے صرف ماڈل اور میسجز بھیجے۔ `BROADNET_API_KEY` سیٹ نہ ہونے پر promptfoo “Missing BROADNET\_API\_KEY” کے ساتھ رک گیا۔ ہم نے گریڈرز ٹیسٹ نہیں کیے، اور ہمارے پاس BroadNet کلید نہیں تھی، اس لیے حقیقی ماڈل آؤٹ پٹ ٹیسٹ نہیں کیا۔

## مسائل کا حل

-   **خالی یا کٹے ہوئے آؤٹ پٹس۔** `max_tokens` بڑھائیں۔ [جوابات خالی کیوں آتے ہیں](https://broadrouter.com/ur/guides/reasoning-tokens-empty-response/)۔
-   **404۔** جانچیں کہ `apiBaseUrl` کے آخر میں `/v1` ہے اور `openai:chat:` کے بعد والے ماڈل ID میں `broadnet/` پری فکس موجود ہے۔ پیڈ ماڈلز کے لیے ٹاپ اپ چاہیے؛ $5 کریڈٹ صرف `broadnet/gemma-4-26b-a4b` اور دونوں Transcribe ماڈلز کو کور کرتا ہے۔
-   **بڑے evals کے دوران 429۔** promptfoo نے ہمارا eval 4 کی concurrency پر چلایا۔ استعمال کے مطابق ادائیگی والی کلید فی منٹ 30 درخواستوں اور بیک وقت 4 جاری درخواستوں کی اجازت دیتی ہے، اس لیے بڑے ٹیسٹ سیٹس کے لیے اسے `promptfoo eval -j 1` سے کم کریں۔ [ایررز اور دوبارہ کوشش](https://broadrouter.com/ur/guides/errors-and-retries/) دیکھیں۔

## اس گائیڈ کی اصطلاحات

[کنکرنسی (concurrency)](https://broadrouter.com/ur/glossary/concurrency/)

کنکرنسی، کسی کلائنٹ کی بیک وقت چل رہی (in-flight) درخواستوں کی تعداد ہے۔ LLM APIs اکثر اس کی حد ہر کلید یا پلان پر، فی منٹ درخواستوں سے الگ رکھتے ہیں، کیونکہ ہر کھلی درخواست جواب مکمل ہونے تک GPU کی گنجائش گھیرے رکھتی ہے۔

[استعمال کے مطابق ادائیگی (pay-as-you-go)](https://broadrouter.com/ur/glossary/pay-as-you-go/)

استعمال کے مطابق ادائیگی (pay-as-you-go) قیمت طے کرنے کا ایک ماڈل ہے جس میں آپ صرف اتنا دیتے ہیں جتنا استعمال کرتے ہیں، ٹوکن، درخواستوں یا آڈیو منٹ جیسی اکائیوں میں ناپ کر، بغیر سبسکرپشن یا کم از کم وابستگی کے۔ زیادہ تر LLM API اسی طرح بل بناتے ہیں، پری پیڈ بیلنس یا وقتاً فوقتاً بننے والی انوائس سے۔

[Eval (LLM ایویلیوایشن)](https://broadrouter.com/ur/glossary/eval/)

Eval (evaluation کا مخفف) کسی لینگویج ماڈل یا پرامپٹ کا دہرایا جا سکنے والا ٹیسٹ ہے: ان پٹس کا ایک مقررہ سیٹ، اچھے آؤٹ پٹ کی وضاحت، اور ایک گریڈر (کوڈ، انسان یا دوسرا ماڈل) جو ہر آؤٹ پٹ کو اسکور کرتا ہے، تاکہ مختلف ورژنز کا موازنہ ہو سکے۔

[اسٹرکچرڈ آؤٹ پٹ (structured output)](https://broadrouter.com/ur/glossary/structured-output/)

اسٹرکچرڈ آؤٹ پٹ LLM API کا ایک فیچر ہے جو ماڈل کے جواب کو ڈویلپر کے طے کردہ فارمیٹ، عموماً JSON Schema، تک محدود کرتا ہے، تاکہ کوڈ اسے قابلِ اعتماد طریقے سے پارس کر سکے۔ یہ JSON mode سے زیادہ سخت ہے، جو درست JSON کی ضمانت دیتا ہے، لیکن کسی خاص ساخت کی نہیں۔

[ٹمپریچر (temperature)](https://broadrouter.com/ur/glossary/temperature/)

ٹمپریچر ایک سیمپلنگ پیرامیٹر ہے جو طے کرتا ہے کہ لینگویج ماڈل کا آؤٹ پٹ کتنا رینڈم ہوگا۔ ماڈل اپنے ٹوکن اسکورز کو احتمالات میں بدلنے سے پہلے ٹمپریچر سے تقسیم کرتا ہے: کم قدر پر سب سے ممکنہ ٹوکن غالب رہتا ہے، زیادہ قدر پر تقسیم ہموار ہو جاتی ہے اور کم ممکنہ ٹوکن زیادہ بار چنے جاتے ہیں۔

[base URL](https://broadrouter.com/ur/glossary/base-url/)

base URL کسی API کا مقررہ بنیادی پتہ ہے، جیسے https://api.example.com/v1، جسے کلائنٹ /chat/completions جیسے ہر اینڈپوائنٹ پاتھ کے آگے لگاتا ہے۔ OpenAI-compatible SDK میں base URL کو API کلید اور ماڈل ID کے ساتھ بدلنے سے وہی کوڈ کسی دوسرے فراہم کنندہ سے جڑ جاتا ہے۔

[پری پیڈ کریڈٹ (prepaid credit)](https://broadrouter.com/ur/glossary/prepaid-credit/)

پری پیڈ کریڈٹ وہ رقم ہے جو استعمال سے پہلے API اکاؤنٹ میں ڈالی جاتی ہے۔ ہر درخواست کی لاگت بیلنس سے کٹتی ہے، اور بیلنس ختم ہونے پر میٹر والی درخواستیں تب تک رک جاتی ہیں جب تک آپ ٹاپ اپ نہ کریں۔ اس سے خرچ اتنا ہی رہتا ہے جتنا آپ نے جمع کیا ہے۔

[ٹوکن (token)](https://broadrouter.com/ur/glossary/token/)

ٹوکن متن کی وہ اکائی ہے جسے لینگویج ماڈل پڑھتا اور لکھتا ہے: کوئی لفظ، لفظ کا حصہ، رموزِ اوقاف کی کوئی علامت یا بائٹس کا سلسلہ، جو ماڈل کا ٹوکنائزر بناتا ہے۔ LLM API استعمال کو ٹوکنز میں گنتے ہیں، انہی میں حدیں لگاتے ہیں اور عموماً بل بھی بناتے ہیں۔

## عام سوالات

### promptfoo پرووائیڈر کے پری فکس میں openai:chat لکھوں یا openai؟

openai:chat۔ openai:chat:broadnet/glm-5.3 کے ساتھ promptfoo، /v1/chat/completions کال کرتا ہے، جو BroadNet فراہم کرتا ہے۔ promptfoo کی دستاویزات کہتی ہیں کہ صرف openai پری فکس کے بعد نامعلوم ماڈل نام بھی Chat Completions پر چلا جاتا ہے، لیکن واضح chat پری فکس اس اصول پر منحصر نہیں رہتا۔

### promptfoo میں BroadNet کے جوابات بیچ میں کیوں کٹ جاتے ہیں؟

non-reasoning درخواستوں کے لیے promptfoo ڈیفالٹ طور پر 1,024 ٹوکن کی آؤٹ پٹ حد لگاتا ہے، اور BroadNet کے DeepSeek، GLM اور Qwen ماڈلز آؤٹ پٹ بجٹ کا کچھ حصہ ریزننگ پر خرچ کرتے ہیں۔ پرووائیڈر config میں max\_tokens سیٹ کریں، یا omitDefaults کو true کریں۔

### کیا apiKeyEnvar نہ ملنے پر OPENAI\_API\_KEY استعمال ہوتا ہے؟

نہیں۔ promptfoo کی دستاویزات کہتی ہیں کہ بتایا گیا ویری ایبل نہ ملے تو وہ OPENAI\_API\_KEY پر واپس نہیں جاتا۔ ہمارے ٹیسٹ میں یہ "Missing BROADNET\_API\_KEY" کے ساتھ رک گیا۔

### کیا BroadNet ماڈل llm-rubric assertions کو گریڈ کر سکتا ہے؟

ہاں، لیکن promptfoo کی دستاویزات کہتی ہیں کہ پرووائیڈر کی سیٹنگز گریڈرز پر لاگو نہیں ہوتیں۔ گریڈر کو defaultTest.options.provider میں اسی id اور config کے ساتھ الگ سے سیٹ کریں۔

## متعلقہ گائیڈز

-   [curl کے ساتھ BroadNet Inference کو پہلی درخواست](https://broadrouter.com/ur/guides/curl-quickstart/)
-   [BroadNet Inference کے ساتھ OpenAI Node.js SDK استعمال کریں](https://broadrouter.com/ur/guides/openai-node-sdk/)
-   [ریزننگ ماڈل خالی جواب کیوں لوٹاتا ہے](https://broadrouter.com/ur/guides/reasoning-tokens-empty-response/)
-   [BroadNet Inference کے ایرر کوڈز اور دوبارہ کوشش کب کریں](https://broadrouter.com/ur/guides/errors-and-retries/)
-   [BroadNet Inference کے ساتھ کام کرنے والے تمام ٹولز (انگریزی میں)](https://broadrouter.com/integrations/): SDKs، کوڈنگ ایجنٹس، چیٹ انٹرفیس اور آٹومیشن ٹولز، ہر ایک کی درست سیٹنگز کے ساتھ

اسے اپنے اصل کام پر آزمائیں۔ نئے اکاؤنٹس Gemma اور ٹرانسکرپشن کے لیے US$5 کے کریڈٹ سے شروع ہوتے ہیں۔ DeepSeek، GLM، اور Qwen3.8 کے لیے ٹاپ اپ ضروری ہے۔

[شروع کریں](https://inference.broadnet.ai/account/?utm_source=broadrouter&utm_medium=referral&utm_campaign=ur-guides-promptfoo-openai-compatible&utm_content=page-cta) ·

**ذرائع**

-   [promptfoo دستاویزات، OpenAI پرووائیڈر (OpenAI-compatible گیٹ ویز) (2026-11-15 کو جانچا گیا)](https://www.promptfoo.dev/docs/providers/openai/)
-   [GitHub پر promptfoo، ریلیز 0.125.1، 2026-10-25 (2026-11-15 کو جانچا گیا)](https://github.com/promptfoo/promptfoo/releases/tag/0.125.1)
-   [BroadNet Inference API ریفرنس (2026-11-15 کو جانچا گیا) (انگریزی میں)](https://inference.broadnet.ai/docs?utm_source=broadrouter&utm_medium=referral&utm_campaign=ur-guides-promptfoo-openai-compatible&utm_content=sources)
