System Reliability and Evidence of Capability
هوش مصنوعی برای همه: هوش مصنوعی چطور باهوش شد؟
- Reliability as a property of a complete system operating on a specified task under specified conditions.
- Distinguishing model-only performance from results obtained with retrieval, tools, repeated attempts, or external assistance.
- Representative task samples, success criteria, and reproducible execution records.
- Why a benchmark score or selected demonstration may not predict performance on a different task.
- How failures across a chain of steps can reduce end-to-end success even when individual steps usually work.
- Matching verification effort to the consequences of an incorrect answer or action.
- Choosing among rules, search, learned prediction, generation, retrieval, fixed workflows, and agents based on task requirements rather than historical novelty.
اعتماد به کل سیستم
```svg
<svg viewBox="0 0 800 450" xmlns="http://www.w3.org/2000/svg"><defs><marker id="arr" markerWidth="10" markerHeight="10" refX="8" refY="5" orient="auto"><path d="M0,0 L10,5 L0,10 z" class="tm-arrow"/></marker></defs><rect x="35" y="170" width="155" height="90" rx="12" class="tm-accent"/><text x="112" y="205" class="tm-text" font-size="16" text-anchor="middle" direction="rtl">دستگاه دقیق</text><text x="112" y="230" class="tm-text2" font-size="14" text-anchor="middle" direction="rtl">نسخه دفترچه</text><rect x="320" y="170" width="155" height="90" rx="12" class="tm-gold"/><text x="397" y="205" class="tm-text" font-size="16" text-anchor="middle" direction="rtl">دستیار</text><text x="397" y="230" class="tm-text2" font-size="14" text-anchor="middle" direction="rtl">جستوجو + خواندن</text><line x1="190" y1="215" x2="315" y2="215" class="tm-line-accent" marker-end="url(#arr)"/><rect x="610" y="170" width="155" height="90" rx="12" class="tm-green"/><text x="687" y="205" class="tm-text" font-size="16" text-anchor="middle" direction="rtl">پاسخ</text><text x="687" y="230" class="tm-text2" font-size="14" text-anchor="middle" direction="rtl">فاصله + صفحه</text><line x1="475" y1="215" x2="605" y2="215" class="tm-line-accent" marker-end="url(#arr)"/><text x="400" y="315" class="tm-text-accent" font-size="17" text-anchor="middle" direction="rtl">قابلیت اعتماد: کار + شرایط + کل مسیر</text></svg>
```
مقایسهی منصفانهی ادعاها
```svg
<svg viewBox="0 0 800 450" xmlns="http://www.w3.org/2000/svg"><defs><marker id="arrow" markerWidth="10" markerHeight="10" refX="8" refY="3" orient="auto"><path d="M0,0 L0,6 L9,3 z" class="tm-arrow"/></marker></defs><rect x="55" y="55" width="300" height="330" rx="16" class="tm-surface"/><rect x="445" y="55" width="300" height="330" rx="16" class="tm-surface"/><text x="205" y="95" class="tm-text" font-size="22" text-anchor="middle" direction="rtl">دستیار الف</text><text x="595" y="95" class="tm-text" font-size="22" text-anchor="middle" direction="rtl">دستیار ب</text><rect x="90" y="135" width="230" height="74" rx="12" class="tm-soft"/><text x="205" y="165" class="tm-text" font-size="17" text-anchor="middle" direction="rtl">متن صفحه آماده</text><text x="205" y="190" class="tm-text2" font-size="15" text-anchor="middle" direction="rtl">اولین پاسخ</text><rect x="90" y="250" width="230" height="74" rx="12" class="tm-accent"/><text x="205" y="280" class="tm-text" font-size="18" text-anchor="middle" direction="rtl">۹۰٪ موفقیت</text><text x="205" y="305" class="tm-text" font-size="15" text-anchor="middle" direction="rtl">۱۰۰ درخواست</text><rect x="480" y="135" width="230" height="74" rx="12" class="tm-soft"/><text x="595" y="159" class="tm-text" font-size="16" text-anchor="middle" direction="rtl">دفترچهها + جستوجو</text><text x="595" y="184" class="tm-text2" font-size="14" text-anchor="middle" direction="rtl">تلاش دوباره + انتخاب آدم</text><rect x="480" y="250" width="230" height="74" rx="12" class="tm-accent"/><text x="595" y="280" class="tm-text" font-size="18" text-anchor="middle" direction="rtl">۹۵٪ موفقیت</text><text x="595" y="305" class="tm-text" font-size="15" text-anchor="middle" direction="rtl">۱۰۰ درخواست</text><rect x="366" y="225" width="68" height="42" rx="10" class="tm-gold tm-enter"/><text x="400" y="252" class="tm-text" font-size="24" text-anchor="middle" direction="rtl">؟</text><text x="400" y="365" class="tm-text-accent" font-size="17" text-anchor="middle" direction="rtl">درصدها بدون شرایط، قابل مقایسه نیستند</text></svg>
```
ساخت شواهد قابل اعتماد
```svg
<svg viewBox="0 0 800 450" xmlns="http://www.w3.org/2000/svg"><defs><marker id="arrow" markerWidth="10" markerHeight="10" refX="8" refY="5" orient="auto"><path d="M0,0 L10,5 L0,10 z" class="tm-arrow"/></marker></defs><rect x="35" y="165" width="205" height="120" rx="14" class="tm-surface"/><text x="137" y="195" text-anchor="middle" font-size="18" class="tm-text" direction="rtl">نمونههای واقعی</text><text x="137" y="225" text-anchor="middle" font-size="14" class="tm-text2" direction="rtl">مدل دقیق · نام ناقص</text><text x="137" y="250" text-anchor="middle" font-size="14" class="tm-text2" direction="rtl">دفترچه · اسکن · بیپاسخ</text><rect x="300" y="165" width="205" height="120" rx="14" class="tm-surface"/><text x="402" y="198" text-anchor="middle" font-size="18" class="tm-text" direction="rtl">معیار پیشینی</text><text x="402" y="230" text-anchor="middle" font-size="14" class="tm-text2" direction="rtl">درستی · ابهام · بیپاسخ</text><text x="402" y="255" text-anchor="middle" font-size="14" class="tm-text2" direction="rtl">سنجش با سند مرجع</text><rect x="560" y="165" width="205" height="120" rx="14" class="tm-surface"/><text x="662" y="198" text-anchor="middle" font-size="18" class="tm-text" direction="rtl">سابقهٔ هر اجرا</text><text x="662" y="230" text-anchor="middle" font-size="14" class="tm-text2" direction="rtl">ورودی · نسخهها · جستوجو</text><text x="662" y="255" text-anchor="middle" font-size="14" class="tm-text2" direction="rtl">پاسخ · ارزیابی</text><path d="M240 225 H292" fill="none" class="tm-line" marker-end="url(#arrow)"/><path d="M505 225 H552" fill="none" class="tm-line" marker-end="url(#arrow)"/><rect x="275" y="335" width="250" height="55" rx="12" class="tm-gold tm-enter"/><text x="400" y="369" text-anchor="middle" font-size="16" class="tm-text" direction="rtl">آزمون مستقل · تکرارپذیری</text></svg>
```
موفقیت کل مسیر اجرا
احتمال موفقیت هر مرحله، با شرط موفقیت مرحلهٔ قبل: \(0.9\)
**یافتن صفحه**
\[ P(\text{صفحهٔ درست})=0.9 \]
مرحلهٔ اول
**پاسخ درست، مشروط به صفحهٔ درست**
\[ P(\text{پاسخ درست}\mid\text{صفحهٔ درست})=0.9 \]
مرحلهٔ دوم
**موفقیت نهایی**
\[ P(\text{موفقیت نهایی})=0.9\times0.9=0.81=81\% \]
هر دو شرط باید برقرار باشند
انتخاب متناسب با نیاز و خطر
```svg
<svg viewBox="0 0 800 450" xmlns="http://www.w3.org/2000/svg"><defs><marker id="arr" markerWidth="10" markerHeight="10" refX="8" refY="3" orient="auto"><path d="M0,0 L0,6 L9,3 z" class="tm-arrow"/></marker></defs><rect x="40" y="48" width="205" height="92" rx="12" class="tm-surface"/><text x="142" y="85" class="tm-text" font-size="18" text-anchor="middle" direction="rtl">دفترچههای پراکنده</text><text x="142" y="115" class="tm-muted" font-size="15" text-anchor="middle" direction="rtl">بدون تغییر دستگاه</text><rect x="300" y="48" width="205" height="92" rx="12" class="tm-soft"/><text x="402" y="85" class="tm-text" font-size="18" text-anchor="middle" direction="rtl">مسیر ثابت</text><text x="402" y="115" class="tm-muted" font-size="15" text-anchor="middle" direction="rtl">بازیابی ← تولید</text><rect x="560" y="48" width="205" height="92" rx="12" class="tm-surface"/><text x="662" y="85" class="tm-text" font-size="18" text-anchor="middle" direction="rtl">پاسخ با ارجاع</text><text x="662" y="115" class="tm-muted" font-size="15" text-anchor="middle" direction="rtl">درخواست مبهم: توضیح</text><path d="M245 94 H292" class="tm-line" marker-end="url(#arr)"/><path d="M505 94 H552" class="tm-line" marker-end="url(#arr)"/><rect x="40" y="190" width="725" height="78" rx="12" class="tm-gold"/><text x="402" y="222" class="tm-text" font-size="17" text-anchor="middle" direction="rtl">عنوان بخش: بررسی سبکتر</text><text x="402" y="248" class="tm-muted" font-size="15" text-anchor="middle" direction="rtl">نمونهبرداری از خروجیها</text><rect x="40" y="315" width="725" height="92" rx="12" class="tm-accent tm-pulse"/><text x="402" y="350" class="tm-text" font-size="17" text-anchor="middle" direction="rtl">توصیه نگهداری: خطر آسیب به دستگاه</text><text x="402" y="380" class="tm-muted" font-size="15" text-anchor="middle" direction="rtl">کنترل نسخه و ارجاع + تأیید متخصص؛ تا آن زمان: پیشنویس</text></svg>
```
Back to course