از پرامپت تا خروجی قابل اتکا
از درخواست مبهم تا خروجی قابل اتکا: شش جزء درخواست، مثال و دستورالعمل سیستمی، زنجیره، کانتکست، JSON Schema و آزمون نسخهها.
آنچه یاد میگیری
- نوشتن درخواست با هدف، زمینه، داده، قالب و معیار پذیرش
- استفاده درست از مثال، دستورالعمل سیستمی و زنجیره درخواست
- انتخاب و مرتبکردن کانتکست و جداکردن داده از دستور
- گرفتن خروجی جدولی یا JSON و اعتبارسنجی آن با Schema
- ساخت مجموعه آزمون برای پرامپت و مقایسه نسخهها (پروژه ۱)
پیشنیاز
- هوش مصنوعی مولد را درست بفهم
ابزارها
- ویرایشگر متن یا دفترچه آزمایش
- یک مسیر اجرای مشروع
- آناتومی درخواست قابل اجرا
شش جزء یک درخواست قابل اجرا: هدف، زمینه، ورودی، محدودیت، قالب خروجی و معیار پذیرش؛ و روش تبدیل درخواست مبهم به درخواستی که خروجیاش قابل بررسی است.
- مثال، نقش و دستورالعمل سیستمی
با چند مثال خوب قالب و لحن را کنترل کن، قواعد ثابت را در دستورالعمل سیستمی بگذار، و بدان نقشدهی چه کاری میکند و چه کاری نمیکند.
- تجزیه کار، زنجیره پرامپت و مدلهای استدلالی
کار پیچیده را به گامهای قابل بررسی بشکن، خروجی هر گام را پیش از گام بعد بسنج، و تصمیم بگیر کی مدل استدلالی ارزش هزینه و زمانش را دارد.
- مدیریت کانتکست: چه بدهیم و چه ندهیم
کانتکست لازم، معتبر، تازه و مجاز را انتخاب کن، سندهای بلند را درست بچین، داده را از دستور جدا کن و تاریخچه گفتگو را مدیریت کن.
- خروجی ساختاریافته: جدول، JSON و Schema
خروجیای بگیر که برنامه بتواند بخواند: جدول و
JSON، قرارداد خروجی باJSON Schema، حالتهای خروجی ساختاریافته ابزارها، و اعتبارسنجی سهسطحی. - آزمودن و نسخهبندی پرامپت + پروژه ۱
برای درخواست مجموعه آزمون بساز، نسخهها را با عدد مقایسه کن، رگرسیون را بگیر، و پروژه ۱ را تحویل بده: دستیار پرامپت ساختاریافته.
درخواست دقیق
موقعیت (ساختگی): برگ سبز میخواهد برای هر سفارش سازمانی (مدرسه یا کتابخانه) که با ایمیل میرسد، سه کار انجام شود: استخراج نام سازمان، تعداد کتاب و موعد درخواستی؛ تصمیم اینکه درخواست کامل است یا اطلاعات کم دارد؛ و پیشنویس پاسخ برای مسئول فروش سازمانی. تحویل بده: (۱) جدول تجزیه سهستونی با بررسی هر گام و تکلیف شکست؛ (۲) دستورالعمل سیستمی گام استخراج با سه مثال متنوع؛ (۳) کارت درخواست گام پیشنویس با محدودیت «درصد تخفیف اعلام نکن» و دلیلش؛ (۴) دو ایمیل آزمون ساختگی، یکی کامل و یکی ناقص، با خروجی مورد انتظار هر گام.
- هر گام ورودی، خروجی و بررسی قابل انجام دارد (2)
- مثالهای گام استخراج متنوعاند و با قاعدهها تناقض ندارند (2)
- محدودیت تخفیف با دلیل آمده و پیشنویس به انسان سپرده میشود (2)
- ایمیل ناقص بهجای حدس، به «اطلاعات کم» یا انسان میرسد (2)
کانتکست، ساختار و آزمون
موقعیت (ساختگی): دستیاری باید از پایگاه دانش برگ سبز (shared/barg-sabz-kb.md) به پرسشهای پرداخت و ارسال پاسخ دهد و خروجیاش را برنامهای بخواند که پاسخ را برای کارمند نمایش میدهد. تحویل بده: (۱) فهرست کانتکست با چهار صافی برای سه پرسش نمونه؛ (۲) Schema خروجی با فیلدهای پاسخ، شماره سندهای پشتیبان و «نیاز به انسان»؛ (۳) دو قاعده معنایی (مثلاً شماره سند پشتیبان باید در کانتکست باشد)؛ (۴) مجموعه آزمون هشتموردی با دستکم دو مورد لبه، از جمله پرسشی که جوابش در سندها نیست.
- بخش منسوخ KB-04 کنار گذاشته شده و داده شخصی غیرلازم در کانتکست نیست (2)
- Schema بسته است و برای «در سندها نیامده» راه صریح دارد (2)
- قاعدههای معنایی قابل بررسیاند (2)
- مجموعه آزمون موارد لبه و پاسخ مورد انتظار دارد (2)
آزمون عبور از دوره
یک کار تکراری با خروجی قالبدار (برچسبزدن پیام، استخراج از فرم یا خلاصه با قالب ثابت) را انتخاب کن، یا از ده پیام اول shared/barg-sabz-tickets.csv استفاده کن، و در حدود ۴۵ دقیقه تحویل بده: دستورالعمل سیستمی با سه تا پنج مثال، JSON Schema بسته با راه null برای مقدار غایب، مجموعه آزمون دهموردی با موارد لبه، و نتیجه دو نسخه با گزارش رگرسیون.
- داده از دستور جدا شده و متن ورودی داده دانسته شده است.
- Schema بسته است (required کامل، additionalProperties false، enum برای فیلدهای بسته).
- مجموعه آزمون دستکم سه مورد دشوار یا لبه دارد.
- دو نسخه با یک تغییر بینشان روی کل مجموعه اجرا و رگرسیونها مورد به مورد گزارش شدهاند.
- دستکم یک قاعده معنایی بیرون از Schema بررسی شده است.