سؤال مصاحبه

ارائه‌ی شواهد برای تغییری با کمک ایجنت

Bring evidence for one agent-assisted change

  • سطح ۴: استف
  • پروژه‌ی خانگی
  • ۶۰ دقیقه

تمرین خانگی. تغییر کوچک و واقعی را در مخزنی که اجازه‌ی ویرایش آن را دارید انتخاب کنید و بگذارید یک ایجنت کدنویسی آن را پیاده کند. به‌جای متن گفت‌وگو (transcript)، شواهدی بیاورید که بازبین بتواند آن‌ها را بازتولید کند. برای ما بنویسید در هر مرحله چه چیزی را ثبت می‌کنید، چطور ثابت می‌کنید بررسی پذیرش شما واقعاً امکان رد شدن دارد، و از ادعای چه چیزهایی خودداری خواهید کرد.

اول خودتان جواب بدهید، بعد پاسخ را باز کنید.

پاسخ کوتاه

قبل از اجرای ایجنت، ویرایش آغازین، هدف قابل‌مشاهده، نااهداف، مسیرهای مجاز و شواهد پذیرش را به‌همراه حالت کاری، بودجه و شرط توقف ثبت کنید. قبل از هر ویرایشی، نزدیک‌ترین بررسی موجود را اجرا و به‌عنوان خط مبنا ثبت کنید. پس از اعمال تغییر، نتیجه‌ی موردانتظار را مستقل از پیاده‌سازی بنویسید، یک نتیجه‌ی نادرستِ عمدی را در نسخه‌ای دورریختنی وارد کنید، و نشان دهید که همان بررسی دقیقاً به‌همین دلیل رد می‌شود. به هر مشاهده در محیط اجرا (runtime) برچسب محلی (local)، آزمایشی (staging) یا عملیاتی (live) بزنید، بازگشت به عقب را تمرین کنید، و branch نهایی، فایل‌های تغییریافته، ریسک‌های باز و اقدام بعدی را شفاف و مشخص بگذارید.

پاسخ کامل

چارچوب وظیفه و سطح خودکاری را مشخص کنید

ویرایش آغازین، هدف را در قالب چیزی قابل‌مشاهده، نااهداف، مسیرهای مجاز و شواهدی را که پذیرش به‌شمار می‌روند یادداشت کنید. نام کاربر یا اپراتور واقعی را که به این رفتار نیاز دارد بیاورید. یک حالت کاری انتخاب کنید: گام‌های هدایت‌شده، پیاده‌سازی با چک‌پوینت، یا اجرای خودکارِ محدود؛ و توضیح دهید چرا عدم‌قطعیت، پیامدها و بازگشت‌پذیری این انتخاب را توجیه می‌کنند. بودجه‌ی زمانی (wall-time) و سقف هزینه یا توکن (در صورتی که ایجنت آن را گزارش می‌دهد) تعیین کنید. شرط توقف را برای مواردی مثل خطاهای پی‌درپی، درخواست دسترسی‌های تازه، اتمام بودجه یا تصمیم بلاتکلیف درباره‌ی قرارداد مشخص کنید و بنویسید چه کسی این موارد را حل‌وفصل می‌کند.

کوچک‌ترین محیط ممکن را آماده کنید

پیاده‌سازی، فراخواننده‌ی آن، تست مربوطه و دستورالعمل‌های محلی را واکشی کنید و بنویسید چرا هر کدام باید در بافت (context) قرار بگیرند. برای هر افزونه انتخابی شفاف داشته باشید: یک مهارت (skill) برای رویه‌ای تکرارپذیر، یک ابزار (tool) برای دسترسی، یک هوک (hook) برای بررسی قطعی، یک پلاگین (plugin) برای قابلیت‌های بسته‌بندی‌شده؛ هر کدام با کمترین دسترسی لازم برای کار. یک پیشنهاد افزودن را که رد کردید به‌همراه هزینه‌اش ثبت کنید. یکی از یادداشت‌ها یا دستورالعمل‌های قدیمی را دوباره بررسی کنید و اگر شواهد تایید می‌کند، آن را کنار بگذارید.

ابتدا خط مبنا بگیرید، سپس پیاده‌سازی کنید

قبل از هر تغییری، نزدیک‌ترین بررسی موجود را اجرا کنید و دستور، نسخه‌ی بازنگری، نتیجه و محل ذخیره‌ی شواهد را به ثبت برسانید. قابلیتی که هنوز وجود ندارد هم خط مبنا دارد: پاسخ مشاهده‌شده یا خطای عدم پشتیبانی از عملیات. سپس اجازه دهید ایجنت در چارچوب قرارداد کار کند، و گزارش مداخلاتی شامل دلیل هر اصلاح، تغییر دسترسی یا بازنگری در نقشه را نگه دارید.

شواهد را به چالش بکشید

اثباتی را انتخاب کنید که نمای بیرونی تغییریافته را مشاهده کند: صفحه‌ی وب در عرض‌های مرتبط برای رابط کاربری، درخواست و پاسخ سریال‌شده برای یک API، یا دستور ساخته‌شده به‌همراه کد خروج (exit code) برای یک ابزار خط فرمان (CLI). نتیجه‌ی موردانتظار را بر اساس قرارداد وظیفه و بدون خواندن پیاده‌سازی بنویسید. در یک نسخه‌ی دورریختنی، نتیجه‌ی نادرست مشخصی وارد کنید؛ مثلاً پذیرش یک مقدار نامعتبر یا حذف یک فیلد اجباری، و همان بررسی پذیرش را اجرا کنید. این بررسی باید دقیقاً به‌همین دلیل رد شود. اگر سبز ماند، پیش از آنکه به آن اعتماد کنید، عبارت‌های ارزیابی (assertions) را قوی‌تر کنید. تغییر را برگردانید، دوباره اجرا کنید و رسیدهای هر دو حالت را نگه دارید. خطای نحوی (syntax error) یا خرابی ساختار تست به‌معنای شناسایی پس‌رفت نیست. از یک طرف ارتباط یا در یک نشست بازبینی جداگانه بخواهید ضعیف‌ترین اثبات را بدون ویرایش پیاده‌سازی به چالش بکشد.

بهره‌برداری و بازیابی را تمرین کنید

دست‌سازه را در محیطی دورریختنی، چه محلی و چه آزمایشی، اجرا کنید و برای هر مشاهده دقیقاً نسخه‌ی بازنگری و برچسب محلی، آزمایشی یا عملیاتی را ثبت کنید. یک نشانه‌ی خطا با آستانه، پنجره‌ی مشاهده و مسئول مشخص برای وظیفه تعیین کرده و آن را به‌شکل امن فعال کنید. بازگشت به عقب به یک دست‌سازه‌ی مطمئن قبلی را تمرین کنید و مطمئن شوید رفتار گذشته، از جمله داده‌های پایدار، بازمی‌گردد. هر مرحله‌ی بازیابی را که نتوانستید راستی‌آزمایی کنید ثبت کنید.

اجرای بعدی را بهبود دهید و کار را تحویل دهید

نتیجه را با خط مبنا مقایسه کنید؛ از جمله زمان سپری‌شده، داده‌های مصرفی و مداخلات انسانی. یک وظیفه فقط نشان می‌دهد در آن وظیفه چه گذشته است، نه اینکه ایجنت‌ها به‌طور کلی سریع‌تر هستند. یکی از اصلاحات مشاهده‌شده را به یک تست، دسترسی محدودتر یا یک خودکارسازی ارتقا دهید و بررسی‌های تحت‌تأثیر را دوباره اجرا کنید. تغییرات موقت را پاک کنید و branch نهایی، فایل‌های تغییریافته، ریسک‌های باز و اقدام بعدی را کاملاً شفاف باقی بگذارید.

شیوه‌نامه‌ی نمره‌دهی

به هر ردیف یکی از وضعیت‌های «اثبات‌شده» (demonstrated)، «نیازمند بازنگری» (needs revision) یا «راستی‌آزمایی‌نشده» (unverified) تعلق می‌گیرد؛ همراه با ارجاع به شواهد و ذکر دلیل. بازبین دست‌کم ضعیف‌ترین بررسی پذیرش را بازتولید می‌کند. پر کردن فیلدها و اسکریپت‌های موفق جایگزین مشاهدات واقعی نمی‌شوند. شواهدی را که در دسترس نیستند به‌عنوان راستی‌آزمایی‌نشده علامت بزنید و دامنه‌ی ادعای خود را محدود کنید، و هرگز نتیجه را تضمینی برای استخدام یا استقرار عملیاتی جا نزنید.

سؤال‌های تکمیلی مصاحبه‌گر
  • سطح 3: پس‌رفتِ تعمدی شما از بررسی پذیرش عبور کرد. چه کار می‌کنید؟ پاسخ مورد انتظار: بررسی را غیرقابل‌اعتماد بدانید، عبارت ارزیابی یا مشاهده را آن‌قدر تقویت کنید تا دقیقاً به‌همان دلیل رد شود، و تازه بعد از آن نسخه‌ی درست را دوباره اجرا کنید.
  • سطح 3: چرا هر مشاهده در محیط اجرا باید برچسب محیط داشته باشد؟ پاسخ مورد انتظار: تمرین محلی فقط از یک ادعای محلی پشتیبانی می‌کند، و مشاهده‌ی بدون برچسب باعث می‌شود خواننده اجرای روی لپ‌تاپ را به‌عنوان شواهد محیط عملیاتی برداشت کند.
  • سطح 4: ایجنت سریع‌تر از خط مبنای شما کار را تمام کرد. چه ادعایی می‌توانید داشته باشید؟ پاسخ مورد انتظار: اینکه این وظیفه در این اجرا با این تعداد مداخله سریع‌تر انجام شد؛ و نه هیچ ادعایی درباره‌ی ایجنت‌ها به‌طور کلی.
  • سطح 4: ترجیح می‌دهید کدام ردیف را به‌جای گزارش ساختگی، راستی‌آزمایی‌نشده علامت بزنید؟ پاسخ مورد انتظار: هر ردیفی که نتوانستید شواهد آن را مستقیماً مشاهده کنید؛ مثل مرحله‌ی بازیابی که به مانت کردن در محیط عملیاتی نیاز دارد و شما به آن دسترسی ندارید؛ و ادعای خود را متناسب با آن محدود کنید.
جواب‌های اشتباهی که مصاحبه‌گرها زیاد می‌شنوند
  • «متن گفت‌وگو نشان می‌دهد ایجنت تست‌ها را اجرا کرده، پس این خودش شواهد است.» متن گفت‌وگو فقط گزارش گفته‌های ایجنت است؛ شواهد واقعی یعنی خود بررسی، کد خروج آن، و سابقه‌ای که بازبین بتواند دوباره اجرا کند.
  • «بررسی پذیرش با موفقیت پاس شد، پس تغییر اثبات شده است.» بررسی‌ای که هرگز شکست نخورده چیزی را اثبات نمی‌کند؛ نتیجه‌ی نادرستِ تعمدی نشان می‌دهد که بررسی واقعاً می‌تواند پس‌رفت را تشخیص دهد.
  • «برای تکمیل تمرین، استقرار در محیط عملیاتی الزامی است.» تمرین برچسب‌خورده در محیط محلی یا آزمایشی از یک ادعای محلی پشتیبانی می‌کند؛ این تمرین برچسب‌گذاری صادقانه را می‌خواهد، نه دسترسی به محیط عملیاتی.

کجای دوره آموزش داده می‌شود

بخش پروژه‌ی پایانی میز کار مراحل شش‌گانه و شیوه‌نامه‌ی نمره‌دهی بازبینی دستی شواهد را ارائه می‌دهد.