استفاده از یک پایه عادلانه
مقایسه گزینه های زیر همان بار کار، پنجره مشاهده و حالت اجرای. اندازه گیری آزمایش های مشتری و سناریوهای زمان مجازی پاسخ سوالات مختلف.
مشخص کنید زمانبندی از یک سناریوی مدلشده با زمان مجازی میآید یا از یک آزمون اندازهگیریشدهٔ کلاینت. اینها مشاهدات متفاوتیاند و نباید در یک نمودار بیبرچسب کنار هم بیایند. گرمشدن، الگوی ورود، همروندی، توزیع داده و پنجرهٔ مشاهده را آشکار نگه دارید تا مقایسه قابل تفسیر باشد.
- تقاضای پین و فرضیه های داده
- میانگین جداگانه و تاخیر گردن
- در صورت لزوم دانه آزمایش را ثبت کنید.
نگاهی فراتر از یک متر
پاسخ سریع تر می تواند بازخورد بیشتری ایجاد کند، فشار کم یا عملیات شکست خورده.
بهبود تأخیر در میان پاسخهای موفق ممکن است نرخ بالاتر پایان مهلت را پنهان کند. ترافیک تلاش مجدد میتواند کار را افزایش دهد حتی وقتی تکمیلهای سودمند افزایش نمییابند. مخرجها را هم مانند مقادیر مقایسه کنید: چند درخواست زمانبندی، پذیرفته، تکمیل، ناموفق یا حلنشده باقی ماند؟
شکل نتایج را مقایسه کنید، نه یک عدد شاخص را
تقاضا، جامعهٔ ورودی، حالت اجرا و پنجرهٔ مشاهده را تثبیت کنید.
- شامل هزینه های زمان و بازنشستگی.
- بررسی کامل بودن و درست بودن با هم
- نشان دادن نقض حد به جای فقط میانگین.
نتیجه گیری را کالیبر کنید
از اندازه گیری های مستقل برای بررسی مدل در جایی که ممکن است استفاده کنید.در مقایسه با بار کار و عدم اطمینان به جای نشان دادن عملکرد جهانی حفظ کنید.
شواهدی را که از رفتار مدلشدهٔ سرویس پشتیبانی میکنند و شرایطی را که این پشتیبانی در آنها ضعیف است توضیح دهید. بار کاری مصنوعی برای کاوش یک فرضیه سودمند است، اما توان عملیاتی یا تأخیر عمومی را برای استقرار مشتری احراز نمیکند.
آیا یک مسیر پاسخ سریعتر مصنوعی واقعاً کار سودمند بیشتری انجام میدهد؟
برای هر دو کاندید از همان الگوی ورود استفاده کنید. تکمیل و صحت را در کنار توزیع زمان پاسخ، شمار پایان مهلتها و کار تلاش مجدد بررسی کنید.
اگر کاندید درخواستهای بیشتری را از محاسبهٔ تأخیر پاسخهای موفق کنار میگذارد، نتیجهگیری سادهٔ «سریعتر» را رد کنید. ابتدا مخرج کامل را بازبینی کنید.
- وضعیتی که اندازه گیری ها از مدل حمایت می کنند.
- اطلاعات توضیحی را برچسب گذاری کنید.
- این کار را فقط زمانی تکرار کنید که نشانه ها یا عدم اطمینان آن را نشان می دهد.
زمان پاسخ را از کار سودمند جدا کنید
معیارهایی را انتخاب کنید که پرسش کسبوکار را توصیف میکنند. تأخیر پاسخ، انتظار در صف، شمار تکمیل، صحت و مصرف منابع حالتهای شکست متفاوتی را آشکار میکنند. یک امتیاز تجمیعی واحد میتواند پسرفتی را که برای گردشکار مهم است پنهان کند.
دنبالهها و استثناها را در کنار میانگینها ببینید. پایان مهلتها را ثبت کنید، نه اینکه بیصدا از مقایسه حذفشان کنید. اگر پنجرهٔ مشاهده با کارهای در انتظار پایان مییابد، آن کارها را در تفسیر لحاظ کنید.
معیارها را در زمینه بخوانید
| معیار | همراه با | دلیل |
|---|---|---|
| میانگین تأخیر | تأخیر دنباله و شمار پایان مهلتها | میانگین میتواند اقلیتی کند یا ناموفق را پنهان کند. |
| توان عملیاتی | تکمیلهای صحیح و تقاضای زمانبندیشده | تلاشهای بیشتر لزوماً به معنای کار سودمند بیشتر نیست. |
| هزینهٔ منابع | فشار صف و ترافیک تلاش مجدد | یک بهینهسازی محلی میتواند هزینه را به جای دیگری منتقل کند. |
- شمارهای زمانبندیشده و تکمیلشده را جدا نگه دارید.
- تلاشهای مجدد و عملیات ناموفق را نشان دهید.
- صحت را همراه با نتیجهٔ کارایی بازبینی کنید.
نمودارها را همراه با فرضهایشان بخوانید
تصویر این راهنما یک مقایسهٔ مفهومی است، نه محکزنی. یک نمودار اندازهگیریشدهٔ سودمند باید واحدها، جامعه، روش زمانسنجی، پنجرهٔ مشاهده و مدلشده یا مشاهدهشده بودن رفتار را بیان کند.
هنگام تکرار یک آزمایش، نتیجهٔ قبلی را حفظ کنید و توضیح دهید چه چیزی تغییر کرده است. اجراهای بیشتر میتوانند تغییرپذیری یا ورودیهای تغییریافته را کاوش کنند؛ انتخاب تنها بهترین نتیجه شواهد را تغییر میدهد. پیش از ادعای گستردهتر دربارهٔ کارایی، عدم قطعیت و تناسب بار کاری را بازبینی کنید.
شواهد و شرایط آن را کنار هم نگه دارید. موفقیت بعدی شکست قبلی را پاک نمیکند یا دامنهٔ اصلی را گستردهتر نمیسازد.
- دادهٔ نمایشی و اندازهگیریشده را جداگانه برچسب بزنید.
- تنظیمات و نسخههای سناریو را نگه دارید.
- اندازهگیریهای محلی را به وعدهٔ ظرفیت در محیط عملیاتی تبدیل نکنید.
یک بازبینی مقایسهای آماده کنید
یک خط مبنا و کاندید جفتی با زمینهٔ کافی بیاورید تا فرد دیگری بتواند بدهبستان را درک کند. پیش از بررسی نتیجهٔ کاندید، دربارهٔ آستانهها و نتایج غیرقابل قبول توافق کنید.
بازبینی ممکن است بهبودی محدود را بپذیرد، پسرفتی را رد کند یا بار کاری نمایندهتری بخواهد. احراز صلاحیت مشتری برای بار پایدار و جهشی از سناریوهای مصنوعی داخلی و بررسیهای محدود محلی جدا میماند.
آمادگی بازبینی
0 / 6 آماده- بار کاری و اهداف را ثابت کنید.
- همهٔ دستههای نتیجه را ثبت کنید.
- بیان کنید کدام آزمونهای استقرار هنوز باقی ماندهاند.