تحلیل توافق وصفی بررسی میکند بازرسان همان قطعات را یکسان طبقهبندی میکنند، با هم توافق دارند و با مرجع تعیین‌شده منطبق‌اند یا نه. این‌ها سه سؤال متفاوت‌اند. ممکن است بازرسان توافق داشته باشند و همگی اشتباه کنند. ارزیابی تکراری بدون دیدن نتیجه قبلی، قطعات نماینده شامل وضعیت‌های مرزی و روش مرجع قابل دفاع به کار ببرید. این مثال کوچک فرضی، درصد توافق ساده را حساب میکند؛ میانگین خوب، صلاحیت سامانه بازرسی را ثابت نمی‌کند و جای طرح مطالعه مناسب را نمی‌گیرد.
تکرارپذیری تصمیم، توافق بین بازرسان و درستی نسبت به مرجع را جدا کنید.
اختلاف را تا قطعه و نوبت ارزیابی مشخص دنبال کنید.
برای تصمیم طبقه‌ای، مطالعه اندازهگیری عددی Gage R&R را جایگزین نکنید.
مطالعه را متناسب با نوع تصمیم انتخاب کنید
تصمیم وصفی، دستهای مانند قبول یا رد یا درجه شدت تعیین میکند. Minitab توافق درون ارزیاب، توافق بین ارزیاب‌ها و توافق با مرجع معلوم را جدا میکند. مطالعه Gage R&R برای داده پیوسته، تغییرپذیری اندازهگیری عددی را بررسی میکند و سؤال متفاوتی دارد.
عیب و شرایط بازرسی را تعریف کنید. برای قضاوت بصری سطح، تصویر یا نمونه مرجع، روشنایی، فاصله دید و ابزار کمکی مجاز را مشخص کنید. اگر مبنای برچسب مرجع تأیید نشده باشد، نمی‌توان از آن برای تعیین درستی نظر بازرس استفاده کرد.
همان قطعه‌ها را دوبار و بدون نمایش نتیجه اول بازرسی کنید
سابقه فرضی، ده قطعه، دو بازرس A و B و دو نوبت دارد؛ جمعاً ۴۰ ارزیابی. مرجع قطعات ۱ تا ۵، قبول و قطعات ۶ تا ۱۰، رد است. نمونه عمداً برای محاسبه، کوچک و متوازن انتخاب شده و اندازه پیشنهادی تأیید صلاحیت نیست.
A فقط در قطعه ۱۰ نوبت دوم با مرجع اختلاف دارد. B در هر دو نوبت قطعه ۵ را رد میکند و فقط در نوبت اول، قطعه ۶ را قبول میکند. بقیه تصمیم‌ها با مرجع منطبق‌اند. ترتیب ارائه را تصادفی و ارزیابی قبلی را پنهان کنید. هر نوبت باید بررسی تازه باشد، نه آزمون حافظه.
| قطعه | مرجع | A نوبت ۱ | A نوبت ۲ | B نوبت ۱ | B نوبت ۲ |
|---|---|---|---|---|---|
| 1-4 | قبول | قبول | قبول | قبول | قبول |
| 5 | قبول | قبول | قبول | رد | رد |
| 6 | رد | رد | رد | قبول | رد |
| 7-9 | رد | رد | رد | رد | رد |
| 10 | رد | رد | قبول | رد | رد |
سه مقایسه را جدا حساب کنید
A در نه مورد از ده قطعه، تصمیم خود را تکرار میکند؛ توافق درون بازرس ۹۰ درصد است. B هم نه تصمیم از ده تصمیم را تکرار میکند. بین بازرسان، در هر نوبت هشت قطعه از ده قطعه توافق دارند؛ یعنی ۱۶ توافق از ۲۰ مقایسه جفتی، معادل ۸۰ درصد. این تعداد جفت را بر کل ۴۰ ارزیابی تقسیم نکنید.
نسبت به مرجع، A از ۲۰ ارزیابی، ۱۹ مورد درست دارد؛ ۹۵ درصد. B از ۲۰ مورد، ۱۷ مورد درست دارد؛ ۸۵ درصد. جمع ۳۶ تصمیم درست از ۴۰، برابر ۹۰ درصد است، ولی رد اشتباه تکراری B برای قطعه ۵ و ندیدن عیب قطعه ۱۰ توسط A را پنهان میکند.
W_A و W_B توافق هر بازرس با تصمیم قبلی خودش و B_AB توافق بین دو بازرس است. درستی نسبت به مرجع: A برابر 19/20 یا ۹۵ درصد و B برابر 17/20 یا ۸۵ درصد. ۴۰ ارزیابی، دو نوبت روی ده قطعه‌اند؛ ۴۰ قطعه مستقل نیستند.
جهت خطا و وضعیت مرزی را ببینید
پذیرش اشتباه، قطعه مردود طبق مرجع را قبول میکند. رد اشتباه، قطعه قابل قبول طبق مرجع را رد میکند. پیامدهای این دو می‌تواند بسیار متفاوت باشد. جهت خطا و شاهد قطعه را نگه دارید و فقط توافق کل را گزارش نکنید.
شاخص تعدیل‌شده برای توافق تصادفی، مانند کاپا، می‌تواند اطلاعات اضافه بدهد؛ ولی فراوانی دستهها، طرح مطالعه و عدمقطعیت روی تفسیر اثر دارند. این مقاله درصد قابل قبول عمومی تعیین نمی‌کند و از ده قطعه، صلاحیت نتیجه نمی‌گیرد. مطالعه را با تصمیم و پیامدش متناسب انتخاب کنید.
- دسته و مرجع را تعریف کنید
بر معیار عملیاتی و روش تعیین تصمیم مرجع توافق کنید.
- قطعه نماینده انتخاب کنید
تنوع مربوط و وضعیت دشوار را بیاورید؛ مجموعه آسان ساختگی ارائه نکنید.
- ارزیابی تکراریِ بدون اطلاع از نتیجه قبلی اجرا کنید
ترتیب قطعات را تصادفی و هویت ارزیاب، نوبت و تصمیم را حفظ کنید.
- اختلاف را بررسی کنید
پیش از تکرار مطالعه اصلاح‌شده، شواهد قطعه، روش، ابزار کمکی و آموزش را بررسی کنید.
پیش از مقصر دانستن بازرس، روش را اصلاح کنید
مرز مبهم عیب، نور ناپایدار یا سطح دور از دسترس می‌تواند اختلافی ایجاد کند که با اسلاید آموزشی بیشتر حل نمی‌شود. روش کار و مرجع را کنار هم بررسی کنید. هنگام تغییر روش، نتیجه قدیمی را نگه دارید تا مطالعه بعدی نسخه مشخصی داشته باشد.
وقتی سؤال درباره اندازهگیری عددی است، از Gage R&R استفاده کنید. نمونه‌برداری پذیرش درباره تصمیم جداگانه پذیرش بچ است. طرح نمونه‌برداری، ناتوانی بازرس در تشخیص عیب را اصلاح نمی‌کند.
شواهد بازرسی را برای تصمیم‌های بعدی قابل استفاده نگه دارید
فیلد قبول یا رد می‌تواند وارد گزارش بازده یا داده آموزش هوش مصنوعی شود. اگر تعریف بین شیفت‌ها عوض شود، درصد یا برچسب‌ها ممکن است تغییر قاعده اندازهگیری را نشان دهند، نه تغییر فرایند.
فایل، همه ۴۰ ارزیابی فرضی و فیلدهای ثبت مطالعه خودتان را دارد. پیش از استفاده از برچسب‌های بازرسی برای آموزش مدل، روش تعیین آن‌ها را بررسی کنید. راهنمای کیفیت پیش‌بینانه این موضوع را بیشتر توضیح می‌دهد.
مثالی مرتبط از ابوالفضل
پیش از مقصر دانستن ماشین‌کاری، اندازهگیری تکراری را بررسی کنید.
به انگلیسی در وبلاگ شخصی ابوالفضل، بنیان‌گذار Vrolen. مطالعهٔ مرتبط است، نه منبع فنی مستقل.
چک‌لیست عملی
- هر دسته را با معیار عملی تعریف کنید.
- مرجع قابل دفاع تعیین کنید.
- قطعه نماینده با وضعیت مرزی بیاورید.
- نتیجه قبلی را پنهان و ترتیب ارائه را تصادفی کنید.
- هر ارزیابی جداگانه را نگه دارید.
- برای هر مقایسه، مخرج درست را به کار ببرید.
- پذیرش اشتباه را از رد اشتباه جدا کنید.
- پیش از تأیید صلاحیت، عدمقطعیت و تغییر روش را بررسی کنید.
پرسش‌های متداول
پرسش‌های متداول
منابع و مطالعهٔ بیشتر
منابع معتبر استفاده‌شده برای پژوهش و بررسی این راهنما.