يشمل: تحديد حجم العينة المناسب الذي يكفي لأن تكون نتيجة الاختبار موثوقة إحصائياً لا عينة صغيرة تعطي نتيجة لا يُوثق بها، ومراعاة الفرق المتوقع بين النسخ ومستوى الثقة والقدرة الإحصائية في تحديد الحجم كي تكون العينة كافية لكشف الفرق إن وُجد، وبيان الحد الأدنى لعدد الحالات لكل نسخة بحيث لا تضعف المقارنة بقلة العدد، وتوثيق أساس تحديد حجم العينة المناسب بما يبيّن كم يلزم لثقة النتيجة لا حجم عينة يُترك دون تحديد فتضعف ثقة النتيجة أو يُهدر جهد بعينة أكبر من اللازم. الخدمة استشارية منهجية تحدد حجم العينة المناسب وتوثّقه ويبقى قرار صاحب القرار محفوظاً.

يشمل: تحديد مدة الاختبار الكافية التي تكشف فرق النسخ بحيث لا تطول بلا داع فتُهدر أو تقصر فلا تكفي لجمع عينة موثوقة، ومراعاة تقلبات السلوك عبر الأيام والأوقات كي لا تُقاس فترة غير ممثلة فتنحرف النتيجة، وبيان متى يُبدأ الاختبار ومتى يُنهى بحيث تُجمع عينة كافية خلال مدة ممثلة، وتوثيق أساس تحديد مدة الاختبار بما يبيّن كم مدة تكفي لكشف الفرق لا مدة تُترك دون ضبط فيُنهى الاختبار مبكراً على فرق لم يستقر أو يُطال بلا داع. الخدمة استشارية منهجية تحدد مدة الاختبار وتوثّقها ويبقى قرار صاحب القرار محفوظاً.

يشمل: توزيع الحالات على النسخ توزيعاً عادلاً كي لا يميل التوزيع لصالح نسخة دون أخرى فيلوث المقارنة، وضمان أن يكون لكل حالة فرصة متساوية في الوقوع على أي نسخة بحيث تتوزع الخصائص المؤثرة بين النسخ بعدل، وبيان نسبة توزيع الحالات على النسخ وطريقة التوزيع وكيف تُوثق كي تكون قابلة للمراجعة، وتوثيق أساس توزيع الحالات على النسخ بما يبيّن كيف وُزعت الحالات لمنع الميل لا توزيع يميل لنسخة دون أخرى فتختلف النسخ في غير العنصر المدروس ويصعب نسب الفرق إليه. الخدمة استشارية منهجية توزع الحالات على النسخ وتوثّق ذلك ويبقى قرار صاحب القرار محفوظاً.

يشمل: قياس الفروق في النتائج بين النسخ لبيان أيها حقق نتيجة أفضل على مقياس النتيجة المحدد مسبقاً، وجمع نتائج كل نسخة خلال مدة الاختبار وحساب الفرق بينها كماً لا وصفاً عاماً، ومقارنة النسخ على مقياس النتيجة نفسه بحيث تكون المقارنة عادلة وتُبنى على أساس واحد، وتوثيق أساس قياس الفروق في النتائج بما يبيّن أي نسخة تفوقت في النتيجة وبأي قدر لا فروق تُترك دون قياس فلا يُعرف أي نسخة أفضل فيبقى القرار على ظن. الخدمة استشارية منهجية تقيس الفروق في النتائج وتوثّقها ويبقى قرار صاحب القرار محفوظاً.

يشمل: تحليل معدلات التحويل لكل نسخة لبيان أيها أعلى في نسبة تحويل الحالات إلى الفعل المستهدف كشراء أو تسجيل أو ضغط، وحساب معدل التحويل لكل نسخة على أساس عدد الحالات التي حققت الفعل من إجمالي الحالات، ومقارنة معدلات التحويل بين النسخ لبيان الفرق بينها في التحويل لا مجرد عدد مطلق قد يضلل، وتوثيق أساس تحليل معدلات التحويل بما يبيّن أي نسخة أعلى تحويلاً وبأي فرق لا تحويل يُنسب لنسخة دون تحليل يبيّن الفرق بينها في التحويل بأثر مقيس. الخدمة استشارية منهجية تحلل معدلات التحويل وتوثّقها ويبقى قرار صاحب القرار محفوظاً.

يشمل: قياس الاستجابة لكل نسخة لبيان أيها لقي استجابة أفضل من الحالات على مقاييس التفاعل والاهتمام والاستمرار، وجمع مؤشرات الاستجابة لكل نسخة كالوقت المستغرق ونسبة الاستمرار ونسبة الارتداد كي تُقاس الاستجابة لا مجرد التحويل النهائي، ومقارنة استجابة النسخ على المقاييس نفسها لبيان الفرق بينها في تفاعل الحالات معها، وتوثيق أساس قياس الاستجابة لكل نسخة بما يبيّن أي نسخة لقيت استجابة أفضل وبأي قدر لا استجابة تُظن أعلى لنسخة دون قياس يبيّن الفرق بينها في الاستجابة. الخدمة استشارية منهجية تقيس الاستجابة لكل نسخة وتوثّقها ويبقى قرار صاحب القرار محفوظاً.

يشمل: التحقق من الدلالة الإحصائية للفرق بين النسخ لبيان ما إذا كان الفرق حقيقياً أم قد يكون ناتجاً عن الصدفة، وتطبيق الاختبار الإحصائي المناسب لطبيعة المقياس وحساب مستوى الدلالة كي يُعرف احتمال أن يكون الفرق صدفة، وبيان ما إذا كان الفرق يتجاوز عتبة الدلالة المعتمدة كي لا يُبنى قرار على فرق غير دال، وتوثيق أساس التحقق من الدلالة الإحصائية بما يبيّن هل الفرق دال أم لا لا فرق يُنسب لنسخة وهو من صدفة أو عينة لا تكفي فيُبنى القرار على وهم. الخدمة استشارية منهجية تتحقق من الدلالة الإحصائية وتوثّق ذلك ويبقى قرار صاحب القرار محفوظاً.

يشمل: قياس حجم الأثر لبيان هل الفرق بين النسخ كبير يستحق التغيير أم طفيف لا قيمة عملية له وإن كان دالاً إحصائياً، وحساب مقدار الفرق بمقياس حجم الأثر لا مجرد وجود دلالة كي يُميز الفرق ذو القيمة العملية من الفرق الطفيف، وبيان مجال الثقة للفرق كي يُعرف مدى دقة تقديره لا رقم مطلق دون مدى، وتوثيق أساس قياس حجم الأثر بما يبيّن قدر الفرق وقيمته العملية لا دلالة تُعلن دون بيان حجم الأثر فيُبالغ في فرق طفيف أو يُهمل فرق ذو قيمة. الخدمة استشارية منهجية تقيس حجم الأثر وتوثّقه ويبقى قرار صاحب القرار محفوظاً.

يشمل: تحديد النسخة الأفضل بناء على الفرق المقيس ودلالته وحجم أثره بحيث تُختار النسخة التي تفوقت فعلاً لا التي تُظن أفضل، وبيان مستوى الثقة في القرار الذي يعكس مدى قوة الدليل على تفوق النسخة كي يُعرف بأي ثقة تُعتمد، وصياغة التوصية العملية بما يُفعل من تعميم النسخة الأفضل أو إعادة الاختبار حين لا يكون الفرق دالاً، وتوثيق أساس تحديد النسخة الأفضل ومستوى الثقة بما يبيّن أي نسخة تُعتمد وبأي ثقة لا نسخة تُحدد بلا تحقق من دلالة فرقها فيُبنى القرار على وهم. الخدمة استشارية منهجية تحدد النسخة الأفضل ومستوى الثقة وتوثّقها ولا تتخذ القرار نيابة عن صاحب القرار فاختبار المقارنة قياس لفرق النسخ لا فرض لإحداها ويبقى قراره محفوظاً.