Laboratuvar mı, Gerçek Dünya mı? Türkçe Web'de Lighthouse ve CrUX Ölçümlerinin Uyumu Üzerine Bir Yöntem-Karşılaştırma Çalışması
Amaç: Laboratuvar (Lighthouse, kısıtlı/throttled) performans ölçümlerinin gerçek-kullanıcı saha (Chrome UX Report, CrUX p75) deneyimini ne ölçüde öngördüğünü belirlemek. Yöntem: Aynı PageSpeed Insights çağrısından laboratuvar (Lighthouse) ve saha (CrUX p75) verisi alınan 7.403 Türkçe site için En Büyük İçerikli Boyama (LCP), İlk İçerikli Boyama (FCP) ve Kümülatif Düzen Kayması (CLS) eşleştirilmiş; uyum Pearson ve Spearman korelasyonu, Bland-Altman analizi ve Cohen's kappa (Core Web Vitals 'iyi/geliştirilmeli/zayıf' sınıflaması) ile incelenmiştir. Bulgular: Laboratuvar, yükleme metriklerini sistematik ve büyük ölçüde kötümser raporlamıştır (LCP: lab medyan 10.876 ms, saha 2.247 ms). LCP'de lab–saha ilişkisi zayıftır (ρ = 0,26) ve sınıf uyumu şanstan ileri gitmemektedir (κ ≈ 0,00); sitelerin %85,6'sı laboratuvarda gerçeğinden daha kötü bir sınıfa düşmüş, laboratuvarın 'iyi' oranı %3,1 iken sahada bu oran %59,6 olmuştur. FCP benzer biçimde zayıf uyum (κ = 0,01) verirken, yalnız CLS orta düzeyde uyum göstermiştir (κ = 0,33). Lighthouse genel skoru saha LCP'siyle yalnız zayıf korelasyon kurmuştur (r = −0,25). Sonuç: Türkçe web'de varsayılan laboratuvar Lighthouse yükleme metrikleri, gerçek-kullanıcı deneyiminin zayıf bir vekilidir; performans kararları saha verisine dayandırılmalı, laboratuvar ise teşhis/hata ayıklama amacıyla kullanılmalıdır.
Bland, J. M., & Altman, D. G. (1986). Statistical methods for assessing agreement between two methods of clinical measurement. The Lancet, 327(8476), 307–310.
Cohen, J. (1960). A coefficient of agreement for nominal scales. Educational and Psychological Measurement, 20(1), 37–46.
Landis, J. R., & Koch, G. G. (1977). The measurement of observer agreement for categorical data. Biometrics, 33(1), 159–174.
Google. Chrome UX Report (CrUX) — origin-level field data.
Google. Lighthouse — automated tool for improving web page quality.
web.dev. Core Web Vitals.