Scovai Scovai
People Analytics 2026-10-27 1 min read

9-box'unuzun potansiyel ekseni kişiden çok birimi ölçüyor: 20.199 gerçek değerlendirmeden kanıtlar

DSL

Dr. Sarah Liu

9-box'unuzun potansiyel ekseni kişiden çok birimi ölçüyor: 20.199 gerçek değerlendirmeden kanıtlar

Çok uluslu bir toptan ticaret şirketi, araştırmacılara 20.199 gerçek performans değerlendirmesini açtı ve her puanın ardından kimin gerçekten terfi ettiğini eşleştirmelerine izin verdi. Çoğu kalibrasyon oturumunun yakalamak üzere kurulduğu cinsiyet farkı gerçek ama önemsiz derecede küçük çıktı — Cohen f = 0,02 — ve terfi adımını hiç çarpıtmadı. Bir sonraki yetenek gözden geçirmenizi değiştirmesi gereken bulgu varyans bileşenlerinde: puan varyansının, çalışanın bulunduğu alt şirkete atfedilebilen payı performans için 0,040, gelişim potansiyeli için 0,136 idi (Kordsmeyer ve diğerleri, International Journal of Selection and Assessment, 2026).

Performans ekseniniz çoğunlukla kişiyi ölçüyor. 9-box'unuzun potansiyel puanı kişiyi ve birimi ölçüyor — ve birime üç kattan fazla ağırlıkla yükleniyor.

Bu asimetri bir adalet dipnotu değil. Yedekleme listelerini kurmak için kullandığınız eksenin içinde duran bir ölçüm kusurudur ve puan girdilerinden ziyade terfi sonuçlarını denetleyen her denetime karşı görünmezdir.

20.199 değerlendirme gerçekte ne gösterdi

Kordsmeyer, Godehardt, Roß, Lanzoni ve Speer, tek bir çok uluslu toptan ticaret işvereninin 20.199 çalışanına ait değerlendirme ve terfi kayıtlarını analiz etti. Tasarım önemli: bunlar kullanımda olan bir araçtan gelen gerçek puanlar, gerçek terfi kararlarıyla eşleştirilmiş; bir senaryo kurgusu ya da öz bildirim değil. Standart değerlendirmenin her iki yarısını — performans ve gelişim potansiyeli — artı düzenleyicileri test ettiler, ardından puanları aşağı akışta, gerçekten yer değiştirenlere kadar izlediler.

Sonuçlar net biçimde rahatlatıcı bir yarıya ve rahatsız edici bir yarıya ayrılıyor.

Test edilenSonuç
Performans puanlarında cinsiyet farkıAnlamlı, erkekler lehine, f = 0,02 (çok küçük)
Gelişim potansiyeli puanlarında cinsiyet farkıAnlamlı, erkekler lehine, f = 0,02 (çok küçük)
Puanların terfiye dönüşmesiCinsiyet etkisi ihmal edilebilir — χ²(1, N = 10.772) = 0,34, p = 0,56, φ = −0,006
Ayrışık yordama (yordayıcı yanlılık)Anlamlı hiçbir şey — işaretsiz β'lar < 0,14, p'ler > 0,059
Birim (alt şirket) varyansı, performans0,040
Birim (alt şirket) varyansı, gelişim potansiyeli0,136

Rahatlatıcı yarı: bir puan var olduğunda, kadınlar ve erkekler için eşdeğer biçimde terfiye dönüşüyordu. Terfilerdeki grup farkları büyük ölçüde puanların kendisiyle açıklanıyordu, üzerine eklenmiş yanlı bir terfi kararıyla değil. Adalet gözden geçirmeniz terfi adımını denetliyorsa, bu çalışma hattın temiz kısmını denetlediğinizi söylüyor.

Rahatsız edici yarı son iki satır ve neredeyse kimse bir 9-box'u bu şekilde okumuyor.

Herkesin beklediği adalet hikâyesi ve önemli olan hikâye

İki ek ayrıntı, küçük cinsiyet etkisinin gerçekte nerede yaşadığını keskinleştiriyor. Farklar, departmanın cinsiyet kompozisyonu ve kısmen de yöneticinin cinsiyeti tarafından düzenleniyordu — ikincisi özellikle gelişim potansiyelinde. Başka deyişle fark şirket genelinde tek biçimli değil: dengesiz kompozisyonlu departmanlarda yoğunlaşıyor. Bu, kalibrasyon zamanı için bir hedefleme talimatıdır, şirket çapında bir sorun değil.

Ancak iki bulguyu yan yana tutun. Potansiyel puanları üzerindeki cinsiyet etkisi f = 0,02. Potansiyel puanları üzerindeki birim etkisi 0,136 varyans. Yönetişim sürecinizi iki sinyalin küçüğünün etrafında kurmuşsunuz.

Bu, yıllarca ayakta kalan hata türüdür, çünkü süreç açısından görünmezdir. Yüksek potansiyel işaretlerinin cinsiyet dağılımını inceleyen bir kalibrasyon oturumu denetimden geçecektir. Aynı oturum, «yüksek potansiyel»in Lojistik'te ve Ticaret'te aynı şeyi ifade edip etmediğini asla sormayacaktır — çünkü kimse varyans bileşenlerini odaya getirmemiştir.

9-box potansiyel puanı neden yapısal olarak daha gürültülü

Sebep, yöneticilerin bir eksende özensiz, diğerinde titiz olmaları değil. İki eksenin temelde farklı sorular sormasıdır.

Performans, gözlenmiş, tamamlanmış ve büyük ölçüde belgelenmiş işi sorar. Yönetici bir kaydı özetliyordur. Karşılaştırılabilir kayıtları özetleyen, farklı birimlerdeki iki yönetici kabaca aynı yere varacaktır; birim terimi bu yüzden küçüktür — 0,040.

Gelişim potansiyeli, yöneticiden bir öngörü ister. Öngörü ise bir referans sınıfı gerektirir. «12–24 ayda hazır», örtük olarak «bu rolün burada nasıl göründüğüne, bu birimin hangi hızda ilerlediğine ve bunu burada yaptığını gördüğüm insanlara göre hazır» demektir. Birimi değiştirin ve kişiyi değiştirmeden üç çıpanın hepsini değiştirmiş olursunuz. 0,136, bu durum ayrıştırıldığında ortaya çıkan görüntüdür.

Pratik başarısızlık da buradan doğar. Potansiyel puanlarını birimler arasında havuzlayarak kurulan her yedekleme listesi, farklı ölçeklerde kalibre edilmiş yargıları karşılaştırır ve sonra bunları tek bir ölçekmiş gibi sıralar. Yavaş bir birimde «şimdi hazır» olan çalışan ile zorlu bir birimde «12–24 ay uzakta» olan çalışan birebir aynı olabilir. Yedek gücü raporunuz bunu ayırt edemez.

Potansiyel puanları ayrıca yanlış ölçütü ölçüyor

Potansiyel ekseninde ikinci, bağımsız bir sorun var ve birincisini ağırlaştırıyor.

203 veri kümesi ve 4.815 korelasyon üzerinde yürütülen facet düzeyinde bir meta-analiz, kuruluşların rutin olarak birleştirdiği iki sonucu ayırdı: liderlik etkililiği (etkililik puanları ve birim performansı) ve liderlik olarak öne çıkma — açıkça liderlik potansiyeli puanlarını içeren bir ölçüt (Baker ve diğerleri, Journal of Applied Psychology, 2026). Her birini yordayan kişilik facet'leri neredeyse birbirinin zıddı.

Etkililik; başarma motivasyonu (ρ = 0,23), düzen (ρ = 0,23), öz disiplin (ρ = 0,23) ve iyimserlik (ρ = 0,19) tarafından yordanıyordu. Öne çıkma, atılganlık (ρ = 0,21) tarafından yordanıyordu — Dışadönüklüğün en güçlü facet'i. Etkililiği 0,23 ile yordayan başarma motivasyonu, öne çıkmayı 0,01 ile yordar. Özgecillik zıt yönlerde ilerler: etkililikte +0,16, öne çıkmada −0,12.

Bunu 9-box'a karşı okuyun. Potansiyel ekseni bir potansiyel puanıdır, yani bir öne çıkma yargısıdır. Bir yöneticinin gözünde birini terfiye uygun gösteren özellikler, bu kanıtlara göre, terfi sonrası onu etkili kılan özellikler değildir — ve en az bir durumda terfiden sonra en çok yardımcı olan özellik, terfiden önceki puana aktif biçimde zarar verir.

Yani potansiyel ekseni, bir ölçüt sorununun üstüne bir birim kontaminasyonu taşır. Birim etkisi size sayının iş birimleri arasında karşılaştırılabilir olmadığını söyler. Meta-analiz ise karşılaştırılabilir olduğu şeyin istediğiniz şey olmayabileceğini söyler.

Karşı argüman ve nerede geçerli

Sınırlar, dürüstçe. Kordsmeyer tek bir değerlendirme aracına sahip tek bir çok uluslu toptan ticaret işvereni; varyans bileşenleri belirli bir şirketin ve belirli bir puanlama formunun özellikleridir, kendinizinmiş gibi aktarılacak sabitler değil. Çalışmanın nedensel bir tasarımı da yok: varyansı ayrıştırır, farklı birimlerdeki yöneticilerin farklı standartlar uyguladığını değil — farklı birimlerde gerçekten farklı yetenek dağılımlarının bulunduğu olasılığına karşı — kanıtlamaz. O 0,136'nın bir kısmı muhtemelen gerçek ayrışmadır.

İki şey ayakta kalıyor. Birincisi, 0,040 ile 0,136 arasındaki fark aynı veride, aynı şirkette, aynı değerlendiricilerde, aynı döngüde — bunu açıklayan her şey, neden öngörüye uygulanıp kayda uygulanmadığını da açıklamak zorundadır. Gerçek ayrışma ikisini birlikte hareket ettirirdi. İkincisi, yön, daha temiz bir tanımlamaya sahip bir literatürle desteklenmektedir; aşağıda. 0,136'yı kendi ayrışmanızı ölçmeye yönelik bir dürtü olarak görün, kendi sayınız olarak değil.

Performans sabit tutulsa bile bağlam terfi yargılarını kaydırıyor

En güçlü dış denetim, Kordsmeyer'in sabitleyemediği şeyi sabitleyen bir tasarımdan geliyor. Birleşik Krallık'ta yürütülen eşleştirilmiş zorunlu seçim conjoint deneyinde 937 yönetici, performans puanının açıkça sabit tutulduğu ve yalnızca çalışma düzeninin değiştiği profilleri değerlendirdi (Kasperska, Matysiak & Cukrowska-Torzewska, PLOS ONE, 2024).

Hibrit çalışanlar terfide %7,7, ücret artışında %7,1 ceza aldı. Tamamen uzaktan çalışanlar terfide %10,7, ücrette %9,4, eğitim için seçilmede %6,6 ceza aldı. Performans, kurgu gereği aynıydı. Ceza, tamamen kişinin içinde çalıştığı bağlama dair bir yargıdır.

O çalışmanın en işe yarar sayısı, etkiyi ortadan kaldıran sayıdır: ekibin %80'i veya daha fazlası evden çalıştığında, ceza her grup için ortadan kalkıyordu. Yargı hiçbir zaman bireyle ilgili olmadı. Bireyin yerel normdan ne kadar uzakta durduğuyla ilgiliydi — ki bu tam olarak bir varyans ayrıştırmasında büyük bir birim terimi üretecek mekanizmadır.

Bu, aynı şeyi gösteren iki bağımsız literatür. İnsanlar hakkındaki ileriye dönük yargılar, o insanların bulunduğu birimin özelliklerini soğurur. Geriye dönük performans yargıları çok daha azını soğurur.

Kontamine eksen üzerinde hareket etmenin maliyeti

Pahalı sonuç, adaletsiz bir puan değil. Bir işe alım kararıdır.

Zayıf görünen bir yedekleme havuzu — çünkü birimlerinizin yarısı potansiyeli muhafazakâr puanlıyor — şirketi dış piyasaya iter. Dış piyasa tam bunun için bir prim ister: Matthew Bidwell'in analizi, dışarıdan alınanların karşılaştırılabilir rollerde içeriden terfi edenlere göre %18–20 daha fazla ücret aldığını, yaklaşık iki yıl boyunca anlamlı biçimde daha düşük performans değerlendirmeleri aldığını ve daha yüksek oranlarda ayrıldığını buldu (Bidwell üzerine Knowledge at Wharton, Administrative Science Quarterly, 2011).

Bu prim, bir bilgi açığının bedelidir. İroni şu ki bilgi zaten sizde — değerlendirme verilerinizin içinde — ama potansiyel ekseni onu tutarsız ölçeklerde kodladı; böylece havuz yalnızca okunamaz durumdayken boş görünüyor. Siz de daha belirsiz bir sinyali dışarıdan satın almak için %18–20 ödüyorsunuz.

Bir sonraki yetenek gözden geçirmesinden önce neyi değiştirmeli

Beş hamle; hiçbiri değerlendirme aracınızı değiştirmeyi gerektirmiyor.

  1. Bir sonraki döngü kapanmadan kendi iki ekseninizi ayrıştırın. Performans ve potansiyel için birim bazında varyansı ayrı ayrı hesaplayın. İki sayıya ihtiyacınız var ve aralarındaki fark teşhisin kendisidir. Potansiyel, performanstan belirgin biçimde daha fazla birim varyansı taşıyorsa, yedekleme listeniz bu hâliyle sıralanabilir değildir.
  2. Potansiyel eksenini birimler arasında kalibre edin, birimlerin içinde değil. Kalibrasyon oturumlarının çoğu bir birimi toplar ve içinde normalleştirir — bu, birim içi dağılımı düzeltir ve birimler arası sapmayı tam olarak korur. Potansiyel ekseninde birimler arası kalibrasyon, 0,136'ya dokunan tek oturumdur.
  3. Hazırlığı mevcut birime göre değil, hedef role göre tanımlayın. «12–24 ayda hazır», adı konmuş gereklilikleri olan adı konmuş bir pozisyon için hazır anlamına gelmek zorundadır. Hazırlığı hedef pozisyona bağlamak, birim etkisini baştan yaratan yerel referans sınıfını ortadan kaldırır.
  4. Potansiyel anlatısını yetkinlik kanıtıyla değiştirin. Eksen kayar, çünkü yöneticiler izlenimden öngörü üretir. Ortak bir çerçeveye karşı yetkinlik başına ve döngü başına ölçüm, her birime aynı ölçeği verir ve birimler arası kalibrasyon bir tartışma yerine bir dağılım kontrolüne dönüşür. Scovai'nin performans ve yedekleme katmanı 9-box'u bu girdiden hesaplar — ortak bir çerçeveye karşı yetkinlik başına deterministik ölçüm, kalibrasyon oturumu için dağılım işaretleriyle.
  5. Yalnızca sonucu değil, girdiyi denetleyin. Bu çalışma temiz bir terfi adımı ve kontamine bir puanlama adımı buldu. Terfi sonuçlarını demografik olarak örnekleyen bir denetim, ikisi için de temiz rapor verirdi. Puanlama aşamasındaki varyansı, people analytics biriminizin incelediği şeylere ekleyin.
  1. maddenin özellikle adalet çalışması için ne ima ettiğine dikkat edin. Buradaki cinsiyet etkisi f = 0,02'ydi ve terfilere yayılmadı. Aynı eksendeki birim etkisi 0,136'da seyrederken kalibrasyon saatini buna harcamak, iyi niyeti daha küçük sayıya yöneltmektir.

Bu çeyrek için tek bir karar

9-box'u koruyup korumayacağınızı seçmiyorsunuz. Makul bir araçtır ve bu çalışmada performans ekseni iyi davrandı. 20.199 değerlendirmeden gelen veri, iki eksenden birinin diğerinin birim gürültüsünün üç katından fazlasını taşıdığını söylerken, bu iki ekseni eşit ölçüde güvenilir saymaya devam edip etmeyeceğinizi seçiyorsunuz.

Bir sonraki yetenek gözden geçirmeniz toplanmadan önce kendi potansiyel puanlarınız üzerinde varyans ayrıştırmasını yürütün ve odaya tek bir sayı getirin: «yüksek potansiyel»in ne kadarı, çalışanın bağlı olduğu yöneticinin birimiyle açıklanıyor. Büyükse, henüz bir yedekleme listeniz yok. Farklı para birimlerinde, birbirine zımbalanmış on iki taneniz var.

Ready to go beyond the CV?

Scovai's AI-powered Talent Passport reveals what resumes can't: personality, potential, and true job fit.