Güven Hızı Lideri Değerlendirmesi Teknik Doğrulama Raporu SSS ve İndirme

Bu rapor, FranklinCovey'in Güven Hızı Lideri Değerlendirmesi (SOTLA) için psikometrik özellikleri ve doğrulama raporunu sağlar. Bu değerlendirme, FranklinCovey'in Güven Hızı® (SOT) kursunun bir bileşenidir ve liderlerin/kişi yöneticilerinin SOT kursumuzda temsil edilen beceri ve davranışları ne ölçüde sergilediğini ölçmeyi amaçlamaktadır. Değerlendirme genellikle kursa katılımdan önce ve sonra 360 değerlendirme olarak uygulanır.

Güven Hızı Lideri Değerlendirme Teknik Raporunun tamamını indirin

Teknik/doğrulama raporu nedir?

Bazen psikometri olarak adlandırılan değerlendirmeleri doğrulamak için bir süreç vardır.

Doğrulama süreci sektöre bağlı olarak standartlaştırılabilir. Çoğu zaman, birkaç doğrulama kriteri olduğunu söylemek daha doğrudur, bazıları diğerlerinden daha önemlidir, ancak genellikle bir değerlendirme ne kadar çok doğrulama kriteri karşılarsa o kadar iyidir.

Değerlendirme satan birçok kuruluş bir tür doğrulama yapar. Öncelikle değerlendirmelere odaklanan kuruluşlar, ürettikleri her değerlendirmeyi doğrulayabilir. KornFerry ve Gallup gibi işletmelerinin bir bölümü olarak değerlendirmeleri olan diğer kuruluşlar da en popüler değerlendirmeleri için kapsamlı doğrulama/teknik raporlar yayınlar, bu raporları periyodik olarak yeni verilerle günceller veya değerlendirmedeki değişiklikleri belgelemek için.

Anlaşılır bir şekilde, müşterilerimizin çoğu FranklinCovey değerlendirmelerimizde hangi doğrulama çalışmalarını yaptığımızı görmek istedi.

Ayrıca, eski Takım Güven Endeksimiz (TTI) - şimdi SOT Takım değerlendirmesi - daha önce doğrulanmıştı ve bu da müşterinin diğer FC değerlendirmelerinin neden doğrulanmadığını sorgulamasına neden oldu.

Teknik/doğrulama raporunda neler var?

Bu, yeni SOT Lider Değerlendirmesi üzerindeki doğrulama testini detaylandıran ~ 15 sayfalık bir rapordur.

Rapor 3 temayı kapsıyor:

1. Yeni SOT Lideri değerlendirmesi eski TQ ile nasıl karşılaştırılır - örneğin, insanların her ikisinde de nasıl puan aldığını VE her ikisindeki puanların diğer güven ölçütleriyle nasıl ilişkili olduğunu karşılaştırmak
2. SOT Leader değerlendirmesinin güvenilirliği - örneğin, insanlar bir hafta sonra değerlendirmeyi aldıklarında ne kadar benzer puan alıyor
3. SOT Lider değerlendirmesinin geçerliliği - örneğin, puanların işyeri katılımını ve iş memnuniyetini ne ölçüde öngördüğü

Toplamda, binden fazla lider kendilerini derecelendirdi ve 500'den fazla doğrudan rapor liderlerini bu çalışmaların bir parçası olarak derecelendirdi.

Raporun kapsamı hakkında daha fazla teknik ayrıntı alabilir miyim, raporun tamamını okumak zorunda kalmadan?

Evet. Rapor aşağıdaki doğrulama kriterlerini kapsar:

• İç tutarlılık
• Test-yeniden test güvenilirliği
• Faktör yapısı (yani, SOT Leader değerlendirmesi çok boyutlu bir ölçü mü)
• Yakınsak geçerlilik (yani, SOT Leader değerlendirmesi diğer doğrulanmış güven ölçütleriyle ilgili mi)
  • Öz değerlendirme verilerine dayanarak
  • Ve doğrudan rapor değerlendirici verilerine dayanarak
• Artımlı geçerlilik (yani, SOT Lideri değerlendirmesi eski TQ'dan daha iyi bir güven ölçüsü midir)
• Kriter/eşzamanlı geçerlilik (yani, SOT Lideri değerlendirmesi tahmin etmeyi düşündüğümüz sonuçlarla ilgili mi: katılım ve iş tatmini gibi)
• Katılımcı demografisine (vb., yaş, cinsiyet kimliği) ve ekip ve organizasyonel değişkenlere (örn. kuruluş büyüklüğü, uzaktan çalışma durumu) dayalı SOT Lideri değerlendirme puanlarındaki farklılıklar

 

SOT Leader değerlendirmesi geçerli mi? Verilerde ilginç bir şey var mı?

SOT Leader değerlendirmesi, çeşitli doğrulama kriterleri (normal olarak dağıtılmış yanıtlar, çoklu güvenilirlik biçimleri ve çoklu geçerlilik biçimleri) üzerinde genel kabul görmüş standartları karşılar ve bazı durumlarda bu kriterler üzerinde gerçekten iyi performans gösterir.

Liderinizi SOT Lideri değerlendirmesinde daha yüksek derecelendirmek ile katılım, iş tatmini, kuruluşunuzda kalma niyeti gibi bir dizi harika sonuç arasındaki ilişkiler gerçekten güçlüdür. Liderlikle ilgili en iyi akademik değerlendirmelerden bazılarına rakip olan ilişkiler.

Verilerden elde edilen ek bir fikir, yöneticileriyle geçirdikleri yılların, doğrudan raporların yöneticilerini değerlendirmede nasıl derecelendirdiğini tahmin etmemesidir.. Bunun makul bir yorumu şudur: Bir lider, örneğimizdeki birçok kişi, bir yıl içinde doğrudan raporlarıyla yüksek güveni teşvik edebilir. Yüksek güven oluşturmanın yıllar almasına gerek yoktur.

TQ ve SOT Leader değerlendirmesi arasındaki farklar nelerdir?

SOT Lideri değerlendirmesi, tQ için 25 yerine 20 sorudur. Pazar ve Organizasyonel Güven bölümlerini de kaldırdık. Yeni değerlendirmenin soruları da farklı bir formattadır - her TQ sorusunu belirleyen 2 ifadeden ziyade yalnızca tek bir ifadeden oluşur. Bu değişiklikler ve neden FRG'de ve teknik raporda yapıldıkları hakkında daha fazla ayrıntı sunuyoruz.

Yeni değerlendirmenin tQ"dan daha iyi olduğunu nasıl bilebiliriz??

Başlık, yeni SOT Lideri değerlendirmesinin hem daha kısa olduğu hem de 1) diğer Güven ölçütleriyle daha güçlü ilişkilere sahip olduğu ve 2) çalışan bağlılığı ve iş tatmini gibi önemli sonuçların daha iyi bir öngörücüsü olmasıdır. Ayrıca, yeni değerlendirmenin tQ'yi diğer birkaç önemli psikometrik kriterde geride bıraktığını bulduk - örneğin, yeni değerlendirmedeki puanlar daha normal dağılma eğilimindedir ve yanıt ölçeğinin en yüksek ucunda daha az puan toplama vardır.

Teknik raporda daha fazla ayrıntı bulunur.

Yeni SOT Lider Değerlendirmesi nasıl geliştirildi?

Soruları belirlemek için temel olarak güvendiğimiz iki tür test vardır.

Birçok olası soru seçeneğiyle başladık, ve bunlar Güven Uygulama Liderimiz Doug Faber ile birlikte belirlendi. Daha sonra, birkaç kriterde daha iyi olan soruları bulmak için yanıtlayanlarla birçok küçük test yaptık. Aradığımız şey, yanıtlarda iyi bir aralığa, tercihen normal bir puan dağılımına sahip sorulardı. Ve kavramlarla güçlü korelasyonları olan sorular için, soruların örneğin diğer güven ölçütleriyle ilişkilendirilmesini istiyoruz. Bu süreç bizi neredeyse son soru grubumuza götürdü.

Süreçteki ikinci adım daha da ilgilidir. Ve bu, teknik raporda ayrıntılı olarak açıklanan doğrulama çabasıdır.

SOT değerlendirmesinin 360 niteliğini doğruladık mı?

Liderlerinin öz derecelendirmelerinin ve doğrudan rapor derecelendirmelerinin ölçülmesine ve doğrulanmasına odaklandık. Bunlar genellikle değerlendirme doğrulamasındaki en önemli bakış açıları olarak kabul edilir.

Ancak bu, akran derecelendirmelerine veya yönetici derecelendirmelerine bakmadığımız anlamına gelir. Bu, yeni SOT Leader değerlendirmesi başladıktan sonra yapabileceğimiz ve yapabileceğimiz bir şeydir. Teknik raporu orada bulduğumuz ilgili verilerle güncelleyebiliriz.

Gerekirse uyarı:

Topladığımız şey bağımsız, kesitsel verilerdi - yani kendilerini derecelendiren kişilerin bağımsız örneklerini ve liderlerini derecelendiren bağımsız insan örneklerini topladık. Doğrudan rapor çiftleri ve liderlerin kendilerini ve birbirlerini derecelendirmesi durum böyle değildi.

FranklinCovey 360 Teşhis ile İlişkisi:

ancak, FranklinCovey Leader Diagnostic"da aynı kişiyi derecelendiren diğer derecelendiricilerin verilerine sahibiz. 360 güvenilirliği ile ilgili istatistikler FC Leader Diagnostic teknik raporunda ayrıntılı olarak açıklanmıştır (Yardım Merkezi'nde bulunur).

Peki ya yanıt ölçeğindeki değişiklik?

FRG'de bununla ilgili ayrıntılara giren bir bölümümüz var. Kısacası, SOT Lideri değerlendirmesine eşlik eden ölçek, katılımcıların SOT Lideri değerlendirmesinin yanı sıra Teşhis'i tamamlarken deneyimlerini tutarlı tutmak için gerekli olan FC Diagnostic ile tutarlıdır. Ayrıca, yeni yanıt ölçeğinin, değerlendirmenin doğrulaması için önemli bir kriter olan tQ için eski yanıt ölçeğinden daha normal dağılmış yanıtlar sağladığını gösteren verilerimiz de var.

SOT Lideri ve Ekip değerlendirmeleri nasıl farklılık gösterir? Takım değerlendirmesi için doğrulama var mı?

SOT Ekibi değerlendirmesi hakkında bilgi için SOT FRG'de bulunur.

Takım değerlendirmesi doğrulaması ile ilgili olarak: Takım değerlendirmesinin soruları önceki Takım Güveni endeksi (TTi) ile neredeyse aynıdır. Bu değerlendirmedeki güncellemelerin çoğu, yönetimi ve Modül 4'e eki ile ilgilidir. Ayrıca, eski TTi daha önce 2016 yılında harici bir araştırma firması tarafından onaylandı ve bu rapordan elde edilen sonuçlar hala geçerlidir. SOT Ekip Değerlendirmesi için doğrulama raporu Lider Değerlendirmesi kadar kapsamlı olmasa da, değerlendirmenin güvenilirliği ile ilgili önemli ölçümleri (örneğin, iç tutarlılık) bildirir.

SOT Lideri değerlendirmesi kültürler arasında doğrulandı mı?

Doğrulama testimiz sadece ABD'de ve İngilizce olarak yapıldı. Neredeyse her zaman doğrulama bir ülke ve dilde başlar ve daha sonra kültürler arası doğrulama gerekliyse, daha sonra ek çalışmalarla yapılır.

Ayrıca, bir değerlendirmenin kültürler arasında geçerli olup olmadığı ile kültürler arasında farklılıklar olup olmadığı arasında önemli bir ayrım olduğunu da not ediyoruz. Örneğin, ABD merkezli verilerimizde bazı demografik farklılıklar buluyoruz - bazıları ırk/etnik kökene, bazıları uzaktan çalışma durumuna dayalı. Yani bunlar gruplar arasındaki farklılıklar. Ancak gruptan bağımsız olarak, SOT Lideri değerlendirme puanları hala bağlılık ve iş tatmini gibi sonuçları öngörüyor. Değerlendirmenin geçerliliğini anlatan şey budur.

Tüm bunlar, SOT Lideri değerlendirmesi hakkında kültürler arası bir çalışma yapacaksak, bu gelecekte gelecek ve teknik raporun revize edilmiş bir versiyonuna eklenebilir.

Doğrulama üzerinde kim çalıştı?

Doğrulama çalışmamız Ürün ekibinden Alex O'Connor tarafından yönetildi. Araştırma psikolojisi alanında doktora derecesine sahiptir, psikometri eğitimi almıştır ve daha önce akademik dergilerde doğrulanmış değerlendirmeler yayınlamıştır.

Doğrulama çalışmamız harici bir uzman olan Joshua Eng, PhD tarafından desteklendi. Indiana Üniversitesi - Tıp Fakültesi"nde öğretim üyesi. Ülke çapındaki cerrahi sakinleri için öğrenme ve esenlik sonuçlarını ölçen değerlendirmeleri doğrulamaktan sorumludur ve psikometrist olarak onlarca yıllık deneyime sahiptir.