LMS seçerken yapılan 7 hata (ve nasıl kaçınılır)
LMS projeleri çoğu zaman teknik nedenlerle değil, satın alma aşamasındaki varsayımlar yüzünden tökezliyor. Sık görülen yedi hata ve her birinin pratik panzehiri.
LMS ve Eğitim Yönetimi
LMS raporlarında hangi metriklere bakmalı?
Giriş sayısı, izlenme süresi, tamamlama yüzdesi... Raporlar kalabalık ama kararlarınıza yardımcı olanlar çok az. Vitrin metrikleriyle işe yarar metrikleri ayırmak.
Bir LMS'in yönetici paneline ilk girdiğinizde grafiklerle karşılaşırsınız: toplam kullanıcı, toplam eğitim saati, aktif öğrenci, tamamlama oranı. Hepsi hoş görünüyor. Ama bir toplantıda yönetici "peki bu ne anlama geliyor?" diye sorduğunda cevap vermek zorlaşıyor.
Metrik çok, anlam az. Sorun genelde veri eksikliği değil, hangi soruya cevap aradığınızı bilmemek.
Önce soru, sonra metrik
Rapor tasarlarken şu sırayla ilerlemek işe yarıyor:
- Hangi karar için bu veriyi istiyoruz? (Eğitimi yenilemek mi, bütçe ayırmak mı, birine destek vermek mi?)
- Hangi soru bu kararı etkiler? ("Zorunlu eğitimlerde geride kalan var mı?")
- Hangi metrik bu soruya cevap verir?
Bu sıra tersine çevrildiğinde (önce panelde ne var diye bakıp sonra ne anlama geldiğini düşünmek), sayılar dekora dönüşüyor.
Vitrin metrikleri ve işe yarar metrikler
Vitrin metrikleri güzel görünür, ama tek başına karar vermeye yetmez:
- Toplam kayıtlı kullanıcı sayısı
- Toplam giriş sayısı
- Platformda geçirilen toplam saat
- İzlenme sayısı
Bunlar, platformun "yaşadığını" gösterir ama eğitimin işe yarayıp yaramadığını göstermez. Bir video yüz kez açılmış olabilir; ama kaç kişi izlediği ve kaç kişinin öğrendiği belli değil.
İşe yarar metrikler ise bir karara yol gösterir:
| Metrik | Cevap verdiği soru |
|---|---|
| Zorunlu eğitimlerde tamamlama oranı (birim bazında) | Kim geride, hangi birim? |
| Tamamlama süresi (atamadan bitişe) | Eğitim fazla mı uzun, hatırlatma yeterli mi? |
| Sınav başarı oranı ve ortalama puan | Katılımcılar öğrendi mi? |
| Konu bazlı başarı | Hangi konu zayıf, içerik mi sorunlu? |
| Modül bazlı terk noktası | İçerikte nerede insanlar bırakıyor? |
| Ön test / son test farkı | Eğitim bilgi artışı sağladı mı? |
| Süresi yaklaşan sertifikalar | Önümüzdeki dönemde kimin yenilemesi gerek? |
"Tamamladı" ile "öğrendi" aynı şey değil
Tamamlama oranı en sık kullanılan, en kolay yanıltan metrik. Birine eğitimi atadığınızda, videoyu açık bırakıp başka işe bakması mümkün. "%100 tamamlandı" yazar, ama bilgi bırakmamış olabilir.
Bu yüzden önemli eğitimlerde tamamlama ile birlikte bir değerlendirme sonucu da bakmak gerekir. Bir sınavdan geçen kişi için "tamamladı ve şu başarıyı gösterdi" demek, çok daha güçlü bir kanıt. Konunun daha geniş çerçevesini eğitimin etkisini ölçmek yazısında ele aldık.
Kime, hangi rapor?
Farklı kişilerin farklı soruları var, o yüzden tek bir panel herkese yetmez:
- Yönetici (üst düzey): Birkaç özet gösterge, trend. Fazlası gürültü.
- Birim yöneticisi: Kendi ekibi: kim geride, kim başarılı, kimin desteğe ihtiyacı var.
- Eğitim sorumlusu: İçerik performansı: hangi eğitim işe yarıyor, nerede takılma var.
- Denetim / uyum: Kişi bazlı kayıt, sertifika durumu, tarih bilgisi.
Kaçınılması gereken tuzaklar
- Karşılaştırma yanılgısı: İki birimin tamamlama oranını karşılaştırırken, birimlerin büyüklüğü ve eğitimin zorunlu olup olmadığına bakın.
- Ortalamaya aldanmak: Ortalama başarı yüzde yetmiş, iki ayrı grubun (biri yüzde doksan, diğeri yüzde elli) karışımı olabilir. Dağılıma bakmak önemli.
- Çok fazla rapor: Elli rapor yerine, düzenli bakılan beş rapor daha değerli.
- Veri kalitesi: Kullanıcılar yanlış birimde ya da kayıtlı değilse, bütün rapor yanıltıcı olur. Kullanıcı verisi temiz olmalı.
Raporlama ihtiyacınızı belirlemek için bir egzersiz
Bir kâğıda, yöneticinize her ay göstermek istediğiniz üç tabloyu çizin. Hangi sütunlar, hangi filtreler olacak? Sonra aday LMS'inizden aynı tabloyu kendi verinizle üretmesini isteyin. Eğer tablo kolayca çıkıyorsa, raporlama sizin için yeterli; çıkmıyorsa, vitrin metriklerine razı olmak zorunda kalabilirsiniz.
Vedubox Test ve Sınav Sistemi, sınav sonuçlarını anlık değerlendirip kişi ve eğitim bazında raporlayabiliyor ve sertifika bilgilerini bir arada tutuyor. Vedubox LMS ise ilerleme, başarı ve katılım bilgisini birim, rol ve eğitim bazında sunuyor. Ayrıntılar için Vedubox LMS sayfasına ve Raporlama ve Sertifika bölümüne bakabilirsiniz. Sınav özelinde rapor okuma için sınav sonuç raporları yazısı da faydalı olacaktır.