Aktualizujemy nasz sposób oceniania
W TestGorilla dokładamy wszelkich starań, aby stale poprawiać komfort i intuicyjność korzystania z naszej platformy. Kolejny obszar, na którym się skupiamy, to ulepszenie naszych sposobów oceniania i zapewnienie większej liczby opcji niż kiedykolwiek wcześniej. W tym artykule omówimy zmiany w sposobach oceniania wprowadzanych na naszej platformie, a w miarę wprowadzania tych zmian dla większej liczby użytkowników nasze artykuły będą aktualizowane w celu ich uwzględnienia. Ten artykuł dotyczy wszystkich nowych i obecnych użytkowników TestGorilla.
Przybliżony czas czytania: 8 minut
Tematy zawarte w artykule:
- Co się zmienia?
- Czym są percentyle?
- Dlaczego percentyle?
- Jak obliczane są wyniki percentylowe?
- Korzystanie z punktacji percentylowej
- Często zadawane pytania
Co się zmienia?
Począwszy od 14 października i przez cały miesiąc będziemy wprowadzać punktację percentylową w całej aplikacji. Jeśli jesteś nowym użytkownikiem, możesz od razu skorzystać z punktacji percentylowej! Zobaczysz, jak kandydaci wypadają na tle innych, którzy wzięli udział w tej samej ocenie, co zapewni bardziej przejrzysty i dokładny sposób oceny wyników.
Ponadto wprowadzone zostaną następujące aktualizacje:
- Na każdej stronie oceny znajduje się nowy przełącznik do przełączania między metrykami punktacji. Percentyl jest ustawiony jako domyślny, ale jeśli wolisz, możesz przełączyć się na „Wynik bezwzględny” (wcześniej „Procentowy”).
- Na stronie wyników każdego kandydata, wyniki percentylowe i bezwzględne pojawiają się obok siebie, wraz z krzywą dzwonową pokazującą, jak wypadają w porównaniu z innymi, którzy wzięli udział w tej samej ocenie.
- Oba sposoby punktacji prezentowane są obok siebie w raportach PDF w celu łatwego porównania.
- Tylko sposób wybrany na stronie oceny jest dostępny w eksportach CSV i Excel.
Czym są percentyle?
Percentyle to wskaźnik punktacji, który pomaga zrozumieć wyniki kandydatów w porównaniu z innymi. Na przykład, kandydat z wynikiem na poziomie 54. percentyla to kandydat, który poradził sobie z testem lepiej niż 54% innych kandydatów w naszej grupie referencyjnej. Należy pamiętać, że nie jest to wynik kandydata, który uzyskał 54% poprawnych odpowiedzi w teście.
Alternatywą dla punktacji percentylowej jest procent poprawnych odpowiedzi. Trzymając się naszego przykładu, zdobycie 54% poprawnych odpowiedzi oznacza po prostu, że kandydat odpowiedział poprawnie na określoną liczbę pytań. Nie bierze to pod uwagę trudności ani podobieństwa tych pytań, co sprawia, że łatwiej przeoczyć dobrych kandydatów.
W przypadku procentu poprawnych odpowiedzi nie ma sposobu, aby dowiedzieć się, czy 54% wynika z tego, że kandydat dobrze poradził sobie z ważnymi, trudnymi pytaniami, czy też z tego, że poradził sobie ze wszystkimi łatwymi pytaniami, które wysoko wykwalifikowany kandydat może uznać za rozpraszające. Ponadto porównywanie wyników między ocenami może być trudne, ponieważ testy tej samej umiejętności w różnych ocenach będą zawierały różne pytania.
Wynik percentylowy to pojedyncza liczba, która zawiera informacje o odpowiedziach kandydata i trudności pytań. Ułatwia to rozróżnienie między dobrymi, świetnymi i doskonałymi kandydatami. Umożliwia również porównywanie kandydatów, którzy podeszli do różnych ocen, ponieważ wynik percentylowy uwzględnia już trudność pytania i testu. Gdy programista znajdzie się w 90. percentylu w teście Javascript, oznacza to, że był lepszy niż 90% innych kandydatów, którzy wzięli w nim udział.
Podczas gdy 90% poprawnych wyników na trudnym teście może być bardzo znaczące, nie jest tak w przypadku 90% wyników na łatwym teście. Wynik w 90. percentylu zawsze oznacza to samo — że kandydat jest lepszy niż 90% osób, które przystąpiły do testu. Umożliwia to utworzenie rankingu i porównywanie kandydatów bez zastanawiania się nad poszczególnymi pytaniami, ich różnicami i trudnościami.
Dlaczego percentyle?
Istnieje kilka kluczowych czynników, które spowodowały, że dodaliśmy punktację percentylową:
- Spójna i wiarygodna interpretacja wyników
- Uwzględnienie trudności pytań
- Większa pewność umiejętności kandydata
- Zapewnienie elastyczności
Aby uzyskać bardziej dogłębne spojrzenie na naukę i uzasadnienie każdego czynnika, odwiedź nasz blog.
Wierzymy, że wyniki percentylowe to nie tylko nowy sposób klasyfikowania kandydatów — to potężne narzędzie, które pomaga w podejmowaniu bardziej świadomych i pewnych decyzji rekrutacyjnych. Niezależnie od tego, czy przeglądasz poszczególne testy, czy całe oceny, percentyle oferują pełniejszy obraz możliwości kandydata.
Wyniki percentylowe oferują głębszy wgląd dzięki uwzględnieniu trudności pytań, ułatwiając sprawiedliwe porównanie kandydatów na przestrzeni różnych ocen, nawet jeśli mają do czynienia z różnymi poziomami wyzwań w teście. W przeciwieństwie do wyników procentowych, które odzwierciedlają tylko poprawne odpowiedzi, percentyle pokazują, jak dobrze kandydat radzi sobie w porównaniu z innymi.
|
Jak obliczane są wyniki percentylowe?
Na poziomie testu uwzględniamy trudność poszczególnych pytań. Rozważmy dwóch kandydatów: jeden może odpowiedzieć poprawnie na łatwiejsze pytania, podczas gdy drugi poradzi sobie z trudniejszymi. Nasz system odpowiednio dostosowuje ich wyniki.
Odbywa się to poprzez ważenie poprawnych odpowiedzi z parametrem opisującym trudność pytań. Trudność pytania oblicza się, patrząc na wyniki w próbie referencyjnej i obliczając, jak prawdopodobne jest, że przeciętny kandydat odpowie poprawnie na to pytanie.
Pytanie o trudności 0,8 to takie, na które 80% kandydatów odpowiada poprawnie, co oznacza, że jest ono łatwe. Pytanie o trudności 0,2 jest pytaniem trudnym, na które poprawnie odpowiada tylko 20% osób. Informacje te są następnie wykorzystywane do przyznania większej liczby „punktów” pytaniu trudnemu niż łatwemu.
Więcej informacji na temat obliczania wyników percentylowych można znaleźć na naszym blogu.
Korzystanie z punktacji percentylowej
Po tej aktualizacji jest kilka sposobów na natychmiastowe rozpoczęcie korzystania z punktacji percentylowej w procesie rekrutacji:
Przełączanie metod punktacji Punktacja percentylowa będzie teraz domyślną metodą punktacji — oznacza to, że wyniki kandydatów na stronie przeglądu ocen będą automatycznie wyświetlane przy użyciu metryki punktacji percentylowej. Możesz ją przełączyć z powrotem na wynik bezwzględny, jeśli lepiej odpowiada to Twoim potrzebom. |
||
Strona z wynikami Na stronie z wynikami każdego kandydata znajduje się krzywa dzwonowa, która oznacza percentyl, w którym mieści się kandydat, w porównaniu ze średnią. Poniżej krzywej dzwonowej znajdują się testy uwzględnione w ocenie, które pokazują zarówno percentyl, w którym kandydat mieści się w każdym teście, jak i wynik bezwzględny (procentowy), który uzyskał.
|
||
Raporty PDF Zarówno punktacja percentylowa, jak i wyniki bezwzględne będą widoczne w raportach PDF. Są one wyświetlane obok siebie zarówno na poziomie oceny, jak i testu. |
||
Eksport do CSV/Excela Eksport do CSV i Excel wyświetli pojedynczą metrykę punktacji — w zależności od tego, która została wybrana w przeglądzie oceny. Może to być wynik percentylowy lub bezwzględny. |
||
Raporty PDF podsumowujące ocenę Wybrany sposób punktacji wpływa również na sposób wyświetlania wyników kandydatów w raporcie PDF podsumowującym wyniki. Wybrany sposób będzie wyświetlany w całym raporcie. Jeśli chcesz zmienić wyświetlany sposób oceniania, po prostu przełącz je w przeglądzie oceny. |
Często zadawane pytania
Czy nadal mogę zobaczyć procent poprawnych odpowiedzi?Tak! Nadal możesz wyświetlać procent poprawnych odpowiedzi w opcji „wynik bezwzględny”, ale domyślna punktacja będzie teraz oparta na percentylach.
Czy wpłynie to na moje oceny lub dane?Dane z poprzednich ocen pozostaną nienaruszone i będą teraz dostępne w opcji „wynik bezwzględny”. Zobaczysz także wynik percentylowy w wynikach poprzednich testów.
Jak obliczane są wyniki percentylowe?Wyniki percentylowe uwzględniają zarówno liczbę poprawnych odpowiedzi, jak i trudność pytań, co sprawia, że pokazują wynik kandydata w porównaniu ze wszystkimi innymi kandydatami, którzy wzięli udział w tym samym teście od TestGorilla.
Te wyniki są wyprowadzone z wyników z-score, które zakładają standardowy rozkład normalny (tzw. krzywą dzwonową). Wyniki z-score są obliczane na podstawie statystyk specyficznych dla każdego pytania, co uwzględnia jego trudność. Następnie wyniki z-score są przeliczane na wyniki percentylowe, aby odzwierciedlić pozycję kandydata względem innych. Aby uzyskać więcej informacji o sposobie obliczeń, prosimy odwiedzić Blog naukowy.
Jaka jest różnica między wynikiem percentylowym a procentem poprawnych odpowiedzi?
Wynik percentylowy porównuje wyniki kandydata z wynikami innych osób, które wzięły udział w tym samym teście, pokazując, jak wypada on na tle grupy referencyjnej. Wynik procentowy odzwierciedla po prostu liczbę pytań, na które udzielono poprawnych odpowiedzi. Procent poprawnych odpowiedzi (wynik bezwzględny) można wyświetlić w opcji „wynik bezwzględny”.
Jak wyniki percentylowe wpływają na proces rekrutacji?
Wyniki percentylowe zapewniają spójny sposób porównywania kandydatów, ponieważ pokazują, jak dobrze ktoś wypadł w porównaniu z innymi, niezależnie od trudności testu. W przeciwieństwie do wyników bezwzględnych, gdzie 60% na łatwym teście nie oznacza tego samego, co 60% na trudnym teście, percentyle odzwierciedlają wyniki kandydata w stosunku do innych kandydatów, dzięki czemu porównania są uczciwe i ustandaryzowane w czasie.
Dlaczego mam zaufać percentylom bardziej niż wynikom procentowym?
Percentyle uwzględniają wyniki innych kandydatów, którzy wzięli udział w tym samym teście oraz trudność każdego pytania, co daje jaśniejszy obraz umiejętności kandydata w porównaniu z innymi. Wysoki wynik procentowy na łatwym teście nie daje tak wielu informacji, jak wysoki wynik percentylowy, który odzwierciedla pozycję kandydata w szerokiej grupie referencyjnej.
Co jest grupą referencyjną dla wyników percentylowych?
Grupa referencyjna składa się ze wszystkich kandydatów, którzy wzięli udział w teście, co pozwala na szerokie odniesienie podczas porównywania kandydatów, zamiast porównywania tylko z tymi, którzy znajdują się w bezpośredniej puli rekrutacyjnej.
Jaka jest różnica w ważeniu pytań trudnych i łatwych podczas obliczania percentyla?
Nasz system dostosowuje wyniki w oparciu o trudność pytań. Na przykład, udzielenie poprawnej odpowiedzi na trudne pytanie (co potrafi niewielu kandydatów) ma większy wpływ na końcowy wynik niż udzielenie odpowiedzi na łatwe pytanie.
Jak należy interpretować wynik kandydata w 90. percentylu?
Kandydat w 90. percentylu uzyskał lepsze wyniki niż 90% innych kandydatów TestGorilla, którzy wzięli udział w tym samym teście. Pokazuje to jego względną skuteczność w porównaniu do szerszej puli talentów.
Czy wyniki percentylowe kandydatów zmieniają się w czasie, gdy coraz więcej kandydatów przystępuje do testu? Dane wykorzystywane do obliczania wyników percentylowych są regularnie przeglądane i aktualizowane. Dokładna częstotliwość tych aktualizacji zależy od kilku czynników, w tym liczby kandydatów i czasu od ostatniej aktualizacji.
Co jeśli chcę podkreślić w mojej ocenie jakieś umiejętności bardziej niż inne?
Możesz przypisać różne wagi do testów w ramach oceny. Wynik percentylowy zostanie dostosowany, aby odzwierciedlić względną wagę, jaką przykładasz do każdego obszaru umiejętności, zapewniając dopasowany wynik ogólny.
Czy wynik percentylowy zmieni się, jeśli dodam lub usunę testy z oceny?
Tak, ogólny wynik percentylowy jest przeliczany na podstawie połączenia testów i przypisanych do nich wag, zapewniając, że odzwierciedla on Twoje własne potrzeby rekrutacyjne.
Czy wyniki percentylowe są dostępne poprzez integracje z systemami ATS (systemy śledzenia aplikacji)?
Wyniki synchronizowane z ATS będą przedstawiane jako wyniki surowe. Ponieważ w trakcie aktywnej oceny możliwe jest przełączanie się między metodami oceniania w podglądzie wyników, musimy zapewnić, że wyniki udostępniane w ATS są porównywalne między kandydatami. Dlatego nie można mieszać wyników surowych i percentylowych.
W przyszłości planujemy sprawdzić, czy poszczególne integracje ATS mogą obsługiwać zarówno wyniki surowe, jak i percentylowe, ale obecnie nie jest to możliwe w większości systemów ATS.