Jak SkillCort używa AI i jak ją nadzoruje

W zależności od tego, jak organizacja skonfiguruje ocenę, AI może pomagać przy:

• tworzeniu wstępnych wersji treści oceny,
• ocenianiu wspieranym rubryką, które potwierdza człowiek,
• wsparciu rozmów i symulacji,
• transkrypcji lub analizie tam, gdzie ma to zastosowanie,
• analizie sygnałów wiarygodności,
• uruchamianym przez zespół przeglądzie obrazów z kamery z nadzoru egzaminacyjnego, który oznacza klatki do obejrzenia przez człowieka.

Nie każda funkcja zawsze korzysta z AI; zależy to od konfiguracji oceny.

• Tam, gdzie używana jest AI, rejestrowana jest tożsamość modelu.
• Istotny kontekst konfiguracji i promptu jest wersjonowany.
• Treści wygenerowane przez AI można powiązać z kontekstem, w którym je skonfigurowano.

Wewnętrzna treść promptów i zastrzeżona konfiguracja nie są ujawniane publicznie.

Krytyczne funkcje AI można wstrzymać, a incydenty skierować do przeglądu. Wstrzymanie przerywa wywołanie dostawcy AI i nigdy nie ocenia ani nie odrzuca kandydata. Te publiczne strony nie ujawniają operacyjnych szczegółów bezpieczeństwa.

Tam, gdzie funkcje AI działają u zewnętrznych dostawców, mówimy, u których:

• OpenAI — mowa kandydata w sekcjach prowadzonych przez AI (rozumienie mowy oraz głos osoby prowadzącej rozmowę), transkrypcja oraz uruchamiany przez zespół przegląd nagrań z sesji w ramach nadzoru egzaminacyjnego.
• HeyGen — ekranowy prezenter osoby prowadzącej rozmowę, zarówno w renderowanych wcześniej klipach pytań, jak i w sesjach na żywo. Otrzymuje kwestie prowadzącego do animacji — nigdy dźwięku ani obrazu z kamery kandydata. Klipy pytań są renderowane wyłącznie z napisanej przez autora treści pytania i nie niosą żadnych danych kandydata.
• Anthropic — wsparcie po stronie zespołu przy tworzeniu wstępnych wersji i ocenianiu (szkice pytań, propozycje rubryk, podsumowania przeglądu).

Werdykty, wyniki punktowe, nagrania i rekordy kandydatów pozostają w obrębie SkillCort; dostawcy otrzymują to, czego wymaga dana funkcja, i nic ponadto. Pełna lista podprocesorów jest opublikowana.