SikuliX automatizuje vše, co vidíte na obrazovce stolního počítače se systémem Windows, Mac nebo Linux / Unix. Využívá rozpoznávání obrázků využívající OpenCV k identifikaci komponent grafického uživatelského rozhraní a může na ně působit pomocí akcí myši a klávesnice.