Sketchpad permet aux modèles de langage (LM) de dessiner à l'aide de lignes, de cadres, de marques, etc., ce qui se rapproche davantage du dessin humain et facilite le raisonnement. De plus, Sketchpad peut utiliser des modèles visuels professionnels pendant le processus de dessin, tels que des modèles de détection d'objets pour dessiner des cadres de délimitation et des modèles de segmentation pour dessiner des masques, afin d'améliorer encore la perception visuelle et les capacités de raisonnement.