Il semblerait que tu aies besoin de te plonger un peu plus dans tes livres de C++ avant de te lancer dans des choses aussi complexes que des applications graphiques ;)
Un pointeur, quelque soit son type, permet toujours d'accéder à la variable pointée. Il suffit de le déréférencer avec l'opérateur *. Donc la réponse à ta question est oui.
window.draw(*sprite_ptr);