Grundsätzlich schon. Kann ich mir z. B. beim Zugriff auf die fremden Laufwerke vorstellen. Man sollte also vorher wissen was man tut und wirklich nur die Fersteuerung nutzen, keine Übertragung von Daten die nicht unbedingt nötig sind.
Wie du sicher weißt, gibt es beim Teamviewer verschiedene Einstellungsmöglichkeiten. Du bist auf der sicheren Seite, wenn Dir jemand Zugriff auf seinen Rechner erlaubt, und nicht umgekehrt.