Veits Vater hatte 1521 Luther zum Verhör nach Worms geleitet. Seine Mutter, Anna von Fraunhofen, war eine direkte Verwandte des berühmten Minnesängers Oswald von Wolkenstein. Als Nachgeborener trat Veit zunächst in bayerische Dienste. Erst 1553 bzw. 1568 konnte er im Erbgang Schwindegg und Treuchtlingen übernehmen. Veits protestantischer Glaube (seit 1555) führte schließlich zum Verlust der bayerischen Hofmark Schwindegg, die er 1591 an Ritter Sebastian von Haunsperg veräußern musste.

Veits Kinder aus seiner 1556 geschlossenen ersten Ehe mit Regina von Kreuth zu Straß starben früh. Im vorgerückten Alter heiratete er 1593 die um vierzig Jahre jüngere Maria - Salome von Preysing - Kopfsburg. Der Ehe erwuchsen fünf Kinder, u. a. Gottfried Heinrich. Veit verstarb 1600.