Sieht so aus, als hätte ich die Antwort selbst gefunden.
Es gibt eine Methode namens get_schema_names in Inspector-Klasse, die nicht sehr gut dokumentiert ist, aber eine Liste von Datenbanken zurückgibt (nur mit MySQL und Postgres getestet).
Verwendung:
%Vor%Tags und Links python sqlalchemy