吉林省榆树市是归吉林市管辖的。 根据中国的行政区划体制，吉林省下辖多个地级市，而吉林市则是吉林省的地级市之一。 榆树市作为吉林省的一个县级市，行政管理上受到吉林市的指导和管理。 吉林市作为省会城市，具有更高的行政权力和资源优势，负责统筹协调整个市辖区域的经济、社会和发展事务。 所以，吉林省榆树市归吉林市管辖。