ze względu na swoją stanowczość i energię, był również znany jako tępiciel Pames z Querétaro. W Nuevo Santander został oskarżony o mordowanie Indian i branie niewolników. Stanął przed sądem, w którym został oskarżony o nielegalne wykorzystywanie indyjskiej siły roboczej w swoich fabrykach tekstylnych i używanie portu Santander do sprowadzania Angielskiej kontrabandy. Jednak w latach 1770-1775 wśród Indian było ponad dwukrotnie więcej ofiar niż w 22 latach, którymi rządził.
wśród jego wrogów w regionie byli Jezuici, Francuzi i duchowni świeccy.
podczas pobytu w Querétaro, San Miguel i Nuevo Santander zgromadził ogromne bogactwo z pracy źle opłacanych Indian i niewolników, a także duże dotacje ziemskie od wicekróli. Inwentarz i inne produkty z jego ziem, a także to, co kupił od kolonistów, zostały wysłane z portu Soto la Marina wzdłuż wybrzeża do Veracruz na fregacie, którą posiadał.
był uważany za jednego z wielkich mężów stanu Nowej Hiszpanii w XVIII wieku, przewyższającego wielu wicekróli. Przydzielił działalność i uprawy do każdej osady, stymulował nawadnianie oraz budował drogi i mosty. Zbudował wielką rezydencję w Santander, stolicy Kolonii, znaną jako Pałac hrabiego. Zbudował także Kościół w Santander i zbiornik wody pitnej. Sprowadzał z Tacubayi murarzy, cieśli i kowali oraz zakładał piece, cukrownie i młyny mączne.
aby nagrodzić go za swoje usługi, Korona przyznała mu tytuł conde de Sierra Gorda, wolny od lanzas (cła nakładanego na szlachtę zamiast służby wojskowej) i media anata (podatku płaconego przy obejmowaniu urzędu).
zmarł zapomniany w 1770 roku, prawdopodobnie 10 września, w Quetétero lub Mieście Meksyk. Pięć lat później został oczyszczony z zarzutów i zrehabilitowany. Tytuł przeszedł na jego najstarszego syna, Manuela. Manuel zmarł bez potomków, a drugi syn José, Mariano, został hrabią.
Ciudad Victoria, obecnie stolica stanu Tamaulipas, wzniosła pomnik ku jego pamięci w 1975 roku. Tam i w Querétaro znajdują się również ulice nazwane jego imieniem. W Laredo w Teksasie co roku w listopadzie obchodzony jest Festival de música José de Escandón. W Alice w Teksasie znajduje się również posąg jemu poświęcony.
pomnik został poświęcony Jose de Escandon w 2014 roku. Znajduje się na University of Texas Rio Grande Valley w Teksasie.