Thomas Jackson föddes i Clarksburg Virginia 21 januari 1824. Han var två irländska småtjuvars barnbarn, växte upp i fattigdom och blev tidigt föräldralös. Han arbetade på en farbrors gård och gick i skolan när det fanns tid. Jacksons familj hörde till presbyterianerna, en bokstavstrogen protestantisk kyrka och religion. Det skulle hela hans liv vara en av de få saker han gillade att prata om.
1842 antogs Jackson till West Point. Att han knappt gått i riktig skola gav honom stora problem, men han studerade envist och gick ut med bra betyg. Han blev 1846 fänrik i artilleriet och tjänstgjorde de följande åren i USA:s krig i Mexiko där han befordrades till major.
Han sågs som en duglig, men lite egendomlig officer och efter att kriget tagit slut tjänstgjorde han vid olika garnisoner där han inte alltid var uppskattad. Under en tid i Tampa låg han i en närmast komisk fejd med sin chef major French.
Jackson var en ytterst kompetent yrkesman, men var mycket osmidig när det kom till att ha med andra människor att göra. En modern HR-människa skulle säga att hans personlighet hindrade hans karriärutveckling. Idag skulle man förmodligen också tillägga att han var någon form av högfungerande autist. Han var kinkig med mat, hypokondrisk och full av fixa idéer liksom sin tro.
Slavägare i södern
Våren 1851 fick Jackson tjänst vid Virginia Military Institute, men var hopplös som lärare. Han var charmlös och inåtvänd och han lär mest ha läst innantill när han föreläste. Ställde någon frågor så svarade han som om han läste innantill. En grupp elever försökte få »Tom Fool», som han kallades, avskedad.
Under tiden som lärare bosatte sig Jackson i Lexington, Virginia. Fattigpojken hade fått råd att köpa ett hus och blivit en del av söderns tjänstemannaklass. Han ägde några slavar, som han vårdade i den gängse patriarkala fostrande stilen. Han var »en god ägare» men han ifrågasatte aldrig sin rätt att äga andra människor. Han gifte sig 1853, men hans hustru dog snart i barnsäng. Han gifte om sig och fick två döttrar, varav en dog som liten.