Nella zona c'erano insediamenti preistorici del tipo dei forti collinari, come Bury Camp, 4 miglia (6 km) a nord dell'attuale villaggio Box.
I romani costruirono la Fosse Way circa due miglia (3.2 km) verso ovest. Oggi, vicino alla chiesa di Box c'è il sito di una villa romana, scavato nel corso del 19°XIX secolo, poi riscavato intorno al 1902-3 da Harold Brakspear, e ancora nel 1967-8. C'è stata una grande ristrutturazione alla fine del 3°III secolo o all'inizio del 4°IV che ha reso quella villa la più grande dell'area di Bath. La villa aveva una delle più ricche collezioni di pavimenti a mosaico di tutte le abitazioni romane, con resti trovati in 20 camere fino ad oggi, ma ci sono 42 camere positivamente identificate e altre 15 ancora sotto investigazione. La camera 26 sembra essere una grande camera alla maniera di quella di Treviri. Una villa come questa doveva essere il centro di una grande tenuta e il centro dell'interesse come minimo anche di 6 possibili ville associate o cascine a Ditteridge, Hazelbury e Shockerwick (vicino a Bathford) e quelle più lontane a Colerne, Atworth e Bradford on Avon. Nel 1806 il Domesday Book ha registrato 25 case a Hazelboury e 6 a Ditteridge. La prima documentazione di Box risale al 1144 quando Humphrey II da Bohun era un proprietario terriero. Il paese è mostrato su una mappa, dalla quale si vede che a quel tempo c'erano importanti industrie nella produzione di tessuto di stoffa che sopperiva al bisogno di vestiti delle città nelle vicinanze come Bradford on Avon.
La Great Western Main Line railway (che va da Londra a Bristol), che attraversa la parrocchia e il canale di sicurezza lungo 1.83 miglia (2,95 km), è stata costruita sotto Box Hill. La costruzione ha avuto luogo tra il 1838 e il 1841 con un impiego di massimo 4000 uomini. La prima stazione di Box è stata costruita vicino ad Ashley, dove la A4 attraversa la linea; la stazione Box Mill Lane è stata costruita un miglio più vicino al villaggio nel 1930. Entrambe le stazioni hanno chiuso nel 1965, quando i servizi locali sono stati ritirati.
