Adamas užaugo JAV Indianos valstijoje, Mišavakoje. Neįprastai aukštas atlėpausis vaikinas mėgo vaidinti mokyklos miuzikluose ir svajojo vieną dieną tapti aktoriumi. Baigęs mokyklą A. Driveris nusprendė kraustytis į Kaliforniją ir savo tėvams, draugams ir merginai tepasakė: „Pasimatysime!“. Žinoma, jis turėjo omenyje, kad artimieji vaikiną išvys didžiuosiuose ekranuose. Tačiau pakeliui, Amerile, Teksase, jo automobilis sugedo ir jis prarado visus turėtus pinigus. Kelias dienas praleidęs jaunimo nakvynės namuose Adamas nuleido rankas ir grįžo namo. Vis dėlto net ir po šios nesėkmės jis nenustojo siekti savo svajonės – pamėgino įstoti į prestižinį Džiulijardo koledžą Niujorke, tačiau priimtas nebuvo. Po tragiškų rugsėjo 11-osios įvykių A. Driveris nusprendė prisijungti prie karinių jūrų pajėgų, bet ir ši karjera netruko ilgai: važiuodamas dviračiu jis pateko į avariją ir susilaužė krūtinkaulį, o dėl to tarnyba buvo nutraukta.
