古德里安１８８８年６月１７日生于东普鲁士的一个军人家庭，他的父亲是一位陆军军官。古德里安１３岁进入军官学校，１９０７年毕业后，被分配到一个轻步兵营任见习官，而这个营的营长就是他的父亲。１９１３年１０月，他与在汉罗福省驻防时相识的玛加丽特哥尔尼小姐结婚。第一次世界大战期间，他在骑兵部队担任指挥官和参谋。
１９２２年，他调到陆军运输处，开始确立机械化观念。青年时代的古德里安，就具有创造性的想象力，从不满足于现有的战术、技术和兵器。他经常在《军事周刊》杂志上发表探讨当代军事问题的文章，以至这个周刊的主编阿托克将军经常访问这位年青的军官。他常常利用战术演习和兵棋推演的机会，发表自己关于战车将成为地面战场主宰的新观念。于是，古德里安逐渐有了名气。１９３１年，他出任摩托化部队总监部的参谋长。１９３４年７月，德国组建了装甲部队，希特勒派古德里安为装甲兵总监。古德里安系统地研究了第一次世界大战时战术方面的经验教训，特别是英国人利德尔·哈特和富勒的军事理论，逐渐萌生了以机械化部队为主体，各军兵种密切协同的战术思想，希特勒信奉的机动、攻击、迅速的“闪击战”理论，也为古德里安欣然接受。
装甲兵总监这个职务，使古德里安得到了把自己的战略战术思想付诸实践的机会。１９３０年，德国的摩托化部队只有几辆陈旧的装甲侦察车和几个摩托车连。到１９３２年，参加演习的摩托化分队还在使用模型坦克。古德里安担任装甲兵总监后，德国装甲兵得到了迅速的发展。希特勒非常欣赏古德里安坦克战的理论和实践，他不仅在财力物力上优先满足装甲兵发展的需要，而且每当演习和试验新坦克时，他都亲临现场。当他第一次参观古德里安组织的坦克群进攻演习时，面对排山倒海的钢铁洪流，他高兴得手舞足蹈：“这正是我想要的东西！”１９３５年３月，希特勒彻底撕毁了凡尔赛条约，德国陆军当年就把一个装甲旅扩编为三个装甲师，每个师有５６１辆战车。古德里安是其中的师长之一。
古德里安的过人之处是他的战术远见。他设计的作战形式就是坦克集群的高速进攻。１９３６年至１９３７年，他写了一本名叫《注意——装甲兵》的书，书中阐明了他以后在战争中运用的坦克战术。１９３８年，希特勒任命古德里安为机动部队总监，统管装甲部队的一切组织和训练事项。这一年，德国又试制成功了两种新型坦克，这两种坦克在策二次世界大战中是德国装甲部队的基本装备。同年，希特勒吞并奥地利时，古德里安率两个装甲师打头阵。尽管路上有些战车因技术故障而抛锚，但还是在两天之内前进了数百公里，创造了部队机动速度的新记录。从而显示了装甲部队的优越性。
