关于四米墙有三个版本的传说。
其一是说，二战时期，在集中营里的犯人，为了获得而翻越4.2米高的狱墙。
其二是说，二战时期，在波涛汹涌的大海上，一只商船被德队的弹击中，船在半小时后将会沉没，三十九名船员的生受到威胁。船员们只有靠团队的力量翻越4米多高的船舱，才能会逃生。
其三是说，在西点军校的历，在第四十六期学员毕业的前晚上，四十六期的学员执行离校前的后一次水上巡逻任务，因为是后一次巡逻学员们没有认真的驾驶导致巡逻艇撞上了在海面上的油轮，因为是深夜，没人注意到这件事。当时所有西点军校的学员都很着急，此时要想活就只能爬上油轮高达4.2米的甲板。在艇上没有攀岩工具，学员们靠着搭人梯的方法爬上了甲板。
后来学员们把事件经过报告校园，西点军校也受此启发，在校园的训练场上搭起了高达4.2米的墙，每一期学院以60人为单位必须在15分钟内全部爬上高墙才能获得书，后来这面墙有了四米墙的称号。
虽然说法有三，但过程和结果都是相同的。也就是所有人在不得借助其他工具和载体，全部翻越上4.2米高直立墙面方视为成功。
后来，四米墙演变成为拓展训练中的一个重要项目。