威海卫城座落在奈古山东麓，周围共有六里十八步。据说当初选择的城址不在这里，至今还流传着一段城址南移的故事。
明永乐元年（1403年），京城来威海选城址的官员，沿着古陌岭、奈古山、仙阜山等山头逐一勘察地形，确定在古陌岭山脚下的小平原建城。认为在这里北依古陌岭，安全背风；从东面看，卫城深藏海湾内角，倭船不入海湾不易发现；西可修官道，直达宁海州（牟平）；南面不受石落河水冲击，还可修路通往文登县。总之，地势平整，便于交通，利于扼守。
正准备施工时，规划内有个叫熊家泊的地方，是熊家财主的好菜园，熊财主生怕此地被官衙占用，于是便与老婆密谋，让颇有几分姿色的女儿与修城主持官勾搭。几天以后，修城主持官突然把南城墙改为北城墙，使卫城向南移了一个城的位置，将熊财主的菜园划在城外。
这件事不久被告到永乐皇帝那里，朝廷立即将修城主持官拿获问罪，杀了头，将无头尸体埋在宫松岭上（菊花顶南）。明清时代，部分威海卫人恼恨城北门深受北风之气，埋怨考取功名者太少，流传着“城压半山头，做官不到头”的谚语。所以于清康熙十七年（1678年）将北门洞砌塞，“以培风气”。但又遭到另一部分人的反对，说阻碍了交通。在城里人阮接芳的带领下，告到登州府，不久又将其扒开。