所城建于明代，
洪武年间为海防设奇山所，驻防军东通宁海卫，西由福中前所，以达
登州卫，设墩台狼烟，俗呼之为烟台。烟台之得名，由此而始。所建城池，后俗称所城。
所城具有典型的古代军事防御城市特点，方型，有城无廓，清光绪
《山东通志》记载：“砖城，周二里有奇，高二丈二尺，厚二丈，池阔三丈五尺，深一丈，楼铺十六座。”四边城墙中部均开设城门，门楼上建有庙宇。下层为指挥所，上层为远望所。城墙内侧建环形马道，城内街道布局呈方格网状。匡裕祥《烟台笔记》说“有东西南北四门，门上俱有望楼。城内有十字街，街道俱以石铺，平平坦坦，颇适步行。”十字形的城内主干道形成了全城的主轴线，在这条中心大道上布置有重要的公共性建筑，如官府衙门、祠堂等。城西北设千户所衙及随职官眷住房，东北设兵营及马棚、兵械库，东南设练兵场，西南设兵营伙房及粮草仓库。
奇山所城，成为烟台最早的居住地。最初城内守军百余人，其后屯戍官兵及家属不断从外地迁入，在所城周围逐渐形成一些居民聚落点，并随人口的发展，不断向四周延伸、扩展。明
嘉靖年间，居民点遍布东关中街、南大街、西沟街、裕盛胡同、南门外等街道。外地迁入居民也开始进行海产品、手工艺品和房地产经营，工商业逐步发展，城区逐渐扩大。
康熙年间，奇山所废除，改称“奇山社”，军变民地，官兵解甲，从事渔农工商，所城由军防变为单纯的居民区。所城内张、刘两大姓千户后裔大兴土木，建造民宅，人口逐渐增多，也不断有外地人口流入，奇山社内人口随之向外扩张，经济日益发达起来。奇山社及周围形成13个固定村庄，时称奇山社十三村，十三村人口近来自
牟平、海阳、
文登诸县，远来自
高唐、聊城及河北、河南、东北等地。张相文在《齐鲁旅行记》中称奇山所“海通以前，仅一乡村，以张刘姓为最著，今则鳞次栉比，与高廛连属矣。”
所城位置，处于东河、西河之间。其时烟台，不过一渔寮耳，渐而帆船有停泊，其入口不过粮石，出口不过盐鱼，商号几十家。在近海的地方已有船只开始停泊，烟台缓慢地发展着商业职能。城区面积约3
平方公里，有大小街路十几条。所城周围，只有几个零星的居民点，在附近每隔五天有一个不大的集市。
奇山所从设置到废除，有城无市，仅为居民点。商业性开放型的“市”，则从
芝罘海湾向南逐渐形成。自明代开始，港口活动中心从芝罘湾移向南部的西南河口一带。渔民和商户为求吉祥，在西南河口东侧建海神庙。1810年重修扩建为“天后宫”，民众称之为“大庙”，逢出海和收泊，在此虔祀天后，祈佑平安，报答神庥。因此，“大庙”所处的西南河口成为新的港口活动的中心场所，居民与运军粮的船只进行交易，庙前大街成为商贸活动场所，并逐渐形成东西一里有余的、为地内商民开设行栈之所的商业街市，这条商业街就是北大街的原始基型。
从卫所到渔港（各地渔船），从内地商港（帆船）到近代港口，在
近代化浪潮的裹挟之下，西方近代城市的新技术、新观念开始被移植进来，强制性地把烟台带进了城市近代化的行列。西方事物包括洋行、领事馆、教堂、学校、饭店住宅、企业等大势融进，改变和拓展了烟台城市空间。在风风雨雨的历史过程中，奇山所城墙自然毁坏，倾圯殆尽。虽然1918年曾重修奇山所城墙及四门，但到20世纪30年代，据郭岚生游记说“所有东西南北四门，相距各不到一里，城门大如普通住家的大门，城门楼虽矗存，城墙已不可见了。”城墙虽不见了，而奇山所城格局保留的仍然很完整。一直到建国初期，城墙已所剩无几，政府将其全部拆除，所城真正失去“城”的味道了。时至今日，已难觅当年城墙踪迹。
漫步在所城古老幽静的小巷，在城市的一角，远离喧哗，不念天地之悠悠，也会生发怀古忆旧之情。日复一日，城市疯狂长高，空间越发逼仄，所城依然静静依偎在市中心，青砖黑瓦的四合院依然悠闲地掩映在高楼大厦中，虽已破旧但砖雕
影壁依然守望着历史。
守望历史，就是守住了城市的根。