鎮(zhèn)海樓舊名朝天門，吳越王錢氏建。規(guī)石為門，上架危樓。樓基壘石高四丈四尺，東西五十六步，南北半之。左右石級(jí)登樓，樓連基高十有一丈。元至正中，改拱北樓。明洪武八年，更名來遠(yuǎn)樓，后以字畫不祥，乃更名鎮(zhèn)海。火于成化十年，再造于嘉靖三十五年，是年九月又火，總制胡宗憲重建。樓成，進(jìn)幕士徐渭曰：“是當(dāng)記，子為我草?！辈菥鸵赃M(jìn)，公賞之，曰：“聞子久僑矣。”趨召掌計(jì)，廩銀之兩百二十為秀才廬。渭謝侈不敢。公曰：“我愧晉公，子于是文，乃遂能愧?，倘用福先寺事數(shù)字以責(zé)我酬，我其薄矣，何侈為！”
渭感公語，乃拜賜持歸。盡橐中賣文物如公數(shù)，買城東南地十畝，有屋二十有二間，小池二，以魚以荷；木之類，果木材三種，凡數(shù)十株；長籬亙畝，護(hù)以枸杞，外有竹數(shù)十個(gè)，筍迸云。客至，網(wǎng)魚燒筍，佐以落果，醉而詠歌。始屋陳而無次，稍序新之，遂領(lǐng)其堂曰“酬字”。
徐渭《鎮(zhèn)海樓記》：
鎮(zhèn)海樓相傳為吳越錢氏所建，用以朝望汴京，表臣服之意。其基址、樓臺(tái)、門戶、欄?，極高廣壯麗，具載別志中。
樓在錢氏時(shí)，名朝天門。元至正中，更名拱北樓?；拭骱槲浒四?，更名來遠(yuǎn)。時(shí)有術(shù)者病其名之書畫不祥，后果驗(yàn)，乃更今名?；鹩诔苫?，再建于嘉靖三十五年，九月又火。予奉命總督直浙閩軍務(wù)，開府于杭，而方移師治寇，駐嘉興，比歸，始與某官某等謀復(fù)之。人有以不急病者。予曰：“鎮(zhèn)海樓建當(dāng)府城之中，跨通衢，截吳山麓，其四面有名山大海、江湖潮汐之勝，一望蒼茫，可數(shù)百里。民廬舍百萬戶，其間村市官私之景，不可億計(jì)，而可以指顧得者，惟此樓為杰特之觀。至于島嶼浩渺，亦宛在吾掌股間。高翥長騫，有俯壓百蠻氣。而東夷之以貢獻(xiàn)過此者，亦往往瞻拜低回而始去。故四方來者，無不趨仰以為觀游的。如此者累數(shù)百年，而一旦廢之，使民若失所歸，非所以昭太平、悅遠(yuǎn)邇。非特如此已也，其所貯鐘鼓刻漏之具，四時(shí)氣候之榜，令民知昏曉，時(shí)作息，寒暑啟閉，桑麻種植漁佃，諸如此類，是居者之指南也。而一旦廢之，使民懵然迷所往，非所以示節(jié)序，全利用。
且人傳錢氏以臣服宋而建，此事昭著已久。至方國珍時(shí)，求緩死于我高皇，猶知借Α事以請(qǐng)。誠使今海上群丑而亦得知錢氏事，其祈款如珍之初詞，則有補(bǔ)于臣道不細(xì)，顧可使其跡湮沒而不章耶？予職清海徼，視今日務(wù)，莫有急于此者。公等第營之，毋浚征于民，而務(wù)先以己。”于是予與某官某等，捐于公者計(jì)銀凡若干，募于民者若干。遂集工材，始事于某年月日。計(jì)所構(gòu)，?石為門，上架樓，樓基壘石，高若干丈尺。東西若干步，南北半之。左右級(jí)曲而達(dá)于樓，樓之高又若干丈。凡七楹，礎(chǔ)百。巨鐘一，鼓大小九，時(shí)序榜各有差，貯其中，悉如成化時(shí)制。蓋歷幾年月而成。始樓未成時(shí)，劇寇滿海上，予移師往討，日不暇至。于今五年，寇劇者禽，來者遁，居者懾不敢來，海始晏然，而樓適成，故從其舊名“鎮(zhèn)海”。
張岱《鎮(zhèn)海樓》詩：
錢氏稱臣?xì)v數(shù)傳，危樓突兀署朝天。
越山吳地方隅盡，大海長江指顧連。
使到百蠻皆禮拜，潮來九折自盤旋。
成嘉到此經(jīng)三火，皆值王師靖海年。
都護(hù)當(dāng)年筑廢樓，文長作記此中游。
適逢困鱷來投轄，正值饑鷹自下鞲。
嚴(yán)武題詩屬杜甫，曹瞞拆字忌楊修。
而今縱有青藤筆，更討何人數(shù)字酬！