玉海楼左临湖滨公园，与绿荫蔽天的古榕遥相辉映；三面环以池塘，前后凡两进，面阔各五间，楼有廊，前后相通。大门有清李文田书“玉海书藏”匾，左右嵌以郭沫若书的“玉成桃李”、“海涌波澜”青石联；前后厅堂分别悬以郭沫若和潘祖荫书的“玉海楼”匾额。楼西首有“园厅”名“恰受航”，取杜甫“小航恰受两三人”诗意；又称“百晋陶斋”,厅前有园曰“颐园“，相传毁，园有荷花池，年年盛开。
玉海楼原有图书八、九万卷，均系孙氏父子恣意搜求所得，其中多乡帮文献、珍籍善本。孙诒让卒后，善本图书多归杭大收藏。
建国以来，玉海楼经多次整修，目前已渐复旧观。自从文物馆驻内办公以后，栽松莳花，美化了环境，并征集到大批古籍、字画和文物，经常举办各种展览，供人观赏。
