许驸马府的第一进有一个中门，然后第二进是一个凹字形墙门，平时这两个门都处于关闭状态，只有当家中有大事发生的时候，才会打开。比如家中有大事发生、重大的节日要祭祖、贵宾来访等，这些时候就要打开这两个门。
驸马府的第二进便是客厅，客厅即招待家中宾客的地方。与客厅相邻的是大房子，是家中辈分较高的人所居住。
香火堂是祭拜祖先的地方，在古代这个地方是最庄严肃穆的地方，不能随意走动，因为这里供奉的是祖先的牌位。房间以东为首，香火堂的隔壁就是这座府邸辈分最大的房间，即住的便是这个老宅的主人，也就是家中最大的。
许氏三位老祖许钰、许天正、许申（从左到右）
香火堂的上面悬挂了三幅画像，是许氏的三位老祖，是对许氏的变迁、发展有很大影响的人。中间的这位叫做许天正，是唐朝的一位将军，当年他奉朝廷之命来到福建平定沿海一带的淆乱，所以许氏就是由他从中原迁徙到福建这边来定居，被誉为“漳南开基”始祖。
北宋之后，这个许氏由福建那边迁徙到粤东这边来定居，就到了潮州。这就是第二代祖先许申（右侧的画像），他跟随父亲许列一起来到潮州定居，因为个人比较勤奋、并且天资聪颖，所以官位做到了刑部的郎中。许申对潮州的居民影响颇大，他推动这里的教育、农耕发展，为百姓树立了一个很好的榜样，所以被推崇为潮州的八贤之一，及唐宋潮州八贤之一。
同时，许申为自己的子孙后代树立了很好的楷模，他的儿子许殷担任太子中舍，即太子的老师。所以从这个时候开始，许氏就有更多的机会接触到这个皇亲国戚。为日后许钰（左侧的画像）当上驸马打下了一定的基础，许钰便是许申的曾孙。
许广平每逢过节讲潮州话鲁迅竟是潮州女婿
许钰是许氏的第五代祖先，潮汕各地的大部分许氏子孙都是驸马这一系的子孙后代。其中有一支很有名的就是从潮州迁到汕头这个沟南许地，清朝的时候再由沟南许地迁到广州、北京这种高地界，许广平就是这一支。许广平的堂兄弟便是许崇清、许崇智，许崇清是中山大学的第一任校长，许崇智是粤军总司令，也是孙中山的一个非常重要的军事助手。
许广平会讲潮州话，每逢过年过节，都要说上几句潮州话，以示不忘故土之情。许广平的儿子周海婴曾经来到汕头祭祖，因为他们是在清朝的时候迁到广州，是从汕头迁出去的，所以会去汕头归宗认祖。
汕头这一支许氏的祭祖日期是每年的农历十月二十四。不过驸马跟公主的合葬墓还在潮州桥东的江汉东岸。所以每年的农历十二月二十四这一天，潮汕各地（汕头、揭阳、澄海、抚宁）几千位许氏子孙都会来这里祭祖。潮汕地区比较注重家族祠堂和族谱，但是由于许氏族谱是一个比较庞大的枝系，而且年代久远，所以收集起来相当困难。
放置棺材的地方
驸马府里还保留着后铺，即供奉祖先牌位的后方，是放置空棺材的地方。古代有一个风俗，即家中有上寿的长者，一般是指五十岁以上的长者，就要为他备好一副空的棺材，寓意是有棺、有材，升官发财。后铺和前面供奉牌位的地方被认为是整个宅子最尊贵的地方。
