依据我国相关法律的规定，担任人民陪审员的人，在一定的情形下，是可以申请辞去陪审员职务的，经所在基层人民法院会同司法行政机关查证属实的，可免去陪审员职务。
《中华人民共和国人民陪审员法》
第二十七条 人民陪审员有下列情形之一，经所在基层人民法院会同司法行政机关查证属实的，由院长提请同级人民代表大会常务委员会免除其人民陪审员职务：
(一)本人因正当理由申请辞去人民陪审员职务的;
(二)具有本法第六条、第七条所列情形之一的;
(三)无正当理由，拒绝参加审判活动，影响审判工作正常进行的;
(四)违反与审判工作有关的法律及相关规定，徇私舞弊，造成错误裁判或者其他严重后果的。
人民陪审员有前款第三项、第四项所列行为的，可以采取通知其所在单位、户籍所在地或者经常居住地的基层群众性自治组织、人民团体，在辖区范围内公开通报等措施进行惩戒;构成犯罪的，依法追究刑事责任。
案件的审级不同，合议庭的组成也不同：
(1)第一审合议庭的组成。有两种情况，一种是由审判员、陪审员共同组成合议庭。陪审员是直接从群众中选举产生，或者由人民法院临时邀请参与案件的审理，行使审判权的非专职审判人员。陪审员在执行陪审职务时，与审判员有同等的权利义务。另一种是全部由审判员组成的合议庭。
(2).第二审合议庭的组成。人民法院审判第二审民事案件，合议庭必须全部由审判员组成。这是第二审民事案件的审判组织与第一审民事案件审判组织的重要区别之一。这一特点是由第二审的任务和性质决定的。无论是第一审，还是第二审，合议庭的成员必须是单数。
(3).重审或再审案件合议庭的组成。发回重审的案件，原审人民法院应当按照第一审程序另行组成合议庭。再审案件合议庭的组成，应当按原审案件原来的审级确定，即原来是第一审的，按照第一审程序另行组成合议庭;原来是第二审的或者是上级人民法院提审的，按照第二审程序另行组成合议庭。