依据我国相关法律的规定，非因法定事由、非经法定程序，不被调离、免职、降职、辞退或者处分，所以只有法定的事由才能将法官调离审判岗位。
《中华人民共和国法官法》
第十一条 法官享有下列权利：
(一)履行法官职责应当具有的职权和工作条件;
(二)非因法定事由、非经法定程序，不被调离、免职、降职、辞退或者处分;
(三)履行法官职责应当享有的职业保障和福利待遇;
(四)人身、财产和住所安全受法律保护;
(五)提出申诉或者控告;
(六)法律规定的其他权利。
第五十三条 除下列情形外，不得将法官调离审判岗位：
(一)按规定需要任职回避的;
(二)按规定实行任职交流的;
(三)因机构调整、撤销、合并或者缩减编制员额需要调整工作的;
(四)因违纪违法不适合在审判岗位工作的;
(五)法律规定的其他情形。
审判人员应当自行回避、当事人及其法定代理人有权要求回避的条件：审判人员具有下列情形之一的，应当自行回避，当事人及其法定代理人也有权要求他们回避。
(一)是本案的当事人或者与当事人有直系血亲、三代以内旁系血亲及姻亲关系的;
(二)本人或者其近亲属与本案有利害关系的;
(三)担任过本案的证人、鉴定人、勘验人、辩护人、诉讼代理人的;
(四)与本案的诉讼代理人、辩护人有夫妻、父母、子女或者同胞兄弟姐妹关系的;
(五)本人与本案当事人之间存在其他利害关系，可能影响案件公正处理的。