项目经理不在岗，从来不在工地，有没有什么法律文件约束？

有。

根据《建筑施工企业负责人及项目负责人施工现场带班暂行办法》

第二条　本办法所称的建筑施工企业负责人，是指企业的法定代表人、总经理、主管质量安全和生产工作的副总经理、总工程师和副总工程师。

本办法所称的项目负责人，是指工程项目的项目经理。

本办法所称的施工现场，是指进行房屋建筑和市政工程施工作业活动的场所。

第九条　项目负责人是工程项目质量安全管理的第一责任人，应对工程项目落实带班制度负责。

项目负责人在同一时期只能承担一个工程项目的管理工作。

第十一条　项目负责人每月带班生产时间不得少于本月施工时间的80%。因其他事务需离开施工现场时，应向工程项目的建设单位请假，经批准后方可离开。离开期间应委托项目相关负责人负责其外出时的日常工作。

可以向当地住房城乡建设主管部门投诉

根据《建筑施工企业负责人及项目负责人施工现场带班暂行办法》

第十条　项目负责人带班生产时，要全面掌握工程项目质量安全生产状况，加强对重点部位、关键环节的控制，及时消除隐患。要认真做好带班生产记录并签字存档备查。

第十二条　各级住房城乡建设主管部门应加强对建筑施工企业负责人及项目负责人施工现场带班制度的落实情况的检查。对未执行带班制度的企业和人员，按有关规定处理；发生质量安全事故的，要给予企业规定上限的经济处罚，并依法从重追究企业法定代表人及相关人员的责任。

以上内容参考：中央人民政府-建筑施工企业负责人 ?及项目负责人施工现场带班暂行办法