暗卫生间墙上方小窗户的材质应考虑到水湿环境，而且窗户需要防水防潮，不易生锈和变形。一般来说，使用PVC塑料或不锈钢材质会更加耐用且易于清洁和维护。同时还需要考虑到采光与隐私的问题，建议使用能够控制采光和防止视线外泄的材质，例如采用玻璃块或涂膜玻璃等材质。在选择材质时还需考虑到装饰美观和卫生环保的问题。