办公楼噪音扰民可以通过以下方法来解决：

与噪音源沟通：如果知道噪音来自哪个方向，可以与噪音源沟通，表达关切并请求减少噪音。

安装隔音窗户：安装隔音窗户可以降低窗户噪音的传播。

增加隔音材料：在建筑外表面增加隔音材料可以减少噪音传播。

使用耳塞或噪音减少器：使用耳塞或噪音减少器可以减少外界噪音对听力的影响，从而减少噪音引起的不适。

调整工作时间：在噪音敏感区域调整工作时间，例如夜间或清晨。

与其他利益相关者合作：如果与办公楼的拥有者或其他利益相关者有合作关系，可以请求他们采取措施减少噪音。

采取法律措施：如果无法通过以上方法解决问题，可以考虑采取法律措施，例如向当地政府机构投诉或寻求法律解决方案。