“砖混楼房上面有窗户下面能砸个小窗户吗”

不可以。在以下国家相关标准中对此有明确的要求：国家标准《GB50210-2001建筑装饰装修工程质量验收规范》中第3.4.4条规定“建筑装饰装修工程施工中，严禁违反设计文件擅自改动建筑主体、承重结构或主要使用功能；严禁未经设计确认和有关部门批准擅自拆改水、暖、电、燃气、通讯等配套设施”，扩建门窗洞口，会对建筑主体、承重结构造成破坏，属于禁止的施工项目。