谜语解析：这个谜面描述的物品具有以下特征：

1.正方形和长方形，说明它可能是平面几何形状的物体。

2.又薄又脆像块冰，暗示这个物体是透明的，且易碎。

3.太阳照它不会化，说明这个物体是耐高温的。

4.装到窗上亮晶晶，表示这个物体可以用来装窗户，且具有很高的反光性。

综合这些特征，可以推断出谜底是玻璃。玻璃是一种透明的、耐高温的、可以用来做窗户的平面物体，而且具有很高的反光性。