A、自来水结冰过程中只是状态发生改变，没有新物质生成，属于物理变化，故错误．B、菜刀生锈，米饭烧焦过程中都有新物质生成，都属于化学变化，故正确．C、湿衣服晒干，切断大理石过程中都没有新物质生成，都属于物理变化，故错误．D、玻璃杯打碎过程中只是形状发生改变，没有新物质生成，属于物理变化，故错误．故选：B．
