根据我国商铺租赁的相关法律规定，商铺用户是不可以在出租房屋内使用煤气罐这种易爆危险品的。因此，**新余店铺里面不能使用煤气罐**。

请注意，具体规定可能因地区而异，建议咨询当地相关部门或律师以获取准确的信息。