辣椒酱玻璃瓶刚买回来，理论上是可以直接使用的。不过，为了确保卫生和安全，建议您在使用前进行简单的清洗和消毒。

首先，用清水将玻璃瓶内外冲洗干净，去除灰尘和可能的污渍。然后，您可以选择使用开水烫洗或使用酒精棉片擦拭瓶内和瓶口，进一步消毒。这样不仅可以确保辣椒酱的卫生质量，还能延长其保存期限。

当然，如果您购买的辣椒酱玻璃瓶本身已经经过严格的清洁和消毒处理，那么直接使用也是没有问题的。不过，为了确保食品安全，建议在使用前还是进行简单的清洗和消毒，这样更加放心。