根据《福建省住房公积金管理条例》和《江西省住房公积金管理条例》，厦门市和赣州市都实行本地公积金异地贷款政策，即可以在异地购房时使用本地公积金进行贷款。因此，厦门市的公积金可以在赣州购房时使用，但需要满足相关贷款条件和手续，具体可咨询当地住房公积金管理中心。