公司没有实际缴纳过税款，不能开具完税证明的。如果第三方需要建议您与对方沟通是否可以出具申报表等其他财务资料，或者看税务机关是否可以出具未欠缴税款证明。