公司扣我这笔钱合理吗

我是一名整体橱柜设计师，在本年8月至10月其间，我为公司店面做整体设计并监督店面装修，有部分橱柜台面需要其它公司加工制作，对于外加工的部分台面，我只负责做出设计方案的图纸，实际尺寸是加工台面的公司派人员到现场测量，结果，因为他们的理解错误，导致测量尺寸错误，直接导致台面做错没办法使用，在他们测量以后，曾经将图纸传真给我让我签字，我在图纸上签字确认台面型号、边型，并未确认图纸上所标注的尺寸，现因加工方拒不承认自己有错，重制作台面就要先付货款，公司不想影响装修进度，就把该台面货款从我的工资内扣除支付给了对方，我现在因此原因离职，我想问我可不可以要回公司扣除我的这笔钱？公司与加工台面方没有合同关系，公司与我之间也没有合同关系，我也没见到过公司的任何规章制度，一切制度都是老总口头说的，就是出了问题，他说怎么解决就怎么解决,我该怎么办?