我这么做要付责任吗？

我这么做要付责任吗？我是一个做米生意的人，现在市场上的包装都和实际的斤两是不同的，这个都是些常见的事，但本人对于这样的事我们有自己的看法，我们做的是自己人的生意，都是些都认识的人，在说我们这的人说如果短斤少两的话对自己家的下代都不好，所以我从来都没有做过短斤少两的事，每次给别人送米我都是按实际的斤两计算的，从没有欺骗过任何人，现在工商从来没有问过就说我们有这样的事，就把我们给告到了法院，之前他们也来调查过，（都有去问别人我们生意上有没有短斤少两的事。）要我们出钱给他们，我们从没有做过这样的事，我怎么会出钱的，每天做这个生意就要送到别人的家里去，不管是多少楼都是免费送的，从没有收过一分钱的费用，一包米我们也就赚一块多钱，最多也就二块钱，他们一说就要我们给他们一万块，那我们要买多少包米呢？所以我们就想身正不怕影子歪就没有给他们一分钱，我们这其它的店都是给了他们钱就这样息事了，我想问问像我这样的有没有要负什么责任。