Jak se bránit udělení neomluvené absence za nařízenou inventuru v sobotu (okolnosti níže)?

Dobrý den, v sobotu 29. 9. 2018 jsme měli nařízenou inventuru ve firmě, kde pracuji jako CNC operátor, a sobota není můj pracovní den.
Na inventuru a spočítání materiálu jsme ale s kolegou šli na noční z 27. 9. na 28. 9., jelikož jsme měli ten týden noční.
Na možnost jít z 27. na 28. 9 jsme se ptali mistra a ten nám řekl, že se zeptá vedoucího, ale druhý den jsme ho neviděli, tak jsme šli.
Zaměstnavatel mi ale chtěl dát dnes 6.11.2018 neom­luvenou absenci (kterou jsem nepodepsal) za tu sobotu 29.9., i když mi už „sebral“ prémie za měsíc září.
Chci se zeptat, jestli na to má právo a jestli není nějaká lhůta, dokdy mi to áčko může dát.
Jinak jsem nikdy za 25 let u tohoto zaměstnavatele neměl žádný kázeňský problém. Nikdy jsem ani nezaspal.
Připadá mi to jako trest pro výstrahu ostatním.