無断欠勤と請求

色々と精神的に参っており、先日無断欠勤してしまいました。
無断欠勤した責任は私にあるので本当に悪いと思っています。

また、辞めたいと思っていたのでその事も話すとお店の方を相当激昂させてしまいました。

職場も特定されており怖かったので、反省の意も込めて金銭を払うから辞めさせて欲しいと口走ってしまいました。

ただお店側から、損害が出た分、イラつかせた分、今までの善意の分、と数十万と言われました。
払うと言ってしまったが、流石にそんなに大金は払えないと結局数万円(結構か大金)差し上げなければなりませんでした。

これってやはり払う必要無かったですか？
お姉様方の意見おきかせください。