畜生!、くそっ!、しまった!、これは驚いた!、なんてこった!、いまいましい! などという意味で、このまま独り言のように呟けば完璧。
間投詞であり、形容詞であり、他動詞であり、副詞でもあるので、実に多様な使い方があります。
主語が省略されているため、通常は「I(私)」が主語とみなされます。私が damn する、つまり何かを呪うというコワ〜イ表現ですけど、実際はクソッ!とかチクショウ!ぐらいの感覚です。
同様に Damn you! は I'll damn you!(私はあなたを呪ってやるわ!)なので、その場に居合わせたとしたら恐くて夜も眠れなくなってしまうのですが、別に気にする必要はありません。単なる独り言だと解釈しちゃいましょう。(^^)