ご存知 “book” は「本」「書籍」の意味ですが、(書かれた)「規則」とか「基準」というニュアンスもあり、そこから、“in my book” は「私の基準」という意味になります。
従って “In my book,...” は「私が思うに...」「私の考えでは...」という前置きのフレーズで、相手とは少し違った自分の意見を述べ始めるときに使うといいでしょう。
反論するときは、相手の発言に対してすかさず “Not in my book.” (私はそう思わない)とコメントしましょう。
こんな感じです: “This house is so beautiful!” “Not in my book. It's got a bad taste.” 「この家、とってもきれいだわ!」「僕はそうは思わないな。趣味が悪いよ。」