直訳は「本の側に」。by は「側」の他に「従って」という意味があり、ここでは「by the book」で「マニュアル通りに」と言った意味で使われます。
He is by the book. You don’t expect him to be creative.
彼はマニュアル人間だ。創造性を期待しても無駄だよ。
You should go by the book.
マニュアル通りにやってね。