Explanation

Agree to کسی چیز پر اتفاق کرنا

Agree with کسی شخص سے اتفاق کرنا

With is a preposition here

Saleem agrees with me in this matter.

سلیم اس معاملے میں مجھ سے متفق ہیں۔