One who makes compromises for a quarter will find nothing stopping him from increasing the compromise to a third, to a half, and eventually to most or all.

העושה פשרות לרביע אין מעצור בנפשו להגדיל הפשרה לשליש ולמחצה ולרובו ככולו
Shiurim in this topic
5793. Guidelines on Cooperation with Non-Observant Rabbis הנחיות על שיתוף פעולה עם רבנים שאינם שומרי מצוות