werkgeverslasten bij tweede werkgever

hallo, ik ga binnenkort naast mijn full time baan een aantal uren erbij werken bij een andere werkgever. deze zegt dat de lasten voor hem hoog zijn omdat hij mijn tweede werkgever is. ik begrijp dit niet. wat ik wel weet is dat bij de tweede werkgever geen rekening moet worden gehouden met de heffingskorting, omdat dat al bij mijn eerste werkgever gebeurt. dit heeft dus betrekking op mijn eigen netto loon en de hoeveelheid belasting die ik als werknemer betaal, maar heeft niets met de lasten van de werkgever, volgens mij, te maken. kan iemand mij opheldering geven over wat mijn tweede werkgever bedoelt, of is dit misschien onzin? Judith