Sem ver alguma imagem fica difícil... Mas eu apostaria na genética, tendo em vista que para a maioria dos homens ganhos expressivos nos membros inferiores não são fáceis, principalmente chegando ao ponto de desarmonizar com os membros superiores.
Mas... é só palpite mesmo. Sem avaliar visualmente e sem saber mais detalhes da tua rotina (treinos, alimentação, suplementação e etc...) fica complicado mesmo opinar.