limitir por lista

Boas.

Esta query vai buscar todas os membros pertencentes às listas. O que eu queria era limitar por dois membros por cada lista. Provavelmente uma sub query com limit. Alguma ideia em como fazer isso?

SELECT U.username, U.update_photoFROM users U

INNER JOIN lists_has_users H

ON U.id_user = H.users_id_user

INNER JOIN lists L

ON L.id_lists = H.lists_id_lists

WHERE L.users_id_user = ?