Quebrando tabelas em várias páginas

Estou criando uma aplicação Web que exibi duas tabelas de tamanhos iguais

Porém, ambas possuem cerca de 100 linhas cada, gostaria que fossem exibido apenas 25 linhas de cada tabela e para ver o resto da tabela teria aquelas páginas subsequentes: 1, 2, 3 ,4...

Tudo que eu fiz até agr foi apenas com php, mysql, css e html.

Via precisar de javascript, Jquery ou outros?

Obrigado