Filtrar busca com Estatística em várias campos Mysql + PHP

Olá, estou quebrando a cabeça pra fazer uma estatística e mostrar na ordem correta no mysql com php.

Exemplo minha tabela tem os campos:

Numero1, Numero2, Numero3, Numero4

em cada campo pode ter vários números, de 1 a 20 e eles preenchem a tabela assim por exemplo:

Campos > Numero1, Numero2, Numero3, Numero4

registro1 > 2 6 14 9

registro2 > 5 2 9 2

registro3 > 1 3 19 2

registro4 > 3 1 13 9

registro5 > 7 2 7 6

registro6 > 11 4 1 5

Preciso somar quantas vezes cada número aparece e daí em ordem descrescente mostrar qual o que tem maior frequência de ter aparecido em toda a tabela...

se alguém puder ajudar eu agradeço