Programar o jogo PACMAN em C

Boa tarde, estou com algumas dúvidas de como eu fazia um jogo do PacMan usando a biblioteca gráfica SDL2.
Por onde eu começaria?
Eu sei que o mapa seria uma Matriz, mas eu colocaria uma imagem pronta do mapa ou ir montando parte por parte pela matriz? Como eu fazia os fantasma indo atrás do PacMan?

Poderiam me dar umas dicas por onde começar programando em C?

-