Primeiro vamos ao mai simples, o que você procura é Charsets para personagens, cada RPG Maker tem o seu.
Já nos mapas os gráficos, você quer um tileset, que também cada RPG Maker tem o seu.
No seu geral nenhum deles é compatível, expeto VX Ace e VX que são iguais
Tem neste forum e muito outros material gráfico.
Pesquise por nome da engine acompanhado de tileset ou charsets que encontra milhares de gráficos