Ao longo dos séculos, o castelo chamou-se Alfenim, Alvelina - hoje responde por Pinela e lá de cima vemos a aldeia a espraiar-se sobre a paisagem que, de um lado, entra por Espanha, já quase em fim de vista, e, do outro, chega à Serra da Nogueira, deixando ainda adivinhar os castelos de Algoso e de Rebordãos. Estamos a 964 metros de altitude e o castelo de Pinela, sejamos honestos, não parece um castelo. É difícil imaginar aqui outras muralhas que não sejam as penedias erguidas entre a vegetação, por onde se abre um carreiro de terra batida.