Se encuentra situado sobre las estribaciones meridionales de Sierra Nevada extendiéndose por un conjunto de barrancos, tajos y ramblas de fuertes pendientes que miran hacia el gran valle estructural, recorrido por el río Guadalfeo.

Una parte importante de la superficie del municipio está situada en la sierra Contraviesa.

La zona situada por encima de la carretera A-4130, en el extremo norte del municipio, forma parte del parque natural de Sierra Nevada.

El municipio tiene dos núcleos urbanos y varias cortijadas:

• El núcleo de Cástaras, que está dividido en tres barrios: el Barrio Alto, situado a unos 1.110 m.s.m., declarado expresamente Bien de Interés Cultural; el Barrio Medio, con sus dos secciones: la de arriba, a 1.065 m de altitud, y la baja, a 1.060 m.; y los barrios bajos que forman el núcleo principal, con alturas entre los 1.005 metros de El Churre y los 1.035 de La Higuerilla.
• Nieles, situada a 2,2 km. Se extiende en la ladera sur del cerro El Cerrajón, entre los 982 metros del lavadero y los 1025 m de las Escuelas.
• Los cortijos y cortijadas, pequeños núcleos formados por una o varias viviendas, que abundan diseminados por el municipio, principalmente en la Contraviesa: Don Juan, La Hoya de Arzao (o El Zao), La Plantonada, La Rambla, La Solana, La Toba, La Viña del Castillo, Las Covezuelas, Los Archillas, Los Baquetas, Los Blancos, Los Clérigos, Los Garcías de Verdevique, La Almazarilla, Los Manzanos, Los Mateos, Los Mecías, Los Morenos, Los Plumas, Los Retamales, Los Ruices, Los Santos, Los Torres, Lobrazán, Venta Barceló, etc. Aproximadamente un tercio de la población del municipio, vive en ellos.