Antecedentes: La revisión de la literatura mostró que los niveles de conocimientos eran bajos en la interpretación gasométrica y las herramientas utilizados en estos estudios no estaban validados. Objetivo: El presente estudio busca validar una herramienta de evaluación de los conocimientos y destrezas en la interpretación de análisis de gases arteriales. Materiales y métodos: Se evaluó la validez de la herramienta por el método de agregados individuales por 4 expertos. Posterior a la validación se realizó una prueba piloto en 30 alumnos de la Universidad Peruana Cayetano Heredia que actualmente cursan el internado médico, con lo cual se determinó la confiabilidad mediante alfa de Cronbach, los índices de discriminación y dificultad, y la correlación entre la calificación en el test y autopercepción del nivel de conocimiento de los participantes. Resultados: Los expertos calificaron los ítems con puntajes de “bueno” y “excelente”, concluyendo en la apreciación general que el test es “bueno”. La concordancia entre los 4 evaluadores tuvo un Kappa de: 0.5309, 0.5294, 0.4008 y 0.3535 para congruencia, redacción, contenido y pertinencia respectivamente, estimándose una confiabilidad de 0.8125. La mayor parte de las preguntas de la herramienta tuvo un nivel de dificultad difícil, y un nivel de discriminación excelente. El coeficiente de correlación entre el desempeño en el test y la seguridad del nivel de conocimiento de los participantes fue de 0.58. Conclusiones: La herramienta diseñada es válida parcialmente y confiable, mostrando índices de discriminación adecuados, y de dificultad distintos a la literatura.