Professional Documents
Culture Documents
1. Introduccin .......................................................................................................................... 2
2. Condiciones para utilizar un PE. ............................................................................................ 3
3. La composicin del panel. ..................................................................................................... 4
3.1 Independencia del PE ................................................................................................ 6
3.2 Remuneracin de los expertos ................................................................................. 7
4. Aspectos operativos del panel. ............................................................................................. 7
A. Identificacin de los riesgos o causas del riesgo bajo anlisis ....................... 8
B. Construccin de los rangos de probabilidades e impacto respecto a los
riesgos transferidos ............................................................................................................ 8
C. Valoracin de las probabilidades e impactos por riesgo ................................. 8
D. Valoracin de posibles sobrecostos y sobreplazos en cada riesgo ................ 8
E. Utilizacin de herramientas de medicin de las valoraciones de los
expertos .................................................................................................................................. 9
F. Utilizacin del Panel para disear los mecanismos de mitigacin de riesgo
en el proyecto ....................................................................................................................... 9
5. Principios para la valoracin de los riesgos........................................................................... 9
6. Metodologas ...................................................................................................................... 10
A. Mtodos que agregan opinin de expertos (Delfi, Grupos nominales) ...... 10
B. Modelos axiomticos no Bayesianos .................................................................... 10
C. Modelos Bayesianos .................................................................................................. 10
D. Modelos de escalamiento sicolgico (Comparaciones por pares) ............... 11
6.1 Utilizacin de las metodologas de valoracin. ................................................... 11
7. Concepto del Supervisor ..................................................................................................... 11
BIBLIOGRAFIA RECOMENDADA PARA LA REALIZACION DE PANELES DE
EXPERTOS ............................................................................................................................ 14
1
1. Introduccin
La tipificacin, estimacin y asignacin de los riesgos en un proyecto de Asociacin
Pblico Privada (APP) es parte fundamental del proceso de estructuracin. Estos
riesgos repercuten considerablemente en el modelo financiero, permitiendo calcular
entre otros aspectos, el costo, la viabilidad financiera, la necesidad de recursos
pblicos y las posibilidades de pago de la deuda o de los posibles instrumentos de
financiacin.
Se debe tener en cuenta que el PE es una herramienta heurstica, y por lo tanto, sus
resultados tienen un mayor grado de subjetividad frente a ejercicios estadsticos
basados en informacin histrica. Sin embargo, constituye una herramienta prctica
para resolver estadsticamente problemas de identificacin, evaluacin, valoracin y
asignacin de riesgos bajo informacin emprica.
2
2. Condiciones para utilizar un PE.
El primer paso antes de utilizar un panel de expertos para la realizacin de una
medicin cuantitativa de los riesgos debe ser siempre analizar todas las fuentes
posibles de informacin histrica. La informacin histrica no necesariamente debe
provenir de proyectos iguales al propuesto. En proyectos de gran magnitud, diversas
etapas del proyecto pueden ser asimiladas a proyectos anteriores ms pequeos pero
con objetos contractuales similares.
Por ejemplo, un proyecto bajo la figura de APP para el diseo, construccin, operacin
y mantenimiento de una infraestructura no necesariamente debe ser comparado con
otro proyecto que rena todas las caractersticas de diseo, construccin, operacin y
mantenimiento de una infraestructura similar. Los riesgos en etapas de diseo y
construccin pueden compararse con contratos de obra pblica tradicional en los
cuales se haya realizado el diseo y construccin de una infraestructura similar y los
riesgos en la etapa de operacin y mantenimiento pueden compararse con contratos
de obra pblica tradicionales de operacin y mantenimiento de dicha infraestructura.
Considerando lo anterior, para que una entidad pueda acudir a un PE y llevar a cabo la
valoracin de riesgos a transferir exigida en la metodologa del Comparador Publico
Privado estipulada en la Resolucin 3656 del 20 de Diciembre de 2012 emitida por el
Departamento Nacional de Planeacin (DNP), el representante legal de la entidad
pblica debe:
La entidad pblica deber crear un expediente de acuerdo con las caractersticas del
artculo 2.2.2.1.8.6 del decreto 1082 de 2015, con los soportes respectivos de
3
bsqueda de informacin, clasificacin de contratos y evaluacin de los mismos para la
emisin de dicha certificacin al Departamento Nacional de Planeacin1.
Los integrantes del panel deben estar clasificados en tres (3) categoras:
Lder (Mnimo 1)
Supervisor (Mnimo 1)
Expertos (Mnimo 5)2
1
Dicha informacin deber estar disponible en caso que sea solicitada por el DNP.
2
En el caso de aplicacin de mtodos estadsticos Bayesianos y no Bayesianos, el nmero mnimo de expertos debe ser 8.
4
opinin que facilite la credibilidad y fiabilidad de resultados3. La tabla 1 presenta las
caractersticas generales que debe tener el panel de expertos.
3
La conformacin del panel depender de las particularidades y caractersticas del proyecto.
5
Tabla 1 - Caractersticas Panel de Expertos
i. Al menos 2/3 del panel deben ser personas diferentes a funcionarios o contratistas
de la entidad pblica o asesores o personal tcnico que form parte del equipo
estructurador del proyecto. Esta condicin podr ser obviada si efectivamente no
existen suficientes expertos independientes dada las caractersticas particulares de
un proyecto. Sin embargo, para aplicar esta excepcin, la entidad deber probar
que realiz esfuerzos para conseguir un mayor nmero de panelistas
6
independientes realizando sondeos en otros mercados y con asociaciones de
especialistas nacionales e internacionales.
ii. No debe existir ningn tipo de subordinacin entre los miembros del panel.
iii. Los expertos debern certificar no estar incursos en conflictos de inters por su
participacin en el panel.
Como parte de su remuneracin, los resultados del panel debern estar disponibles
para todos sus integrantes. Tambin, es relevante aclarar que al haber participado en
un panel, no se inhabilita al panelista como futuro participante en el Contrato .
Previa a la realizacin del PE, se deber informar a todos los miembros los
antecedentes, objetivos y temas a tratar y se deber remitir mnimo una semana antes
la documentacin objeto de anlisis que los miembros requieran. La entidad debe
7
verificar que los expertos tengan un conocimiento mnimo necesario sobre el
proyecto.
Todo panel de expertos debe tener como mnimo las siguientes etapas:
Debe existir una etapa previa de validacin por parte de los expertos de la
identificacin de los riesgos del proyecto o las causas del riesgo bajo anlisis
previamente identificadas por la entidad pblica. Si el panel tiene las labores de
identificar los riesgos del proyecto o causas del riesgo bajo anlisis, los panelistas
deben reunirse previamente con el estructurador del proyecto4.
Para analizar los riesgos es necesario crear escalas cualitativas que reflejen los diversos
niveles de probabilidad de ocurrencia de cada riesgo y permitan cuantificar el impacto
en el proyecto en caso de su materializacin. Los rangos debern corresponder a las
experiencias de los expertos y deben guardar coherencia con la valoracin de los
riesgos. Se debe evitar construir rangos demasiado amplios que generen que la
mayora de los riesgos se concentren en una determinada posicin. Con el fin de
eliminar posibles respuestas que se ubiquen en el rango intermedio de valoracin y
que no sugieran una posicin neutra por parte de los expertos, el nmero de rangos
debe ser par, a menos de que se especifiquen porcentajes que eliminen este sesgo.
Para cada riesgo identificado o causas de stos, los expertos procedern a valorar su
probabilidad e impacto. Como mnimo, debern establecer rangos con un valor
mnimo, medio y un valor mximo basado en la informacin particular del proyecto
bajo anlisis5. La forma en que dicha informacin ser utilizada depender de la
metodologa de valoracin que el panel utilice.
4
Como mnimo y como punto inicial, la entidad pblica debe haber tenido en cuenta la poltica de riesgos contractuales del estado
estipulada en los documentos CONPES 3107 de 2001, 3133 de 2001, 3714 de 2011 y la Metodologa de Valoracin y Seguimiento
de Riesgos en Contratos Estatales del Ministerio de Hacienda y Crdito Pblico.
5
Para la valoracin del impacto, la entidad pblica debe dar a conocer a los expertos el porcentaje del valor de participacin de la
actividad sobre la cual recae el impacto de la materializacin del riesgo con relacin a la totalidad del contrato.
8
Una vez terminado el ejercicio del numeral anterior, el panel proceder a valorar los
posibles sobrecostos y sobreplazos del proyecto. La recopilacin de la informacin
depender del mtodo escogido para tal fin, de acuerdo con los principios del
siguiente numeral. La valoracin deber realizarse de manera individual y confidencial,
y no debe ser puesta a debate por los miembros del panel pues existe el riesgo de
influir en los resultados de la valoracin6.
Una vez todos los miembros del panel hayan realizado la valoracin de las
probabilidades e impactos de los riesgos, sus sobrecostos y sobreplazos o las causas
del riesgo bajo anlisis, el lder del taller proceder a aplicar la metodologa
seleccionada para agregar dichas valoraciones y realizar un pronstico del sobrecosto y
sobreplazo estimado para el proyecto.
6
Tratndose de metodologas Delfi, dicha informacin deber ser utilizada y publicada como mnimo en una segunda etapa de
valoracin.
9
Sin importar el tipo de metodologa que se utilice para realizar la valoracin de las
opiniones de los expertos, es necesario aplicar los siguientes principios:
Neutral: En ninguno de los pasos de la valoracin se les permite a los expertos tomar
partido o defender alguna postura especifica.
6. Metodologas
Se debe utilizar una metodologa clara para realizar la medicin de las opiniones de los
expertos. Las siguientes son las metodologas que pueden ser usadas para valorar el
panel:
C. Modelos Bayesianos
10
En estos modelos se utiliza el teorema de Bayes para determinar la distribucin de los
resultados de las opiniones de los expertos y establecer niveles de confianza sobre las
valoraciones obtenidas. Los modelos basados en simulaciones de Montecarlo 7 son un
ejemplo de este tipo de modelos.
7
Para mayor informacin se recomienda el libro de Pea Snchez de Rivera del 2001, Deduccin de
distribuciones: el mtodo de Monte Carlo, en Fundamentos de Estadstica. Madrid: Alianza Editorial.
11
panel de expertos en el que un tercero neutro realice una supervisin sobre la
valoracin producida por el PE.
El supervisor, siendo integrante del PE e identificado desde la primera fase del proceso,
debe seguir una metodologa de revisin continua a lo largo de todas las etapas del
panel. En la primera etapa, debe verificar que el resto de los integrantes del panel sean
los expertos pertinentes para el caso. En las etapas siguientes, debe contestar dudas y
hacer una revisin general (las etapas no estn determinadas, ya que las construye el
mismo panel) y generar un reporte que contenga consideraciones sobre todo el
proceso. En la etapa final, se realiza la revisin tcnica, centrada en el alcance tcnico
de cobertura, contenidos y resultados; y el proceso de revisin centrado en estructura,
formato y ejecucin.
Lo anterior implica que, el supervisor, adems de ser integrante del panel, tiene la
tarea de observar e intervenir en la correcta implementacin de la metodologa de
valoracin, producir un reporte final y un concepto que ser enviado por la entidad
pblica a las entidades competentes.
Para un ptimo desarrollo del panel, es importante que los integrantes del panel
entiendan lo que se espera de ellos. La planificacin comienza en el inicio del proyecto,
permitiendo suficiente tiempo en el calendario para obtener y responder a los
comentarios sobre el informe, ya que el tiempo real requerido para completar la
revisin de un informe puede depender de varios factores, incluyendo el tamao del
informe, la cooperacin de los encuestados y la capacidad de respuesta de la entidad
contratante, entre otros.
12
Formato No 1. Desarrollo del PE.
2. Los miembros del panel cumplen con los requisitos mnimos de formacin y
experiencia para su participacin en el panel.
4. El panel cumple con los principios para garantizar una valoracin objetiva de los riesgos
bajo analisis.
Modelos Bayesianos
13
BIBLIOGRAFIA RECOMENDADA PARA LA
REALIZACION DE PANELES DE EXPERTOS
2. U.S. Army Corps of Engineers Institute for Water Resources. (2000, December).
Methods for Expert-Opinion Elicitation of Probabilities and Consequences for
Corps Facilities. Alexandria, VA 22315: Bilal M. Ayyub, PhD, PE.
14
10. Cuhls k. Fraunhofer Institute for Systems and Innovation Research. Delphi
method. Germany
15