👍 ¡Es una excelente idea! ¡Me encanta! ¡¡¡Quiero que esté funcionando YA!!!
👎 Pero estoy convencido de que aún no es momento.
Para empezar a explicar por qué no es momento, quiero mostrarles la Cola de Primeras Publicaciones, una que también se accede con 500, pero que sólo necesita 1 único revisor para completarse. Estas son las métricas: (*también las publiqué acá)

- Ahí puse que muestre cantidad de revisiones (amarillo) y demora (celeste).
- Miren cómo la demora media en minutos (celeste) viene estando por arriba de 1 hora desde que se publica hasta que se revisa! Eso es lo que se tarda para una cola que debería ser instantánea (y es la media, algunas revisiones tardan muchísimo más).
Miren el historial de esta cola (abrir en otra pestaña): (tapé los nombres)

- Son sólo un puñado de usuarios (siempre los mismos), y muy espaciados en el tiempo... hay pausas muy largas entre uno y otro. Pausas que dejan publicaciones sin revisar por mucho tiempo.
- Estoy mostrando la captura en una hora pico, ni les cuento a la noche/madrugada!
- Y ¿vieron la acción elegida? Es un No se requiere ninguna acción tras otro (marqué con las cruces)... Yo no recuerdo cuándo fue la última vez que seleccioné eso, pero está muy mal.
- Ya lo decíamos hace un año y medio, y creo que se ha empeorado. Es un problema enorme que se esté revisando así (pero no quiero irme de tema, esto quedará para alguna otra publicación).
Primeras Publicaciones es la cola con menos requisitos, la más sencilla y rápida, y aún estamos fallando en esto.
Mi punto: Está genial la iniciativa de implementar Triage, me encanta... Pero no estamos preparados lamentablemente. Nos faltan muchos pasos hasta llegar a eso. No conseguiríamos 3 usuarios en una revisión rápida jamás. Ojalá no fuese así, pero es la realidad. Las revisiones actuales no resisten ningún análisis.
Y al mismo tiempo creo que es una discusión genial, que se tiene que dar en el sitio.
Triage es una cola que se diseñó para algo completamente diferente: limpiar la página porque había tantas malas preguntas que no se podía ver ninguna de las buenas. Estamos hablando de un volumen exhorbitante de publicaciones, sumado a que se había priorizado cómo se muestran las preguntas, para que muestre más las que no estaban respondidas: un cambio con buenas intenciones pero con un resultado desastroso. Se puede leer el origen del problema en The Stack Overflow homepage is over-emphasizing bad questions (and a proposed solution) y ver las diferencias con nuestra situación actual.
Lo que estaríamos haciendo con un Triage es demorar las respuestas a una pregunta aceptable. O también, estaríamos dirigiendo las publicaciones de baja calidad para que la mayoría terminen evaluadas por un moderador, cosa que ya sucede ahora y no aportaría diferencias.
Y también es paciencia. El número de usuarios va subiendo, y es lógico que aparezcan camadas nuevas que no saben cómo funciona la cosa y cómo moderar, en especial en épocas de éxamenes en cada uno de los países.
Buscando información sobre la implementación de Triage en otro sitios, encontré esta publicación que les recomiendo leer: Triage and Help & Improvement review queues at sites other than Stack Overflow? (no la traduzco porque es larga y realmente vale la pena leerla), pero se menciona que ni siquiera está del todo ajustada para que funcione bien en SO, y que podría llegar a pensarse implementar en alguno de los sitios más grandes, no en otros.
¿Qué propondría? Dejar esto dentro de un plan más largo, de acá a 1-2 años en principio, con objetivos intermedios, yendo paso a paso.
Por ejemplo (tomen esto sólo como un borrador):
Documentar mejor en Meta lo que hay que hacer en cada cola. Por ejemplo, que quede claro que no pueden poner "no se requiere ninguna acción" (salvo casos muy raros), que hay que revisar bien, editar editar editar editar, pedir aclaraciones, votar y OMITIR. Y lo mismo para todas las colas.
Comprometer a los revisores más experimentados en que revisen a los revisores, y les pasen links a toda la documentación de Meta que les explica qué significa cada botón de la revisión y qué se espera que hagan. Estar mucho más afinados, con una masa importante de revisores que saben lo que hacen.
Es cierto que está el tema de que subieron los privilegios con la graduación. Y también es lógico que haya un poco de cansancio en algunos (me incluyo). Después de estar focalizados en "tenemos que graduarnos, tenemos que graduarnos, tenemos que graduarnos", nos graduamos!!! Y a muchos se nos va un poco el aire y la fuerza con la que veníamos... Lleva tiempo hasta que volvemos a poner foco. Pero aún así, sigue habiendo muy pocos revisando en comparación a los que pueden revisar.
Audits - Que son MUY problemáticas para implementar. ¿Saben que al principio sólo empeoran las colas, no? Ahora, yo no me animo a implementar audits sin que antes estén más en sintonía los revisores (y el resto de la comunidad) con el equipo de moderadores y CM.
Los casos que tiran los audits pueden ser realmente malos y donde tomar una acción diferente a la que espera el sistema es realmente lo que se debe hacer... Entonces empiezan a aparecer preguntas en Meta de "por qué no aprobé esto"; y tienen razón, entonces empezamos a pedir que se elimine un cierto audit de la cola. Y sabemos que esa respuesta puede no ser rápida, entonces pasó 1 mes y ese audit malo está ahí.
Por eso tienen que estar muy ajustados los primeros 2 puntos antes de ir con audits.
Afianzar la cantidad de revisores constantes, promoviendo que la gente revise seguido, y que haya más involucrados... una masa crítica.
... y recién ahí
- Evaluar métricas, ver cuáles son los problemas que estamos teniendo... Si sigue siendo un tema de baja calidad y vemos que está inundando la página, ahí sí podemos pensar en implementar un nueva cola, ya sea Help & Improvement o Triage.
No antes de haber dominado la cola más sencilla de todas (Primeras Publicaciones).
En fin, no quiero matar la inercia de tu propuesta, pero creo que es importante ver esto.
Referencias. Estos son algunos de los links que repasé antes de publicar:
Audits:
Help & Improvement
Triage: