Se lanzó Piiranha-v1: un modelo abierto de codificador pequeño de 280 M para detección de PII con una precisión de detección de tokens del 98,27 %, compatible con 6 idiomas y 17 tipos de PII, publicado bajo licencia MIT

El equipo de la Iniciativa de Integridad de Internet ha dado un paso importante en materia de privacidad de datos al publicar Piraña-v1un modelo diseñado específicamente para detectar y proteger información personal. Esta herramienta está diseñada para identificar información de identificación personal (PII) en una amplia variedad de datos textuales, lo que proporciona un servicio esencial en un momento en el que las preocupaciones por la privacidad digital son primordiales.

Piiranha-v1, un modelo de codificador liviano de 280M para detección de información personal identificable, se lanzó bajo la licencia MIT y ofrece capacidades avanzadas para detectar información personal identificable. Con soporte para seis idiomas (inglés, español, francés, alemán, italiano y holandés), Piiranha-v1 logra una detección casi perfecta, con una impresionante tasa de detección de tokens PII del 98,27 % y una precisión de clasificación general del 99,44 %. Se destaca en la identificación de 17 tipos de información personal identificable, con una precisión del 100 % para correos electrónicos y una precisión casi perfecta para contraseñas. Piiranha-v1 se basa en la poderosa arquitectura DeBERTa-v3. Esto lo convierte en una herramienta versátil adecuada para esfuerzos globales de protección de datos.

El rendimiento del modelo en la detección de varios tipos de información personal identificable es particularmente notable. Por ejemplo, tiene una precisión casi perfecta en la identificación de direcciones de correo electrónico y números de teléfono, con una puntuación F1 de 1,0 y 0,99, respectivamente. Piiranha-v1 es extremadamente eficaz en el reconocimiento de contraseñas y nombres de usuario, con una precisión de casi el 100 % en estas áreas. Estas métricas indican su utilidad para salvaguardar información confidencial en entornos de comunicación y transacciones digitales.

Una de las principales ventajas de Piiranha-v1 es su capacidad para marcar la información de identificación personal incluso cuando la categoría de datos específica puede estar mal clasificada. Por ejemplo, el modelo puede confundir ocasionalmente los nombres con los apellidos, pero aun así identifica correctamente la información como información de identificación personal. Esta flexibilidad hace de Piiranha-v1 una herramienta robusta para aplicaciones del mundo real donde a menudo ocurren inconsistencias en los datos. Tales clasificaciones erróneas, si bien técnicamente son errores, no comprometen el objetivo principal del modelo de identificar y proteger datos confidenciales.

En colaboración con socios como Hugging Face y Akash Network, el equipo de la Iniciativa de Integridad de Internet entrenó a Piiranha-v1 utilizando un conjunto de datos completo que comprende más de 400.000 registros de información personal identificable enmascarada. Este entrenamiento exhaustivo ha dado como resultado un modelo que cuenta con una alta precisión y demuestra resiliencia en diversos escenarios lingüísticos y contextuales. El uso de GPU H100 durante el entrenamiento permitió que el modelo alcanzara altos niveles de eficiencia, lo que garantiza una rápida identificación de información personal identificable en aplicaciones en tiempo real.

A pesar de su alta precisión, los desarrolladores de Piiranha-v1 enfatizan que debe usarse con precaución. Si bien el modelo es altamente confiable, el equipo no asume la responsabilidad por las predicciones incorrectas que pueda producir. Este aviso sirve como recordatorio de las limitaciones inherentes a cualquier modelo de aprendizaje automático, en particular uno encargado de algo tan complejo como la detección de información de identificación personal en múltiples idiomas y formatos de datos.

El proceso de entrenamiento de Piiranha-v1 se planificó meticulosamente para optimizar su rendimiento. El modelo se entrenó durante cinco épocas utilizando un tamaño de lote de 128. Se aprovechó el entrenamiento de precisión mixta con Native AMP para garantizar la velocidad y la precisión durante el proceso de aprendizaje. El resultado es un modelo altamente refinado capaz de reconocer variaciones sutiles en los tokens PII, lo que es particularmente importante para identificar información que podría estar oculta o presentada en formatos no estándar.

Los resultados de la evaluación del modelo resaltan aún más sus impresionantes capacidades. Piiranha-v1 alcanza una puntuación F1 del 93,12 % cuando se prueba en un conjunto de datos que contiene aproximadamente 73 000 oraciones. Sus métricas de precisión y recuperación también son sólidas, con un 93,16 % y un 93,08 %, respectivamente. Estas cifras, aunque son ligeramente inferiores a la precisión general debido a la tarea de clasificación de múltiples clases del modelo, aún representan un alto nivel de competencia en la detección de PII.

En términos prácticos, Piiranha-v1 se puede utilizar en diversas aplicaciones. Es especialmente adecuado para organizaciones que manejan grandes volúmenes de datos personales, como instituciones financieras, proveedores de atención médica y empresas de tecnología. Al integrar Piiranha-v1 en sus canales de procesamiento de datos, estas empresas y organizaciones pueden asegurarse de que la información confidencial se marque y redacte automáticamente, lo que reduce el riesgo de violaciones de datos y garantiza el cumplimiento de las regulaciones de privacidad como el RGPD y la CCPA.

El modelo Piiranha-v1 también está disponible para su implementación a través de la plataforma de Hugging Face, donde se puede integrar fácilmente en flujos de trabajo existentes. El modelo se encuentra bajo la licencia Creative Commons BY-NC-ND 4.0, que permite un amplio uso dentro de los límites de las aplicaciones no comerciales. Este enfoque de acceso abierto refuerza aún más el compromiso del equipo de la Iniciativa de Integridad de Internet de mejorar la privacidad de los datos a escala global.

En conclusión, Piiranha-v1 representa un avance significativo en la detección de información personal identificable (PII). Su alta precisión, compatibilidad con varios idiomas y posibilidades de aplicación flexibles lo convierten en una herramienta valiosa para cualquier organización que busque mejorar sus esfuerzos en materia de privacidad de datos. El equipo de la Iniciativa de Integridad de Internet ha creado un modelo que satisface los desafíos técnicos de la detección de información personal identificable y refleja la creciente importancia de salvaguardar la información personal en el mundo digital actual. A medida que las preocupaciones por la privacidad de los datos continúan aumentando, herramientas como Piiranha-v1 sin duda desempeñarán un papel crucial en la protección de la información confidencial de las personas contra la exposición y el uso indebido.


Echa un vistazo a la Tarjeta modelo y Cuaderno de ColabTodo el crédito por esta investigación corresponde a los investigadores de este proyecto. Además, no olvides seguirnos en Gorjeo y únete a nuestro Canal de Telegram y LinkedIn Gr¡Arriba!.

📨 Si te gusta nuestro trabajo, te encantará nuestro Hoja informativa..

No olvides unirte a nuestro Subreddit con más de 50 000 millones de usuarios

⏩ ⏩ SEMINARIO WEB GRATUITO SOBRE IA: ‘SAM 2 para video: cómo optimizar sus datos’ (miércoles 25 de septiembre, 4:00 a. m. a 4:45 a. m. EST)


Asif Razzaq es el director ejecutivo de Marktechpost Media Inc. Como ingeniero y emprendedor visionario, Asif está comprometido con aprovechar el potencial de la inteligencia artificial para el bien social. Su iniciativa más reciente es el lanzamiento de una plataforma de medios de inteligencia artificial, Marktechpost, que se destaca por su cobertura en profundidad de noticias sobre aprendizaje automático y aprendizaje profundo que es técnicamente sólida y fácilmente comprensible para una amplia audiencia. La plataforma cuenta con más de 2 millones de visitas mensuales, lo que ilustra su popularidad entre el público.