Senior Python Engineer

📖Primero, un poco de contexto: 🗒

En España, hay muchas empresas que se dedican a integrar tecnología, pero lo que hace a Nuclia realmente única… Es que ¡están construyendo tecnología! Compitiendo directamente con startups de nivel mundial, desde Londres a Silicon Valley.  🌪️

Nuclia ha desarrollado una API capaz de conectarse a los distintos repositorios de información no estructurada de una organización, siendo capaz de indexar el conocimiento y, mediante GenAI de responder a preguntas sobre los datos no estructurados de la empresa.

Ofrecen una solución 100% end-to-end. Dónde sea que esté la información, y sin importar el formato e idioma, NucliaDB es capaz de indexarla y almacenarla. ¡Anda! Que, ¿qué es NucliaDB? , NucliaDB es la base de datos multi-modal, de vectores, y open source que ha desarrollado la compañía. Ya solo eso es impresionante, pero, lo vas a ver, este equipo no se conforma con cualquier cosa. En Nuclia también permiten la integración con los distintos LLMs existentes en el mercado, ¡y hasta ofrecen su propio modelo de lenguaje!

El producto de Nuclia es una API pensada como una búsqueda asistida por Inteligencia Artificial. Uno de sus puntos fuertes es que gestionan todo el ciclo, de tal forma que un/ usuario/a tiene sus datos privados sobre los cuales quiere mejorar su búsqueda. Este usuario/a puede subir toda la información sobre la cual quiere buscar, Nuclia procesa la información desde el punto de vista de datos no estructurados, con cualquier tipo de fichero, y de ahí se hace un procesamiento que intenta sacar el máximo de texto e información 🤖 . Entra en juego entonces la parte Open Source de Nuclia, que es NucliaDB, Esto les permite buscar semánticamente, entre en el contenido del usuario. 👀

Las funcionalidades de generación de respuestas en Nuclia se basan en el concepto RAG, Retrieval-Augmented Generation, con el que una vez se ha localizado dónde, en los datos del usuario, se halla la respuesta a lo que se pregunta, y se genera una respuesta al más puro estilo ChatGTP o BARD. En este sentido, han integrado varios generadores de lenguaje y ahora están generando el suyo propio, para poder personalizar la experiencia de búsqueda del usuario. 🦾

La parte final consiste en que el usuario va a ser capaz de etiquetar, y entrenar sus propios modelos para cerrar todo el círculo. 

También hacen control de “alucinaciones”, para asegurar que lo que se produce viene de los datos del usuario, garantizando que los datos del usuario no salen a ninguna API externa.

Como usuario, más que entrenar tus propios modelos, puedes tunearlos, para que se vuelvan más específicos y aprendan de manera más focalizada.🎓 De esta forma, el modelo que llega al cliente es mucho más potente, sin que le requiera demasiado esfuerzo.

Pero vamos al turrón, ¿qué harás tú? 🫵

¡Prepárate para un viaje al futuro con el equipo NUA! 🚀

Te unirás a NUA, Nuclia Understanding API, que fusiona dos conjuntos: Imagina fusionar el poder de la ingeniería de software y la magia del machine learning en un solo equipo.💻✨ Uno que combina ingeniería de software con un poco de plataforma, y otro especializado en machine learning, enfocado en todo lo relacionado con inteligencia artificial. En este equipo, estarás en contacto con asuntos relacionados con el procesamiento natural del lenguaje y el machine learning. A diferencia de centrarse únicamente en investigación, su enfoque radica en llevar a producción las innovaciones desarrolladas en LLM, garantizando su continuidad y mantenimiento. ¡Nada de quedarse en la teoría! 🚀🧠

Tienen dos APIs, una es la que procesa archivos y saca información de ellos, y otra que hace inferencia sobre los modelos de machine learning y su entrenamiento. También se hacen cargo del sistema de autorización de toda la plataforma, y de otros sistemas necesarios, como por ejemplo, el de usuarios y cuentas, así como recoger los datos necesarios para poder cobrar por uso a los clientes.

🚨DISCLAIMER🚨 Esta oferta es solo para software engineers que tengan vocación de "problem solvers".

Como software engineer no tocaras tanto LLM ni IA, trabajarás más en la arquitectura y en el software, de forma que tu trabajo contribuirá a que todo el equipo llegue al objetivo final, aportando valor en lo que sabes hacer bien. De modo que si te apasiona lo que haces, se verá reflejado en el buen funcionamiento del equipo 🤜🤛

Aportarás ideas frescas en todas las áreas, incluyendo recuperación de información, computación distribuida, diseño de sistemas a gran escala, redes y almacenamiento de datos, seguridad, inteligencia artificial y procesamiento de lenguaje natural.

En Nuclia hay un nivel muy alto de conocimiento, son apasionados, proactivos y con muchísimo ownership, capaces de crear, desarrollar, probar y vigilar que funcione y, esperan que la persona que se incorpore aporte valor del mismo modo.

Contarás con un equipo de Plataforma, que se encargará de proveer todos los recursos necesarios para mantener tu autonomía. Están dedicados a facilitar la monitorización en producción, el desarrollo diario con sistemas automatizados y la implementación en diversas zonas. La integración y despliegues continuados se lleva a cabo mediante GitHub Actions + ArgoCD

Tienen su infraestructura en GCP y AWS, despliegan de forma automatizada en todos los sitios. 

Por si fuese poco, han creado su propia base de datos, que escala horizontalmente para el diseño del producto en sí mismo. 

Usan event sourcing para el escalado, con NATS como backend. Esto les permite escalar a nivel de tráfico y a nivel de consultas. Y además tienen una característica muy especial, que requieren algunos de sus partners, que precisan una instalación on-premise y ofrecen la experiencia a sus clientes de un modo híbrido, de tener la base de datos en su data center y el procesado en el cloud de Nuclia, o tenerlo todo on-premise, con toda la plataforma desplegada on premise a partir de las mismas herramientas que utilizan para distribuir en Nuclia. 👏

Desarrollarás en tu día a día con FastApi, el framework rest python elegido para desarrollar todas las APIs en Nuclia 

Es importante que tengas experiencia profesional con Kubernetes, ya que todo lo que vas a tocar está montado sobre ello.

Se valora que tengas una base programando software utilizando patrones asíncronos, si conoces Asyncio, mejor que mejor, es lo que utilizarás para estos casos, luego es algo que con ellos podrás desarrollar. 🎓