Arquitecto de soluciones Databricks - Onsite - W2 King of Prussia

Arquitecto de soluciones Databricks - Onsite - W2

Tiempo completo • King of Prussia
Título del puesto: Arquitecto de soluciones Databricks
Ubicación: Rey de Prusia, PA – In situ
Nivel de experiencia: 12+ años de experiencia


Resumen del puesto
Buscamos un Arquitecto de Soluciones Databricks con experiencia para diseñar, diseñar y liderar la implementación de soluciones de datos e IA a escala empresarial utilizando la Plataforma de Inteligencia de Datos Databricks. El candidato ideal debe tener una sólida experiencia práctica con Databricks, arquitectura Lakehouse, Apache Spark, Delta Lake, Unity Catalog, plataformas en la nube, ingeniería de datos y arquitecturas modernas de datos/IA.
El candidato trabajará estrechamente con los grupos de interés empresariales, ingenieros de datos, desarrolladores, equipos de la nube y arquitectos empresariales para traducir los requisitos empresariales en soluciones Databricks escalables, seguras y de alto rendimiento.
La guía arquitectónica de Databricks enfatiza la arquitectura, gobernanza, seguridad, fiabilidad, rendimiento, optimización de costes e interoperabilidad de Lakehouse.
Responsabilidades clave
Diseñar e implementar arquitecturas Lakehouse de Databricks de nivel empresarial en entornos de desarrollo, pruebas y producción.
Define la arquitectura de estado objetivo para la ingeniería de datos, analítica, BI, aprendizaje automático y cargas de trabajo de IA.
Soluciones de arquitectura usando Databricks, Delta Lake, Apache Spark, Unity Catalog, Databricks SQL, flujos de trabajo y Lakehouse Federation.
Diseñar e implementar estrategias de gobernanza de datos empresariales, seguridad, control de acceso, linaje y compartición de datos utilizando Unity Catalog.
Migración de leads de plataformas de datos heredadas, almacenes de datos y entornos Hive Metastore a Databricks/Unity Catalog.
Desarrollar arquitecturas escalables de ingesta y procesamiento de datos para cargas de trabajo por lotes y streaming.
Proporcionar liderazgo técnico para la optimización del rendimiento, escalabilidad, fiabilidad y optimización de costes de entornos Databricks.
Diseña soluciones nativas en la nube que aprovechen AWS, Azure o GCP e integra Databricks con almacenamiento en la nube, redes, seguridad e identidade.
Establecer Infraestructura como Código (IaC) y estrategias de despliegue usando Terraform y CI/CD. Actualmente, Databricks recomienda Terraform para automatizar espacios de trabajo, redes, almacenamiento e infraestructura del Catálogo de Unity.
Colaborar con los equipos de DevOps para implementar pipelines de despliegue automatizados y la promoción del entorno.
Proporcionar orientación técnica a ingenieros de datos y equipos de desarrollo y realizar revisiones de arquitectura/diseño.
Trabajar directamente con clientes y partes interesadas para comprender los requisitos y presentar opciones y recomendaciones de arquitectura.
Crea diagramas de arquitectura, documentos de diseño técnico, estándares y hojas de ruta de implementación.
Resolver problemas complejos de producción y proporcionar recomendaciones arquitectónicas para la resolución.
Mantente al día con las nuevas capacidades de Databricks Data + IA, IA generativa, ML y tecnologías Lakehouse.
Habilidades requeridas
12+ años de experiencia en Ingeniería de Datos, Arquitectura de Datos, Arquitectura en la Nube o campos relacionados.
5+ años de sólida experiencia en Databricks, incluyendo arquitectura e implementación.
Experiencia práctica sólida con:
Plataforma Lakehouse de Databricks
Apache Spark / PySpark
Lago Delta
Catálogo Unity
Databricks SQL
Flujos de trabajo / Trabajos de Databricks
Delta Live Tables / Lakeflow
Gobernanza y seguridad de datos
Sólido conocimiento de las arquitecturas de Data Lake, Data Warehouse y Lakehouse.
Experiencia diseñando pipelines de datos por lotes y en tiempo real/streaming a escala empresarial.
Tengo una sólida experiencia programando con Python y/o Scala.
Sólidas habilidades en desarrollo SQL y ajuste de rendimiento.
Experiencia con al menos una gran plataforma en la nube:
AWS
Microsoft Azure
Google Cloud Platform
Experiencia con tecnologías de almacenamiento en la nube como Amazon S3, Azure Data Lake Storage o Google Cloud Storage.
Experiencia con Terraform/IaC y CI/CD.
Sólido conocimiento de redes, IAM, autenticación, cifrado y seguridad en la nube.
Excelentes habilidades de comunicación, presentación, documentación y gestión de partes interesadas.
Habilidades preferidas
Las certificaciones de Databricks son muy preferidas.
Experiencia con MLflow, Model Serving, Mosaic AI e IA generativa.
Experiencia con arquitecturas LLM/RAG y plataformas de IA/ML.
Experiencia con Kafka u otras tecnologías de streaming de eventos.
Experiencia con herramientas de integración de datos como Informatica, ADF, dbt o equivalentes.
Experiencia con Power BI/Tableau y arquitecturas de analítica empresarial.
Experiencia en la gobernanza y los requisitos de cumplimiento de datos empresariales.
Experiencia liderando talleres de arquitectura y debates técnicos con altos interesados.
Sólido conocimiento de modelado de datos, modelado dimensional, gestión de metadatos, línea de datos y conceptos maestros de datos.

Somos un empleador con igualdad de oportunidades y todos los candidatos calificados recibirán consideración por el empleo sin distinción de raza, color, religión, sexo, origen nacional, estado de discapacidad, estado de veterano protegido o cualquier otra característica protegida por la ley.





(si ya tienes un currículum en Indeed)

O aplicar aquí.

* campos requeridos

Ubicación
Or
Or

Información de Empleo de Igualdad de Oportunidades en los EE. UU. (La finalización es voluntaria)

Somos un empleador que ofrece igualdad de oportunidades y todos los solicitantes calificados recibirán consideración para un empleo sin distinción de raza, color, religión, sexo, origen nacional, estado de discapacidad, estado de veterano protegido o cualquier otra característica protegida por la ley.

Se le brinda la oportunidad de proporcionar la siguiente información para ayudarnos a cumplir con los registros federales, estatales de igualdad de oportunidades de empleo / Acción afirmativa, informes y otros requisitos legales.

La cumplimentación del formulario es totalmente voluntaria. Sea cual sea su decisión, no se considerará en el proceso de contratación o posteriormente. Cualquier información que proporcione será registrada y mantenida en un archivo confidencial.

Formulario CC-305
Número de Control OMB 1250-0005
Expira el 30/04/2026

¿Por qué se le pide que rellene este formulario?

Somos un contratista o subcontratista federal. La ley nos obliga a ofrecer igualdad de oportunidades de empleo a las personas con discapacidad cualificadas. Nuestro objetivo es que al menos el 7% de nuestros trabajadores sean personas con discapacidad. La ley dice que debemos medir nuestro progreso hacia este objetivo. Para ello, debemos preguntar a los solicitantes y a los empleados si tienen o han tenido alguna discapacidad. Las personas pueden convertirse en discapacitadas, por lo que debemos hacer esta pregunta al menos cada cinco años.

Rellenar este formulario es voluntario y esperamos que decida hacerlo. Su respuesta es confidencial. Nadie que tome decisiones de contratación la verá. Su decisión de rellenar el formulario y su respuesta no le perjudicarán en modo alguno. Si desea obtener más información sobre la ley o este formulario, visite el sitio web de la Oficina de Programas de Cumplimiento de Contratos Federales (OFCCP) del Departamento de Trabajo de EE.UU. en www.dol.gov/ofccp.

¿Cómo saber si tiene una discapacidad?

Una discapacidad es una condición que limita sustancialmente una o más de sus "actividades vitales principales". Si tiene o ha tenido alguna vez una afección de este tipo, usted es una persona con discapacidad. Las discapacidades incluyen, pero no se limitan a:

  • Trastorno por consumo de alcohol u otras sustancias (sin consumir drogas ilegalmente en la actualidad)
  • Trastorno autoinmune, por ejemplo, lupus, fibromialgia, artritis reumatoide, VIH/sida
  • Ceguera o problemas de visión
  • Cáncer (pasado o presente)
  • Enfermedad cardiovascular o del corazón
  • Enfermedad celíaca
  • Parálisis cerebral
  • Sordera o dificultades auditivas graves
  • Diabetes
  • Desfiguración, por ejemplo, desfiguración causada por quemaduras, heridas, accidentes o trastornos congénitos
  • Epilepsia u otro trastorno convulsivo
  • Trastornos gastrointestinales, por ejemplo, enfermedad de Crohn, síndrome del intestino irritable
  • Discapacidad intelectual o del desarrollo
  • Enfermedades mentales, por ejemplo, depresión, trastorno bipolar, trastorno de ansiedad, esquizofrenia o trastorno de estrés postraumático
  • Ausencia total o parcial de miembros
  • Problemas de movilidad que requieran el uso de una silla de ruedas, un escúter, un andador, una pierna ortopédica u otros dispositivos de apoyo
  • Afección del sistema nervioso, por ejemplo, migrañas, enfermedad de Parkinson, esclerosis múltiple (EM)
  • Neurodivergencia, por ejemplo, trastorno por déficit de atención con hiperactividad (TDAH), trastorno del espectro autista, dislexia, dispraxia u otras dificultades de aprendizaje
  • Parálisis parcial o total (por cualquier causa)
  • Afecciones pulmonares o respiratorias, por ejemplo, tuberculosis, asma, enfisema
  • Baja estatura (enanismo)
  • Lesión cerebral traumática

DECLARACIÓN PÚBLICA DE CARGA: De acuerdo con la Ley de Reducción de Trámites de 1995, ninguna persona está obligada a responder a una recopilación de información a menos que dicha recopilación muestre un número de control OMB válido. Esta encuesta debería completarse en unos 5 minutos.

Si cree que pertenece a alguna de las categorías de veteranos protegidos que figuran a continuación, indíquelo haciendo la selección adecuada. Como contratista del gobierno sujeto a la Ley de Asistencia para el Reajuste de Veteranos de la Era de Vietnam (VEVRAA), solicitamos esta información para medir la efectividad de los esfuerzos de alcance y reclutamiento positivo que llevamos a cabo de conformidad con VEVRAA. La clasificación de las categorías protegidas es la siguiente:

Un "veterano discapacitado" es uno de los siguientes: un veterano de los servicios militares, terrestres, navales o aéreos de los EE. UU. Que tiene derecho a una indemnización (o quién, salvo el pago militar jubilado, tendría derecho a una indemnización) según las leyes administradas por el Secretario de Asuntos de Veteranos; o una persona que fue dada de alta o liberada del servicio activo debido a una discapacidad relacionada con el servicio.

Un "veterano recientemente separado" se refiere a cualquier veterano durante el período de tres años que comienza en la fecha de la descarga o liberación de dicho veterano del servicio activo en el servicio militar, terrestre, naval o aéreo de los EE. UU.

Un "veterano de tiempo de guerra en servicio activo o insignia de campaña" significa un veterano que estuvo en servicio activo en el servicio militar, terrestre, naval o aéreo de los EE. UU. Durante una guerra o en una campaña o expedición para la cual se ha autorizado una insignia de campaña según las leyes. administrado por el Departamento de Defensa.

Un "veterano de la medalla del servicio de las Fuerzas Armadas" significa un veterano que, mientras estaba en servicio activo en el servicio militar, terrestre, naval o aéreo de los EE. UU., participó en una operación militar de los Estados Unidos por la cual se otorgó una medalla de servicio de las Fuerzas Armadas 12985.

If no code provided, add their name instead.
Política de privacidad