Senior AI Analyst delivering value in AI. Conducting EDA, defining KPIs, and evaluating models for production impact.
Responsibilities
Realizar estudos para recomendar métricas e critérios de aceite que traduzam objetivos de negócio em KPIs e limiares quantitativos, mensurável e defendível nas discussões de priorização e go/no-go.
Construir e manter datasets e ground truth (incluindo cenários de teste) a partir de EDA, amostragem e rotulação com qualidade, criando base confiável para treinar, comparar e validar modelos, RAG e agentes.
Avaliar sistematicamente modelos, pipelines de RAG e agentes de IA por meio de experimentos offline/online, AB tests e análise de erro, para selecionar a melhor abordagem e comprovar que a solução entrega valor real.
Projetar e executar experimentos com hipóteses claras, desenho estatístico adequado e documentação dos resultados, permitindo decisões técnicas e de produto baseadas em evidência e não em opinião.
Manter uma suíte de regressão de modelo/assistente que rode a cada mudança relevante, com scripts e checks automatizados, para impedir que novas versões destruam ganhos já conquistados em releases anteriores.
Monitorar continuamente performance e draft em produção por meio de dashboards, alertas e revisões periódicas, identificando degradação de qualidade ou mudança de distribuição de dados e disparando planos de mitigação.
Medir impacto de negócio das soluções de IA ligando métricas técnicas a indicadores operacionais/financeiros, comparando cenário antes/depois ou grupos de controle, para sustentar decisões de investimento e priorização de roadmap.
Documentar experimentos, decisões, limitações e trade-offs em formatos reprodutíveis (notebooks, relatórios curtos, changelog), garantindo rastreabilidade técnica e facilitando auditorias e futuras iterações.
Atuar no desenho de requisitos e arquitetura de IA trazendo visão de dados e avaliação desde o discovery, revisando escopo e apontando riscos de mensurabilidade ou viabilidade, para evitar casos de uso que não se sustentam nos dados.
Colaborar de forma ativa com engenharia e gestão de projetos na definição de critérios de aceite, plano de testes e leitura de resultados, garantindo que cada entrega chegue em produção já acompanhada de evidência quantitativa.
Requirements
Ensino Superior completo em Ciência de Dados, Estatística, Matemática ou Matemática Aplicada, Ciência da Computação, Engenharia da Computação, Sistemas de Informação, Engenharia de Produção, Engenharias, Geologia, Física ou Economia.
Analista de Inteligência de Mercado Sênior at Scanntech providing insights and market analysis for perfume industry. Engaging with major national and international clients to solve problems through data.
Social Listening & Intelligence Analyst at HUNTER handling data collection and reporting for strategic insights. Focus on social listening and intelligence analysis supporting client and agency needs.
Crime Intelligence Analyst providing tactical analytical assistance for criminal investigations at FDLE. Compiling and analyzing intelligence data from various agencies for law enforcement.
Lead Competitive Intelligence Analyst enhancing USAA's competitive insight capabilities in the Marketing organization. Conduct benchmarking and analyze competitor strategies to inform decision - making.
Senior Analyst for strategic decision support in the commercial area of Grupo Doce D'ocê. Focus on data analysis and insight generation for business growth.
Analyst for market intelligence in pricing and packaging strategies at Sólides, a company specialized in integrated HR technology. Responsible for competitive monitoring and pricing model development.
Analista de Inteligência Comercial conducting performance analysis and driving strategic insights for SLC Agrícola. Key responsibilities include pricing, budgeting, and KPI management.
Analista de Inteligência de Suprimentos Sr transforming data into strategic decisions at GOL Linhas Aéreas. Join our team of insight - driven professionals enhancing efficiency and compliance in procurement processes.
Analytic staff collaborating with law enforcement to support agricultural crime investigations in Florida. Researching data, developing intelligence, and presenting findings with a focus on criminal activities.
Defensive Counterintelligence Analyst supporting CMS initiatives in Woodlawn, Maryland. Analyze threat information and support intelligence inquiries while utilizing your expertise in multi - domain operations.