Skip to content

🧫Craft & Know-How

Cientista de Dados Clínicos · Utiliza dados clínicos, de ensaios e do sistema de saúde para gerar evidências confiáveis ​​para cuidados, pesquisas e decisões operacionais mais seguras.

Share

A imagem popular de um cientista de dados clínicos construindo modelos preditivos inteligentes é real, mas incompleta. Pesquisas de profissionais e relatos em primeira mão descrevem consistentemente um trabalho em que encontrar, limpar e remodelar dados confusos consome mais horas do que a etapa de modelagem que a maioria das pessoas imagina.

A arte transmitida dentro da área tem menos a ver com a memorização de um algoritmo específico e mais com o ceticismo disciplinado: observar os dados antes de confiar em qualquer modelo deles, verificar se um padrão se mantém dentro de subgrupos e saber quando a resposta honesta à pergunta de uma parte interessada é que os dados não podem suportá-lo.

What the work demands

857870726258
Estatísticas e probabilidade
85
Programação (Python, SQL, R)
78
Organização de dados e pipelines
70
Modelagem de aprendizado de máquina
72
Comunicando descobertas
62
Contexto comercial ou de domínio
58

Estatísticas e probabilidade

Teste de hipóteses, regressão e compreensão do que um valor p ou intervalo de confiança realmente afirma - a base inferencial sobre a qual todo o resto do trabalho se baseia.

Programação (Python, SQL, R)

Escrever código fluente o suficiente para extrair, limpar e transformar dados em escala, e não apenas prototipar uma análise em um notebook que nunca mais precisará ser executado.

Organização de dados e pipelines

Transformar dados confusos e inconsistentes do mundo real — valores ausentes, registros duplicados, formatos incompatíveis — em algo que um modelo ou gráfico possa realmente usar.

Modelagem de aprendizado de máquina

Escolher, treinar e validar um modelo adequado ao problema e saber quando uma regressão simples supera uma rede neural elaborada.

Comunicando descobertas

Traduzir um resultado estatístico num gráfico, num memorando ou numa recomendação que um executivo não técnico possa seguir, sem simplificar demasiado ou enterrar a incerteza real.

Contexto comercial ou de domínio

Compreender o que uma métrica realmente significa dentro de um negócio específico ou campo científico, para que uma análise responda à pergunta que realmente foi feita.

A day in the life

Verificação de stand-up e painelExtração e limpeza de dadosAlmoçoModelagem e análiseReuniões e revisões das partes interessadasFora do horário (principalmente) 036912151821 24h
  1. 8–9 Verificação de stand-up e painel

    Revisão de execuções noturnas de pipeline e painéis de métricas principais e uma breve sincronização com a equipe sobre as prioridades do dia.

  2. 9–12 Extração e limpeza de dados

    Escrever consultas SQL em um data warehouse, unir e remodelar tabelas e lidar com valores ausentes ou inconsistentes — geralmente o maior bloco único de um dia de trabalho.

  3. 12–13 Almoço

    Uma pausa genuína e, muitas vezes, um ambiente informal onde os problemas entre as equipes são levantados antes de chegarem a uma reunião agendada.

  4. 13–15 Modelagem e análise

    Construir ou refinar um modelo estatístico, executar um teste de significância de um experimento ou investigar por que uma métrica mudou.

  5. 15–17 Reuniões e revisões das partes interessadas

    Apresentar descobertas para uma equipe de produto ou negócio, revisar os resultados de um teste A/B ou defender as suposições de uma análise sob questionamento.

  6. 17–8 Fora do horário (principalmente)

    Tempo pessoal, exceto em torno do lançamento de um produto ou de uma revisão trimestral de negócios, quando as noites podem absorver solicitações de análise de última hora.

The know-how

Craft knowledge practitioners actually pass on — not motivation.

01

Observe os dados antes de modelá-los

Trace as distribuições brutas, gráficos de dispersão e resumos simples antes de ajustar qualquer coisa - um hábito que detecta dados quebrados, erros de unidade e valores discrepantes que um modelo absorveria e ocultaria silenciosamente.

John Tukey, 'Análise Exploratória de Dados', 1977
02

Verifique se a tendência sobrevive dentro dos subgrupos

Uma tendência agregada pode ser completamente revertida quando os dados são divididos por uma categoria relevante — um padrão conhecido como paradoxo de Simpson, nomeado em homenagem a um artigo de 1951 do estatístico Edward H. Simpson.

Edward H. Simpson, artigo de 1951; fenômeno observado anteriormente por Karl Pearson e outros
03

Segure um conjunto de teste e não olhe para ele até o final

Verificar repetidamente o desempenho em relação aos mesmos dados retidos e, em seguida, ajustar o modelo, vaza silenciosamente informações desses dados para o modelo – tocá-los apenas uma vez é o que mantém o resultado final honesto.

Prática padrão, formalizada em Hastie, Tibshirani e Friedman, 'The Elements of Statistical Learning', 2001
04

Orçamente a maior parte do projeto para limpeza, não para modelagem

Projetos reais são consistentemente executados mais perto de 80% de preparação de dados e 20% de modelagem do que o inverso – planejar um cronograma em torno da suposição oposta é uma forma comum de atraso dos projetos.

Ecoado amplamente desde Steve Lohr, 'For Big-Clinical Data Scientists, "Zanitor Work" Is Key Hurdle to Insight', New York Times, 2014
05

Envie o modelo mais simples que possa funcionar primeiro

Uma linha de base – às vezes apenas uma regra ou um modelo linear – esclarece o quanto um modelo mais complexo realmente acrescenta e geralmente é bom o suficiente para ser fornecido por conta própria.

Martin Zinkevich, 'Regras de aprendizado de máquina: práticas recomendadas para engenharia de ML', Google, regra nº 4
06

Quando um padrão parece bom demais, procure a confusão

Uma correlação surpreendente é mais frequentemente um artefato de uma terceira variável oculta do que uma descoberta genuína – procure ativamente o que mais poderia explicá-la antes de apresentar um resultado.

Enraizado na tradição de design experimental de Fisher; formalizado em Judea Pearl, 'The Book of Why', 2018

Tools of the trade

Python (pandas, scikit-learn, NumPy)

A linguagem dominante para manipulação de dados e aprendizado de máquina clássico, com pandas para dados tabulares e scikit-learn para algoritmos de modelagem padrão.

SQL

A linguagem de consulta para extrair dados dos data warehouses relacionais e em nuvem — Snowflake, BigQuery, Redshift — onde realmente residem os dados da maioria das empresas.

Caderno Jupyter

O ambiente interativo padrão para análise exploratória, permitindo que um cientista de dados clínicos execute código, visualize um gráfico e faça anotações no mesmo documento.

Tableau/Power BI

Ferramentas de painéis de inteligência de negócios usadas para transformar uma análise finalizada em algo que uma parte interessada não técnica possa explorar e monitorar sem escrever código.

Git e plataformas em nuvem (AWS, GCP, Azure)

Controle de versão para código e, cada vez mais, para modelos, juntamente com a infraestrutura em nuvem que armazena dados e executa trabalhos de treinamento em uma escala que um laptop não consegue suportar.

How people fail at it

Testando até que algo seja significativo

Executar muitas comparações estatísticas e relatar apenas aquela que ultrapassa um limite de significância produz falsas descobertas que não serão replicadas – um modo de falha bem documentado conhecido como p-hacking.

Enviando um modelo que vaza o alvo

A inclusão acidental de um recurso que codifica o resultado previsto produz resultados off-line irrealisticamente fortes que entram em colapso quando o modelo é executado com dados de produção genuinamente invisíveis.

Construindo uma resposta sofisticada para a pergunta errada

Um modelo de aprendizado de máquina cuidadosamente ajustado para resolver um problema que uma simples consulta SQL ou fórmula de planilha também teria respondido, desperdiçando esforço e pode perder a questão comercial real.

Similar professions

Continue exploring

Keep exploring

More in Science & Research