O primeiro candidato a lançamento do Transformers v5 está disponível 🔥 O maior lançamento da minha vida. Já se passaram cinco anos desde o último grande (v4). De 20 arquiteturas para 400, de 20 mil downloads diários para 3 milhões. O lançamento é enorme, com tokenização (sem tokenizadores lentos!), modelagem e processamento.

Estamos a recrutar um engenheiro dedicado a um dos projetos mais importantes da equipa Transformers: 📣 escalonamento dos testes e CI 📣. Com projetos como transformers, PyTorch ou vLLM a crescer em tamanho e escopo, a configuração de testes e CI cresce ao mesmo tempo. Alguns números para colocar em perspectiva: - Transformers tem 100-150k+ testes - A suíte completa corre em 21 horas - Através de uma frota de máquinas em muitas plataformas diferentes Executar isto de forma eficiente e fiável torna-o um dos projetos mais importantes do nosso ecossistema. Exige regularmente dar um passo atrás para redesenhar e escalar o sistema. Neste papel, você trabalharia diretamente com todos os engenheiros da equipa para integrar os seus testes na sua arquitetura. Você teria uma visão geral e permitirá que os Transformers escalem ao longo dos anos que se seguem. Temos sido sortudos por ter @ydshieh a liderar este esforço; estamos à procura de uma segunda pessoa para se juntar à equipa. Se você é alguém que: - tem experiência com ML moderno - trata CI e testes como um projeto impactante por si só, em vez de um pensamento posterior - acredita numa arquitetura orientada para o crescimento, em vez de testes atómicos isolados Então, por favor, entre em contacto, adoraria conversar.

oLLM: uma biblioteca Python leve para inferência de LLM construída sobre transformers 🔥 Execute qwen3-next-80B, GPT-OSS, Llama3, em hardware de consumo. Trabalho incrível do Anuar!