Assistência de IA Generativa para Anúncios de Vagas em Plataforma Online de Trabalho

Reduzir o custo de criação de anúncios de vagas e facilitar a publicação de oportunidades em uma plataforma online de trabalho.

A assistência de IA generativa para anúncios de vagas foi testada entre junho e julho de 2023 em uma grande plataforma online de trabalho, com novos empregadores que iniciavam sua primeira postagem de vaga.

Meses depois, a ferramenta foi ampliada para 95% dos novos empregadores, mantendo-se uma fração aleatória sem acesso.

As informações abaixo referem-se a um estudo experimentalOs estudos experimentais utilizam mecanismos aleatórios (isto é, sorteios) para definir quem será e quem não será contemplado por um determinado programa ou política pública, garantindo que as diferenças futuras entre estes grupos possam ser atribuídas com maior credibilidade à intervenção em si — e não a diferenças entre quem é e quem não é "tratado". que utiliza dados administrativos de 180.324 novos empregadores alocados entre 7 de junho e 20 de julho de 2023, com resultados acompanhados por 14 dias após o início da criação da vaga.

A intervenção oferecia a novos empregadores, no momento em que clicavam para publicar sua primeira vaga, a opção de começar o anúncio usando IA generativa.

Quem aceitava a assistência descrevia a necessidade de contratação em uma ou duas frases, que funcionavam como prompt inicial para a ferramenta.

A partir desse prompt, a IA produzia um primeiro rascunho do anúncio, incluindo a descrição textual da vaga, habilidades requeridas e uma classificação ampla do tipo de trabalho.

O empregador podia revisar o texto, editar qualquer campo, descartar o conteúdo gerado ou usar opções automáticas de personalização, como tornar o texto mais casual, mais formal, mais curto, mais detalhado ou reescrito.

A experiência padrão da plataforma exigia que o empregador preenchesse manualmente os campos da vaga, incluindo título, habilidades, categoria, duração esperada e remuneração.

Depois de publicado, o anúncio ficava disponível para trabalhadores da plataforma, que podiam enviar candidaturas; os empregadores podiam então convidar trabalhadores, analisar candidaturas, fazer ofertas e contratar.

Foram documentadas as seguintes evidências sobre a assistência de IA generativa para anúncios de vagas:

• a assistência de IA teve alta adesão entre os empregadores tratados: 75% optaram por receber um primeiro rascunho gerado por IA e, entre os que usaram a ferramenta, 66% publicaram o texto diretamente, sem edições [1];
• a ferramenta reduziu o tempo de elaboração dos anúncios de vaga [1];
• empregadores tratados que publicaram uma vaga gastaram 44% menos tempo escrevendo o anúncio, uma redução de 3,6 minutos em relação à média de 8,1 minutos no grupo sem a assistência [1];
• houve aumento na publicação de vagas pelos novos empregadores [1];
• a probabilidade de publicar uma vaga aumentou 6 pontos percentuaisO efeito de um programa em termos percentuais (%) é diferente do efeito do programa em pontos percentuais! Por exemplo, se uma variável binária teria média de 10% na ausência da iniciativa, um impacto de 5 pontos percentuais representa um aumento de 50% (=5/10)., de 30% para 35%, equivalente a um aumento de 19% [1];
• o efeito variou por categoria de trabalho, indo de 13% em engenharia e arquitetura a 44% em suporte administrativo [1];
• apesar do aumento no número de vagas, não foram encontradas evidências de aumento na probabilidade total de contratação pelos empregadores tratados [1];
• a conversão de vagas em contratações caiu entre os anúncios publicados por empregadores tratados [1];
• condicional à publicação da vaga, a probabilidade de contratar caiu 3,4 pontos percentuais, de 22% para 19%, uma redução de cerca de 15% [1];
• os empregadores tratados também foram menos propensos a fazer ofertas e, quando faziam ofertas, elas tinham menor probabilidade de serem aceitas [1];
• os anúncios gerados com assistência de IA atraíram mais candidaturas, mas não geraram mais contratações [1];
• condicional à publicação, vagas tratadas receberam em média 0,83 candidatura adicional, a partir de uma base de 15,6 candidaturas por vaga [1];
• as vagas tratadas receberam mais candidaturas de trabalhadores recomendados pela própria plataforma, indicando que a ausência de contratações adicionais não parece decorrer de pior qualidade observável do conjunto de candidatos [1];
• a ferramenta reduziu a informatividade dos anúncios e enfraqueceu sinais de seriedade dos empregadores [1];
• os anúncios tratados foram semanticamente mais semelhantes entre si e tiveram distribuição de tamanho mais comprimida [1];
• empregadores tratados foram mais propensos a deixar a vaga expirar sem contratar e relataram com maior frequência que a vaga havia sido publicada por acidente [1];
• a maior parte da queda na eficiência de contratação foi explicada por vagas marginais de empregadores com menor intenção de contratar, mas também houve efeito negativo entre vagas que provavelmente seriam publicadas mesmo sem a ferramenta [1];
• a contabilidade de custos de tempo indicou perda líquida de bem-estar: a economia de tempo dos empregadores foi estimada em US$0,41 por empregador tratado, enquanto o custo adicional de tempo imposto aos trabalhadores foi estimado em US$2,57, resultando em perda líquida de US$2,16 por empregador tratado [1];
• após a ampliação da ferramenta para 95% dos novos empregadores, o aumento na publicação de vagas se atenuou, mas a redução na probabilidade de contratação condicional à publicação persistiu [1].

Em síntese, a assistência de IA generativa reduziu o tempo necessário para criar anúncios e aumentou a publicação de vagas por novos empregadores. No entanto, esse aumento não se traduziu em mais contratações. Ao contrário, entre as vagas publicadas, a probabilidade de contratação caiu, e os trabalhadores passaram a dedicar mais tempo a candidaturas que não resultaram em vínculos. A experiência sugere que ferramentas de IA generativa podem reduzir custos de entrada em plataformas de trabalho, mas também podem gerar anúncios menos informativos, aumentar vagas marginais e reduzir a eficiência do pareamento quando facilitam publicações de empregadores com baixa intenção de contratar.