Notificação de mensagem de texto para pesquisas na web

Por Kyley McGeeney e H. Yanna Yan

A popularidade das mensagens de texto cresceu nos últimos anos, levando os pesquisadores a explorar as maneiras pelas quais os textos podem ser usados ​​como ferramentas no processo de pesquisa de opinião pública. Nos EUA, pelo menos, os pesquisadores devem obter o consentimento dos entrevistados antes de serem autorizados a enviar um texto automatizado. Isso significa que as mensagens de texto não podem ser usadas em pesquisas únicas padrão do público - pesquisas em que os pesquisadores chegam a uma lista de números de telefone de amostra aleatória. As mensagens de texto também apresentam desafios de medição em termos de oferecer apenas um espaço limitado para escrever perguntas e exigir que os respondentes digitem em vez de clicarem. Embora esses fatores limitem a utilidade das mensagens de texto para se entrevistar, as mensagens de texto têm sido exploradas como um meio de alertar as pessoas para preencher uma pesquisa, por exemplo, enviando-lhes um link para uma pesquisa na web.1

Um novo estudo do Pew Research Center descobriu que o envio de notificações por texto para membros do painel de pesquisa com consentimento melhora o tempo de resposta (as pessoas respondem mais cedo, em média) e aumenta a proporção de entrevistados que completam a pesquisa em um dispositivo móvel. No entanto, isso não aumenta a taxa de resposta final em um período de campo mais longo em comparação com o envio de notificações apenas por e-mail.

Esses resultados vêm de dois experimentos conduzidos pelo Pew Research Center usando seu American Trends Panel (ATP), um grupo de pessoas com base em probabilidade e representativo nacionalmente que concordou em fazer várias pesquisas e receber mensagens de texto sobre elas. O primeiro experimento examinou o efeito do envio de um texto como uma primeira notificação para responder a uma pesquisa. O segundo experimento examinou o uso de mensagens de texto para lembrar as pessoas de fazer uma pesquisa. Essas mensagens foram enviadas vários dias após a notificação inicial.

No primeiro experimento, os painelistas da web que haviam consentido anteriormente em receber mensagens de texto (2.109 de 3.634 painelistas da web no total) foram divididos aleatoriamente em um de dois grupos: um grupo recebeu convites de pesquisa por e-mail e o outro por mensagem de texto e o email.2

Em média, os membros do painel no grupo de e-mail e texto responderam à pesquisa antes dos do grupo somente de e-mail. Essa diferença foi mais dramática no início do período de pesquisa de campo. Ao final do primeiro dia inteiro, metade (50%) do grupo de e-mail e texto havia concluído a pesquisa, em comparação com 37% do grupo somente de e-mail.

No segundo experimento, todos os painelistas da web que consentiram em receber mensagens de texto receberam convites para pesquisas por e-mail e mensagem de texto. Aqueles que não responderam após três dias foram divididos aleatoriamente em um de dois grupos: um grupo recebeu apenas lembretes por e-mail e o outro recebeu lembretes por e-mail e texto3.

Novamente, em média, os membros do painel no grupo de lembrete por texto e e-mail responderam antes do que os membros do grupo no grupo de lembrete apenas por e-mail. No 10º dia, o grupo de lembrete por texto e e-mail teve uma taxa de resposta no nível da onda de 48% contra 39% no grupo de lembrete apenas por e-mail. No entanto, não houve diferença significativa na taxa de resposta do nível de onda final ao final do período de campo.



Este relatório examina os padrões de resposta e a composição demográfica dos entrevistados em cada grupo para os dois experimentos. Também analisa de forma mais ampla quem no painel consentiu em receber esse tipo de mensagem de texto da pesquisa.

As mensagens de texto produzem respostas anteriores, mas nenhuma diferença na taxa de resposta final

Quando os membros do painel receberam convites por mensagem de texto e e-mail, eles responderam à pesquisa mais cedo no período de campo do que aqueles que receberam apenas e-mail. Na verdade, nos primeiros 30 minutos após o envio dos convites para a pesquisa, 15% do grupo de mensagens de texto e e-mail respondeu à pesquisa, contra apenas 6% do grupo de e-mail. Isso tem implicações importantes para pesquisadores de pesquisa que precisam coletar dados em um curto espaço de tempo.

Ao final do primeiro dia inteiro no campo, metade dos painelistas (50%) no grupo de texto e e-mail havia respondido, contra apenas 37% do grupo somente de e-mail. Ao final do terceiro dia, 59% do grupo de texto e e-mail havia respondido contra 49% do grupo somente de e-mail. A taxa de resposta de nível de onda mais alta no grupo de texto e e-mail continuou até o 10º dia no campo.

No entanto, com tempo suficiente no campo, a taxa de resposta do grupo somente de e-mail eventualmente alcança a do grupo de e-mail e texto. Ao final do período de campo de 20 dias, não houve diferença entre os dois grupos em termos da porcentagem que abriu a pesquisa ou da porcentagem que respondeu.

No total, 84% do grupo de e-mail e texto abriram a pesquisa contra 82% do grupo somente de e-mail, o que levou a uma taxa de resposta de 82% e 81%, respectivamente. Os 84% ​​dos painelistas de texto e e-mail que abriram a pesquisa foram 54% que abriram a pesquisa a partir do link do e-mail e 30% que abriram usando o link na mensagem de texto, pois tiveram a opção de usar qualquer um dos links.

É importante observar que se o período de campo fosse mais curto, como é típico em outras pesquisas na web, a taxa de resposta final teria sido maior para o grupo de texto e e-mail. Por exemplo, 10 dias após o início do período de campo, 78% do grupo de texto e e-mail respondeu, em comparação com apenas 74% do grupo de e-mail. Após 10 dias, a diferença entre os dois grupos diminuiu para apenas 1 ponto percentual.

Mensagens de texto levam a mais entrevistas concluídas em um smartphone

Não é de surpreender que o envio de convites por mensagem de texto incentive os entrevistados a responder à pesquisa em um smartphone.

No grupo de e-mail e texto, cerca de metade (51%) dos entrevistados completaram a pesquisa em um smartphone, em comparação com apenas um terço (33%) dos entrevistados no grupo apenas de e-mail, apesar das taxas semelhantes de propriedade de smartphone nos dois grupos .4

Em conjunto com os tablets, 57% dos entrevistados no grupo de texto e e-mail responderam à pesquisa usando um dispositivo móvel, em comparação com apenas 42% do grupo de e-mail. Isso pode ser bastante útil para pesquisadores de pesquisa que desejam aproveitar recursos de smartphones em seus estudos, como capturar GPS (com o consentimento apropriado) ou pedir aos entrevistados que tirem fotos.

Por outro lado, certos tipos de pesquisas são mais adequados para serem respondidos em um computador desktop ou laptop, como pesquisas muito longas ou que usam software não otimizado para smartphones. Para esses tipos de pesquisas, encorajar a conclusão em um dispositivo móvel pode levar a problemas de qualidade de dados ou taxas de interrupção mais altas.

Convites de mensagens de texto não distorceram a composição demográfica dos entrevistados

Demograficamente, os entrevistados no grupo de mensagem de texto e email eram virtualmente indistinguíveis dos entrevistados no grupo somente de email. Não houve diferenças entre os dois grupos em termos de sexo, idade, raça / etnia, educação, renda, filiação partidária ou urbanidade. A única diferença encontrada foi que o grupo somente de e-mail tinha mais probabilidade de não ser religiosamente afiliado (26%) do que o grupo de mensagem de texto e e-mail (21%). Mesmo limitar a análise aos respondentes dos primeiros 10 dias ainda não produz nenhuma diferença demográfica entre os dois grupos além da filiação religiosa.

Essa falta de diferença demográfica entre os dois grupos de entrevistados é encorajadora, pois há evidências de que o envio de mensagens de texto é mais popular entre certos grupos demográficos do que outros, como entre os adultos mais jovens ou aqueles com ensino superior. O experimento sugere que essas diferenças emquem manda mensagensnão resultou em diferenças emquem respondeuà pesquisa do painel quando convites de texto foram usados. Isso pode ser em parte devido ao fato de que em ambos os experimentos todos os entrevistados receberam convites por e-mail. Se, por outro lado, os respondentes só pudessem acessar a pesquisa por meio do link do texto, o efeito sobre o perfil demográfico da amostra respondente pode ter sido mais perceptível.

Nem todos os membros do painel consentem com mensagens de texto; aqueles que o fazem são demograficamente distintos

Mesmo que os entrevistados no grupo de texto e e-mail não sejam demograficamente distintos dos entrevistados no grupo apenas de e-mail, é importante observar que esses grupos consistem em membros do painel que consentiram em receber mensagens de texto. Nem todos que usam mensagens de texto realmente consentem em receber mensagens de texto em primeiro lugar Entre os adultos dos EUA, 91% possuem celulares e 74% usam mensagens de texto. (De acordo com a Pesquisa Nacional de Entrevistas de Saúde do Centro de Controle e Prevenção de Doenças, 91% dos adultos próprios celulares. Quando medido pela última vez pelo Pew Research Center em 2013, 81% dos proprietários de celulares usavam mensagens de texto. Em conjunto, pelo menos 74% dos adultos nos EUA usam mensagens de texto. Dado o aumento das mensagens de texto ao longo do tempo, isso é provavelmente uma subestimação .) E embora 98% dos membros do painel do ATP possuam telefones celulares, apenas 54% consentiram em receber mensagens de texto. É entre aqueles que consentem e aqueles que não consentem onde existem diferenças demográficas.

De acordo com a lei federal, os pesquisadores precisam de consentimento prévio para enviar mensagens de texto automatizadas a respondentes em potencial. O envio de mensagens de texto foi possível neste estudo de painel porque o consentimento foi obtido dos membros do painel antes da realização deste estudo.

Aqueles que consentiram em receber mensagens de texto da pesquisa tendem a ser mais jovens e ter uma renda mais alta do que aqueles que não consentiram. Os consentimentos têm maior probabilidade de viver em áreas urbanas e de serem democratas. É menos provável que sejam brancos ou protestantes. No entanto, não há diferença entre os que consentem e os que não consentem em sexo ou educação.

Além disso, 5% dos painelistas consentiram em receber mensagens de texto, mas não puderam receber mensagens de texto do Pew Research Center porque os textos ATP são enviados usando códigos curtos, que os painelistas bloquearam. Códigos curtos são números de telefone de cinco a seis dígitos que as empresas usam para, entre outras coisas, enviar mensagens de texto automatizadas para um grande conjunto de números de telefones celulares mais rapidamente do que se estivessem usando um número de telefone tradicional de 10 dígitos (código longo). Algumas operadoras de celular, fabricantes de dispositivos e / ou indivíduos optam por bloquear mensagens de texto enviadas a partir de códigos curtos.

Ao todo, apenas 49% dos painelistas da web puderam receber mensagens de texto da pesquisa porque tinham um telefone celular, consentiam em receber mensagens de texto e não tinham códigos de acesso bloqueados.5O Pew Research Center usa códigos curtos devido ao volume de textos enviados e às eficiências de velocidade, mas usar um código longo permitiria aos pesquisadores chegar a esses painelistas adicionais.

Textos de lembrete resultam em respostas anteriores, mas não em uma taxa geral de resposta de nível de onda mais alta

No segundo experimento, todos os entrevistados que consentiram receberam convites por mensagem de texto e e-mail para suas pesquisas. Aqueles que não responderam no terceiro dia foram randomizados no grupo de tratamento, que recebeu lembretes por texto e e-mail, ou no grupo de controle, que recebeu apenas lembretes por e-mail. Os lembretes foram enviados nos dias 4, 9 e 15 do período de campo.

Os lembretes por mensagem de texto resultaram em respostas mais precoces, embora no dia 11 o grupo de controle tenha alcançado e não fosse mais estatisticamente significativamente menor do que o grupo de tratamento. Ao final do período de campo de 20 dias, não houve diferença estatisticamente significativa na abertura final ou taxas de resposta entre o tratamento e o grupo de controle. Dito isso, o período de campo de 20 dias usado no ATP é mais longo do que na maioria das pesquisas de opinião pública. Se o período de campo tivesse sido de 10 dias, por exemplo, os lembretes de mensagem de texto teriam resultado em uma taxa de resposta de nível de onda final significativamente maior.

Mensagens de texto de lembrete distorcidas respondendo - exemplo um pouco mais antigo

Os entrevistados que receberam apenas lembretes por e-mail, mas ainda responderam à pesquisa, eram mais jovens do que os entrevistados que receberam lembretes por texto e e-mail. Do grupo que usa apenas e-mail, um quarto (25%) tinha entre 18 e 29 anos, contra apenas 15% do grupo de texto e e-mail. Isso foi inesperado por causa da popularidade das mensagens de texto entre essa faixa etária. Uma possível explicação é que os mais jovens usam mais mensagens de texto do que os adultos mais velhos, então os lembretes por mensagem de texto podem ter sido menos novos. Não houve outras diferenças demográficas entre os dois grupos de entrevistados.

As mensagens de texto agora são o protocolo padrão do American Trends Panel

Com base nos resultados desses experimentos, convites e lembretes por mensagem de texto consensuais são agora o protocolo padrão do Painel de Tendências Americanas. A próxima etapa é explorar o uso de mensagens de texto consensuais para coletar as próprias respostas da pesquisa, em vez de apenas usar textos para enviar links para pesquisas na web.

Facebook   twitter