브레이즈

데이터 마케팅에서 A/B 테스트란 무엇일까?🧪

Team MAXONOMY 2024.06.13

데이터 마케팅에서 A/B 테스트란 무엇일까?🧪

마케팅 업무를 하다 보면 디테일한 선택이 고민된 적이 있을 것입니다. 예를 들어 푸시 메시지에 느낌표를 붙여야 할지, 메시지가 좀 더 간결하고 짧아야 할지, 웹사이트 배너에는 어떤 색이 적절할지 등이 있죠.


누군가에선 별로 중요해보지 않을 수 있지만 이런 디테일한 요소 하나로 마케팅 캠페인의 성공과 실패가 나뉘기도 합니다. 문제는 이런 요소를 열심히 고민하다고 해서 확실한 답을 찾을 수 없다는 것입니다. 어떤 선택지가 정답일지 알 수 없다는 것이죠. 그렇다면 우리가 할 수 있는 것이 없는 것일까요?


아니요! 그렇지 않습니다. 바로 테스트를 진행하는 것입니다. 우리에게 잘 알려진 A/B테스트와 다변량 테스트를 진행하여 정답을 찾아갈 수 있습니다.







데이터 마케팅에서 말하는 테스트란? (AB 테스트란?)


데이터 마케팅, CRM, 그로스 분야에서 말하는 테스트란, 보통 메시지 캠페인을 다양하게 변형하고 비교하는 것을 의미합니다. 메시지 문구, 색상, GIF 사용 유무와 같은 사소한 요소부터 심지어 제공 혜택 자체에서 차별을 두고 테스트를 할 수도 있습니다. 그리고 어떤 케이스가 반응이 가장 좋은지 데이터를 얻을 수 있습니다. 이를 통해 전체 고객에게 캠페인을 실제로 실시하기 이전에 가장 효과적인 구성을 알아낼 수 있습니다.





테스트에는 어떤 종류가 있나요?


A/B테스트, 다변량 테스트, 분할 테스트, 사용자 테스트, 설문 조사 등 여러 가지 유형의 테스트가 있으며, 이들 모두 동일한 목표를 가지고 있습니다. 바로 캠페인을 본격적으로 실행하기 이전에 유저에 대한 데이터 샘플을 먼저 채취하는 것입니다. CRM 분야에서는 A/B테스트와 다변량 테스트를 주로 다루고 있습니다.


  • A/B 테스트: 굉장히 직관적인 이름인데요. 말 그대로 캠페인의 "A 버전"과 "B 버전"을 테스트하는 것입니다. 이 테스트의 가장 큰 강점은 바로 심플함입니다. 하나의 캠페인에 대해 하나의 변수를 테스트할 수 있습니다. 예를 들어, "지금 구매하시면 50% 할인!"이라고 적힌 이메일 제목과 "오늘 딱 하루만 반값"이라고 적힌 이메일을 동시에 발송하고 어떤 쪽이 반응이 좋은지 확인해볼 수 있습니다.
  • 다변량 테스트(MVT : multivariate test): 다변량이란 "여러 개의 변수"를 의미합니다. A/B 테스트가 하나의 변수를 테스트하는 반면, 다변량 테스트는 여러 변수가 테스트합니다. 예를 들어, 이메일 제목과 CTA 버튼의 컬러가 어떤 영향을 미치는지 테스트한다면, 아래와 같이 네 가지의 이메일 케이스가 나올 것 입니다.




A/B 테스트가 캠페인의 개별적인 측면에 대한 예/아니오를 알 수 있는 반면, 다변량 테스트는 보다 다양한 케이스를 테스트할 수 있으며, 각 변수들이 어떻게 상호 작용하는지까지 알 수 있습니다. A/B테스트에서는 반응이 좋지 않았던 이메일 제목과 CTR컬러였는데, 다변량 테스트를 해보니 둘 사이에 의외의 시너지 효과가 있는 걸 확인할 수도 있겠죠.






얼마나 많은 유저에게 테스트해야하나요?


너무 많은 대상에게 테스트를 한다면, 테스트를 진행하는 의미가 없겠죠. 반대로 너무 적은 대상에게 테스트를 하면 신뢰도가 낮은 데이터를 얻을 가능성이 높습니다. 그래서 적절한 양의 데이터를 수집하는 것이 중요합니다. 일반적으론 10%가 적절한 수치입니다. A/B테스트를 한다면 메시지 A를 전체 사용자의 10%에게 보내고 메시지 B를 또 다른 10%에게 보내는 것을 권고합니다. 그런 다음 메시지 A의 반응이 더 좋으면, 나머지 80%의 사용자에게 메시지 A를 보내는 것이죠. 전체 유저의 10%는 통계적으로 유의미한 결과를 도출하는 것으로 알려져있지만 항상 그런 것은 아닙니다. 상황에 따라서는 더 깊은 고급 통계 방법을 사용해야할 수 있습니다.


다변량 테스트는 A/B 테스트에 비해 더 많은 테스트 트래픽량을 요구합니다. 기본적인 트래픽이 매우 많은 캠페인의 경우, 다변량 테스트를 시도해볼 수 있겠지만, 기본적으로 많은 트래픽을 테스트에 사용하기 때문에 최적화된 메시지를 받은 유저가 적어진다는 점은 감안해야 합니다.






적절한 테스트 주기는?


메시지 캠페인이 실시되는 한, 테스트는 계속 이루어지는 것이 좋습니다. 실제로, 지속적으로 캠페인 성공하는 기업은 지속적인 테스트를 진행하는 것으로 나타났습니다. 물론 일시적인 테스트를 진행하는 것도 가치가 있겠지만, 정기적으로 테스트를 실시하고 데이터를 지속적으로 확보한다면, 어떤 요소가 효과적이고, 앞으로 무엇을 더 테스트해봐야 하는지 꽤 잘 파악하게 될 것입니다.






실제 테스트는 어떻게 할 수 있나요?


Braze와 같은 CRM솔루션을 이용하면 손쉽게 테스트를 진행할 수 있습니다. Braze의 Canvas는 전체 캠페인을 한 눈에 볼 수 있게 해줍니다. 이를 통해 고객 접촉에 필요한 다양한 단계와 메시지를 쉽게 확인할 수 있습니다. 이러한 인터페이스는 테스트를 더욱 쉽게 만들어, 실시간으로 개선점을 찾을 수 있도록 도와주죠. 여러 구성원과 함께 복잡한 코딩 없이도 캠페인과 테스트를 관리할 수 있습니다. 다음은 일반적으로 A/B테스트를 진행하는 방식입니다.


  • 마케팅 캠페인 생성하기 (ex. 이메일 캠페인을 만들기)
  • 해당 캠페인 내에서 변형 케이스 만들기 (ex. 파란색 CTA이 있는 이메일과 빨간색 CTA이 있는 이메일을 각각 만들기)
  • 캠페인 일정 설정하기 (ex. 내일 오전 9시 발송)
  • 캠페인 타겟 세그먼트 설정
  • 해당 세그먼트 내에서 테스트 대상 분류하기 (ex. 10%에게는 파란 CTA, 다른 10%에게는 빨간 CTA 발송)
  • 캠페인 KPI 설정 (ex. 전환율, 클릭률 등 더 좋은 케이스를 판별하기 위한 기준 설정)
  • 최종 검토, 실행, 결과 확인





마치며


A/B 테스트(혹은 다변량 테스트)를 고객의 마음을 이해하는 데 정말 큰 도움이 됩니다. 얻을 수 있는 가치에 비해 실행하기도 쉽죠. 단순히 직관에 의존하는 마케팅 방식에서 벗어나, 꼭 여러분의 마케팅에도 테스트를 접목해보시길 바랍니다.







콘텐츠 더 읽어보기

logo

팀맥소노미

YOUR DIGITAL MARKETING HERO

비즈니스 성장을 위한 최적의 솔루션과 무료 데모 시연, 활용 시나리오를 제안 받아보세요

관련 글 보기

외부 채널을 활용한 캠페인 : 문자메세징 솔루션

외부 채널을 활용한 캠페인 : 문자메세징 솔루션

 고객들은 다양한 채널을 통해 다양한 서비스를 소비하고 있습니다. 과거 정규방송 4개 채널을 통해 접하던 세계가 이제는 내 손안에 작은 세상이 되었지요. 단순한 텍스트를 넘어, 사진과 동영상 컨텐츠가 다양한 채널에서 범람하는 시기에 우리가 운영하는 앱을 통해 제공되는 채널만 이용하는 것은 강력한 무기를 구해두고도 단련한 육체 만으로 싸우는 모습이 될 것입니다. 이메일이나 외부 광고 채널도 이용하고 계신다구요? 요리마다 어울리는 플레이팅이 있듯이, 고객들의 눈을 사로잡을 메세지를 전달하기 위해서는 타겟군에 적합한 다양한 "채널"이 준비되어 있어야겠지요. 어쩌면 이미 문자나 카카오톡 등 다양한 채널을 사용하고 계실 수 있을 거에요. 그렇다면 그 모든 채널을 Braze라는 하나의 플랫폼을 통해 전송해 보시는 건 어떨까요? 고객의 행위 기반으로 개인화된 메세지를 제공할 수 있으며, 푸시에 반응하지 않는 고객들에게만 문자를 전송하여 문자 발송 비용을 감소 시키는 등 상호 보완적으로 채널을 관리 할 수 있을 것입니다.Braze로 개인화된 문자메세지를 전송하기준비사항1. 우선 문자메세지 서비스를 제공하는 업체와 계약이 필요해요. 문자메세지는 이통 3사에서 판매되는 서비스인데, 보통 메세징 파트너 사를 통해 제공하고 있습니다. 본 글에서는 CJ에서 서비스하는 mPlace 이용하여 연동을 진행 하였습니다.- 메세징 서비스가 준비 되었다면 여러분은 설치된 클라이언트를 통해서 문자를 보내실 수도 있으며, 제공되는 REST API로 요청을 전달하는 방식으로 문자를 서버단에서 직접 전달하시는 것도 가능하게 됩니다. 이전 포스트에서 이미 REST API로 전달하는 방법을 소개하였으니 이번에는 설치된 클라이언트를 통해 구성하는 방법으로 진행해 보지요.2. 개발단에서는 Braze에서 문자메세지 발송을 요청하면 그것을 받아, 내부 메세징 클라이언트로 전달해 줄 수 있도록 데몬 서버 구성이 필요합니다.일반적으로 고객들의 전화번호 정보를 Braze 상에 올리시기 어려우실 경우, 전달된 고객의 external_id와 매칭되는 전화번호를 찾고, Braze에서 전달된 문자 내용과 함께 메세징 클라이언트에 적재하는 작업을 수행하게 됩니다.3. 데몬서버 구성이 완료 되었다면, 구현된 스펙에 대해 템플릿 구성이 필요합니다.코드에 대한 이해도가 높지 않은 마케터 분들께서 활용하실 수 있도록 필요한 메세지를 넣어야 하는 부분을 알려주세요.(가장 간단한 형태로 구성한 샘플 템플릿이며, 필요에 따라 추가 정보 전달도 가능합니다.)메세지 발송하기개발단의 작업이 완료 되었다면, 이제는 마케터 분들께서 캠페인을 구성하여 실제 문자를 발송하실 수 있습니다.Braze에서 기본적으로 제공하는 채널이 아닌 경우, Webhook 캠페인으로 전송하게 됩니다.개발단에서 미리 만들어 두신 템플릿을 선택하시고, 거기에 문자에 전달할 내용만 변경해 보세요.메세지를 구성할 때는 기존과 같이 개인화(Liquid) 구성이 가능하다는 점 참고하시어 개인화된 메세지로 구성해 보세요.(실 발송 테스트 진행 시 활용한 템플릿으로써, 일반적으로 고객에게 전달되는 문구 부분 "message"만 수정하게 됩니다.)메세지 구성이 완료 되었다면 이제 끝입니다! 나머지 Delivery, Target User 와 같은 나머지 단계는 기존에 수행하였던 푸시 캠페인과 동일하게 작성하시면 됩니다.개발단에서 데몬서버를 구성해 주신다면 문자 메세지도 고객들이 원하는 시점에, 원하는 내용으로 개인화하여 전달이 가능하며,모든 고객들에게 문자를 전달하는 것이 아닌, 무료로 전달 가능한 푸시 캠페인이 도달하지 못하는 고객들에게만 전달하여 비용을 절감 한다던가, 앱으로의 재유입을 유도할 수도 있을 것입니다. 문자메세지를 배치성으로 일괄 발송하고 계시지는 않으신가요? 이미 푸시로 전달했던 내용을 다른 채널에도 중복으로 전달하고 계시지는 않으신지요?마치며 고객에게 개인화된 메세지를 보내는 방식은, 메세지가 범람하는 오늘같은 시기에는 무시해선 안될 기본적인 사항이 되어가고 있습니다. 우리 서비스에서는 어떤 채널을 활용하여 고객들과 소통하고 있는지, 각 채널들은 적절하게 관리되고 있는지, 같은 고객에게 불필요한 메세지가 전달되고 있지는 않는지 다시 한번 체크해 보세요.

Tiket.Com 사례 : COVID-19 상황에서 활용한 크로스 채널 메세징

Tiket.Com 사례 : COVID-19 상황에서 활용한 크로스 채널 메세징

최신정보를 전달하기 위한 노력

Google 쿠키리스 연기와 퍼스트파티 데이터의 미래🍪

Google 쿠키리스 연기와 퍼스트파티 데이터의 미래🍪

쿠키리스(쿠키 중단)란?쿠키리스(쿠키 중단)란, 웹사이트가 사용자의 정보를 추적하고 맞춤형 경험을 제공하는 데 쿠키를 사용하지 않는 방식을 의미합니다. 여기서 쿠키란, 웹사이트가 사용자의 방문 정보를 기억하는 기술인데요. 만약 여러분이 쿠키를 허용한채로 각종 웹사이트에 방문한다면, 그 방문 정보는 여러분의 컴퓨터 혹은 디바이스에 작은 텍스트 파일 형태로 저장되고, 이 텍스트 파일을 현재 방문 중인 웹사이트나 다른 웹사이트에서 읽고 참고할 수 있습니다.쿠키는 크게 퍼스트파티 쿠키와 서드파티 쿠키가 있는데요. 퍼스트파티 쿠키란 웹사이트 운영자가 직접 생성하고 관리하는 쿠키로 로그인 상태 유지, 사용자 설정 저장, 장바구니 정보 유지 등 사용자 입장에서 꽤 유용한 기능을 제공합니다. 서드파티 쿠키(타사 쿠키)란 사용자가 방문한 웹사이트와는 다른 도메인에 의해 설정되는 쿠키를 말합니다. 이번 쿠키 퇴출의 가장 중심 도마에 올라와 있는 것이 바로 이 서드파티 쿠키인데요.  (서드파티 데이터 더 자세히 알아보기) 예를들어 A라는 온라인 쇼핑몰에서 '빨간 티셔츠'를 조회하였는데, 이후 다른 웹사이트 B를 방문하니 유사한 빨간 티셔츠 광고가 노출되었던 경험 다들 한번씩 있을 것입니다. 이것이 바로 쿠키를 사용한 광고입니다. A 웹사이트를 방문하였을 때, 여러분의 컴퓨터에 '빨간 티셔츠를 조회하였음'이라는 텍스트 파일이 저장되고, B 사이트에서는 이 파일을 읽은 후, 맞춤 광고를 노출한 것이죠.이렇게 사용자의 행적을 추적하다보니 타사 쿠키에는 여러 프라이버시 및 규제 이슈가 있습니다. 기본적으로 대부분의 사용자가 프라이버시 측면에서 쿠키에 대한 반감이 있으며, GDPR(유럽 일반 데이터 보호 규정), CCPA(캘리포니아 소비자 개인정보 보호법) 등은 사용자 데이터 수집 및 사용에 대한 엄격한 규제를 도입하고 있는 상태이죠.전 세계적으로 지배적인 점유율을 가진 크롬 웹 브라우저 및 안드로이드 OS를 서비스하는 구글은 이 쿠키 기술에 대한 막중한 책임이 있는 것입니다.쿠키 삭제 정책은 왜 연기 되었나요?쿠키의 역사쿠키리스 정책에 대해 이해하기 위해서는 먼저, 쿠키와 고객 데이터 수집의 역사를 알아보아야 합니다. 인터넷이 생긴 초창기에 타사 쿠키는 디지털 마케팅의 핵심적인 역할을 수행했습니다. 고객 데이터를 힘들게 직접 수집하지 않고도 각 개인의 탐색 행동과 선호도를 이해하여 고객 인사이트를 얻고 광고 타겟팅이 가능했죠.당시는 데이터 수집과 활용에 대한 부작용을 크게 인지하지 못했던 시기라 쿠키가 번창할 수 있었지만, 앞서 말한 것과 같이 최근에는 프라이버시 및 각종 규제 이슈가 붉어졌고, 결국 2020년 구글은 2년 내에 크롬에서 타사 쿠키 지원을 단계적으로 중단하겠다고 발표했습니다.이 발표로 디지털 마케팅 업계는 완전히 변했습니다. 우선, 동의 없이 데이터를 수집하고 사용하는 것에 소비자가 불편함을 느낀다는 사실을 깨닫기 시작했습니다. 일부 미래지향적인 기업은 퍼스트파티 데이터를 수용하고 고객 데이터 수집에 대한 접근 방식을 재설계하기 시작했습니다.쿠키 삭제 정책 연기 이유구글이 쿠키 삭제 정책을 연기하는 이유는 정확히 알 수 없지만, 쿠키를 중단한다면, 광고 매출이 중심인 구글 스스로가 가장 큰 타격을 입을 것이고, 그런 쿠키를 대체할만한 마땅한 해결책을 아직 찾지 못해서인 것으로 보입니다.구글은 2020년 발표 이후, FLoC(Federated Learning of Cohorts)라는 기술을 도입하여 서드파티 쿠키를 대체하려 하였습니다. FLoC란, 사용자를 비슷한 관심사와 행동을 가진 그룹(코호트)으로 묶어 광고주가 특정 그룹을 대상으로 광고를 제공할 수 있게 하는 기술입니다. 기존 쿠키의 마케팅적인 이점을 유지하면서 개인 프라이버시를 보호하는 하는 것이 FLoC의 핵심입니다. 하지만, 여전히 사용자의 브라우징 패턴을 기반으로 한다는 점과 코호트의 크기 및 구성에 따라 개인 식별의 위험이 존재할 수 있다는 한계가 있었습니다. 또한 광고주 입장에서 기존의 쿠키만큼의 효과를 발휘할 수 있을지도 의문이었습니다. 광고주와 사용자 둘다 만족시키는 것은 결코 쉽지 않은 일이었습니다.이 때문에 구글은 마감일을 세 번이나 연기하였고, 가장 최근에는 타사 쿠키의 지원 중단이 2025년 말에 이루어질 것이라 발표하였습니다. 심지어 7월 22에 있었던 발표에서는 쿠키 지원 중단을 철회할 수도 있는 것같은 발언을 하였습니다. 구글은 사용자 선택권을 높이는 접근 방식을 제안한다며, 타사 쿠키를 중단하는 대신 Chrome에서 사람들이 웹 브라우징 전반에 적용되는 정보에 입각한 선택을 할 수 있도록 하는 새로운 환경을 도입하고 언제든지 그 선택을 조정할 수 있다고 말했습니다.퍼스트 파티 데이터의 미래지금까지의 상황을 살펴보면, 크롬에서 타사 쿠키가 사라질 가능성은 적어도 단기적으로는 낮아 보이며, 앞으로 중장기적으로 유지될 가능성도 있지만 퍼스트파티 데이터로의 전환 흐름은 근본적으로 변하지 않을 것입니다.우선 Apple과 같은 Google 이외의 기업은 이미 타사 데이터 수집 관행에서 벗어나고 있으며, EU 등 지역 규제 기관은 앞으로도 타사 데이터를 사용한 마케팅을 제한할 가능성이 높습니다. 소비자 역시 마찬가지로 본인의 행적을 추적당하는 것을 원하지 않습니다.실제로 웹사이트에서 쿠키를 수락할지 여부를 물어봤을 때 대부분이 거절을 선택하였죠. Apple이 AppTrackingTransparency(ATT) 프레임워크를 도입하면서 소비자에게 유사한 선택권을 제공한 후, 약 4분의 1의 사용자만이 타사가 데이터를 추적하도록 허용했고, 이는 기존 방식의 광고 타겟팅을 상당히 제한했습니다. 따라서 Google이 소비자에게 추적 여부 선택 권한을 부여하는 전략을 추진한다면, 타사 쿠키가 공식적으로 중단되지 않고도 서서히 사라질 것입니다.이 때문에 지금도 Google은 소비자 프라이버시를 유지하면서도 개인화된 소비자 경험을 제공하는 방법을 찾기 위한 노력하고 있을 것입니다. 만약 아직도 타사 쿠키에 의존한 마케팅에 의존하고 있으시다면, 안도감에 빠지지 마세요. 시간적 여유가 더 생긴 것은 맞지만, 타사 쿠키의 의존도를 줄여야 한다는 사실은 여전히 동일합니다. 지금 당장 타사 데이터를 사용하지 말라는 의미는 아닙니다. 데이터 접근 방식의 중심을 퍼스트파티 데이터로 조금씩 옮김으로써, 지속 가능한 데이터 마케팅 환경을 구축해야 합니다.자체 데이터 전략 구축법마케팅의 기초적인 부분부터 타사 쿠키에 의존해 온 기업의 경우, 서드파티 데이터 없이 마케팅 활동을 하는 것이 불가능하다고 느낄 수도 있습니다. 하지만 자체 데이터 구축을 한 단계씩 수행하고 이에 필요한 유용한 도구와 전략을 확인한다면 자체 데이터가 더 나은 수익과 결과를 가져올 수 있다는 것을 느낄 겁니다.Boston Consulting Group의 보고서에 따르면 퍼스트파티 데이터는 실제로 최대 2.9배의 수익 증가와 1.5배의 비용 절감 효과를 보였습니다. 다음으 퍼스트 파티 데이터 전략을 구축하기 위한 할 세 가지 핵심 사항이 입니다.1. 퍼스트파티 데이터를 통합, 활성화, 배포할 수 있는 기술 확보퍼스트파티 데이터는 서드파티 데이터보다 더 정확하고 관련성이 높은 경향이 있습니다. 소비자가 직접 정보를 공유하고 주요 행동을 기반으로 수집되기 때문입니다. 하지만 이를 효과적으로 활용하기 위해서는 적절한 기술이 필요합니다. 현재의 기술을 사용하여 퍼스트파티 데이터를 수집, 통합, 활성화, 배포할 수 있는지 확인해보세요.대표적으로 Braze같은 솔루션은 SDK와 API를 사용하여 모바일 앱, 웹사이트, POS 등에서 고객이 무엇에 관심을 가지고 있고, 어떤 기능을 사용하는지 실시간으로 정보를 수집할 수 있습니다. Braze의 데이터 플랫폼은 주요 데이터 웨어하우스, 디지털 자산, 기업 자체 시스템과 연결을 지원하여 퍼스트파티 데이터의 전체 스펙트럼을 확대하고 더 깊은 인사이트를 얻을 수 있으며, 마케팅 채널 전반에 걸쳐 개인화된 메시지와 디지털 경험을 제공할 수 있습니다.2. 마케팅 채널 통합타사 쿠키에 오랫동안 의존했을 때 발생하는 부작용 중 하나는 마케팅 채널이 타사 쿠키를 사용하는 유료 채널과 그 외의 이메일, 푸시 알림, SMS와 같은 자체 채널 간의 데이터 사일로입니다. 이러한 사일로는 마케팅 업무에 있어서 불편할 뿐만 아니라 각종 비용을 증가시키고 성과에 악영향을 미치며, 고객 경험에도 부정적인 영향을 미칩니다.퍼스트파티 데이터에 집중하는 방향으로 이동하면 이러한 사일로를 해소하고 마케팅 채널을 원활하게 연결하여 사용자에게 통합된 경험을 제공할 수 있습니다. Braze의 Audience Sync 기능은 마케터가 Braze 내에서 퍼스트파티 데이터를 쉽게 사용하고 각종 광고 플랫폼과 연결하여 통합된 마케팅 관리를 가능하게 합니다.3. 고객 자발적 데이터 수집퍼스트파티 데이터 전략으로 전환한 기업이 가장 흔하게 저지르는 실수는 고객이 자발적으로 데이터 제출하도록 환경을 구축하지 않는다는 것입니다. 설문 조사 및 기타 프롬프트에 대한 응답으로 고객이 직접 공유하기로 선택한 데이터는 자신의 경험에 대한 의견을 제시할 수 있는 기능을 제공할뿐만 아니라, 이를 통해 각 개인의 진술 선호도에 따라 제공하는 경험을 더욱 세분화할 수 있습니다. 아직 어떻게 시작해야 할지 모르겠나요? 다음 Braze 활용법을 참고하여 데이터 수집 프로세스를 설계해보세요.앱 내 또는 브라우저 내 메시지 설문 조사: Braze를 사용하면 제품 내 설문 조사를 쉽게 구축 할 수 있어 모바일 앱이나 웹 페이지를 방문하는 모든 사용자에게서 핵심 질문을 표면화하고 응답 데이터를 수집할 수 있습니다.랜딩 페이지: 웹 랜딩 페이지와 내장된 양식 지원을 활용하여 고객에게 맞춤 경험을 제공하고, 고객 메시징과 연결하며, 시간이 지남에 따라 더 강력한 관련 정보를 직접 수집할 수 있습니다. 예를들어, OTT 서비스에 처음 가입한 사용자에게 선호하는 영화나 장르를 선택하게 하고 이후 맞춤형 콘텐츠 추천을 하는 것이 있습니다.마치며Google의 발표로 타사 쿠키에 대한 미래가 조금 모호해졌지만 그럼에도 장기적인 그림은 명확합니다. 소비자와 마케터 모두 쿠키에서 벗어나려고 노력할 것이며, 앞으로의 기업 경쟁력을 확보하기 위해선 자체적인 데이터 접근 방식이 필수적입니다. 만약 쿠키 중심의 마케팅 활동을 수행하고 있었다면, 조금씩 벗어나 퍼스트 파티 데이터로 중심을 옮기도록 노력해야 하며, 자체 데이터 전략을 구축할 수 있도록 내부적인 시스템을 개선하고, 이에 필요한 적절한 도구를 선택해야 할 것입니다.

메시지 전송 시간 개인화(Delivery-time Personalization)에 대한 이해

메시지 전송 시간 개인화(Delivery-time Personalization)에 대한 이해

마케터에게 사용자 참여 행동의 흐름을 이해하는 것은 고객이 마케팅 메시지를 수용할 가능성이 가장 높은 시간에 수신하도록 하는데 중요한 부분입니다. 그러나 모든 사람에게 적용되는 하나의 패턴이 없다는 게 문제죠. 일부 소비자는 아침에 깨어 난 후 가장 먼저 이메일을 읽을 수 있고, 다른 소비자는 점심 시간에 푸시 알림을 확인하는 경향이 있을 수 있습니다. 전송 시간 개인화 기능을 활용하면 개인별 메시지 캠페인을 맞춤화하여 정확한 순간에 개별 사용자에게 도달할 수 있습니다.시간을 잊지 마세요개인화를 생각할 때 메시징의 "어떻게"와 "무엇을"에만 집중하기가 쉽습니다. 소비자가 이메일 또는 푸시 알림에 더 많이 응답하는지? 참여와 유지를 가장 많이 유도하는 콘텐츠 유형은 무엇인지? 어떤 문구나 이미지가 주목을 끌지? 이러한 질문은 개인이 메시징과 상호 작용하는 경향이 있을 때엔 중요할 수 있습니다. 하지만 고객의 휴대폰에는 최근 받은 편지함과 알림 목록이 넘쳐나고 있으며, 조사 결과에 따르면 소비자의 78% 는 수신한 내용이 방해가 된다고 느끼게 되면 메시지 수신을 거부하거나 앱을 제거하는 것으로 나타났습니다.개별 사용자마다 고유한 참여 패턴을 가질 수 있습니다.일시적일 수 있지만 사용자 경향을 식별하는 것은 가능성이 높고 매우 효과적입니다. Braze의 전송 시간 개인화 기능으로 브랜드는 고객이 하루 중 여러 유형의 메시징과 언제 가장 높게 상호 작용하는 지를 각 채널로 드릴 다운할 수 있습니다. 예를 들어, 한 소비자가 아침에는 이메일을 읽고 클릭할 가능성이 더 높지만 다른 소비자는 밤에 황금 시간대 TV를 시청하는 동안 그렇게 하는 경향이 있는 경우 브랜드는 이 두 소 비자에게 특정 시간에 특정 채널을 활용하여 메시지를 전달할 수 있습니다. 시간을 최대한 활용하세요.물론 전송 시간 개인화는 완전한 해결책이 아닙니다. 특정 사용자 행동과 관련이 있거나 연말연시 세일과 같은 프로모션은 더 빨리 전송되는 것보단 늦게 전송되는 것이 좋습니다. 긴급하게 처리해야 하는 메시지와 전송 시간 개인화에 가장 적합한 메시지를 결정하는 것은 마케팅 담당자의 몫입니다.좋은 소식은 Intelligent Timing과 같은 도구로 특정 메시지를 보내는 건 가장 좋은 시기를 판단할 때 단편적인 추측을 없애고 포괄적인 데이터 분석을 활용하여 개별 소비자의 개인 습관을 파악하는 프로필을 생성한다는 것입니다.마무리하며하나의 메시징 채널이 모든 소비자에게 똑같이 효과적일 수 없는 것처럼, 모든 소비자가 참여할 준비가 된 상태에서 균일한 전송 시간을 잡을 수는 없습니다. 메시징과의 사용자 상호 작용에서 시간을 변수로 추적하면 불편을 느끼는 순간 누군가에 보내져 그간의 노력을 낭비하지 않도록 할 수 있습니다.동적 개인화가 메시징의 도달 범위, 침투 및 효과를 극대화할 수 있는 방법에 대한 자세한 내용은 Braze 개인화 가이드를 확인하십시오.

마케팅 업무를 하다 보면 디테일한 선택이 고민된 적이 있을 것입니다. 예를 들어 푸시 메시지에 느낌표를 붙여야 할지, 메시지가 좀 더 간결하고 짧아야 할지, 웹사이트 배너에는 어떤 색이 적절할지 등이 있죠.


누군가에선 별로 중요해보지 않을 수 있지만 이런 디테일한 요소 하나로 마케팅 캠페인의 성공과 실패가 나뉘기도 합니다. 문제는 이런 요소를 열심히 고민하다고 해서 확실한 답을 찾을 수 없다는 것입니다. 어떤 선택지가 정답일지 알 수 없다는 것이죠. 그렇다면 우리가 할 수 있는 것이 없는 것일까요? 


아니요! 그렇지 않습니다. 바로 테스트를 진행하는 것입니다. 우리에게 잘 알려진 A/B테스트와 다변량 테스트를 진행하여 정답을 찾아갈 수 있습니다.







데이터 마케팅에서 말하는 테스트란? (AB 테스트란?)


데이터 마케팅, CRM, 그로스 분야에서 말하는 테스트란, 보통 메시지 캠페인을 다양하게 변형하고 비교하는 것을 의미합니다. 메시지 문구, 색상, GIF 사용 유무와 같은 사소한 요소부터 심지어 제공 혜택 자체에서 차별을 두고 테스트를 할 수도 있습니다. 그리고 어떤 케이스가 반응이 가장 좋은지 데이터를 얻을 수 있습니다. 이를 통해 전체 고객에게 캠페인을 실제로 실시하기 이전에 가장 효과적인 구성을 알아낼 수 있습니다.

 





 

테스트에는 어떤 종류가 있나요?


A/B테스트, 다변량 테스트, 분할 테스트, 사용자 테스트, 설문 조사 등 여러 가지 유형의 테스트가 있으며, 이들 모두 동일한 목표를 가지고 있습니다. 바로 캠페인을 본격적으로 실행하기 이전에 유저에 대한 데이터 샘플을 먼저 채취하는 것입니다. CRM 분야에서는 A/B테스트와 다변량 테스트를 주로 다루고 있습니다.





A/B 테스트가 캠페인의 개별적인 측면에 대한 예/아니오를 알 수 있는 반면, 다변량 테스트는 보다 다양한 케이스를 테스트할 수 있으며, 각 변수들이 어떻게 상호 작용하는지까지 알 수 있습니다. A/B테스트에서는 반응이 좋지 않았던 이메일 제목과 CTR컬러였는데, 다변량 테스트를 해보니 둘 사이에 의외의 시너지 효과가 있는 걸 확인할 수도 있겠죠.






얼마나 많은 유저에게 테스트해야하나요?


너무 많은 대상에게 테스트를 한다면, 테스트를 진행하는 의미가 없겠죠. 반대로 너무 적은 대상에게 테스트를 하면 신뢰도가 낮은 데이터를 얻을 가능성이 높습니다. 그래서 적절한 양의 데이터를 수집하는 것이 중요합니다. 일반적으론 10%가 적절한 수치입니다. A/B테스트를 한다면 메시지 A를 전체 사용자의 10%에게 보내고 메시지 B를 또 다른 10%에게 보내는 것을 권고합니다. 그런 다음 메시지 A의 반응이 더 좋으면, 나머지 80%의 사용자에게 메시지 A를 보내는 것이죠. 전체 유저의 10%는 통계적으로 유의미한 결과를 도출하는 것으로 알려져있지만 항상 그런 것은 아닙니다. 상황에 따라서는 더 깊은 고급 통계 방법을 사용해야할 수 있습니다.


다변량 테스트는 A/B 테스트에 비해 더 많은 테스트 트래픽량을 요구합니다. 기본적인 트래픽이 매우 많은 캠페인의 경우, 다변량 테스트를 시도해볼 수 있겠지만, 기본적으로 많은 트래픽을 테스트에 사용하기 때문에 최적화된 메시지를 받은 유저가 적어진다는 점은 감안해야 합니다.






적절한 테스트 주기는?


메시지 캠페인이 실시되는 한, 테스트는 계속 이루어지는 것이 좋습니다. 실제로, 지속적으로 캠페인 성공하는 기업은 지속적인 테스트를 진행하는 것으로 나타났습니다. 물론 일시적인 테스트를 진행하는 것도 가치가 있겠지만, 정기적으로 테스트를 실시하고 데이터를 지속적으로 확보한다면, 어떤 요소가 효과적이고, 앞으로 무엇을 더 테스트해봐야 하는지 꽤 잘 파악하게 될 것입니다.






실제 테스트는 어떻게 할 수 있나요?


Braze와 같은 CRM솔루션을 이용하면 손쉽게 테스트를 진행할 수 있습니다. Braze의 Canvas는 전체 캠페인을 한 눈에 볼 수 있게 해줍니다. 이를 통해 고객 접촉에 필요한 다양한 단계와 메시지를 쉽게 확인할 수 있습니다. 이러한 인터페이스는 테스트를 더욱 쉽게 만들어, 실시간으로 개선점을 찾을 수 있도록 도와주죠. 여러 구성원과 함께 복잡한 코딩 없이도 캠페인과 테스트를 관리할 수 있습니다. 다음은 일반적으로 A/B테스트를 진행하는 방식입니다.


 





 

마치며


A/B 테스트(혹은 다변량 테스트)를 고객의 마음을 이해하는 데 정말 큰 도움이 됩니다. 얻을 수 있는 가치에 비해 실행하기도 쉽죠. 단순히 직관에 의존하는 마케팅 방식에서 벗어나, 꼭 여러분의 마케팅에도 테스트를 접목해보시길 바랍니다.







콘텐츠 더 읽어보기

브레이즈, A/B테스트