스마트 발송 버그

이 글의 성격은 무엇인가요?

질문 / 문제 해결

내용을 설명해주세요

  • 여기 왜 또 이미지 첨부가 안되나요…엊그저께는 되엇던거 같은데…글로 씁니다. (수정할때만 이미지가 첨부되네요!)

1.캠페인 생성시 종료날짜가 이상하게 적용됨
a.기간에 2.5일 ~ 2월 12일로 되어있는걸 종료날짜를 2월 28일로 변경함
b.캠페인 진입해보면 종료날짜가 3월 1일로 되어있음 → 버그
c.발송시작 영역에 종료날짜가 2월 12일 로 되어있고 수정할 수 없음 → 버그

2.소재 등록후 저장하면 팬딩걸림 (현재 1분 넘어감)
a.https://apps-in-toss.toss.im/console/api-public/v3/appsintossconsole/workspaces/xxx/mini-app/xxx/smart-message/campaigns/xxx/actions
b.302 떨어졌고..여러번 누르다 보면 저장이됨

3.캠페인 수정하면 Internal Server Error 발생
a.https://apps-in-toss.toss.im/console/api-public/v3/appsintossconsole/workspaces/xxx/mini-app/xxx/smart-message/campaigns/xxx
b.여러번 수정해도 100% 발생

{
    "resultType": "FAIL",
    "success": null,
    "error": {
        "errorType": 0,
        "errorCode": "500",
        "reason": "Internal Server Error",
        "data": {},
        "title": null
    }
}

image

*별개로 스마트 발송 가이드가…주어도 많이 빠지고 해석도 너무 어려워요…

안녕하세요 @Albert 님,
상세하게 남겨주셔서 너무 감사드려요.
빠르게 확인해보겠습니다.

1개의 좋아요

안녕하세요.
혹시 스마트 발송의 이해하기콘솔 가이드 중에서 어떤 내용이 어려우셨는지 알 수 있을까요?

1개의 좋아요

@Ian 님 안녕하세요

이해하기 섹션을 말씀드린거고요. 콘솔 가이드도 가이드가 부족해요.
“스마트 발송을 사용하면 어떤 점이 좋나요” 부분이 정말 이해하기 어려웠어요..

사용자에게 꼭 필요한 메시지를 자동으로 보낼 수 있어요.
→ 마케팅 도구인데 "자동"으로 보낸다는게..무슨말인지 이해를 못했고요. 어쨌든 스마트 발송이 뭔가 자동으로 하는구나 정도로 생각했어요.

주문, 결제, 배송 같은 필수 안내 (기능성 메시지) 부터 이벤트, 혜택 안내 (광고성 메시지) 까지 상황에 맞게 전달할 수 있어요.
→ 이거..그냥 “기능성 메시지(주문, 결제, 배송 같은 필수 안내) 와 광고성 메시지(이벤트, 혜택 안내)를 전달할 수 있어요” 아닌가 싶어요
→ "상황에 맞게"라고 하니까..뭔가 더 있나? 라고 생각하는데 단순히 이거겠구나 라고 이해하는데 시간이 걸렸어요

미니앱을 열지 않은 상태에서도 미니앱 서비스에 대한 정보를 놓치지 않게 안내할 수 있어요.
→ 이거 너무 당연한 얘기라서..처음에 혹시 뭔가 더 있나 싶었고요. 불필요한 생각을 하게 하는..

적절한 타이밍의 메시지로 서비스 이용 흐름을 자연스럽게 이어갈 수 있어요.
→ 이거는 무슨말인지 모르겠어요. 기능성 메시지를 보내도 바로 보내지 않고 팬딩시켜서 스마트 발송이 좋은 타이밍에 보내겠다는건지, 광고성 메시지를 보내면 적절하게 스마트 발송이 좋은 타이밍에 보내주겠다는건지..생각해보면 기능성 메시지는 파트너사가 시의적절한 시기에 보낼테니 설마 이걸 손대는건 아닐거 같고, 광고성 메시지를 말하는거 같다는 생각이 지금 드네요. 그런데 역시나 확신할수 없고요. 그런 말이 없으니..

발송 결과를 바탕으로 메시지 내용을 지속적으로 개선할 수 있어요.
→ 이것도…이게 기존의 푸시 알림이 수정이 불가능한것을 수정이 가능하다는 점을 강조하기 위함인가요?
그렇다면 “한번 승인받은 소재도 성과에 따라 수정하면서 성과 고도화가 가능해요” 라고 해도 될거 같은데…또 그렇다면 굳이? 왜 사람을 햇갈리게 하지..란 생각이 듭니다.

전반적으로 저 5개의 문장이 있는 그대로를 표현하기 보다는 자꾸 뭔가 포장하려고 하는 문장으로 보여서 이해하기 어렵습니다. 저만 그런건 아니고 저희 팀원도 뭔말인지 모르겠다고 해요..

그리고 여기도 그래요

이건 지금봐도 무슨말인지 이해가 어렵습니다..
저희가 어떤 흐름이었냐면

1.”캠페인을 활성화한 시점” → 어떻게 활성화하지? → 아 캠페인 만드니까 우측 상단에 활성화 버튼이 있네? 활성화가 안눌리는데 소재를 등록해야 하겠지? → 소재등록하니까 “일괄 검토 요청”이 생겼네 → 아 그렇지 소재검수해야겠지 → 이거 검수통과하면 저게 활성화 되겠지? → 근데..이게 언제 발송된다는거지? 왜 이런 얘기는 이애하기에도 없고 콘솔 가이드에도 없지? 일단 언제 어떻게 발송되는거지..찾아보자

2.오전 5시 이전에 캠페인을 활성화하면 → 오전 8시에..테스트를 보내라는건가? 자동으로 보내진다는건가? 8시부터 테스트가 가능하다는건가? 우리보고..하라는거겠지? → 근데 테스트 버튼이 안보이네? → 아닌가 자동으로 보내지는건가? “8시 부터” 가 아니라 “8시”라고 꼭 짚었으니…아 뭔가 배치가 돌아서 오전 8시에 테스트가 나가나보다..→ 어 그러면 누구에게? 누가 그걸 보고 문제 없다고 판단하지? 아..우리가 해야하는건가? → 테스트 버튼은…검수 승인되면 나오나? 아 모르겠다..

이런 흐름이에요.

아무튼..열심히 준비해주셨는데 그냥 이렇게 받아들이는 파트너사도 있구나..라고 생각하시고 (저희가 그렇게 독해력이 부족한 사람은 아니긴 한데..ㅠㅠ) 참고하셔서 보완해주시면 좋을거 같습니다.

상단에 BPM같은 전체 flow만 있어도 이해하기 더 수월할거 같아요.

==

이 외 해소가 안되는 부분도 좀 많이 있어요. 아래 질문형태로 남겨둡니다.

  • 기존에는 광고성 10만 한도를 앱별로 나눠서 적절히 발송했는데 이제 그렇게 못하는건가?
  • 뭔가 자동으로 발송 되는거면..기존에는 3개의 앱을 3만씩 적절히 나눠서 우리 유저가 반응하는 시간인 오후 3시에 보낼수 있었는데 → 바뀐거는..오전 8시부터 테스트가 나가는건가? 우리앱은 우리가 더 잘 아는데..스마트발송이 자기가 알아서 보내겠다는거네? 그리고 3개의 앱이…누가 얼만큼 한도를 사용하는거지? A앱이 10만이 다 쏴버리면 B,C는 그냥..멈추는건가?
  • 기존 푸시/알림의 경우 “최적 시간에 자동으로 발송하기” 와 비슷한거 같은데, 기존에는 최적 시간을 구분하지 못한 경우 내가 나머지 발송할 시간을 지정할수 있었는데 → 스마트 발송은 그런게 없네? 그럼..이거 인텔리전스처럼 10만도 못채우고 그냥 종료되는건가? 10만은 커녕 또 1000회만 노출되고 그럴거 같다는 느낌이 드네…그럼 이건 파트너사 입장에서 명백한 스펙 다운그레이드 같은데…문서는 마치 더 좋은것처럼 말하고 있는데..내가 뭘 놓치는건가?
5개의 좋아요

완전히 동의합니다. 그리고 제 서비스 두 개는 각각 하루를 시작할때랑 하루를 마감할때 발송이 필요한데, 기존에는 정확히는 못맞춰도 오전 8시 오후 8시로 설정하면 됐었는데, 이런것도 알아서 해주는건지… 서비스의 특성을 유저 반응 기준으로 반영해 주시는지… 지금 개발중인 기능은 주 1회 정해진날짜에 기존유저 대상으로 발송하는 알림이 필요한데, 이걸 어떻게 ‘스마트’하게 발송해주시는지…..

기능성 메시지는 현재 스마트발송이 아닌 sendMessage API를 통해 발송되고 있습니다. 문서 내용 보강은 논의해서 반영해보겠습니다 :bow:

1개의 좋아요

이를테면 매주 일요일에 주간 보고서를 발행하고 리텐션 광고를 돌리고싶은데, 이건 어떻게 구현해야할까요?

이를테면 매주 일요일에 주간 보고서를 발행하고 리텐션 광고를 돌리고싶은데, 이건 어떻게 구현해야할까요?

말씀주신 정기 발행 보고서가 제공되고, 유저가 수신을 동의한 경우 기능성 메시지로 보내시는게 맞을 것 같아 보이는데 제가 어떤 방식으로 운영하시는지 몰라 조심스럽네요.

우선 팀 내에서 말씀주신 기능에 대한 여러 보완사항들 및 기술적인 문제점들에 대해서는 논의 중이고 개선방향이 잡히면 @seonjeong 님께서 공지 주실 것 같습니다.

피드백들 하나 하나 소중히 살펴보고, 검토되고 있습니다. 조금은 늦더라도 양해해주시고, 편하게 의견주세요.

감사합니다.

1개의 좋아요

안녕하세요, 혹시 개발팀과 메시지 검수팀이 분리되어있을까요? 기능성 메시지로 정보 제공을 하려고 하는데 자꾸 반려당해서 개발을 못하고 있어서 여쭈어봅니다. 그리고 너무 검수가 오래걸려요 일부로 안보시는 것처럼요 (스마트발송은 바로 검수되는데 기능성 푸시는 4일째 대기중입니다)

@shj5130 님 불편을 드려 죄송합니다

추가 확인을 위해 별도로 여쭤볼게요

원인 파악 되었습니다 검수 진행할게요.

개발팀과 운영 부서, 테스터 등 분리되어 있습니다. 빠르게 검수진행하도록 내부 프로세스 점검했습니다.

불편을 드려 죄송합니다 :folded_hands:

@shj5130 기능성 푸시 검토 완료되었습니다

1개의 좋아요

@dohyung 님 안녕하세요

위에 제가 우려한것처럼 채널톡에서 조차 가이드에 언급된 "테스트"를 완전히 잘못 알고 계셨습니다.

알고보니 테스트가 푸시알림에서 하는 파트너사 테스트가 아니라
스마트발송이 일부 고객에게 직접 보내는 것을 테스트라고 하네요.
이 과정이 왜 있는지 조차 저도 모르고 담당자도 모릅니다.

피드백을 잘 살펴보신다고 말씀하셔서..하나 추가로 더 문의드립니다.

금,토,일,월 스마트 발송을 해보니 이거 정말 의도한대로 작동하는거 맞나요?

결과만 말씀드리면 가이드에도 10만 한도를 명시하셨지만
실제로 “테스트” 이후 발송된 건수는 1,2건 혹은 많아야 1,000건 안팎입니다. 10만 아니고 1,000건 안팎이요. 그 조차도 하루만 발송되었고, 아예 발송이 안되는것도 있습니다. 이게 정말 정상인지 여쭙니다.

금,토,일,월(현재)

  • 발송완료 숫자는 테스트시 나간 숫자로 푸시+인박스 합쳐진 숫자이고 실제로 푸시는 3000건 안팎
  • 다른 앱들도 모두 마찬가지, 대부분 테스트 명목으로 푸시 3000건 나가고 그다음에 거의 발송안됨
  • 모수가 적으면 발송조차 안됨 (맨위가 37000, 아래는 수십만~200만 이상 모수들)

동일한 작업을 푸시 알림에서 하면 발송됩니다.(물론 요령이 필요하지만 일 10만 발송 가능합니다.) 지금까지 그렇게 해왔고요.
그런데 스마트발송에서는 안됩니다. 왜 안되는지도 모릅니다.

실제로 스마트발송 10만 한도를 쓰는 파트너사가 존재하기는 하나요?
혹은 토스쪽에서 마음에 드는 앱들 화이트리스트 관리를 하시나요? 그 앱들만 10만 나가나요?
혹은 게임쪽만 우선순위를 높여서 발송되게 하나요?

지금 말씀드리는 내용은 제가 토스홈광고 출시때도 여러 채널을 통해 수차례 문의드렸으나 모두 묵살된 내용입니다.

제가 추정하기로는 저 "테스트"라는 과정은 토스홈광고의 4% 탈락 프로세스와 동일한 과정으로
일부 유저에게 보내서 CTR을 파악한 후 그 성과에 따라 처리하는것으로 보이고 (그게 4%인지는 모르겠으나)
그렇다면 스마트발송에 명시된 10만한도는, 기존 푸시알림의 10만한도와는 전혀 차원이 다른 거죠.

지금 상황이 이해되려면
“이제 더이상 푸시알림처럼 10만 개런티 파트너 지원하지 않고, 우리 선에서 알아서 스마트하게 발송해볼건데, 우리가 설정한 기준에 들지 않으면 더이상 발송안되고, 기준에 들면 상한 10만으로 지원한다, 그래서 가이드에도 10만으로 적은거다. 물론 개런티는 아니다. 유료로 받으면 개런티해야겠지만, 유료가 아니니까 무슨상관!” 이라고 해야 이해가 가는 상황입니다.

파트너사 지원정책에는 감사한 마음을 가지고 있습니다.
하지만 마케팅이 막히니 막막합니다. 지난 몇개월동안 고생해서 만든앱이, 어떠한 마케팅 수단도 할 수 없어요. 당연히 카카오, 네이버 등 외부 광고를 할수 있는것도 아니고(토스가 우리앱이 아니라서 광고 불가), 토스애즈에서도 신청하려니 신청할수 없다고 나오고 (이유는 모르겠지만 소재검토에서 막힘), 푸시알림은 향후 유료 계획하셨지만 유료화 할정도로 고도화가 되지 못한 상황이 발생한거고..

오늘 이걸 경험하고나니 (수개월 고생한 앱 출시했는데 마케팅 수단이 전혀 없어서 유입이 안됨), 참 정말 허탈합니다.
토스가 안해주면 개발사 앱은 그냥 망하는 거에요. 심지어 저희앱은 주말사이 지금 카테고리에서 사라졌습니다.(이건 별개로 채널톡에 문의드렸습니다.)

6개의 좋아요

@Albert 님 안녕하세요. 이전에 정리 주신 부분들은 내부 유관 부서에 잘 전달했고, 오늘 주신 피드백들도 같이 전달드릴 수 있도록 하겠습니다.

의도와 다른 기능 동작에 서운함, 아쉬움이 있으실 수 있을 것 같습니다. 파트너사들의 성공이 저희의 성공이라고 생각하고 운영하고 있어요. 불편드려 죄송하고, 피드백 주셔서 감사합니다.

2개의 좋아요

네 친절한 말씀 감사드립니다.
앱인토스 개발팀의 진정성을 의심하는건 아니니 이점은 참고해주세요. 열심히 해주시는거 많이 느끼고 있습니다. 다만 비게임을 운영하는 파트너사 중에 비즈니스 관점에서 앱인토스 중요성? 의존성?을 높이면서 발생하는 현실적인 문제로 봐주시면 좋을거 같습니다. 어떻게 보면 하나의 케이스인거죠..
말씀 감사드리고 앞으로도 지금처럼 많은 케어 부탁드리겠습니다.

1개의 좋아요