만드는 방식

좋아 보이는 것과
실제로 남는 것은
달라요

학습 서비스는 대개 결과만 이야기해요. 얼마나 늘었는지, 몇 명이 만족했는지요. 저희는 과정을 보여드리는 편이 더 정직하다고 생각했어요.

아래는 콘텐츠 하나를 내보내기까지 실제로 거치는 네 단계예요.

01근거
02제작
03검사
04되먹임
01 근거

만들기 전에 먼저 찾아요

근거 한 줄은 이렇게 생겼어요

STRONG근거 카드

외국어 학습 실험 48건을 모아 보면, 몰아서 볼 때보다 며칠에 나눠 볼 때 더 오래 남아요

출처Language Learning, 2022 · 학습자 3,411명
서지Kim, S. K. & Webb, S. (2022). Language Learning, 72(1)
확인원문 초록에서 직접 확인 후 기록
맥락외국어 학습 실험 대상. 암기 과제가 아닌 영역에는 쓰지 않아요

마지막 두 줄이 핵심이에요. 맥락이 없으면 다른 나라 다른 조건의 이야기를 우리 학습자에게 그대로 적용하게 되고, 확인 경로가 없으면 몇 달 뒤에는 아무도 검증할 수 없는 말이 돼요.

02 제작

한 번에 하루치만 만들어요

느리지만 이 방식이 결국 빨라요

몰아서 만들면

각각은 멀쩡해 보여요

문제는 날과 날 사이, 그리고 한 회차 안쪽에서 생겨요. 하루만 열어보면 아무 이상이 없어서 발견이 늦어요.

하나씩 만들면

앞뒤를 같이 봐요

상황, 표현, 예문, 문제, 정리를 한 덩어리로 놓고 봐요. 새 표현을 쓰기 전에 앞선 날들에 같은 것이 있었는지 먼저 찾고요.

몰아서 만들 때 실제로 겪은 세 가지예요.

같은 표현의 반복

며칠에 걸쳐 사실상 같은 표현을 배우게 돼요. 그날 파일만 봐서는 절대 안 보여요.

오답이 사실은 정답

문제의 틀린 보기가 실제로는 자연스러운 표현인 경우가 생겨요. 맞게 골랐는데 틀렸다는 말을 듣게 돼요.

회차 안쪽의 어긋남

표현 하나를 고치면 그 회차 안에서 같이 고쳐야 할 자리가 여러 곳이에요. 한 곳을 놓치면 앞뒤가 안 맞아요.

왜 하나씩 만드는지 보기 →
03 검사

통과하지 못하면 내보내지 않아요

사람이 판단해서 넘어가는 구조가 아니에요

검사 결과는 이런 모양으로 나와요

OK본문에 나오는 사실과 출처가 맞는지
OK들리는 음성과 화면의 문장이 같은지
OK정답 위치가 한쪽으로 쏠리지 않았는지
STOP어제 예고한 제목과 오늘 회차가 달라요

하나라도 걸리면 그날 콘텐츠는 나가지 않아요. 고치고 다시 통과해야 지나갈 수 있어요.

검사는 대부분 사람이 놓치기 쉬운 것을 봐요. 눈으로 읽으면 멀쩡한데 실제로는 어긋나 있는 것들이에요. 문제를 하나 겪을 때마다 검사가 하나씩 늘어났어요.

그리고 기계가 볼 수 없는 것은 사람이 봐요. 운영팀이 실제 화면을 열어 확인하는 절차가 따로 있어요.
무엇을 검사하는지 보기 →
04 되먹임

내보낸 뒤에 다시 재요

만들었다고 끝이 아니에요

실제로 학습에 도움이 되었는지 데이터로 다시 봐요. 기대한 효과가 나오지 않으면 되돌려요. 좋아 보였지만 도움이 되지 않아서 방향을 바꾼 기능이 실제로 있어요. 저희가 만든 것이라도 그래요.

새 기능을 더하는 것보다, 도움이 되지 않는 기능을 알아보는 쪽이 훨씬 어려워요. 그래서 재는 일을 계속해요.

둘이 다를 때는
남는 쪽을 골라요

저희가 지키려는 기준은 이것 하나예요. 앞의 네 단계는 그 기준을 지키기 위한 장치예요.