[오늘의 필사] 1년 안에 AI 빅데이터 전문가가 되는 법 / 서대호 / 비정형 데이터를 유용하게 사용하려면 빅데이터 분석!

며칠 전 친구에게 선물받은 책을 읽기 시작했다. 이전에 빅데이터 관련 책을 두 권 읽어보았는데 그것과는 차이가 있다. 분명 책을 쓴 저자들이 다 전문가들이지만 이 책의 저자는 "AI 빅데이터 분석 실무 능력"이 아주 뛰어난 사람이다. 그래서인지 우리나라의 AI 빅데이터의 현실을 비판하고 전문가로 성장하는데 필요한 조언을 아낌없이 전해주고 있다. 꽤나 흥미로워서 조금씩 공부하고 싶다는 생각이 든다.

오늘 필사한 부분은 비정형 데이터에 관한 이야기다. 우리 사회는 정보의 호수라고 불린다. 그만큼 넘쳐나는 정보들에 둘러싸여 하루하루를 보내고 있다. 너무 많은 정보들 때문에 어느 것을 신뢰하고 어느 것을 버려야할지 고민이 되기도 한다. 이런 상황에서 정확히 필요한 정보를 추출할 수 있는 빅데이터는 당연 가치가 있을 수 밖에 없다.

연구조사에 따르면 전체 데이터 중 80% 이상이 비정형 데이터로 이루어져있다. 비정형 데이터는 쉽게 식별할 수 없는 정보들을 일컫는데 이런 정보들을 유용하게 가공하는 것이 빅데이터 분석가의 역할이다.

예를 들어, @radiokorea에서 인터넷 라디오 광고를 송출하는데 월간 노출수가 60만이고 광고비가 200만원이라고 하면 금액대비 효과가 어느 정도인지, 광고비는 합당한지 궁금하다. 이에 대해 빅데이터 분석가는 타광고에 대한 데이터를 분석하여 비교 자료를 제시하여 광고여부를 판단할 수 있는 정보를 제공할 수 있다. 또한 광고에 노출되는 타겟층을 20~30대로 한다면, 어느 시간대에 어느 프로그램에서 광고를 해야 효과가 극대화 되는지에 대한 자료도 가공할 수 있다. 이뿐 아니라 광고를 통해 얼마나 신규유저가 유입되는지, 유입된 신규유저는 얼마나 활동하는지 등에 대한 비정형적 정보도 시각적으로 확인할 수 있는 정보로 가공할 수 있으니 얼마나 유용한가! 기술 변화가 빠르고 한치 앞을 내다 볼 수는 없다고 하지만 앞으로 5년간은 빅데이터 분석가에 대한 가치와 수요가 상승하리라는 확신이 든다.

빅데이터 분석은 어느 곳에나 적용할 수 있어 흥미롭다. 회사 일이나 개인적으로 하고 있는 일에도 적용해서 유용한 데이터를 뽑아내야겠다.