LiFiDeA의 검색 이야기 

지난주에 아일랜드 더블린(Dublin)에서 열린 ECIR (European Conference for Information Retrieval)학회를 마치고 돌아왔습니다. 지난 글에서 소개했지만,  ECIR은 정보검색 연구의 중요한 축을 형성하고 있는 유럽에서 매년 열리는 메이저 컨퍼런스입니다. 

4월의 아일랜드의 풍광 역시 눈부셨습니다. 더블린은 흐리고 궂은 날씨로 유명한 곳이지만, 다행히도 지난주에는 비가 오다가도 하루에 한번은 햇빛이 비치는 좋은 날씨었습니다. 더블린 하면 기네스 맥주를 떠올리는 분들이 많으실텐데, 더블린은 밤이 되면 도시 전체가 거대한 펍(pub)과 같은 흥겨운 분위기입니다. 모든 것이 거대하지만 다소 삭막한 미국 거리에 익숙해져 있다가 아기자기하고 사람 냄새가 나는 유럽에 가면 항상 정겨운 느낌입니다. 

매번 학회에 참석할때마다  느끼는 점이지만, 이번에도 4일간 정신없이 배우고 느끼고, 사람들과 만나면서 머리가 리셋되는 느낌을 받았습니다. 마음에서 타성과 묵은 찌꺼기는 날아가고, 그 자리를 다시 호기심과 새로운 각오가 채우는 그런 transformative한 경험이었습니다.

처음 학회에 참석했을 때 여러가지로 난감했던 일을 떠올리며 EduHow에 학회 참석에 대한 몇가지 생각을 적었습니다. 관심있는 분께서는 학회 준비에 관한 지난 포스팅과 함께 참고하시기 바랍니다. 

'자기개발'에 관심이 있으십니까? 예전에는 학생이나 사회 초년생들이 관심을 갖는 주제였지만, '직장인들 사이에서 자기개발이 붐'이라는 식의 기사를 보면 많은 분들이 관심을 갖는 주제가 아닐까 합니다. 하지만, 특정한 외부적 자극이 없는 상태에서 스스로를 발전시킨다는 것이 쉬운 이야기는 아닙니다. 저의 경우에도 자기개발은 오랜 화두였지만, 관심과 의욕은 높으면서도 지속적인 실천이 쉽지 않은 까닭에 잦은 시행착오를 겪었습니다. 

자기개발의 가장 흔한 형태 - 독서

자기개발은 역시 독서을 통해 하는 것이 가장 일반적인 방식이 아닌가 합니다. 우리나라에서도 소위 '자기개발서'가 출간되는 책 중에 살당수를 차지하지만, 미국에서도 Self-help라고 하는 자기개발 분야는 출판물을 중심으로 거대한 시장을 형성하고 있습니다. 최근에는 자기개발을 위한 컨설팅 등의 서비스를 제공하는 Life-coaching이라는 직업군까지 등장할 정도이니, 그 열기는 보통이 아닙니다. 아래 그림에서 보듯, '자기개발'에는 다양한 세부 분야가 존재합니다.

프랭클린 플래너나 GTD (Getting Things Done)등의 방법론과 툴이 결합된 형태를 제외하면, 전통적인 자기개발은 이처럼 책에서 본 내용을 개인 각자의 의지에 따라 실천하는 형태를 띕니다. 하지만 여기에는 몇가지 한계가 있습니다. 1) 책에서 설명하는 내용은 저자 입장에서 기술한 것이라 독자 개개인의 상황에 맞는 처방이 아닐수도 있습니다. 2) 책에서 설명한 내용을 이해한다고 해도 의지력만으로 지속적인 실천을 하기란 쉬운 일이 아닙니다. 3) 책에서 모든 내용을 다루고 있지는 않습니다. 각 개인의 고유한 문제나 필요에 대해서는 스스로 해결책을 찾아야 하는 경우가 많습니다. 

데이터에 근거한 자기개발 - Self-tracking

이런 한계에 대한 해결책으로, 최근 미국에서는 자기 삶에서 수집한 데이터에 근거하여 가설을 세우고, 이를 실험을 통해 검증하는 자기개발법이 확산되고 있습니다.  수집되는 데이터의 종류나 수집 방법에 따라 굉장히 다양한 형태가 있지만 이런 방식을 흔히 Self-tracking이라고 총칭합니다. 개인 정보를 수집한다는 측면에서 Self-tracking은 일종의 Life-logging이라고 볼 수도 있지만, Life-logging이 다양한 포멧의 데이터 수집, 검색 및 시각화에 초점을 맞추는 데 비해, Self-tracking은 정량적인 데이터에 근거한 분석 및 행동 변화(Behavioral Change)에 집중한다는 차이가 있습니다. Self-tracking의 구체적인 사례는 현재 Pinoeer중 한명인 Gary Wolf가 Wired지에 기고한 글에 잘 나타나 있습니다. 이를 잠깐 발췌해 소개합니다. 

 I got up at 6:20 this morning, after going to bed at 12:40 am. I woke up twice during the night. My heart rate was 61 beats per minute, and my blood pressure, averaged over three measurements, was 127/ 74. My mood was a 4 on a scale of 5. My exercise time in the last 24 hours was 0 minutes, and my maximum heart rate during exercise was not calculated. I consumed 400 milligrams of caffeine and 0 ounces of alcohol. And in case you were wondering, my narcissism score is 0.31 (more on that in a moment).

윗 글에 나타나듯, 자신의 신체 및 정신적 상태를 포함한 모든 정보가 계량화될 수 있습니다. 그리고, 이렇게 계량화된 정보는 자기 자신에 대해 객관적이고 정확한 지식을 제공합니다. 시간이 지나면서 이런 지식의 축적은 자기 자신과 자신의 삶에 대해 어떤 책에서도 얻을 수 없는 통찰을 제공할 것입니다. 이러한 통찰이 스스로를 변화시키는데 사용될 수 있으리라는 것은 너무나 자명합니다. 누군가가 쓴 책을 읽고, 무작정 따라하는 것이 아니라, 자신의 문제를 스스로 진단하고 나아가 해결책을 실험해볼 수 있는 것입니다. 

Self-tracking 경험을 공유하는 블로그 Quantified Self에 올라온 실제 사례를 살펴봅시다. Seth Roberts라는 사람은 버터를 먹거나 먹지 않고 정해진 유형의 수학 문제를 푸는데 걸리는 시간을 매일 측정하여 다음과 같은 결과를 얻었습니다. Seth는 이에 근거하여 버터에 포함된 영양소가 수학 문제 해결에 도움을 준다는 결론에 도달했다고 말합니다. 연구의 과학은 논외로 하더라도, 이런 '실험'은 작은 노력으로 개인이 자신의 삶에 영향을 끼치는 여러 요인을 분석할 수 있다는 것을 보여줍니니다.

왜 지금 Self-tracking인가?

이렇게 데이터에 근거하여 자신을 변화시킨다는 아이디어 자체가 새로운 것은 아닙니다. 대부분의 다이어트 프로그램에서 섭취 및 소비 칼로리를 기록하게 하는 것이나, 운동선수들이 정확한 측정을 통해 퍼포먼스를 향상시키는 등의 활동이 모두 일종의 Self-tracking에 해당할 것입니다. (이는 지난번에 소개한 Deliberate Practice의 개념과도 상통하는 부분입니다.)

하지만,  Self-tracking이 최근 각광받기 시작한 것은  스마토폰 등 언제 어디서나 자신의 정보를 기록하고 업데이트할 수 있는 수단이 보급되고 있기 때문입니다. 실제로 수많은 Self-tracking툴들이 iPhone 혹은 Android 앱이며, 그 수는 점점 늘어가고 있습니다. 또한 그중 많은 툴들이 Twitter등의 SNS서비스와 연동되어 자신의 목표달성 과정을 다른 사람들과 공유할 수 있게 되어 있습니다. 

나의 Self-tracking 경험

저 스스로 Self-tracking을 하고 있냐구요? 사실 저는 2002년부터 MyLEO라는 툴을 만들어 제 개인의 일정 및 지식을 관리해오고 있었습니다. MyLEO는 일정관리를 중심으로 하는데, 각 일정을 A부터 F까지 평가할 수 있는 특징이 있습니다. 그리고 이렇게 입력된 데이터는 다양한 방식으로 시각화될 수 있습니다. (아래 스크린샷 참조) 

약 3년간 툴을 만들면서 실험한 결과로 제 개인의 평균 행복도 (일정별 점수의 기간별 평균치)가 꾸준히 올라가는 것을 관찰할 수 있었으니 (아래 차트), 어느 정도는 성공한 실험이었다고 볼 수도 있을까요? 대학원에 와서는 다른 실험에 바빠지면서 이런 종류의 '실험'을 계속하지는 못하였으나, 최근 들어 다시 시작하고 있습니다. (저의 최근 실험에 대해서는 다음 포스팅을 기대하세요 ;)

관련 자료 & 맺음말

 현재 Self-tracking에 관련된 가장 광범위한 정보는 Gary Wolf등 몇몇 사람들이 만든 Quantified Self라는 블로그를 통해 얻으실 수 있습니다. 이 블로그에는 전세계 각지의 Self-tracker들이 모여 자신의 경험과 지식을 공유하고 있습니다. 저 역시 Boston Quantified Self Meet-up에 참가하여 TrackYourHappiness등 여러 재미있는 스터디에 관한 발표를 들은 적이 있습니다.

또한 Self-tracking은 Human-computer Interaction 및 Cognitive Psychology 분야의 학자들도 활발히 연구하기 시작한 분야입니다. 현재까지의 연구논문은 여기서 찾아보실 수 있습니다. 최근 HCI 분야의 가장 큰 학회인 CHI2010과 CHI2011에서는 이와 관련된 워크샵이 열리고 있습니다. 자기 스스로 데이터를 기록하는 문제, 데이터 기록이 다시 개인에 미치는 영향 등  다양한 관련 연구주제가 존재합니다.

데이터에 근거한 의사결정이 모든 면에서 일반화되어가는 요즈음, 개인의 성찰 및 성장을 위해 데이터를 사용한다는 생각은 어찌보면 너무나 당연해 보입니다. 이런 의미에서, Self-tracking은 아직 미국에서도 이제 소수의 사람들 사이에서 확산되기 시작한 새로운 트렌드이지만, 앞으로 무한한 발전 가능성이 엿보이는 분야입니다. 자기 스스로 데이터를 수집해 삶을 변화시킨다는 생각, 너무 Geeky한가요? 여러분은 어떤 종류의 Tracking을 하고 계신가요? (아니면 하고 싶으신가요?)

관련 자료 / 툴 모음
http://quantifiedself.com/self-tracking-links-to-get-you-started/
 http://personalinformatics.org/tools

광고 한말씀 : 지금 제가 운영하는 'EduHow - 유학생 커플의 공부 뒤집기'블로그에서 독자 설문을 진행중입니다. 유학에 관심있는 많은 독자분들의 참여 부탁드립니다!  여기서 설문에 참여하시면 됩니다.

유학생들의 여가중 흔한 것이 한국 TV 시청입니다. 평소 TV를 자주 보는 편은 아니었지만 최근에 방영한 '나는 가수다' 를 재미있게 보았습니다. 단순 오락 프로그램이라고 치부할 수도 있지만, 이 프로그램의 의의, 그리고 이로 인한 논란의 파장은 작지 않다는 생각입니다. 여기서는 '나가수'의 긍정적인 측면을 생각해 보려 합니다.

기득권에 대한 정면 도전

본 프로그램의 방송 초기부터 포멧에 대한 논란이 있었습니다. 진중권씨 같은 분은 프로그램 자체가 넌센스라는 발언을 하기도 했습니다. 사실 평균 경력 10년의 정상급 가수들 중에 우열을 가린다는 아이디어 자체가 황당하기도 합니다. 하지만, 저는 이 프로그램의 의의를 높게 평가합니다. 실력보다 자격을 우선시하는 우리나라의 풍조에 도전한다는 측면을 주목하기 때문입니다.

올해가 데뷔 20주년이라는 김건모를 비롯해 첫 출연자 7명은 모두 자타가 공인하는 정상급 가수이고, 이런 의미에서 소위 말하는 '기득권층'의 범주에 속하는 사람들입니다. 이 가수들을 폄하하려는 의도는 없지만 (오히려 새로운 도전에 응한 용기를 높게 평가하고 싶습니다), 고인 물은 썩게 마련이고 엄밀한 평가시스템 없이 보장된 지위는 조만간 내실을 잃게 됩니다. 그런 의미에서 첫번째 탈락자로 논란의 초점이 되었던 김건모의 재도전에 관련된 다음 기사는 많은 것을 생각하게 합니다.

많은 사람들이 노래도 그렇지만, 무엇보다도 김건모의 이 떨리는 손에서 진심이 느껴졌다고 평했다. "천하의 김건모가 마이크 잡은 손을 그렇게 떨다니..", "20년차 가수가 그렇게 손을 부르르르 떠는 모습을 보고 눈물을 흘렸다", "손이 떨리는 압박과 긴장속에서도 음이 나가지 않고 제대로 무대를 마친 것에 박수를 보낸다", "손 떠는 것에서 비장함이 느껴졌다" 등의 반응이 줄을 이었다.  

김건모는 인터뷰를 통해 "'나는 가수다'는 생각을 많이 하게 하는 프로그램이다"라며 "내 인생의 터닝 포인트가 됐다. 나를 관리하게 됐고 다시 새로운 발을 내 딛는 계기가 됐다. 이 프로그램은 나를 출발선에 똑바로 설 수 있게 만들어줬다"고 말했다.

언제나 당당하고 여유롭고 위풍당당했던 20년차 가수 김건모의 떨리는 손은 이 프로그램의 핵심일지도 모른다. 자칫 오만해진 마음을 버릴 수 있었던 기회. 광풍같은 비난 속에 어렵게 얻은 기회를 최고의 노래로 보답해 준 김건모는 가수다.

'나가수'는 이처럼 대중음악계의 기득권층의 정점을 구성하는 7인의 가수에게 대중의 평가라는 (완벽하지는 않을지라도) 정직한 잣대를 들이댔습니다. 그리하여 그들 스스로도 놀랄 정도의 최고의 역량을 끌어내는 결과를 낳았고, 결국 대중들에게는 많은 감동을 선사했습니다. 타국에서 '좋은 음악'에 항상 굶주려있는 저같은 사람에게도 정말 오랜만에 맛보는 청량제였습니다. 결국 프로그램 자체도 엄청난 인기를 끌었고 출연 가수들도 대체로 긍정적인 결과를 얻었습니다. 

미국에 와서 많이 느끼는 점이지만, 우리나라에는 참 '기득권'이 많습니다. 한번 얻기는 쉽지 않지만 (그리고 그 과정에서는 비교적 공정한 잣대가 적용되지만) 일단 획득 후에는 안심할 수 있는 그런 자격 말입니다. 명문대 입학, 온갖 종류의 고시, 임용 후에는 별 실적없이도 자리를 보전할 수 있는 일부 직장 등이 모두 여기에 해당됩니다. 여기서는 '자격' 자체를 문제삼는 것이 아니라,  한번 OO는 영원한 OO식으로, 자격의 획득 이후에 전혀 평가나 검증이 이루어지지 않는 '성역화'를 우려하는 것입니다. 절대 권력은 결국 부패하기 마련이기 때문입니다.

'사회적 약속 이행' 대한 주의 환기

'나가수'가 우리사회에 던진 또하나의 화두는 '원칙의 가치' 입니다. 오락 프로에서의 '원칙'이 갖는 무게에 대한 다양한 논란이 있었지만, 저는 '김건모 재도전'의 혼란이 수습되는 과정이 우리나라에 '사회적 약속의 이행'라는 도덕규범이 수립에 도움을 줄 수 있을 것이라고 생각합니다.

미국에 와서야 비로소 느낀 것이지만, 우리나라는 모든 종류의 규칙 위반에 대해 상당히 관대한 편입니다.  좋게 보면 '정'의 문화이지만, 소속 조직의 비리를 고발하다 되려 피해를 보는 경우도 많고, 교통 범칙금 같은 경우에도 잘 이야기하면 넘어가는 경우도 있다고 하니 '지켜야 할 것'이 지켜지지 않는 경우도 많은 것 같습니다. (반면에 미국이라는 나라는 어떤 규칙도 예외없이 적용하는 비정함에 정이 떨어지기도 합니다 ;)

'나가수'의 경우에도 프로그램 중간에 몇번이나 강조했던 규칙을 처음부터 어겼다는 점에서 문제가 되었습니다. 퇴출 대상이 '최고참' 김건모가 아니었더라도 그런 사태가 벌어졌을지 상상해보면, (1회에서 7위를 한 정엽에 대한 동료 가수들의 반응을 떠올려봅시다) 원칙에 대한 경시, 그리고 그릇된 연공서열 등이 종합적으로 작용한 결과라는 것을 알 수 있습니다. 

어쩄든 많은 국민들이 이에 들고 일어났고, 결국 프로그램 결방 및 가수의 자진 사퇴라는 불미스러운 일이 있었지만, 이번 일을 계기로 (심지어 오락 프로그램에서도)  '사회적 약속'을 중히 여기고 실천하는 문화가 생길 수 있지 않을까 조심스레 희망해 봅니다. 

마치며

 위에서 언급한 우리 사회의 두가지 병폐 '기득권의 성역화' 및 '사회적 약속 경시'는 과정은 다르지만 결과는 같습니다. 정직하고 성실하게 노력하는 사람들의 힘을 빼앗고, 기득권이나 요령에 기대어 이득을 보려는 사람들이 활개치게 한다는 점입니다. 이런 병폐의 지속이 사회의 장기적인 발전을 저해할 것은 불을 보듯 뻔한 일입니다. 성격은 조금 다르지만, 안철수 교수님이 말하는 기득권의 과보호 역시 이와 비슷한 맥락에서 이해할 수 있을 것입니다. 

'나가수'가 가요계에 일으킨 신선한 바람이 사회 전반으로 확산되기를 기대해 봅니다. 이 프로그램에 대한 다른 시각을 다룬 컬럼을 소개하면서, 마지막으로 몇 가지 생각거리를 던져 봅니다. 여러분의 의견을 답글로 남겨주세요!

-. 구성원간의 경쟁은 어떨 때 사회 발전에 도움을 줄까요? '나가수'는 어떤가요? 
 
-. 사회 다른 분야에서 건전한 경쟁을 통해 좀더 발전할 수 있는 경우가 있을까요?

-. (마무리는 가볍게^^) 여러분은 어떤 가수가 좋으셨나요? 앞으로 더 보고 싶은 가수는? 

어느 연구분야에서나 사고의 틀을 잡기 위해 기초적으로 읽어야 할 것이 있습니다. 해당 분야를 몇년간 공부하다보면 자연스레 알게 되는 내용이지만, 처음 접하는 사람으로서 자료의 옥석을 가리기는 쉽지 않는 일입니다. 본 블로그에도 검색에 관련된 자료를 모은 페이지가 있습니다. 그동안 자주 업데이트하지 못하었지만, 최근에 다음과 같이 업데이트하었습니다.

텍스트북이야 많이들 아시겠지만 최근에 두권이 더 출간되었습니다. 위에 소개한 수업자료와 Article도 한번씩 읽어보시기 바랍니다. (위에 소개한 UMass수업은 제가 TA및 수업 하나를 담당했습니다!) 위에 소개한 블로그 역시 웬만한 책 몇권에 해당하는 내용을 담고 있습니다. 마지막으로 주요 학회 논문 모음과, ETC 카테고리에 비디오 및 다른 곳에 소개된 검색 관련 자료모음을 소개하였습니다.

앞으로도 종종 업데이트하고, 제 트위터 등으로 공지하겠습니다. 마지막으로 본 블로그의 검색공부하기 카테고리의 글도 참고하세요. 기타 여러분께서 알고계시는 좋은 자료가 있으시다면 comment로 공유해주세요 ;)

블로그 개편 관련 포스팅을 한 후 하루만에 스무 분께서 설문에 응해주셨습니다. 설문에 응해주신 여러분께 감사드리며, 설문 결과를 및 개편 내용을 소개하겠습니다. 

설문 결과

우선 포스팅 주제 측면에서는 본 블로그의 주된 내용인 검색 연구에 관한 내용이 가장 큰 지지를 받는 것으로 나타났습니다. 기계학습 및 통계 등 검색의 기본이 되는 분야에 대한 소개를 원하시는 분들도 많았습니다. 다수는 아니었지만, 검색 사용자 / 퍼블리셔 관점의 주제인 검색 노하우나 SEO에 대한 관심도 어느 정도는 나타났습니다.

블로깅 방식에 대해서는 더 꾸준한 포스팅을 바라시는 분들이 압도적으로 많았습니다. 좀더 쉬운 포스팅을 주문하시는 분들도 있었습니다. 앞으로 이런 점을 고려하도록 하겠습니다.

개편 내용

이상 여러가지를 고려하여 블로그 개편을 단행하였습니다. 우선 '검색'이라는 테마에 좀더 집중하는 방향으로 제목을 바꾸었습니다. 

 
다소 산만하던 분류체계 역시 한 단계로 단순하게 바꾸었습니다. 카테고리 역시 '검색'이라는 테마에 집중되는 것을 보실 수 있습니다. 기타 초기화면의 불필요한 요소를 빼고 깔끔하게 정리하였습니다. 초기화면에서 제 트윗과 최근에 관심있게 읽은 블로그 포스팅 목록도 보실 수 있습니다. 

맺음말 : '소통'을 위한 블로그로

하루라는 짧은 시간인데도 많은 분들께서 격려말씀을 남겨주신 점 감사하게 생각합니다. 그동안 포스팅은 가끔 했지만, 블로깅의 본질이 '소통'에 있다는 사실을 간과하지 않았나 합니다. 앞으로 '검색'이라는 주제를 바탕으로 국내외 많은 분들과 소통할 수 있었으면 좋겠습니다!
 

며칠 후에 졸업 논문 Proposal 심사가 있습니다. 지금까지의 연구를 바탕으로 졸업논문에 대한 계획을 심사받는 자리인데, 졸업 1년 전쯤에 하는것이 보통입니다.  그동안 주로 다루었던 분야인 XML 문서의 검색, 개인정보검색의 평가 모델 등에 대한 Proposal을 썼으니, 졸업 논문의 틀은 잡힌 샘입니다. 

졸업 이후의 진로도 연구를 할 수 있는 회사를 가는 것으로 결정하였습니다. 그동안 학교에서는 연구에 필요한 이론적 배경과 학문적 접근 방법을 배울 수 있었지만, 검색 연구의 중심이 산업계로 이동하고 있는 상황이고, 개인적으로도 데이터와 실험 인프라가 잘 갖추어진 기업의 연구조직에 끌리는 것이 사실입니다. 그런 의미에서 올 여름은 Microsoft Research CLUES(Context, Learning, and User Experience for Search) 그룹에서 사용자 모델링 및 검색 개인화 관련 프로젝트를 하기로 했습니다. CLUES는 Susan Dumais를 필두로 IR과 HCI, 그리고 기계학습을 넘나드는 연구를 하는 그룹입니다.