Wookang makes AI

● 김대균 토익킹 청취자 강의록 크롤링 > 목표 일반 기사만 크롤링 하는 것 보다 텍스트 자체도 유용한 자료를 크롤링하고 싶어 김대균 토익킹 선택. (http://home.ebs.co.kr/toeic/board/) > 실행 1. 위와 같이 이*희님이 매일 열성적으로 정리해서 자료를 올려주신다. 감사하게 생각하고 이것을 크롤링하는 거다. 2. 먼저 크롤링이 필요한 페이지들을 하나의 파일로 크롤링하여 만든 후(데이터를 얻어올 때는 2초씩 쉬면서 가져온다. Block 당하는 것 조심) 3. 해당 페이지의 '인쇄' 주소를 구한다. 인쇄 페이지를 찾는 이유는 일반 페이지에 비해 인쇄 페이지가 잡것(html tags,광고)들이 정리되어 있어 텍스트만 가져오기 좋기 때문이다. - get방식으로 되어있다면 좋겠으나 세..

● 조정래 교수님의 작품 '아리랑' 텍스트 분석.- 이라는 거창한 이름을 붙였지만 실상은 파이썬을 이용한 형태소 분석일 뿐. - 이기황 박사(다음소프트 이사)님의 수업을 바탕으로 진행. > 들어가는 말난 조정래 교수님의 열렬한 팬이다. 그래서 텍스트 마이닝을 공부하며 무엇보다 먼저 그의 작품을 분석해보고 싶었다.특히 태백산맥을 좋아하는데 끝내 텍스트 파일을 구하지 못했다.하지만 다행스럽게도 유튜브에 빠지신(?) 우리 어머니마저 전권 독파를 자랑하신 '아리랑' 파일을 구할 수 있어 최종 선택했다.(미리 밝히건데 종이책으로 이미 전집을 가지고 있다. 그리고 이 텍스트 파일은 (미안하지만) 누구에게도 공유할 생각이 없다.) > 목표아직 실력이 미약하다.그래서 현재의 목표를 '아리랑' 속에 제일 많이 나온 단어..