크롤링을 활용한 우리동네 맛집 데이터 워드클라우드 만들기 실습
우리동네 맛집 데이터를 크롤링하여 워드클라우드로 시각화하는 실습을 소개합니다. 다양한 시각화 라이브러리와 함께 데이터를 분석하고 인사이트를 도출해보세요.
TABLE OF CONTENTS
1. 데이터 준비
1.1. 스크래퍼 접속
데이터를 준비하기 위해서 저희 해시스크래퍼의 스크래퍼를 활용하였습니다.
아래 사진과 같이 SNS탭에 있는 인스타그램 포스팅 수집을 클릭하여 들어갑니다.
1.2. 파라메터 세팅
해당 빨간 부분을 클릭하여 파라미터들을 세팅하여 줍니다.
1.3. 세팅 저장
본 예제에서는 아래와 같이 파라미터들을 검색 키워드에는 더마블스, 최대 수집 건수에는 500을 세팅하여 저장하였습니다.
1.4 데이터 수집 시작
그러면 아래와 같이 데이터 개수가 500개인 세팅값에 더마블스로 적힌 데이터들이 수집되어지고 View버튼을 누릅니다.
1.5 데이터 수집 결과
아래 이미지와 같이 데이터가 잘 추출된 것을 볼 수 있습니다.
1.6 엑셀 다운로드
그리고 이 데이터를 다운받으면 이와 같이 엑셀로 다운받아 볼 수 있습니다.
2. 태블로 활용하기(Tableau)
2.1. 태블로에 공유
위에서 다운 받은 인스타 크롤링 엑셀 데이터를 태블로에서 데이터에 연결을 클릭하고 나서 Microsoft Excel을 클릭하여 열어줍니다.
2.2. 데이터 확인
태블로에서 데이터를 열어서 확인하면 아래 이미지와 같이 볼 수 있습니다.
2.3 태블로에서 해시태그 컬럼을 ,로 나누어줍니다.
2.4 태블로 아래 쪽 시트 새로 만들기 버튼을 누르면 아래 이미지와 같이 데이터 컬럼들을 눈에 쉽게 볼 수있고 드래그를 이용하여 컬럼을 분석할 수 있습니다.
3. 분석하기-1
3.1. 검색 결과 관련 해시태그 분석
더 마블스로 검색했을 때 주로 관련되어 있는 해시태그를 분석해보겠습니다.
3.2. 컬럼 설정
먼저, 아까 해시태그를 분리하여 만든 새로운 컬럼을 오른쪽으로 끌어당기고 그리고 Sheet1(카운트) 를 오른쪽으로 끌어당깁니다. 좀 더 태블로 안에서 표현하자면, 해시태그 분리를 행쪽에 차원으로 설정하고, 카운트를 측정값으로 설정합니다.
3.3. 표현방식 선택
그리고 태블로 오른쪽에 표현방식에서 막대그래프를 선택합니다.
3.4. 결과 값 확인
아래와 같이 결과는 박서준, 마블, CODE10, 배울점많은 박서준이 나오는 것을 확인할 수 있습니다.
4. 분석하기-2
4.1. 정수타입으로 변환
먼저 좋아요 수를 정수 타입으로 변환해줍니다.그러면 해당 컬럼의 표시가 해시태그로 바뀌게 됩니다.
4.2. 새 시트 생성
다음에는 새 시트를 생성하여 줍니다.
4.3. 측정값 및 표현방식 설정
좋아요 수를 측정값으로 설정합니다. 다음에 아까와 같이 해시태그 분리 컬럼을 차원으로 설정합니다. 그리고 다시 한번 표현방식을 막대그래프로 표현합니다.
4.4.해시태그 결합 및 나열
이번에는 더 마블스로 검색했을때 같이 나오는 해시태그들을 좋아요 순으로 합치고, 그 순서대로 나열을 한 것입니다.
4.5. 트리맵으로 변형
아래 이미지는 바로 위 막대그래프를 트리맵으로 변형한 그래프입니다.
5. 마무리
이번 포스팅에서는 해시스크래퍼 서비스를 통해 빅데이터를 구축하고, 데이터 시각화 서비스 태블로(Tableau)를 활용하여 시각화 작업까지 진행해보았습니다.
하지만 가장 중요한 것은, 데이터 분석의 방향이 올바르게 설정되었는지 점검하는 것입니다.
이것이 유의하셔서 다양한 솔루션으로 보다 업무효율을 증진시키실 수 있었으면 좋겠습니다.
Related Posts
Made with Bullet