0.undetected_chromdriver란 무엇인가? 웹 스크래핑(크롤링)과 웹 자동화는 오늘날 많은 데이터 분석 및 웹 개발 작업에서 중요한 역할을 하고 있습니다. 이러한 작업을 위한 도구 중에서 가장 널리 사용되는 것이 Selenium과 Chromedriver입니다. Selenium은 원래 웹 애플리케이션의 테스트를 자동화하기 위해 만들어진 도...
0. 시간과 비용을 절약하는 데이터셋 구축: ChatGPT로 데이터 라벨링하기 인공지능 모델을 훈련시키기 위해, '문제'와 '정답' 쌍으로 이루어진 데이터셋이 필요합니다. (지도 학습 기준) 이때 데이터에 정답, 즉 라벨을 부여하는 것을 '라벨링'이라고 합니다. 1. 데이터의 중요성, 양질의 데이터란? 직접 AI 모델을 개발하는 분들은 아마 "데이터가...
0. 인스타그램을 크롤링 하는 3가지 방법 인스타그램을 크롤링하는 데에는 다양한 방법이 존재합니다. 다음 사례들에 대한 코드는 루비로 이루어져 있습니다. 1. Public API를 이용한 방법 액세스 토큰 발급 개발자 계정 생성 및 앱 등록 후 인증을 받고 액세스 토큰을 발급받아야 합니다. require 'net/http' require 'json' ...
패션 트렌드 분석, 웹크롤링으로 자동화하고 업무 효율 300% 향상시킨 사례 끊임없이 바뀌는 패션 트렌드를 예측하고 분석하는 일은 경험과 직관, 그리고 데이터에 기반한 종합적인 인사이트를 근거로 이루어집니다. 특히 온라인 쇼핑몰의 상품 정보와 그 상품에 대한 소비자의 리뷰는 패션 트렌드 분석에 있어 매우 중요한 소스입니다. 뒤에 소개할 A사와 같이 매...
뉴스 클리핑에 지쳤다면 반드시 읽어보세요! 이 방법을 모르면 시간만 버리게 됩니다. 매일 쏟아지는 뉴스 기사들 속에서 수많은 키워드들을 일일이 검색하고, 기사를 읽고, 복사+붙여넣기를 반복하고 계신가요? 웹크롤링으로 뉴스 클리핑 업무를 자동화해 시간과 비용을 아낄 수 있습니다! 많은 분들이 매일 포털 사이트에서 업계 뉴스를 검색해보며 최신 동향을 살펴...
안녕하세요. 이번에는 네이버 지도의 점포별 메뉴데이터를 간편하게 크롤링 하는 방법에 대해서 소개해드리겠습니다. 여태껏 점포별 메뉴데이터를 하나씩 모으느라 고생하셨던 분들, 이제부터 해결방법을 알려드릴테니 편하게 크롤링 하기 바랍니다. 해시스크래퍼의 네이버 지도 수집 크롤러에서 원하는 키워드와 최대수집개수를 넣어서 수집을 진행합니다 더 자세한 내용을 원...
0. 개요 인스타그램은 현대 디지털 시대에서 브랜드 마케팅의 핵심 플랫폼 중 하나로 자리하고 있다는것은 누구나 인정하는 사실입니다. 우리가 잘 아는 유명 브랜드들은 인스타그램을 통해 적극적으로 마케팅을 집행하거나, 시장 반응을 측정해가며 비즈니스 전략에 반영하기도 하고있죠. 오늘 포스팅에서는 특별하게도 인스타그램 마케팅 성과를 아직까지도 직접 집계를 ...
0. 검색엔진 최적화(SEO)란? 검색 엔진 최적화는 SEO라고도 말하며 SEO는 "Search Engine Optimization"의 줄임말입니다. 이는 웹사이트 또는 웹 페이지가 검색 엔진에서 더 잘 검색되도록 최적화하는 프로세스를 의미합니다. 온라인 쇼핑몰, 블로그 등 웹사이트 운영에 있어 가장 기본적인 개념으로 자리 잡았습니다. 검색 엔진 최적...
0. 요즘 대기업에서 데이터 분석가를 고용하는 이유는 무엇일까? 대기업은 정보에 입각한 비즈니스 결정을 내리기 위해 분석해야 할 데이터가 많기 때문에 데이터 분석가를 고용하고 있습니다. 데이터 분석가는 다양한 도구와 기술을 사용하여 이 데이터를 분석하고 기업이 운영을 개선하고 수익을 늘리며 시장에서 경쟁력을 유지하는 데 도움이 되는 통찰력을 제공합니다...
해시스크래퍼 기술 블로그의 새 글이 발행되면 이메일로 알려드립니다.
이메일은 새 글 알림에만 사용됩니다.
