해시스크래퍼 기술 블로그

달러 이렇게 비싸져도 되냐?! AWS를 탈출하고 비용절약하자!

달러 이렇게 비싸져도 되냐?! AWS를 탈출하고 비용절약하자!

안녕하세요, 저는 2013년부터 AWS를 사용해왔지만, 최근 회사에서는 자체 서버를 구축하기로 결정했습니다. 오늘은 이 과정과 그 이유, 그리고 여러분께 도움이 될만한 조언들을 공유하려고 합니다. 왜 AWS에서 자체 서버로 전환했는가? AWS는 확장성과 안정성, 보안 측면에서 많은 장점을 가지고 있습니다. 특히, 사용자가 폭증할 때 유연하게 대처할 수...

더 읽기 →
네이버 부동산 매물 정보 수집 자동화하기: 코딩없는 웹크롤링

네이버 부동산 매물 정보 수집 자동화하기: 코딩없는 웹크롤링

부동산 매물 정보 수집 자동화가 필요한 이유는? 부동산 매물 정보는 투자자, 중개업자, 개발업자, 연구자, 은행 또는 금융기관, 프롭테크(PropTech) 기업, 마케터 등 다양한 분들에게 매우 중요한 정보입니다. 그 중 특히 중개업자 분들이나 연구자, 프롭테크 기업 등에서 빠르고 안정적으로 부동산 매물 정보를 확보하길 원하는데요. 부동산 매물 관련하...

더 읽기 →
강력한 웹 크롤링 솔루션 해시스크래퍼의 장점 10가지

강력한 웹 크롤링 솔루션 해시스크래퍼의 장점 10가지

현대의 데이터 중심 시대에서 웹 크롤링은 다양한 산업 분야에서 중요한 역할을 하고 있습니다. 해시스크래퍼(HashScraper)는 강력하고 효율적인 웹 크롤링 서비스를 제공하여 많은 기업들의 데이터 수집과 분석을 도와주고 있습니다. 이번 블로그에서는 해시스크래퍼의 주요 장점들을 살펴보고, 이 서비스가 어떻게 고객의 Pain Point(페인포인트)를 해...

더 읽기 →
Node.js로 크롬에 특화된 웹 스크래핑 적용하기

Node.js로 크롬에 특화된 웹 스크래핑 적용하기

안녕하세요, 오늘은 Ruby, Python, Java가 아닌 Node.js를 사용하여 웹 크롤러를 만드는 방법에 대해 소개하겠습니다. 특히, Google Chrome 또는 Chromium을 제어할 수 있는 강력한 Node.js 라이브러리인 Puppeteer와 그 확장인 Puppeteer-Extra에 대해 자세히 알아보겠습니다. Puppeteer란 무엇...

더 읽기 →
1분만에 유튜브 댓글 크롤링하는 방법(feat. 짜파게티 더블랙)

1분만에 유튜브 댓글 크롤링하는 방법(feat. 짜파게티 더블랙)

신제품에 대한 소비자 반응이 궁금하다면? Youtube에서 댓글을 살펴보세요! 유튜브가 제품 홍보와 고객반응조사에 가장 효과적인 플랫폼 중 하나라는 의견에는 의심의 여지가 없을 거에요. 이번 블로그에서는 유튜브 댓글을 간편하고 빠르게 수집하여 제품에 대한 고객 반응을 모으는 방법을 알려드리고자 합니다. 예시로, 최근 출시된 짜파게티 더블랙 리뷰 영상들...

더 읽기 →
웹 크롤링과 스크래핑의 차이 및 Ruby로 구현하는 기초 예제

웹 크롤링과 스크래핑의 차이 및 Ruby로 구현하는 기초 예제

스크래핑과 크롤링은 어떤 차이가 있나요? 스크래핑과 크롤링은 웹 데이터를 수집하기 위한 두 가지 방법입니다. 이 두 방법은 종종 혼용되어 사용되지만, 그 기능과 목적에는 차이가 있습니다. 크롤링 (Crawling): 크롤링은 웹 사이트의 여러 페이지를 탐색하는 작업을 의미합니다. 일반적으로 웹 크롤러 또는 스파이더라는 프로그램이 자동화된 방식으로 웹사...

더 읽기 →
트위터(X) 광고 수익을 위한 트윗 자동화 전략

트위터(X) 광고 수익을 위한 트윗 자동화 전략

일론 머스크가 인수한 X(구 트위터)는 새로운 광고 수익 시스템을 도입했습니다. X에서 광고 수익 실현을 위해서는 특정 자격 요건을 충족해야 합니다. 이를 위해 본 포스팅에서는 트윗의 트래픽, 즉 impressions를 증가시키기 위한 전략에 대해 소개하고자 합니다. 1. X(트위터) 광고 수익 자격 조건 X의 광고 수익 조건을 달성하기 위해 다음 세...

더 읽기 →
BERT를 활용한 텍스트 감정분석 간단 가이드

BERT를 활용한 텍스트 감정분석 간단 가이드

감정분석은 텍스트 데이터의 감정이나 의견을 자동으로 분석하는 자연어처리의 중요한 분야 중 하나입니다. 최근 몇 년 동안, BERT(Bidirectional Encoder Representations from Transformers)라는 딥러닝 모델이 자연어처리 작업에서 높은 성능을 보여주며 감정분석에도 큰 역할을 하고 있습니다. 이 블로그에서는 BER...

더 읽기 →
ChatGPT에 클로드(Claude)를 사용하여 대용량 HTML 입력하기

ChatGPT에 클로드(Claude)를 사용하여 대용량 HTML 입력하기

클로드(Claude)로 한정판 거래 플랫폼, 크림 (Kream : https://kream.co.kr)의 실시간 차트를 크롤링하는 예제를 준비했습니다. 1. 클로드(Claude)란 무엇인가? Claude(클로드)는 오픈AI 직원들이 설립하고 구글의 강력한 지원을 받고 있는 인공지능 스타트업 Anthropic의 AI 챗봇 서비스입니다. 클로드 2는 20...

더 읽기 →

새 글 알림 받기

해시스크래퍼 기술 블로그의 새 글이 발행되면 이메일로 알려드립니다.

이메일은 새 글 알림에만 사용됩니다.