
간단한 배경부터 말하자면, 작년부터 사이드로 가볍게 트레이딩을 하고 있습니다. 주로 BTC, ETH 위주고 알트도 조금씩 보고 있습니다.
문제는 내 아침 루틴이 너무 비효율적이었다는 점입니다. 매일 CoinGecko, CoinPaprika, CoinLore를 각각 열어 가격을 비교했는데, 어느 날 BTC가 사이트마다 100달러 이상 차이가 나는 걸 보고 이건 좀 아니다 싶었어요. 변동성이 클 때는 차이가 더 커지더군요.
매일 탭 열고 스크롤하고 가격 복사해 붙여넣기 하는 데 20분이나 쓰는 게 너무 아까워서 직접 자동화하기로 했습니다.
결과적으로 저는 세 개의 스크래퍼를 만들어서 각각의 데이터를 스프레드시트로 모으게 했습니다. 매일 오전 7시에 자동으로 실행되게 스케줄을 걸어두니 일어나서 휴대폰만 확인하면 가격과 24h 변동, 거래량, 시가총액 등이 이미 한눈에 들어옵니다.
작동 방식은 진짜 단순합니다: apify.com에서 무료 계정 만들고 각 스크래퍼를 실행해서 결과를 CSV로 내보낸 뒤 구글 시트나 엑셀로 불러오면 끝입니다. 시작 버튼 누르고 3초면 결과가 나옵니다.
각 스크래퍼 요약은 이렇습니다. CoinGecko는 코인 수와 ATH 데이터를 많이 제공하고, CoinPaprika는 퍼센트 변화(1h, 24h, 7d, 30d)가 잘 나옵니다. CoinLore는 BTC 가격과 서플라이(유통량, 최대공급)를 줍니다. 그래서 세 군데를 모두 씁니다.
운영 비용은 거의 들지 않습니다. Apify 무료 계정과 무료 크레딧으로 한 달 내내 돌려도 비용이 거의 0원 수준이었습니다.
결국 데이터를 자동으로 가져오니 처음으로 스프레드시트가 알아서 최신화되어 있는 걸 보고 마치 마법사 된 기분이 들더군요. 관심 있으면 스크래퍼 링크 써보고 피드백 주세요. 다른 스크래퍼(항공권, 채용공고, SEC 문서 등)도 몇 개 더 만들어놨고 요청받으면 만들어드립니다.
🧐 배경 설명 및 요약
왜 이 글이 나왔나: 작성자는 아침마다 여러 시세 제공 사이트를 수동으로 비교하느라 시간이 낭비되고, 사이트 간 가격 차이로 어떤 가격을 믿어야 할지 혼란스러워 이를 해결하려고 자동화 도구를 만들었습니다. 단순 반복 작업을 줄이고 더 신뢰할 수 있는 비교 데이터를 얻기 위해 게시글을 올렸습니다.
작성자가 실제로 묻고 있는 것(혹은 걱정하는 것): 작성자는 다른 투자자들이 여러 출처를 비교하는지, 자신이 만든 스크래퍼가 유용한지 피드백을 원합니다. 또한 어떤 사이트의 데이터를 스프레드시트로 자동 수집하고 싶은지, 추가로 필요한 기능(예: 자동 스케줄, 구글 시트 연동 등)이 있는지 궁금해합니다.
어려운 개념을 쉽게 정리하면:
- 웹스크래퍼(스크레이퍼): 웹사이트에서 표나 숫자 같은 데이터를 자동으로 긁어오는 프로그램입니다. 사람이 복사 붙여넣기 하는 일을 대신합니다.
- Apify: 스크래퍼를 실행하고 스케줄링할 수 있는 플랫폼 이름입니다. 무료 계정과 무료 크레딧으로 소규모 작업을 돌릴 수 있습니다.
- CSV/스프레드시트: 스크래퍼 결과를 CSV 파일로 내려받아 구글 시트나 엑셀에 불러오면 표 형태로 정리됩니다.
- 시세 차이의 원인: 서로 다른 사이트는 데이터 수집 방식(어떤 거래소 데이터를 집계하는지, 업데이트 주기 등)이 달라 가격이 조금씩 다를 수 있습니다. 그래서 여러 소스를 비교하면 전체적인 그림을 더 잘 파악할 수 있습니다.
댓글 (0)
로그인하고 댓글을 작성하세요.
아직 댓글이 없습니다.