데이터 생존 로그

* 이 글은 data popcorn에서 진행하는 n8n 스터디 2기에 참여하고 그 과정을 글로 남긴 게시글입니다.n8n 기초 강의: https://youtu.be/zcjTErUqvxM?si=MN0VAE5p6RtQ2YLkn8n & AI 자동화 커뮤니티: https://open.kakao.com/o/gwBKXcSg 이번 게시글에서는 저번 게시글에서 간단히 기획했던 아이디어를 본격적으로 만들기 위해, 사전 작업을 하는 과정을 담고 있습니다. (경기 버스 API, 공공 데이터 포털 활용 세팅)- 저번 게시글: https://analyst-ggom-chi-kim.tistory.com/26 n8n 자동화 프로젝트① - n8n에 대한 이해와 프로젝트 기획* 이 글은 data popcorn에서 진행하는 n8n 스터디 ..

* 이 글은 data popcorn에서 진행하는 n8n 스터디 2기에 참여하고 그 과정을 글로 남긴 게시글입니다.n8n 기초 강의: https://youtu.be/zcjTErUqvxM?si=MN0VAE5p6RtQ2YLkn8n & AI 자동화 커뮤니티: https://open.kakao.com/o/gwBKXcSg 자동화를 아는 것과 모르는 것은 업무 효율에 큰 영향을 미친다. 특히, LLM을 통한 업무 비중이 증가하고, LLM 업무의 자동화 니즈에 따라노코드 기반의 자동화 및 자동화 템플릿의 생성/공유 시장이 커질 수도 있겠다는 생각이 든다. 이번 게시글에서는 n8n이라는 노코드 자동화 툴에 대해 간단히 알아보고, 기획한 자동화 프로젝트를 공유해 보려 한다! ❓ n8n은 무엇인가? n8n은 오픈소스 워크플..

데이터를 해석하고 분석할 때, 가장 주의해야 하는 것이 편향이다.대부분의 데이터는 편향을 담고 있고, 이를 기반으로 단순 집계한 통계량에도 편향이 섞여있을 수 밖에 없다. 한 가지 예시를 들어보자!우리가 인스타그램의 데이터 분석가라고 가정해 보자.그리고 다음과 같은 분석 결과를 보게 되었다.릴스를 1회라도 올린 유저가 그렇지 않은 유저에 비해 팔로워 수가 더 많다.(통계적 유의)따라서 '릴스 업로드 유무'는 '팔로워 수'의 요인이라고 볼 수 있다. 우리는 위 분석 결과를 '통계적으로 유의'하기 때문에 받아들여야 할까? 당연히 아니다. 애초에 릴스를 1회라도 올린 유저는 다른 활동 역시 활발하게 할 확률이 높고(게시글, 댓글, 좋아요 등),이에 따라 팔로워 수가 높을 수도 있기 때문이다. 즉,  '팔로워 ..

회귀 분석의 활용법을 4가지 관점에서 정리하고,장점과 한계점에 대해 알아봅니다. 처음 머신러닝을 배우면서 회귀 분석을 접했을 때는 이런 생각이 들었다."기초적이고 성능도 별로일 것 같은데, 실무에서 과연 쓸 일이 있을까?" 하지만 통계를 배우고, 실무에서 데이터를 다뤄보니 회귀 분석은 단순한 예측 모델에 그치지 않고 다양한 활용 가능성을 가진 도구라는 걸 깨달았다.이번 포스팅에서는 회귀 분석의 활용 방법과 이를 통해 할 수 있는 네 가지 작업 중 두 가지를 먼저 정리해보았다. 바로 알아보자! 🚀1. 예측: 미래를 내다보는 도구 🔮회귀 분석의 가장 기본적인 활용은 예측이다.데이터를 기반으로 무언가를 예측하기에 가장 기초적인 도구로 사용할 수 있다. 하지만 더 깊게 다루진 않으려 한다!왜나하면, '데이터..

이번 게시글에서는 통계와 관련된 알아두면 쓸모 있을 (수도 있는...) 신기한 썰 몇 개를 소개해 보겠다! 🏀 마이클 조던이 만든 '지리학과 신화'대학 졸업 후 가장 높은 연봉을 기대할 수 있는 학과는 어디일까?의대, 법대 같은 전문직 학과가 떠오르겠지만, 미국 노스캐롤라이나 주립대에서는 뜻밖의 결과가 나왔디.바로 지리학과가 평균 연봉 1위를 차지한 것! 하지만 이 결과의 비밀은 다름 아닌 전설적인 농구 스타 마이클 조던 덕분이었다.조던은 노스캐롤라이나 주립대 지리학과 출신으로, NBA에서 역대 최고 연봉 기록을 세웠다.그의 연봉인 3,300만 달러(약 390억 원) 덕분에 지리학과의 평균 연봉이 치솟았다. 이렇듯 조던 한 명의 초고액 연봉이 지리학과 전체를 고액 연봉 학과로 보이게 만든 것이었다!이 ..

0. 개요🤔전환은 왜 중요한가?'전환'이라는 지표는 단순히 마케팅 활동의 성과를 넘어, 비즈니스의 핵심 성과 지표(Key Performance Indicator)와 큰 연관성이 있다.특히 데이터 분석가에게 전환율은 유저 행동 파악, 채널별 마케팅 효과를 분석, 구매로의 전환 등 다양한 관점에서 분석이 필요한 경우가 많다!유저가 처음 서비스와 만나는 순간부터 구매를 결정하기까지 다양한 접점이 존재하는데, 이 과정을 이해하고 최적화하는 것이 지표 개선에 필수적이기 때문이다. 📊 전환을 다섯 가지 방식으로 구분해서 분석해야하는 이유유저의 전환 여정은 다층적이고, 하나의 시각만으로는 충분히 설명할 수 없다.유저가 전환을 위해 거치는 여러 접점을 파악하기 위해서는 다양한 분석 모델을 통해 전환에 대한 포괄적인..

XX라는 행동을 YY 기간 안에 ZZ번 하면, 우리 서비스를 계속 활용한다. 본 게시글은 PO의 바이블! 토스 PO SESSION에서 개괄적인 방법을, How to Discover Your App’s ‘Aha Moment’ 게시글에서 조금 더 구체적인 방식과 예시를 참고해서 작성했습니다. 아하모먼트가 뭐에요? 어떻게 해야 유저들이 우리 서비스를 지속적으로 사용할까? 서비스를 제공하는 입장에서는 한 번쯤은 생각해볼만한 문제다. 위 질문에 대한 답을 다음과 같이 추상적으로 생각해보았다. 우리 서비스를 자주 찾는 유저들의 계기를 찾고 그 계기를 다른 유저들이 경험하도록 하자! 그리고 다음 문장들을 살펴보자. 4일 이내에 두 번 이상 송금하기 (토스) 10일 이내에 7명의 친구와 연결하기 (페이스북) 30명 이..

해당 게시글에서는 득점과 상관성이 높은 특성을 찾아내는 과정을 담았습니다. 야구에서 공격하는 팀의 최종 목적은 최대한 많은 득점을 내는 것이다. 홈런을 많이 때려내서 득점을 만들던, 많은 안타와 도루를 통해 득점을 만들던 상대 팀보다만 많은 득점을 하는 팀이 승리한다. 야구는 기록의 스포츠인 만큼, 다양한 지표를 가지고 있다. 그래서 해당 게시글에서는 다양한 지표 중, 득점과 가장 높은 상관성을 가지는 특성이 무엇이 있는지 찾아보고자 한다. 저번 게시글에서 크롤링했던 지표를 활용해서 분석해보자. 저번 게시글 - https://analyst-ggom-chi-kim.tistory.com/9 야구 데이터셋 크롤링하기 (with. 스탯티즈, BeautifulSoup) 해당 게시글은 스탯티즈(링크)에서 야구(KB..

해당 게시글에서는 프롬프트 엔지니어링을 활용한 EDA(Exploratory Data Analysis)를 시도합니다. 개요저번 글을 작성하며 한 가지 아쉬웠던 점이 있었다. pandasai는 API를 활용해야하므로 한정된 만큼만 활용할 수 있었고, 자유롭게 활용하기 위해서는 결제가 필요했다. 그래서 pandas-ai 코드를 까봤고, 다음과 같은 프롬프트로 ChatGPT를 활용하고 있음을 파악했다. https://github.com/gventuri/pandas-ai/tree/main/pandasai/prompts (23년 6월 4일 기준) GitHub - gventuri/pandas-ai: Pandas AI is a Python library that integrates generative artificia..

이전글: 2023.02.21 - [📊 분석 한 스푼 🥄] - 00. 분석으로 진수성찬을 만들어보자🍚🍖 00. 분석으로 진수성찬을 만들어보자🍚🍖 배경 데이터 분석가로써 벌써 반 년을 일했다. 분석 취준 시절과 얼마 안되는 분석가로써의 업무를 경험하면서 내 성장은 항상 하드스킬에만 초점이 맞춰져있었다. 이제 조금씩 분석 업무도 진 analyst-ggom-chi-kim.tistory.com 세상은 개발도상국과 선진국으로 나뉠까? 책 [팩트풀니스]를 읽었다. 첫 챕터의 내용은 대충 이랬다. 다수의 사람들은 세상이 선진국과 개발도상국으로 나뉜다고 생각한다. 하지만 그건 오래 전의 일이고, 현재는 4단계로 나눌 수 있다. 위 내용을 읽으면서 다양하고 복잡한 호기심과 의심점이 생겼지만 크게 두 가지로 정리해보면 다음..