Pandas 환경 설정

python --version
# 또는
python3 --version

brew install python@3.11

sudo apt update
sudo apt install python3.11 python3.11-venv python3-pip

# 가상환경 생성
python -m venv cookbook-env
 
# 가상환경 활성화
# macOS/Linux
source cookbook-env/bin/activate
 
# Windows
cookbook-env\Scripts\activate

# 환경 생성
conda create -n cookbook python=3.11
 
# 환경 활성화
conda activate cookbook

pip install pandas numpy matplotlib seaborn jupyter

# 데이터 시각화
pip install plotly altair
 
# 통계 분석
pip install scipy statsmodels scikit-learn
 
# 시계열 분석
pip install prophet
 
# BigQuery 연동 (선택사항)
pip install google-cloud-bigquery db-dtypes

pandas>=2.0.0
numpy>=1.24.0
matplotlib>=3.7.0
seaborn>=0.12.0
jupyter>=1.0.0
plotly>=5.15.0
scipy>=1.10.0
statsmodels>=0.14.0
scikit-learn>=1.3.0

pip install -r requirements.txt

cookbook-data/
├── src_orders.csv
├── src_order_items.csv
├── src_products.csv
├── src_users.csv
├── src_events.csv
├── events_augmented.csv
├── cs_tickets_dummy.csv
└── mkt_campaigns_dummy.csv

from google.cloud import bigquery
import pandas as pd
 
client = bigquery.Client(project='your-project-id')
 
tables = [
    'src_orders', 'src_order_items', 'src_products',
    'src_users', 'src_events', 'events_augmented',
    'cs_tickets_dummy', 'mkt_campaigns_dummy'
]
 
for table in tables:
    query = f"SELECT * FROM `your-project-id.retail_analytics.{table}`"
    df = client.query(query).to_dataframe()
    df.to_csv(f'cookbook-data/{table}.csv', index=False)
    print(f"✅ {table}.csv 저장 완료 ({len(df):,}행)")

jupyter notebook
# 또는
jupyter lab

# 기본 라이브러리 import
import pandas as pd
import numpy as np
import matplotlib.pyplot as plt
import seaborn as sns
from datetime import datetime, timedelta
import warnings
warnings.filterwarnings('ignore')
 
# 시각화 스타일 설정
plt.style.use('seaborn-v0_8-whitegrid')
sns.set_palette("husl")
plt.rcParams['figure.figsize'] = (12, 6)
plt.rcParams['font.size'] = 10
 
# 한글 폰트 설정 (선택사항)
# macOS
# plt.rcParams['font.family'] = 'AppleGothic'
# Windows
# plt.rcParams['font.family'] = 'Malgun Gothic'
# Linux
# plt.rcParams['font.family'] = 'NanumGothic'
 
plt.rcParams['axes.unicode_minus'] = False
 
# Pandas 출력 옵션
pd.set_option('display.max_columns', 50)
pd.set_option('display.max_rows', 100)
pd.set_option('display.width', 200)
pd.set_option('display.float_format', '{:.2f}'.format)
 
# 데이터 경로 설정
DATA_PATH = './cookbook-data/'
 
print("✅ 환경 설정 완료!")

def load_data(table_name):
    """데이터 로드 및 기본 전처리"""
    df = pd.read_csv(f'{DATA_PATH}{table_name}.csv')
 
    # 날짜 컬럼 자동 변환
    date_columns = [col for col in df.columns if 'date' in col.lower() or 'at' in col.lower()]
    for col in date_columns:
        try:
            df[col] = pd.to_datetime(df[col])
        except:
            pass
 
    return df
 
# 사용 예시
orders = load_data('src_orders')
print(f"주문 데이터: {len(orders):,}행 x {len(orders.columns)}열")

import sys
import importlib
 
def check_environment():
    print("=" * 50)
    print("환경 설정 확인")
    print("=" * 50)
 
    # Python 버전
    print(f"\n🐍 Python 버전: {sys.version}")
 
    # 필수 패키지 확인
    packages = [
        'pandas', 'numpy', 'matplotlib', 'seaborn',
        'scipy', 'sklearn', 'plotly'
    ]
 
    print("\n📦 패키지 버전:")
    for pkg in packages:
        try:
            module = importlib.import_module(pkg)
            version = getattr(module, '__version__', 'N/A')
            print(f"   ✅ {pkg}: {version}")
        except ImportError:
            print(f"   ❌ {pkg}: 미설치")
 
    # 데이터 파일 확인
    import os
    data_path = './cookbook-data/'
 
    print(f"\n📁 데이터 파일 ({data_path}):")
    if os.path.exists(data_path):
        files = os.listdir(data_path)
        csv_files = [f for f in files if f.endswith('.csv')]
        for f in csv_files:
            size = os.path.getsize(os.path.join(data_path, f)) / 1024 / 1024
            print(f"   ✅ {f} ({size:.2f} MB)")
        if not csv_files:
            print("   ⚠️ CSV 파일이 없습니다.")
    else:
        print(f"   ❌ 폴더가 없습니다: {data_path}")
 
    print("\n" + "=" * 50)
    print("🎉 환경 설정 확인 완료!")
    print("=" * 50)
 
check_environment()

==================================================
환경 설정 확인
==================================================

🐍 Python 버전: 3.11.0 (...)

📦 패키지 버전:
   ✅ pandas: 2.0.3
   ✅ numpy: 1.24.3
   ✅ matplotlib: 3.7.2
   ✅ seaborn: 0.12.2
   ✅ scipy: 1.11.1
   ✅ sklearn: 1.3.0
   ✅ plotly: 5.15.0

📁 데이터 파일 (./cookbook-data/):
   ✅ src_orders.csv (5.23 MB)
   ✅ src_order_items.csv (8.45 MB)
   ✅ src_products.csv (1.12 MB)
   ✅ src_users.csv (3.67 MB)
   ✅ src_events.csv (12.34 MB)

==================================================
🎉 환경 설정 확인 완료!
==================================================

{
    "python.defaultInterpreterPath": "./cookbook-env/bin/python",
    "jupyter.notebookFileRoot": "${workspaceFolder}",
    "python.analysis.typeCheckingMode": "basic"
}