All Data and AI Weekly #195 - June 23, 2025 요약

카테고리

프로그래밍/소프트웨어 개발

서브카테고리

데이터 분석, 인공지능, DevOps

대상자

• *데이터 엔지니어, AI 개발자, 클라우드 컴퓨팅 전문가**
• *난이도:** 중급 이상 (데이터 플랫폼, AI 도구, 실무 사례 포함)

핵심 요약

• NiFi + AI + Iceberg 통합 사례로 실시간 대기질 데이터 처리 및 분석 가능
• Snowflake Cortex AI를 활용한 데이터 웨어하우징, 모델 추론, 데이터 레이크하우스 구축 기법 소개
• 2025년 하반기 주요 웹세미나 및 오프라인 이벤트 (AI 앱 개발, 데이터 파이프라인 구축, ML 모델 훈련 등)

섹션별 세부 요약

1. NiFi + AI + Iceberg 통합 사례

• NiFi를 활용한 비구조화된 대기질 데이터의 실시간 수집 및 전처리
• Iceberg과 AI 데이터 클라우드를 결합한 레이크하우스 아키텍처 구현
• AI 기반 리치 엔리치먼트를 통해 대기질 데이터의 정확도 및 예측 성능 향상

2. Snowflake Cortex AI 활용 사례

• Snowflake Cortex AI를 통한 Stored Procedures 기반 중복 데이터 제거 최적화
• Delta Table을 Iceberg으로 변환 후 Polaris Catalog에 동기화하는 ETL 프로세스
• Agentic AI 시스템을 활용한 제약업계 필드 운영 자동화 사례 공유

3. 2025년 하반기 주요 이벤트

• 6월 24일~26일: Snowflake 웹세미나 (LLM 기반 GenAI 앱 개발, 데이터 파이프라인 구축, ML 모델 훈련)
• 7월 15일: 뉴욕 오프라인 해커톤 (Hex + Snowflake 주최, 실시간 데이터 문제 해결)
• 7월 16일~17일: AWS 뉴욕 컨퍼런스, Snowflake Dev Day AI 이벤트

결론

• *Snowflake Cortex AI와 NiFi 통합 사례를 통해 실시간 데이터 처리 및 AI 모델링 기술을 익히고, 2025년 하반기 웹세미나 및 오프라인 이벤트**에 참여하여 최신 데이터/AI 트렌드를 체험하는 것이 권장됨.