Hye Jin Ryoo

[Databricks vs Snowflake] Day 4: Unity Catalog vs Horizon, 거버넌스와 데이터 공유의 미래

서론: 사일로(Silo)를 넘어선 통제 데이터 레이크와 웨어하우스가 통합되면서(Lakehouse), 보안 모델 또한 진화했다. 과거에는 파일 시스템(S3/ADLS) 권한과 DB 권한(Grant Select…)을 따로 관리해야 하는 ‘이중 관리’의 고통이 있었다. 두 플랫폼 모두 이를 해결하기 위해 통합 거버넌스 계층을 내놓았다. Databri...

Data Engineering, Governance

텔넷으로 접속할 수 있는 재미있는 목적지 목록

이 글은 GeekNews - 개발/기술/스타트업 뉴스 서비스 블로그에 게시된 글을 자동으로 가져온 것입니다. 더 자세한 내용과 원문은 아래 링크를 참고해 주세요. ➡️ 원문 보러 가기 원문 요약 텍스트 기반 인터넷 자원을 탐험할 수 있는 다양한 텔넷 서버 목록을 제공 현재 접속 가능한 서버에는 시간 확인, ASCII 지도, NASA 데이터,...

TechInfo

[Databricks vs Snowflake] Day 3: SQL vs Python, 엔지니어링 생산성의 차이

서론: 언어(Language)가 아키텍처를 결정한다 데이터 플랫폼을 선택할 때 조직의 엔지니어링 DNA는 결정적인 요소다. SQL 중심의 분석가 조직과 Python/Java 중심의 소프트웨어 엔지니어링 조직이 느끼는 두 플랫폼의 생산성은 판이하다. 핵심은 “Python 코드가 어떻게 실행되는가?”에 있다. 1. Runtime Battle: Snow...

Data Engineering, DevEx

Windows 11의 패치 화요일 악몽이 심화됨 — 일부 PC 부팅 불가 문제 확인

이 글은 GeekNews - 개발/기술/스타트업 뉴스 서비스 블로그에 게시된 글을 자동으로 가져온 것입니다. 더 자세한 내용과 원문은 아래 링크를 참고해 주세요. ➡️ 원문 보러 가기 원문 요약 1월 13일 배포된 Windows 11 보안 업데이트 이후 일부 PC가 부팅되지 않는 문제가 발생 Microsoft는 “UNMOUNTABLE_BOO...

TechInfo

ChatGPT 컨테이너, 이제 bash 실행·패키지 설치·파일 다운로드 지원

이 글은 GeekNews - 개발/기술/스타트업 뉴스 서비스 블로그에 게시된 글을 자동으로 가져온 것입니다. 더 자세한 내용과 원문은 아래 링크를 참고해 주세요. ➡️ 원문 보러 가기 원문 요약 ChatGPT의 컨테이너 실행 환경이 대규모로 확장되어, 이제 Bash 명령 실행, pip/npm 패키지 설치, 파일 다운로드가 가능해짐 Pytho...

TechInfo

[Databricks vs Snowflake] Day 2: Micro-partitions vs Delta Lake, 스토리지와 비용의 상관관계

서론: I/O가 곧 비용이다 클라우드 데이터 플랫폼의 과금 모델에서 컴퓨팅 비용은 ‘데이터 스캔량’ 또는 ‘스캔 시간’과 비례한다. 따라서 불필요한 데이터를 읽지 않는 것(Data Skipping/Pruning)이 성능 최적화와 비용 절감의 핵심이다. 두 플랫폼은 이를 위해 서로 다른 파일 포맷과 메타데이터 관리 방식을 사용한다. 1. Snowfl...

Data Engineering, Storage

3.5%의 법칙: 소수의 참여가 세상을 바꾸는 방법

이 글은 GeekNews - 개발/기술/스타트업 뉴스 서비스 블로그에 게시된 글을 자동으로 가져온 것입니다. 더 자세한 내용과 원문은 아래 링크를 참고해 주세요. ➡️ 원문 보러 가기 원문 요약 비폭력 저항 운동은 무장 투쟁보다 두 배 이상 높은 성공률을 보이며, 인구의 3.5%가 적극 참여할 경우 실패 사례가 없었던 것으로 나타남 190...

TechInfo