Databricks Data + AI Platform
Databricks는 데이터 및 AI 기업입니다. 주력 제품인 Databricks Data + AI Platform은 데이터 엔지니어링, 데이터 사이언스, 머신러닝, SQL 분석, BI를 하나의 워크스페이스에 담았습니다. Apache Spark를 기반으로 하며 레이크하우스 아키텍처를 사용합니다. 무료 체험을 이용할 수 있습니다.
Databricks 제공 기능
아래 정보는 2026년 10월 24일에 확인한 Databricks 웹사이트 내용을 바탕으로 합니다. 요금과 플랜은 변경될 수 있습니다. 최신 조건은 Databricks 웹사이트에서 확인하십시오.
| 기능 | 웹사이트 기재 내용 | 자세히 보기 |
|---|---|---|
| Data + AI Platform | 데이터, 분석, AI를 통합해 에이전트와 앱을 구동하고 자연어로 인사이트를 얻을 수 있게 하며, 다양한 클라우드에서 실행됩니다 | 플랫폼 개요 |
| Databricks SQL | 자연어 쿼리, AI 지원 SQL 에디터, Photon 쿼리 엔진을 갖춘 개방형 서버리스 데이터 웨어하우스입니다 | Databricks SQL |
| Lakeflow | 수집, 변환, 오케스트레이션을 하나의 엔진에서 처리합니다. Lakeflow Connect는 데이터베이스, SaaS 앱, 이벤트 스트림, 클라우드 스토리지에서 데이터를 수집합니다 | 데이터 엔지니어링 |
| Auto Loader | 클라우드 스토리지에 새 파일이 도착하는 대로 증분 처리합니다. S3, ADLS, GCS, Unity Catalog 볼륨에서 JSON, CSV, XML, Parquet 등을 읽습니다 | Auto Loader 문서 |
| 노트북 | 내장 AI 어시스턴트와 함께 Python과 SQL로 데이터를 탐색합니다 | 협업 노트북 |
요금과 관련해 요금 페이지에 따르면 체험 계정은 플랫폼을 무료로 사용할 수 있습니다. 단, 자체 클라우드 계정을 연결하면 컴퓨트 비용은 클라우드 제공업체가 별도로 청구합니다. 학생과 취미 개발자를 위한 Free Edition도 있습니다. Databricks는 이 에디션을 프로덕션 또는 상업적 용도로 사용할 수 없다고 명시합니다.
적합한 대상
Databricks는 고객 수가 20,000곳 이상이라고 밝히고 있습니다. 주요 사용자는 다음과 같습니다.
- 데이터 엔지니어링 팀: 배치 및 스트리밍 파이프라인을 구축하고 수집, 변환, 스케줄링을 한곳에서 처리하려는 팀입니다.
- 분석 및 BI 팀: SQL, 대시보드, 자연어 채팅으로 데이터를 조회하는 팀입니다.
- 머신러닝 및 AI 팀: 같은 플랫폼에서 모델을 학습하고 에이전트를 구축해 배포하는 팀입니다.
Databricks와 EveryInfra를 함께 사용하기
Databricks는 대규모 처리와 분석을 담당합니다. EveryInfra는 공개 플랫폼 데이터를 바로 적재할 수 있는 JSON으로 제공합니다. 대표적인 조합은 다음과 같습니다.
- Databricks 노트북이나 예약 작업에서 Python으로 EveryInfra API를 호출합니다. Xiaohongshu 노트, Douyin 댓글, TikTok 동영상, Amazon 리뷰를 가져와 Delta 테이블에 기록합니다.
- 또는 별도 스크립트로 결과를 클라우드 스토리지나 Unity Catalog 볼륨에 JSON 파일로 저장합니다. 그러면 Auto Loader가 새 파일을 감지해 증분 적재합니다.
- 데이터가 테이블에 들어가면 Databricks SQL로 통계를 내거나 대시보드에 표시합니다. 리뷰 텍스트를 모델에 넘겨 분류할 수도 있습니다.
- 자사 주문 데이터나 광고 데이터와 비교하려면 테이블을 바로 조인하면 됩니다.
대규모 요청에는 EveryInfra의 비동기 작업을 사용할 수 있습니다. 요청을 제출한 뒤 결과를 폴링하면 됩니다. 실패한 호출과 빈 결과에는 과금되지 않습니다. 요금과 문서를 참고하십시오. AI 어시스턴트가 같은 데이터를 조회하게 하려면 EveryInfra MCP 서버를 연결하십시오.
Databricks 문의
체험 신청이나 영업 문의는 Databricks 웹사이트에서 하실 수 있습니다. 이 페이지는 Databricks의 공개 정보를 요약한 것입니다. 공식 서비스 약관은 Databricks 웹사이트를 기준으로 합니다.