GitHub 오픈소스 탐험

최근 데이터 분석 및 AI 기술의 발전으로, 데이터 작업의 효율성이 점점 더 중요해지고 있습니다. 그 중에서도 Microsoft Fabric은 다양한 데이터 작업을 간소화하고, 사용자에게 강력한 도구를 제공하는 플랫폼으로 주목받고 있습니다. 그러나 데이터 작업을 수행하기 위해서는 복잡한 작업 흐름과 API 호출, 최적화된 쿼리 패턴을 이해해야 하며, 이는 초보자에게는 큰 부담이 될 수 있습니다. 이러한 문제를 해결하기 위해 Microsoft는 GitHub에서 skills-for-fabric라는 오픈소스 프로젝트를 제공합니다. 이 프로젝트는 CLI, VSCode, Claude 등에서 Microsoft Fabric을 쉽게 다룰 수 있도록 도와주는 다양한 AI 보조 기능을 제공합니다.

Microsoft Fabric Skills란?

Microsoft Fabric Skills는 Microsoft Fabric과 상호작용하는 데 필요한 재사용 가능한 AI 보조 지침 모음입니다. 이 스킬들은 GitHub Copilot CLI와 호환되는 AI 코딩 도구가 Fabric의 작업량, API, 쿼리 패턴 및 운영 모범 사례를 이해하도록 돕습니다. 즉, 개발자들은 보다 효율적으로 데이터 작업을 수행할 수 있습니다.

주요 기능 및 특징

다양한 스킬 번들 제공: 사용자 요구에 맞춰 다양한 스킬 번들을 제공하며, 각 번들은 특정 작업에 최적화되어 있습니다.

- fabric-skills: 전체 Microsoft Fabric 스킬 번들로, 저자 작성, 소비, 운영, 마이그레이션 및 아키텍처 전반에 걸친 스킬 포함 - fabric-authoring: REST API, CLI 자동화, 노트북 등 다양한 도구를 통한 Fabric 아이템 생성 및 관리 - fabric-consumption: 데이터 탐색 및 쿼리 워크플로우를 위한 읽기 전용 기능 - fabric-operations: 성능 및 건강 진단, 쿼리 인사이트 및 느린 쿼리 조사

빠른 설치 및 사용법: GitHub Copilot CLI를 통해 간단하게 설치하고 사용할 수 있습니다.
Azure 인증: 대부분의 Fabric 작업은 Azure 인증을 필요로 하며, 인증 방법도 제공됩니다.

설치 및 기본 사용법

이제 Microsoft Fabric Skills를 설치하고 사용하는 방법을 알아보겠습니다. 먼저 GitHub Copilot CLI를 통해 설치해보겠습니다.

1. GitHub Copilot CLI 설치

/plugin marketplace add microsoft/skills-for-fabric

2. 전체 번들 설치

전체 스킬 번들을 설치하려면 다음 명령어를 사용하세요.

/plugin install fabric-skills@fabric-collection

3. 특정 작업 관련 번들 설치

특정 작업을 수행하고자 한다면, 다음과 같이 설치할 수 있습니다.

저자 작성 관련

/plugin install fabric-authoring@fabric-collection

소비 관련

/plugin install fabric-consumption@fabric-collection

운영 관련

/plugin install fabric-operations@fabric-collection

4. 예시 프롬프트 사용

설치가 완료되면, 프로젝트 폴더에서 Copilot CLI를 열고 원하는 Fabric 작업을 수행할 수 있습니다. 예를 들어, NYC 택시 데이터를 위한 메달리온 아키텍처를 설계하고 싶다면 다음과 같이 입력할 수 있습니다.

Use Microsoft Fabric skills to design a medallion architecture for NYC taxi data.

실무에서의 활용 시나리오

예를 들어, 회사의 데이터 팀이 NYC 택시 데이터를 분석하고 보고서를 작성해야 한다고 가정해봅시다. 이때 Microsoft Fabric Skills를 활용하면 다음과 같은 작업을 손쉽게 수행할 수 있습니다.

데이터 수집 및 정리: fabric-authoring 번들을 사용하여 REST API를 통해 데이터를 가져오고, 필요한 데이터 포맷으로 정리합니다.
데이터 분석: fabric-consumption 번들을 통해 SQL 쿼리를 작성하고, 결과를 시각화합니다. 이 과정에서 Copilot이 추천하는 쿼리 패턴을 참고하면 더욱 빠르고 정확하게 작업할 수 있습니다.
보고서 생성: 최종 분석 결과를 기반으로 PDF 보고서를 자동으로 생성하는 프로세스를 구현합니다.

이처럼 Microsoft Fabric Skills는 복잡한 데이터 작업을 간소화하고, 팀의 생산성을 극대화하는 데 큰 도움이 됩니다.

유사 도구 비교

Microsoft Fabric Skills 외에도 데이터 작업을 위한 다양한 도구가 존재합니다. 예를 들어, Apache Airflow는 데이터 파이프라인의 스케줄링 및 모니터링을 지원하지만, Microsoft Fabric Skills는 데이터 작업의 전반적인 흐름을 관리할 수 있는 보다 포괄적인 솔루션을 제공합니다. 또한, GitHub Copilot CLI와의 통합으로 AI의 도움을 받아 작업의 효율성을 높일 수 있습니다.

Microsoft Fabric으로 효율적인 데이터 작업을 위한 기술 스킬 활용하기