redJu(홍주)

데이터 흐름 만들기 및 사용

데이터 흐름에 대해서 간략히 소개(https://redju.tistory.com/665)를 하였는데 데이터 흐름(미리 보기)를 생성하고 Power BI Desktop에서 사용해보겠습니다.

데이터 흐름(미리 보기)는 내 작업 영역에서는 생성할 수 없으며, 앱 작업 영역이나 새 앱 작업 영역에서 생성할 수 있습니다.

1. 작업 영역을 클릭하게 되면 [데이터 흐름(미리 보기)] 탭을 확인할 수 있으며 [만들기] 메뉴에서 [데이터 흐름]을 선택합니다.

2. 엔터티를 추가하여 데이터 흐름 작성 시작 화면에서 [새 엔터티 추가] 화면을 클릭하여 작성을 시작합니다.

3. [데이터 원본 선택] 화면에서 적절한 데이터 원본을 선택합니다. 상단에서 ‘파워 쿼리’를 확인할 수 있습니다.

4. [데이터 원본에 연결]에서는 데이터 원본에 필요한 정보를 입력하면 되며 온-프레미스 환경에 대해서는 게이트웨이가 미리 구성합니다.

5. [데이터 선택] 화면에서는 적절한 데이터 테이블을 선택합니다.

6. [쿼리 편집] 에서는 Power BI Desktop의 쿼리 편집에서와 동일한 메뉴를 통해서 쿼리를 편집할 수 있습니다. 파워 쿼리 온라인을 이해할 수 있는 화면입니다.

7. 쿼리 편집을 완료하여 엔터티 목록을 확인할 수 있습니다. 다시 쿼리 편집으로 돌아가서 엔터티를 편집하거나 엔터티를 추가할 수 있습니다.

8. [저장]을 클릭하여 데이터 흐름을 저장합니다.

데이터 흐름은 생성되었지만 아직 데이터가 저장되지는 않았으므로 [지금 새로 고침] 아이콘을 클릭하여 데이터를 저장소에 저장합니다.

필요하다면 [새로 고침 예약]를 통해 새로 고침 일정을 설정할 수 있습니다.

9. 필요하다면 다른 데이터 흐름을 동일한 방식으로 생성합니다.  여기서는 Products 데이터 흐름을 생성하였습니다.

10. Power BI Desktop에서 데이터 흐름을 연결할 수 있습니다. [데이터 가져오기]에서 [Power BI 데이터 흐름]을 선택하고 [연결]을 클릭합니다.

11. 2개의 데이터 흐름에서 필요한 적절한 테이블을 선택할 수 있습니다.

[로드]를 클릭하고 필요하다면 쿼리 편집, 관계 설정, DAX를 이용하여 측정값을 생성하고 보고서를 작성합니다.

데이터 흐름에서 파워 쿼리 온라인과 새로 고침이 설정되어 있다면 하나의 파워 쿼리 온라인으로 여러 보고서에서는 데이터 흐름을 연결하여 시각화에 집중할 수도 있습니다.

간략히 데이터 흐름을 생성하여 Power BI Desktop에서 연결하는 내용을 살펴보았습니다.

다음에서는 엔터티를 연결하는 등 데이터 흐름에 대한 추가적인 내용을 확인해보겠습니다.

Power BI Desktop 2019년 2월 Update

1월은 Power BI Desktop 업데이트가 없었습니다. Power BI Desktop 2019년 2월 업데이트에 대한 자세한 정보는 아래 링크에서 참고할 수 있습니다.

https://powerbi.microsoft.com/ko-kr/blog/power-bi-desktop-february-2019-feature-summary/

주요 업데이트 내용은 다음과 같습니다.

l  필터창 업데이트

l  선형 차트 업데이트

l  제목 서식 자동 줄 바꿈

l  기본 상호 작용을 교차 필터링으로

l  테두리 둥근 모서리

l  주요 핵심 요인 시각적 개체

l  Q&A 업데이트

l  R & Python 스크립트 편집기 향상

l  사용자 지정 시각적 개체

새 필터환경(미리 보기)에서 서식 부분이 업데이트 되었습니다.

-       필터 창: 제목 텍스트 크기, 헤더 텍스트 크기, 글꼴 패밀리

-       필터 카드: 글꼴+아이콘 색, 텍스트 크기, 글꼴 패밀리, 입력 상자 색

선형 차트에서 데이터 항목을 클릭하여 선택하게 되면 해당 하나의 데이터 값의 포인트를 강조해서 어떤 값을 선택했는지 알려줍니다. 또는 범례를 클릭하게 되면 포인트를 강조해서 알려줍니다.

차트에 긴 제목을 지정하게 되면 제목이 잘려서 ... 표시가 됩니다.

이번 업데이트에서 자동 줄 바꿈 옵션을 지정하게 되면 제목이 잘리지 않고 표시됩니다.

상호작용 편집으로 차트의 항목을 클릭하여 다른 차트에 영향을 주는 옵션을 설정할 수 있습니다. 기본값은 다음 그림처럼 교차 강조로 나타납니다.

교차 필터나 교차되지 않게 하려면 상호작용 편집을 각 시각적 개체에 적용해야 합니다. 이번 업데이트에서는 보고서 설정의 옵션으로 교차 필터링으로 변경이 가능합니다.

교차 필터링으로 변경하게 되면 차트의 항목을 클릭하게 되면 해당 값으로 필터링 되어 보고서가 표시됩니다.

차트의 테두리를 보이게 설정하게 되면 모서리가 뾰족하게 되는데, 이번 업데이트를 통해서 둥글게 설정할 수 있습니다.

테두리의 반지름 옵션에 값을 지정하면 됩니다.

AI가 반영된 기능으로 주요 핵심 요인(미리 보기) 시각적 개체가 등장했습니다. Machine Learning으로 분석하여 인사이트를 제공해줍니다.

분석할 대상 필드와 분석 필드를 설명할 필드를 추가합니다.

분석 필드의 값에 대한 주요 영향 요인을 제공하고, 추가로 세그먼트를 통해서 인사이트를 얻을 수 있습니다. 현재는 미리 보기 상태이지만 영향을 주는 요인을 하나씩 찾지 않아도 분석에 효과적이라 생각됩니다.

질문과 답변의 업데이트 내용으로 기타 제안 사항과 답변에서 분석 기능을 제공합니다.

이번 업데이트에서는 Python과 R 시각적 개체를 추가하게 되면 스크립트 편집기에서 인텔리센스를 제공합니다.

사용자 지정 시각적 개체는 가격 정책이 무료였지만 기능별로 유료 정책을 지원합니다.

추가 고급 기능을 쓰기 위해서 구매하도록 IAP (in-app purchase add-ins)를 제공하고 있습니다.

새롭게 업데이트된 사용자 지정 시각적 개체 소식입니다.

•       Advanced Donut Visual

•       Advanced Combo Visual

•       Advanced TimeSeries Visual

•       Advanced Network Visual

•       3AG Systems – Line chart with absolute variance

•       Summary Table

•       KPImg

•       Ultimate KPI Card

•       Violin Plot

이중에서 Advance Donut Visual는 Sample Report를 통해 테스트해보면 많은 도움이 될 것 같습니다.

간략히 Power BI Desktop 2019년 2월 업데이트 기능 일부를 확인해보았습니다.

2019 Gartner Magic Quadrant

2019 Gartner’s Magic Quadrant for Analytics and Business Intelligence Platforms에 관한 소식입니다.

https://powerbi.microsoft.com/ko-kr/blog/microsoft-a-leader-in-gartners-magic-quadrant-for-analytics-and-bi-platforms-for-12-consecutive-years/

데이터 흐름 소개

2018년 11월 버전부터 데이터 흐름(Dataflow)가 미리 보기로 소개되고 있습니다.

데이터 흐름은 보고서와 독립적으로 클라우드에서 운용되는 파워 쿼리 프로세스로 간단히 정의할 수 있고 여러 원본의 데이터를 통합하고 모델링을 위해 준비하는데 도움이 되며 데이터 원본 연결, ETL 논리, 새로 고침 일정 등을 정의하여 빅 데이터를 수집, 변환, 통합 및 강화하는데 사용됩니다.

사실 데이터 분석 사용자는 본인의 로컬 PC에서 데이터를 연결, 통합하고 데이터를 준비, 모델링하여, 시각화하여 보고서를 게시하고 새로 고침을 설정하는 작업을 이미 하고 있습니다.

데이터 흐름도 동일한 작업이지만 보고서와는 독립적으로 동작되며 클라우드에서 운영된다는 것이 가장 큰 차이점입니다. 보고서와 독립적으로 동작되어 파워 쿼리 프로세스는 결과를 클라우드에 저장합니다.

데이터 흐름을 사용하는데 이점을 간략히 살펴보도록 하겠습니다.

l  하나의 데이터 흐름을 여러 보고서에서 사용

데이터 흐름을 생성하게 되면 Power BI Desktop에서 데이터 흐름을 연결하여 여러 보고서에서 사용하며 하나의 파워 쿼리 작업으로 여러 보고서에 적용이 가능합니다. 로컬에서 작업은 보고서당 파워 쿼리 작업 하나가 연결되게 됩니다.

l  여러 데이터 흐름에서 각각 다른 새로 고침 일정 적용

데이터 흐름별로 각각 여러 데이터 원본을 연결할 수 있는데 데이터 흐름별로 다른 새로 고침 일정을 적용할 수 있습니다. 한 데이터 흐름의 매출 테이블은 매일 새로 고침을 적용하고, 다른 데이터 흐름의 제품 테이블은 한달에 한번 새로 고침을 적용하고, 지역 테이블은 일년에 한번 새로 고침을 적용할 수 있습니다. 두 데이터 흐름을 연결하여 각각 다른 새로 고침을 적용받을 수 있습니다. 로컬에서 여러 데이터 원본을 연결한 pbix의 경우 하나의 새로 고침만 적용되므로 매월 말일에 새로 고침 해도 되는데 매일 새로 고침에 참가해야 합니다.

l  파워 쿼리 온라인을 통해 데이터 통합

파워 쿼리 온라인으로 여러 데이터 원본을 연결하여 데이터를 추출, 데이터를 변환, 데이터를 적재할 수 있습니다. 프리미엄 작업 환경에서는 증분 새로 고침을 통해서 지속적으로 데이터를 적재할 수 있어 중앙화된 클라우드 Datawarehouse로 운용할 수 있습니다.

l  공통 데이터 모델(CDM)으로 표준화

공통 데이터 모델을 이용하여 표준 엔티티에 매핑하여 데이터를 통합하거나 고유한 엔티티를 생성하여 조직 전체에서 데이터를 통합할 수 있습니다.

l  Azure와의 통합

Azure Machine Learning, AI서비스, Azure Data Factory, Azure Databrick 등 Azure 서비스를 활용할 수 있습니다.

다음 게시글에서 데이터 흐름을 만들고 Power BI Desktop에서 연결해보겠습니다.

Power BI 서비스의 보고서 PDF로 내보내기

보고서 작성자가 Power BI Desktop에서 시각화한 보고서를 바로 PDF로 내보내기 할 수 있는 기능은 이미 제공되고 있습니다. 또한 Power BI 서비스에서 보고서를 PowerPoint로 내보내기도 이미 가능합니다.

이용자가 PDF로 보고서를 활용하려면 Power BI 서비스의 보고서를 PowerPoint로 내보내기하고 PDF로 내보내기 해야 합니다.

Power BI 서비스에 로그온해보면 테넌트에 따라 다르지만 PDF로 내보내기 메뉴를 확인할 수 있습니다.

메뉴를 클릭하면 시간이 조금 걸리면서 PDF 파일을 저장할 수 있습니다.

PowerPoint로 내보내기와 다른 점은 PowerPoint로 내보내기 같은 경우 1페이지에 제목 슬라이드가 추가되지만 PDF로 내보내기에는 콘텐츠만 내보내기 됩니다.  PDF로 내보내기면 차트, 텍스트 등이 여러 개체로 구성되지만, PowerPoint로 내보내기는 페이지가 하나의 개체로 생성됩니다. 현재 PDF로 내보내기에서 배경화면 등은 제한적입니다.

이런 내용은 추후 업데이트 될 예정입니다. 간략히 Power BI 서비스의 보고서 PDF로 내보내기 기능을 살펴보았습니다.

이메일 구독 업데이트

Power BI Pro 사용자는 대시보드와 보고서에 구독을 설정할 수 있었습니다. 최근에 이메일 구독이 더 구체적으로 업데이트되었습니다. 대부분의 테넌트에 반영되어 있습니다.

이메일 구독은 Power BI Pro 기능으로 구독을 받는 사람은 Power BI Pro 사용자여야 합니다. 프리미엄 작업 환경이라면 Power BI 무료 사용자도 추가가 가능합니다.

대시보드와 보고서로 이동해보면 상단에 구독 메뉴를 볼 수 있습니다.

구독 메뉴를 클릭하게 되면 빈도 부분을 확인할 수 있습니다. 빈도에 따라 요일과 시간을 설정할 수 있도록 업데이트 되었습니다.

빈도에서 매일, 매주를 확인이 가능합니다. 예를 들면 매일 09시로 지정해둘 수 있습니다. 그리고 이런 구독을 24개까지 추가할 수 있으므로 한시간마다 이메일 구독을 받을 수도 있습니다.  또는 매주 월요일 09시에 이메일 구독을 설정할 수도 있습니다. 월요일 새벽에 새로 고침을 설정하고, 월요일 출근하면 메일에서 이미지를 확인하게 하면 더 효과적일 수 있습니다.

이메일 구독을 설정한 결과는 메일로 대시보드나 보고서 페이지의 이미지를 수신하게 되며, 필요하다면 해당 보고서나 대시보드로 이동할 수 있는 링크가 포함됩니다.

간략히 이메일 구독을 확인해보았는데, 주요 콘텐츠에 설정해두면 아주 효과적일 수 있습니다.

개인 책갈피

저번주에 테넌트에 적용이 완료되어 Power BI의 보고서 상단 메뉴를 보면 책갈피 메뉴를 확인할 수 있습니다.
 

개인 책갈피는 본인 만의 정렬, 필터, 선택 등으로 보고서의 페이지를 캡처하고 나중에 책갈피를 통해서 손쉽게 액세스할 수 있습니다. 또는 기본 보기로 지정하게 되면 보고서를 클릭하면 설정된 개인 책갈피가 나와서 보고서를 탐색하는데 아주 유용하게 사용이 가능합니다. 

책갈피 메뉴를 클릭해보면 이 보고서의 현재 상태 캡처 라는 텍스트를 확인할 수 있습니다.

보고서의 페이지에서 필터, 슬라이서, 교차 하이라이트 필터, 정렬 순서, 드릴 위치 등을 원하는 대로 설정하고 개인 책갈피 추가 메뉴를 클릭하여 캡처 하면 됩니다.

예를 들어, Femal도 필터링 하고 차트의 정렬 순서를 변경하고 1월달을 선택하고 개인 책갈피 추가 메뉴를 클릭하여 이름을 변경하고 저장 버튼을 클릭합니다.

필요하다면 기본 보기 지정을 체크하여 보고서를 클릭하면 처음 나오는 화면으로 지정도 가능합니다.

그러면 책갈피가 생성되고 … 메뉴를 클릭하여 업데이트, 이름 변경, 기본 보기 지정/해제를 선택할 수 있습니다.

책갈피 상태를 바꾸려면 필터, 슬라이서 등을 변경하고 난 후 해당 책갈피를 업데이트하면 됩니다.

책갈피 메뉴를 클릭하여 다른 책갈피 버튼을 클릭하여 책갈피 창에서 개인 책갈피와 보고서 책갈피 목록을 확인할 수 있습니다.

책갈피 메뉴 또는 책갈피 창에서 책갈피를 클릭하면 캡처된 상태로 이동되어 있는 것을 확인할 수 있습니다.

책갈피 창의 목록 중에서 기본 보기는 아이콘이 앞에 나타납니다. 

다른 대시보드나 보고서를 액세스하고 개인 책갈피가 설정된 보고서를 클릭하게 되면 기본 보기가 나타나게 됩니다. 필요하다면 책갈피 메뉴에서 원하는 책갈피를 기본 보기로 지정하면 됩니다.

원하는 보고서 상태를 개인 책갈피로 지정하게 되면 아주 효과적으로 보고서 탐색이 가능합니다. 간략히 개인 책갈피를 확인해보았습니다.

Power BI 보고서 서버 – 2019년 1월

Power BI 보고서 서버의 2019년 1월 버전에 대한 내용입니다. 다운로드 및 자세한 정보는 아래 링크를 참고할 수 있습니다.

https://powerbi.microsoft.com/ko-kr/blog/power-bi-report-server-update-january-2019/

Power BI 보고서 서버의 업그레이드에 대한 내용은 아래 링크를 참고하면 됩니다.

https://docs.microsoft.com/ko-kr/power-bi/report-server/upgrade

Power BI 보고서 서버의 2019년 1월 버전의 내용은 최신 Power BI Desktop 기능을 대부분을 지원하고 있습니다. 그 중에서 행렬의 +/-, 행 수준 보안은 눈에 띄는 기능입니다.

Power BI 보고서 서버의 포털에서의 Power BI 보고서 화면입니다.

Power BI Desktop에서 행렬의 +/-를 구현할 수 있습니다. 포털을 IE 브라우저에서 액세스하면 +/- 아이콘이 조금 이상하게 보이긴 합니다.

Excel 통합 문서에 대해서 행 수준 보안을 적용할 수 있습니다.

Power BI 보고서 서버 포털에서는 보고서의 관리 메뉴에서 행 수준 보안의 역할에 구성원을 추가할 수 있습니다. 특정 사용자나 그룹은 어떤 역할을 사용하는지 체크해주면 됩니다.

France 역할에만 속하는 사용자로 로그온하게 되면 프랑스에 속하는 도시만 나타나고 있습니다.

Power BI 보고서 서버의 2019년 1월 버전의 주요 업데이트 기능을 확인해보았습니다.

‘

데이터 새로 고침 시간 표시

데이터 게이트웨이를 통해서 데이터 새로 고침 예약을 구성해 두면 시간에 맞춰 새로 고침이 진행됩니다. 새로 고침 기록 등을 통해서 새로 고침이 되었는지 확인할 수 있습니다.

그런데 위에서 설명한 것으로 새로 고침이 언제 되었는지 확인하면 충분할 것 같습니다만 보고서에 새로 고침 시간을 출력은 어떻게 하냐고 문의하는 사람이 있습니다.

데이터 원본이 데이터베이스라면 데이터베이스에서 현재 시간을 반환해주는 뷰를 만들어서 가져오기 할 수 있습니다. 하지만 데이터베이스에 개체를 생성해야 합니다.

ALTER VIEW [dbo].[getRefresh]

AS

SELECT GETDATE() as [Refresh Time]

GO

데이터 원본이 Excel이라면 Excel의 NOW() 함수를 사용할 수 있는데, NOW() 함수는 문서를 열어야 값이 새로 고쳐집니다. 그리고 자동으로 생성되는 문서라면 NOW() 함수를 추가해야만 합니다. 파일을 덮어쓰거나 등 변경사항이 발생하지 않으면 값이 반영되지 않을 수 있습니다.

그래서 간단하게 Power BI Desktop의 쿼리 편집기에서 빈 쿼리를 생성하여 현재 시간을 반영하도록 할 수 있습니다. DateTimeZone.FixedUtcNow, FixedLocalNow 함수를 사용할 수 있습니다. Power BI에 게시하면 Utc 시간으로 설정되므로 필요에 따라 9시간을 더해줄 수 있습니다.

데이터 게이트웨이 설치와 관리를 완료하고 데이터 세트(데이터 집합)을 지금 새로 고침 메뉴를 클릭하여 새로 고치게 되면 새로 고침 시간이 반영되는 것을 확인할 수 있습니다.

제 생각으로는 맨위의 이미지의 방법만으로도 충분히 새로 고침 여부를 확인할 수 있을 것 같습니다.

Power BI Korea 2월 세미나

Power BI Korea에서 진행하는 2월 세미나 소식입니다.

1. Power BI HOL Workshop(유료)

•일시: 2월 15일(금) 09:30 ~ 16:30

•주제: Power B 실습

•장소: 한국마이크로소프트 11층

•내용: 매출 샘플 데이터를 기반으로 Power BI의 데이터 분석 및 시각화를 직접 실습을 통해 경험할 수 있는 1-Day Hands-on Lab 안내입니다.

2. Power BI 월간 세미나

•일시: 2월 15일(금) 18:00 ~ 20:30

•주제: Power BI Update 요약

•장소: 한국마이크로소프트 11층

•내용: Power BI Korea에서 진행하는 2월 Briefing 세미나는 Power BI와 Power BI 보고서 서버 업데이트를 구체적으로 살펴봅니다.