DataBricks 위젯

DataBricks 위젯과 그 사이에있는 다른 것들을 사용하는 방법

Unsplash의 이미지

소개

저는 최근에 지난 2 개월 동안 DataBricks를 더 자주 사용하기 시작했고 그것에 대해 많은 기분 변화가있었습니다. 1 분은 매우 감명을 받고, 1 분은 몹시 싫어합니다. 공정하게 말하면, 그것에 대한 많은 부정적인 감정은 익숙해 져야한다는 사실과 연결될 수 있으며, 나는 그것을 할 시간이 부족하다는 것을 알게됩니다.

그러나 DataBricks는 무엇입니까?

간단히 말해, DataBrick은 Jupyter 노트북과 비슷하지만 훨씬 더 많은 기능을 제공합니다. Jupyter 노트북을 능가합니다.

단지 예를 들어, 언어 이름 다음에 % 기호를 사용하여 하나의 노트북에 스파크 SQL 스칼라, 연구 및 파이썬 코드를 실행할 수있는 것은 %sql, %python등
팀 노트북 액세스 및 지식 전달에 적합한 뛰어난 파일 구성이 있습니다. 즉, 팀에서 DataBricks를 사용하는 경우 DataBricks의 이메일 주소 작업 공간을 통해 모든 사람의 노트북에 액세스 할 수 있습니다.
사용자는 클러스터를 통해 계산 능력을 조정할 수 있습니다.

위젯을 필터라고 생각하십시오. whereSQL 의 절이나 Tableau의 필터 섹션과 같습니다.

DataBricks에는 세 가지 주요 유형의 위젯이 있습니다.

텍스트 위젯 — 노트북 상단에 텍스트 상자를 생성하고 사용자 (또는 사용자)는 열의 카테고리 또는보기 만 원하는 데이터를 입력 할 수 있습니다.
드롭 다운 단일 선택 위젯 — 노트북 상단에 열에 미리 결정된 기본 필드를 표시하는 드롭 다운 상자를 만듭니다. 이 유형의 위젯은 드롭 다운과 콤보 상자의 두 가지 유형으로도 제공됩니다.
드롭 다운 다중 선택 위젯 — 드롭 다운 단일 선택 위젯과 유사합니다. 유일한 차이점은 하나가 아닌 한 번에 여러 필드를 클릭 할 수 있다는 것입니다.

DataBrick에서 모든 유형의 위젯을 만드는 것은 일반적인 코드 패턴을 가지며 네 가지 구성 요소로 나눌 수 있습니다.

CREATE WIDGET절로 시작
위젯 유형에 따라
그런 다음 위젯 변수를 식별하는 위젯 이름을 지정하십시오.
마지막으로 DEFAULT명령과 기본 선택 단어입니다. 기본 단어는 위젯 아이콘에 기본값으로 표시되는 단어입니다.

CREATE WIDGET <widget type> <widget variable name> DEFAULT <Default category word>

때문에 드롭 다운 위젯 유형 올바른 카테고리를 반영하여 선택의 열을 지정 요구하는 select문은 기본 단어 뒤에 추가됩니다.

이 select 문은 다음과 같습니다.

SELECT DISTINCT <<column name>> 
FROM <<tablename>>

텍스트 위젯 용

CREATE WIDGET TEXT Policy_product_name DEFAULT 'Car Classic'

CREATE WIDGET DROPDOWN policy_product_name DEFAULT 'Car Classic' CHOICES 
SELECT DISTINCT product_name 
FROM train_csv

CREATE WIDGET COMBOBOX policy_product_name DEFAULT 'Car Classic' CHOICES 
SELECT DISTINCT product_name 
FROM train_csv

CREATE WIDGET MULTISELECT policy_product_name DEFAULT 'Car Classic' CHOICES 
SELECT DISTINCT product_name 
FROM train_csv

참고 : 위젯 드롭 다운 및 텍스트 상자는 노트북 도구 모음 바로 아래에 나타납니다.

작성자의 이미지

위젯 활용 방법

위젯을 만드는 것은 위젯을 활용하는 한 단계입니다. 두 번째 단계는 위젯을 데이터 / 테이블에 연결하여 필터 역학을 제어하는 것입니다.

다음은 위젯을 연결하는 샘플 쿼리입니다.

SELECT * 
FROM <table name> 
WHERE <column name> = getArgument(<widget name>)

이 경우 where 절은 필터링 할 열 또는 필드를 지정합니다.
where 절 getArgument()에는 위젯의 이름을 입력으로 사용 하는 추가 함수 가 있습니다.

요약하자면 위젯 활용은 두 단계로 이루어집니다.

1 단계 : 위젯 만들기

2 단계 : 생성 된 위젯을 쿼리하려는 테이블에 연결

위젯 제거

위젯을 제거하려면 다음 쿼리를 입력하십시오.

REMOVE WIDGET <name>

위의 코드는 모든 위젯 유형에서 작동하지만 제거 할 위젯이 많은 경우 여러 번 실행하고 위젯 이름을 조정해야합니다.

한 번에 모든 위젯을 제거하려면 다음 쿼리를 입력 할 수 있습니다.

%python
dbutils.widgets.removeAll()

데이터 브릭 위젯 사용에 대한 팁

기본적으로 위젯 설정은 일반적으로 노트북 모드 에서 실행 됩니다. 즉, 드롭 다운 옵션이든 서면 텍스트이든 필터 범주를 변경할 때마다 노트북의 모든 셀이 자동으로 실행됩니다. 이것은 때때로 성 가실 수 있습니다. 위젯을 만들 때만 나타나는 왼쪽 상단의 설정 아이콘을 클릭하여 위젯 설정을 조정할 수 있습니다. 그것을 클릭하면 팝업 위젯 패널 설정 대화 상자가 나타납니다. 선택할 수있는 세 가지 모드가 있습니다. 이것이 인터페이스의 모습입니다.

작성자의 이미지

2. 세 가지 위젯 유형을 모두 동시에 사용할 수 있지만 (사용 사례가 발생하는 경우), 기본적으로 위젯 옵션을 변경할 때마다 노트북이 실행되므로 이름으로 구분해야합니다. 두 개의 다른 위젯 유형에 대해 하나의 이름이있는 경우 마지막으로 실행 된 쿼리가 이전 쿼리를 재정의합니다.

내 2 센트

저는 개인적으로 텍스트 위젯이나 다중 선택 위젯을 사용하지 않습니다. 아직 사용 사례가 없었기 때문입니다. 내 이동 위젯 유형은 드롭 다운 또는 콤보 박스입니다.
Dropdown과 Combobox 사이에도 큰 차이가 없습니다. 차이점은 주로 위젯 인터페이스에 있습니다.
빠른 시각적 프레젠테이션을 수행하려면 DataBricks의 대시 보드 기능과 함께 위젯을 사용할 수 있습니다.