Google Cloud 프로페셔널 데이터 엔지니어 인증 시험에 합격한 방법

권장되는 3년의 실무 경험이 없는 경우

강좌 시작을 앞두고 데이터 엔지니어, 우리는 미래의 데이터 엔지니어에게 확실히 유용할 매우 흥미로운 이야기의 번역을 여러분과 공유하고 싶습니다. 가다!

Google 후드티: 착용했습니다. 진지하게 일하는 표정: 현재. 이 기사의 비디오 버전 사진 유튜브.

메모. 이 도움말은 29년 2019월 XNUMX일에 마감되는 Google Cloud Professional Data Engineer 자격증 시험에 관한 것입니다. 이 날짜 이후 몇 가지 변경 사항이 발생했습니다. Extras 섹션에 포함시켰습니다.

그럼 내 표지에 나온 것과 같은 새 후드티를 사고 싶나요? 아니면 자격증을 취득할 예정인가요? Google Cloud 전문 데이터 엔지니어 그리고 어떻게 해야 할지 궁금합니다.

지난 몇 달 동안 저는 Professional Data Engineer 시험을 준비하기 위해 Google Cloud를 사용하는 과정을 수강해 왔습니다. 그러다가 패스하려고 했더니 패스했어요. 그리고 몇 주 후에 내 후드티가 도착했습니다. 인증서가 더 빨리 도착했습니다.

이 문서에는 여러분이 알고 싶어할 만한 몇 가지 사항과 Google Cloud 전문 데이터 엔지니어 인증을 받기 위해 제가 밟은 단계가 나열되어 있습니다.

Google Cloud 전문 데이터 엔지니어 자격증을 취득하려는 이유는 무엇인가요?

데이터는 어디에나 있습니다. 그리고 데이터를 처리하고 사용할 수 있는 시스템을 만드는 방법을 아는 것이 요구됩니다. Google Cloud는 이러한 시스템을 구축하기 위한 인프라를 제공합니다.

이미 Google Cloud를 사용할 수 있는 기술을 갖추고 있을 수도 있지만 이를 미래의 고용주나 고객에게 어떻게 보여줄 것인가요? 프로젝트 포트폴리오 또는 인증의 두 가지 방법이 있습니다.

이 인증서는 미래의 고객과 고용주에게 "나는 기술을 보유하고 있으며 인증을 받기 위해 노력했습니다"라고 알려줍니다.

Google의 간단한 설명이 이를 요약합니다.

Google Cloud Platform에서 데이터 처리 시스템을 설계 및 구축하고 머신러닝 모델을 생성하는 능력을 입증하세요.

아직 기술이 없다면 인증 교육 자료를 통해 Google Cloud에서 세계적 수준의 데이터 시스템을 구축하는 방법에 대한 모든 것을 배울 수 있습니다.

Google Cloud 전문 데이터 엔지니어 인증을 받고 싶은 사람은 누구인가요?

당신은 숫자를 보았습니다. 클라우드가 성장하고 있습니다. 그것은 이미 여기에 있으며 아무데도 가지 않을 것입니다. 아직 수치를 보지 못했다면 제 말을 믿으세요. 클라우드는 성장하고 있습니다.

이미 데이터 과학자, 데이터 엔지니어, 데이터 분석가, 머신러닝 엔지니어이거나 데이터 세계에서 경력을 찾고 있다면 Google Cloud 전문 데이터 엔지니어 자격증이 적합합니다.

클라우드 기능은 모든 데이터 중심 위치에 대한 요구 사항이 되고 있습니다.

훌륭한 데이터 엔지니어/데이터 과학자/기계 학습 엔지니어가 되려면 인증서가 필요합니까?

아니오.

인증서 없이도 데이터 솔루션에 Google Cloud를 사용할 수 있습니다.

인증서는 기존 기술을 검증하는 한 가지 방법일 뿐입니다.

비용은 얼마입니까?

시험 비용은 $200입니다. 실패하면 다시 시도하기 위해 다시 비용을 지불해야 합니다.

교육 과정 및 플랫폼 자체 사용과 관련된 비용이 발생할 수 있습니다.

플랫폼 비용은 Google Cloud 서비스 사용에 대한 수수료입니다. 숙련된 사용자라면 이미 이 사실을 알고 계실 것입니다. 그렇지 않은 경우 이 문서의 튜토리얼을 이제 막 시작했다면 새 Google Cloud 계정을 만들고 가입 시 Google에서 제공하는 300달러 혜택을 누릴 수 있습니다.

잠시 후에 코스 비용을 알아보겠습니다.

인증은 언제까지 유효합니까?

2 년. 그 후에는 다시 시험에 응시해야 합니다.

그리고 Google Cloud는 나날이 발전하고 있기 때문에 인증서에 필요한 사항도 바뀔 가능성이 높습니다(알아보니 이 글을 쓰기 시작했을 때 이미 변경되어 있었습니다).

시험을 준비하려면 무엇이 필요합니까?

Google은 전문가 수준 인증을 위해 3년 이상의 업계 경험과 1년 이상의 GCP 사용 솔루션 개발 및 관리를 권장합니다.

나는 위의 어느 것도 가지고 있지 않았습니다.

관련 경력은 최대 6개월입니다. 부족한 부분을 보완하기 위해 온라인 학습 리소스를 조합하여 사용했습니다.

내가 수강한 강좌는 무엇인가요?

당신이 나와 같고 권장 요구 사항이 없다면 다음 과정 중 일부를 수강하여 자격 수준을 높일 수 있습니다.

제가 자격증을 준비할 때 사용한 강좌는 다음과 같습니다. 완료순으로 나열되어 있습니다.

각 인증 시험에 응시하는 비용, 시기, 유용성을 나열했습니다.

시험 전에 기술을 향상시키는 데 사용한 훌륭한 온라인 리소스 중 일부입니다. 순서대로: 클라우드 전문가, 리눅스 아카데미 и Coursera.

Coursera의 Google Cloud Platform 데이터 엔지니어링

비용: $49/월 (7일 무료 체험 후)
시간: 1~2개월, 주당 10시간 이상
유용: 8 / 10

Coursera의 Google Cloud Platform 데이터 엔지니어링 Google Cloud와 협력하여 만들어졌습니다.

이 과정은 10개의 하위 과정으로 나누어져 있으며 각 과정은 주당 약 XNUMX시간의 교육 시간이 소요됩니다.

Google Cloud 데이터 과학을 처음 접하는 경우 이 전문 분야를 통해 레벨 0에서 레벨 1로 이동할 수 있습니다. QwikLabs라는 반복 플랫폼을 사용하여 일련의 실습을 진행하게 됩니다. 이에 앞서 구글 빅쿼리(Google BigQuery), 클라우드 데이터프록(Cloud Dataproc), 데이터플로우(Dataflow), 빅테이블(Bigtable) 등 다양한 서비스 활용 방법에 대해 구글 클라우드 실무자들의 강의가 진행될 예정이다.

Google Cloud Platform에 Cloud Guru 소개

비용: 무료
시간: 1주, 4~6시간
유용: 4 / 10

낮은 유용성 점수를 해당 강좌가 유용하지 않다는 표시로 받아들이지 마십시오. 이것은 사실과 거리가 멀다. 점수가 낮은 유일한 이유는 이름에서 알 수 있듯이 Professional Data Engineer 인증에 중점을 두지 않기 때문입니다.

Coursera 전문화 과정을 마친 후 저는 몇 가지 전문적인 사용 사례에만 Google Cloud를 사용했기 때문에 이 과정을 다시 복습하는 것으로 보았습니다.

다른 클라우드 제공업체를 이용하거나 이전에 Google Cloud를 사용해 본 적이 없다면 이 과정을 수강하는 것이 좋습니다. 이는 Google Cloud Platform 전반에 대한 훌륭한 소개입니다.

Linux Academy의 Google 인증 전문 데이터 엔지니어

비용: $49/월 (7일 무료 체험 후)
시간: 1~4주, 주당 4시간 이상
유용: 10 / 10

시험을 마치고 수강한 과목을 되돌아보니 가장 도움이 되었던 것은 Linux Academy의 Google 인증 전문 데이터 엔지니어.

영상도 그렇고 데이터 서류 전자책 (강좌와 함께 제공되는 우수한 무료 학습 리소스) 및 연습 시험을 통해 이 강의는 제가 사용해 본 최고의 학습 리소스 중 하나가 되었습니다.

시험이 끝난 후 팀에 Slack 노트를 보낼 때 참고 자료로 추천하기도 했습니다.

Slack의 메모

• 시험의 일부 사항은 Linux Academy, Cloud Guru 또는 Google Cloud Practice 시험에 나와 있지 않았습니다(예상).
• 어떤 방정식으로 그룹화해야 하는지에 대한 데이터 포인트 그래프가 포함된 질문 1개(예: cos(X) 또는 X² + Y²)
• Dataflow, Dataproc, Datastore, Bigtable, BigQuery, Pub/Sub의 차이점과 사용 방법을 아는 것이 필수입니다.
• 시험 중에 이 연구를 전혀 언급하지 않았지만(질문은 충분한 이해를 제공했습니다) 시험에 나온 연구의 두 가지 실제 사례는 실제 세션의 연구와 정확히 동일했습니다.
• 기본 SQL 쿼리 구문을 아는 것은 특히 BigQuery 질문의 경우 매우 유용합니다.
• Linux Academy와 GCP에서 제공하는 연습 시험은 시험 문제와 스타일이 매우 유사하므로 각 시험을 여러 번 풀고 이를 사용하여 약점을 파악하겠습니다.
• Dataproc에 도움이 되는 작은 팁: "데이터 프록 악어와 하둡 코끼리는 계획을 세웠어요 불꽃 불을 피우고 요리를 하다 하이브 of 돼지" {악어 데이터 프록 그리고 코끼리 하둡 불을 피울 계획 (불꽃 - 불꽃을 일으키다, 불을 일으키다 - 불을 피우다) 떼를 준비하다 (하이브) 돼지 (돼지)} (Dataproc은 Hadoop, Spark, Hive, Pig를 다룹니다.)
• «데이터 흐름 흐르는 것입니다 빔 빛의" {데이터 흐름 이것이 현재 광선입니다(빔) light} (Dataflow는 Apache Beam을 다룹니다.)
• "모든 사람 세계 각국 와 관련될 수 있다 잘 만들어진 ACID 워싱 스패너" {누구나 전 세계에 정제된 산을 처리할 수 있습니다(ACID) 좋은 스패너(Spanner) 사용} (Cloud Spanner는 클라우드를 시작하기 위해 설계된 데이터베이스로, ACID를 준수하며 전 세계에서 사용할 수 있습니다.)
• 관계형 및 비관계형 데이터베이스(예: MongoDB, Cassandra)의 기존 버전 이름을 아는 것이 유용할 수 있습니다.
• IAM 역할은 서비스마다 조금씩 다르지만 워크플로 설계 기능을 그대로 유지하면서 사용자가 데이터를 볼 수 없도록 분리하는 방법을 이해하는 것이 유용합니다. 예를 들어 'Dataflow Worker' 역할은 워크플로를 설계할 수 있지만 데이터를 볼 수는 없습니다. )

지금은 이것으로 충분할 것입니다. 마일리지는 시험마다 다를 수 있습니다. Linux Academy 과정은 지식의 80%를 제공합니다.

Google Cloud 1분 동영상

비용: 무료
시간: 1~2시간
유용: 5 / 10

Cloud Guru 포럼에서 추천되었습니다. 그 중 대부분은 Professional Data Engineer 인증과 관련이 없었지만 적합한 몇 가지를 선택했습니다.

일부 서비스는 강좌를 진행하면서 탐색하기 어려워 보일 수 있는데, 특정 서비스에 대해 XNUMX분 안에 설명을 들을 수 있어서 좋았습니다.

클라우드 프로페셔널 데이터 엔지니어 시험 준비

비용: 인증서당 $49 또는 무료(인증서 없음)
시간: 1~2주, 주당 6시간 이상
유용: N / A

시험 일정이 잡혀 있기 하루 전에 이 자료를 찾았습니다. 시간의 제약으로 끝내지 못해서 유용성 평가가 부족했습니다.

하지만 과정 개요 페이지에 따르면 Google Cloud의 데이터 엔지니어링에 관해 배운 모든 내용을 종합하고 약한 부분을 강조할 수 있는 훌륭한 리소스처럼 보입니다.

저는 자격증 취득을 준비하고 있는 동료에게 자료로 이 과정을 추천했습니다.

Meverik Lin이 작성한 Google 데이터 엔지니어링 요약본

비용: 무료
시간: 해당 사항 없음
유용: 해당 사항 없음

이것은 시험 후에 제가 발견한 또 다른 자료였습니다. 제 생각에는 이 글은 포괄적이면서도 간결합니다. 게다가 무료입니다. 연습 시험 사이 또는 인증 후에도 지식을 복습하기 위해 읽는 데 사용할 수 있습니다.

강좌가 끝난 후 나는 무엇을 했나요?

과정이 끝나갈 무렵, 일주일 전에 미리 시험을 예약했습니다.
마감일을 정하는 것은 배운 내용을 강화하는 데 큰 동기가 됩니다.

저는 Linux Academy와 Google Cloud에서 연습 시험을 여러 번 치르고 매번 95% 이상의 정확도로 완료할 수 있었습니다.

처음으로 Linux Academy 연습 시험에 90% 이상의 성적으로 합격했습니다.

각 플랫폼의 테스트는 비슷하지만, 계속 틀리는 문제를 풀고 왜 틀렸는지 적는 것이 나의 약한 부분을 강화하는 데 도움이 되었다는 것을 알았습니다.

제가 치른 시험에서는 Google Cloud에서 데이터 시스템을 개발하기 위한 두 가지 예시 연구 프로젝트를 주제로 사용했습니다(29년 2019월 XNUMX일부터 변경되었습니다). 그리고 그것은 전체적으로 객관식이었습니다.

약 2 시간이 걸렸습니다. 그리고 그것은 제가 치른 어떤 시험보다 약 20% 더 어려웠습니다.

연습 시험의 가치는 충분히 표현할 수 없습니다.

다시 가면 무엇이 달라지나요?

더 많은 연습 시험. 더 실용적인 지식.

물론, 항상 더 많은 준비를 할 수 있습니다.

권장 요구사항에는 3년 이상의 GCP 사용이 포함됩니다. 하지만 나에게는 그런 것이 없었기 때문에 내가 가진 것을 처리해야했습니다.

추가

29월 XNUMX일 시험이 업데이트되었습니다. 이 기사에 제시된 자료는 여전히 좋은 기초를 제공하지만 몇 가지 변경 사항을 언급하는 것이 중요합니다.

Google Cloud Professional Data Engineer 시험의 다양한 섹션(1 버전)

1. 데이터 처리 시스템 설계
2. 구조와 데이터베이스의 생성 및 지원.
3. 데이터 분석 및 머신러닝 연계
4. 분석 및 최적화를 위한 비즈니스 프로세스 모델링
5. 신뢰성 확보
6. 데이터 시각화 및 정책 지원
7. 안전 및 규정 준수를 위한 설계

Google Cloud Professional Data Engineer 시험의 다양한 섹션(2 버전)

1. 데이터 처리 시스템 설계
2. 전산시스템 구축 및 운영
3. 기계 학습 모델의 운영화(대부분의 변경 사항이 여기에서 발생함) [새로운]
4. 솔루션 품질 보장

버전 2는 버전 1의 섹션 2, 4, 6, 1을 1과 2로 결합했습니다. 또한 버전 5의 섹션 7와 1을 섹션 4로 병합했습니다. 그리고 버전 3의 섹션 2은 Google Cloud의 새로운 머신 전체를 포괄하도록 확장되었습니다. 학습능력.

이러한 변경 사항은 최근에 이루어진 것이기 때문에 많은 학습 자료가 업데이트될 기회가 없었습니다.

하지만 이 글을 읽는 것만으로도 필요한 내용의 70%를 다룰 수 있을 것입니다. 나는 이것을 다음 질문에 대한 귀하의 연구와 결합할 것입니다(이 질문은 시험의 두 번째 버전에서 제시되었습니다).

• 기계 학습 API(ML - 기계 학습) Google
• 구글 클라우드 머신러닝 엔진
• Google Cloud TPU (ML 훈련을 위해 특별히 Google에서 개발한 맞춤형 하드웨어)
• Google ML 용어집

보시다시피 최신 시험 업데이트는 Google Cloud의 ML 기능에 중점을 두었습니다.

업데이트 29/04/2019: Linux Academy 과정 교사 Matthew Ulasein의 메시지입니다.
참고로 저희는 XNUMX월 중순/하순부터 새로운 방향을 반영하기 위해 Linux Academy의 데이터 엔지니어 과정을 업데이트할 계획입니다.

시험 후

시험에 응시하면 합격 또는 불합격 결과만 받게 됩니다. 저는 최소 70% 이상을 목표로 삼는 것을 권하기 때문에 연습 시험에서도 최소 90%를 목표로 했습니다.

합격하면 공식 Google Cloud Professional Data Engineer 인증과 함께 이메일을 통해 신청 코드를 받게 됩니다. 축하해요!

다양한 상품이 가득한 독점적인 Google Cloud Professional Data Engineer 스토어에서 쿠폰 사용 코드를 사용할 수 있습니다(SWAG). 티셔츠, 백팩, 후드티가 있습니다(도착 시점에 따라 재고가 다를 수 있습니다). 저는 후드티를 선택했어요.

이제 인증을 받았으므로 귀하의 기술을 (공식적으로) 과시하고 다시 귀하가 가장 잘하는 일, 즉 구축 작업을 시작할 수 있습니다.

재인증을 위해 XNUMX년 후에 뵙겠습니다.

추신: 질문이 있거나 무엇인가에 대한 설명이 필요한 경우 다음 주소에서 저를 만나실 수 있습니다. 트위터 и 링크드인. 에 유튜브 이 기사의 비디오 버전도 있습니다.
PPS : 위의 모든 과정을 담당해주신 훌륭한 선생님들께 깊은 감사를 드립니다. 맥스 켈젠 시험을 공부하고 준비할 수 있는 자원과 시간을 제공합니다.

그리고 과정 프로그램, 온라인 형식의 특징, 훈련 후 졸업생을 기다리는 기술, 역량 및 전망에 대해 더 자세히 알고 싶은 모든 분들을 초대합니다. 오픈 데이, 오늘 20.00에 진행됩니다.

출처 : habr.com