Fala, pessoal.
Nesse vídeo eu mostro como criar seus notebooks em #Python sem precisar sair do Google #BigQuery!
Cada vez mais o BigQuery vai se transformando e se tornando uma plataforma all-in-one. Tanto que agora é possível criar scripts em Python, procedures com PySpark, além de no futuro trabalhar com dados semi ou não estruturados.
É possível criar através do editor, de uma tabela, de resultado de consultas ou através de algum notebook já existente.
Outra coisa legal é que é possível fazer upload de seus notebooks locais.
Segue passo a passo para ativar as APIs e definir as permissões necessárias:
1) Ative a API BigQuery.
2) Ative a API do Compute Engine.
3) Ative a API do Dataform.
4) Ative a API do Vertex AI.
Permissões:
- Usuário do ambiente de execução do notebook (roles/aiplatform.notebookRuntimeUser)
- Editor de código (roles/dataform.codeEditor)
- Usuário do BigQuery Studio(roles/bigquery.studioUser)