本稿では、Notebookの本番化という共通課題に対するDatabricks LakeflowとNetflix Metaflowの2つのアプローチを、設計思想の違いから比較しました。 *このブログは著者の個人的見解であり、所属する会社の公式見解ではありません。* データサイエンティストが直面 ...

本稿では、Databricksは、データパイプラインの領域において、なぜノートブック中心のアーキテクチャからLakeflowへ戦略転換したのか、技術的限界・競合環境・市場拡大の3つの視点から整理しました。 ※Databricksはデータ分析、データサイエンスについて ...

send_slack_message(“”, f”Ocorreu uma falha na execução do notebook: {nbexcluidados.path}“) No exemplo acima, eu faço toda a minha etapa de “ETL” de forma sequencial, visto que, em meu caso, os ...