Data engineering met Databricks
Databricks biedt een uitgebreide set van functies voor data engineering, waaronder een robuuste omgeving voor samenwerking tussen gegevenswetenschappers, technici en analisten. Via het midden hiervan bevinden zich de pijplijnen die de gegevens opnemen en transformeren . Databricks biedt Structured Streaming en Delta Live Tablesom eenvoudige engineering van de meest efficiƫnte pijplijnen mogelijk te maken. Zie streamen op Azure Databricks en Wat is Delta Live Tables?.
Voor een overzicht van waarom incrementele stroomverwerking van gegevens, geleverd door Structured Streaming en Delta Live Tables, de beste optie is voor gegevenspijplijnen, raadpleeg Waarom incrementele stroomverwerking?.
Aanvullende data engineering-resources
Databricks biedt functies voor data engineering-taken voor veel extra scenario's:
- Databricks-notebooks zijn een populair hulpmiddel voor samenwerking.
- Uw werkstromen plannen en organiseren met Behulp van Databricks-taken.
- Zie Databricks Mosaic AI als u machine learning-oplossingen ontwerpt.
Notitie
Als u voornamelijk met SQL-query's en BI-hulpprogramma's werkt, raadpleegt u Databricks SQL.
Zie Get aan de slag en inleidende informatie over Azure Databricks en Wat is Azure Databricks?.
Naam | Gebruik dit als u wilt... |
---|---|
Delta Live Tables | Meer informatie over het bouwen van gegevenspijplijnen voor opname en transformatie met Databricks Delta Live Tables. |
Gestructureerd streamen | Meer informatie over streaming-, incrementele en realtime workloads die worden mogelijk gemaakt door Structured Streaming op Databricks. |