At 3Pillar, our focus is on leveraging cutting-edge technologies that revolutionize industries by enabling data driven decision making. As a Senior Data Engineer, you will hold a crucial position within our dynamic team, actively contributing to thrilling projects that reshape data analytics for our clients, providing them with a competitive advantage in their respective Industries. if your passion for data analytics solutions that make a real-world impact, consider this your pass to the captivating world of Data Science and Engineering! 🔮🌐
Key Responsibilities
Design, develop, and optimize scalable ETL/ELT pipelines for enterprise data platforms
Build and maintain robust data solutions using Snowflake, Python, and AWS services
Develop advanced SQL queries using CTEs, window functions, query tuning, and performance optimization techniques
Work with Snowflake warehouses, tasks, streams, and data pipelines for efficient data processing
Create and maintain data transformation workflows using dbt (data build tool)
Develop reporting datasets and support dashboarding solutions using Amazon QuickSight
Perform data validation, data integrity checks, and root cause analysis to ensure data accuracy and reliability
Integrate and manage data across platforms including DynamoDB, S3, AWS Glue, Lambda, and Rockset
Collaborate with cross-functional teams including analytics, product, and clinical stakeholders to support reporting requirements
Monitor pipeline performance and troubleshoot production data issues
Required Skills
Strong experience in SQL including:
CTEs
Window Functions
Query Optimization
Performance Tuning
Hands-on experience with Snowflake:
Warehouses
Streams
Tasks
Data Loading and Optimization
Experience in Python for data processing and pipeline development
Experience with AWS services:
AWS Glue
Lambda
S3
Good knowledge of dbt (Data Build Tool)
Experience in creating dashboards and reports using Amazon QuickSight
Diese Cookies sind für das Funktionieren der Website erforderlich und können in unseren Systemen nicht abgeschaltet werden. Sie können Ihren Browser so einstellen, dass er diese Cookies blockiert, aber dann könnten einige Teile der Website nicht funktionieren.
Sicherheit
Benutzererfahrung
Zielgruppenorientierte Cookies
Diese Cookies werden über unsere Website von unseren Werbepartnern gesetzt. Sie können von diesen Unternehmen verwendet werden, um ein Profil Ihrer Interessen zu erstellen und Ihnen an anderer Stelle relevante Werbung zu zeigen.
Google Analytics
Google Ads
Wir benutzen Cookies
🍪
Unsere Website verwendet Cookies und ähnliche Technologien, um Inhalte zu personalisieren, das Nutzererlebnis zu optimieren und Werbung zu indvidualisieren und auszuwerten. Indem Sie auf Okay klicken oder eine Option in den Cookie-Einstellungen aktivieren, stimmen Sie dem zu.
Die besten Remote-Jobs per E-Mail
Schliess dich über 5'000+ Personen an, die wöchentlich Benachrichtigungen über Remote-Jobs erhalten!