Hasitha is available for hire

Hasitha Ranawaka

Verified Expert in Engineering

数据工程师和软件开发人员

Location

康提，斯里兰卡中部省

Toptal Member Since

September 5, 2022

Hasitha立志成为为全球企业架构数据驱动解决方案的领导者. 他是一位具有数据工程专业知识的多技能工程师, cloud-native development, and engineering. 作为一名数据工程师，他在构建高度可扩展的数据平台方面经验丰富. 作为一名认证的云架构师，Hasitha擅长实施最先进的云解决方案. 作为一名工程师，他精通不同制造工艺的技术.

Portfolio

eSolution

Amazon Web Services (AWS)， Oracle, PostgreSQL, Oracle RDS, Amazon EC2...

evTerra Recycling, LLC

Microsoft Power BI, REST API, API设计，ClickUp...

Braven, Inc.

BigQuery，数据工程，Apache气流，Tableau，数据仓库...

Experience

Data Warehousing - 4 years Data Lakes - 4 years SQL - 4 years 亚马逊网络服务(AWS)——4年 ETL Tools - 4 years Python - 4 years Data Engineering - 4 years Microsoft Power BI - 4 years

Availability

Part-time

Preferred Environment

Amazon Web Services (AWS)， Python, Visual Studio Code (VS Code)， SQL, Apache Airflow

The most amazing...

...我构建了一个数据湖解决方案，将七个国家的七个企业资源规划系统集成到Oracle云基础设施中.

Work Experience

AWS解决方案架构师顾问(兼职)

2023 - PRESENT

eSolution

架构基于oracle的本地容灾环境向AWS云的迁移, 消除因数据中心关闭而导致业务中断的风险.
使用AWS数据库迁移服务(DMS)实现Oracle Cloud Infrastructure (OCI)到Amazon RDS的PostgreSQL数据库迁移.
就使用AWS DMS通过逻辑数据库复制为Oracle数据库实现自定义高可用性RDS提供咨询.

技术:亚马逊网络服务(AWS)， Oracle, PostgreSQL, Oracle RDS, Amazon EC2, Oracle Cloud Infrastructure (OCI), AWS数据库迁移服务(DMS)

Microsoft Power BI Expert

2023 - PRESENT

evTerra Recycling, LLC

开发和维护Microsoft Power BI仪表板，用于报告采购职能领域的需求, inventory, sales, and manufacturing.
Implemented cost-effective, 可扩展的数据管道，从REST api中提取和转换数据，消除了手动数据准备.
与EPR开发人员合作，在ERP中实现业务需求，从而更好地报告和使用数据.

Technologies: Microsoft Power BI, REST API, API设计，ClickUp, Enterprise Resource Planning (ERP), Excel 365, Microsoft 365

Airflow and BigQuery Data Engineer

2023 - PRESENT

Braven, Inc.

实现气流ETL管道，以支持组织范围的分析工作负载.
启动和管理从Periscope到Tableau的仪表板迁移, 减少数周的数据准备清理工作量.
在BigQuery上为OLAP工作负载构建核心数据模型，以填充Tableau仪表板.
执行维护天文学家气流环境，以保持生产工作负载运行不中断.
实现了一个为PostgreSQL数据库量身定制的灾难恢复系统，恢复点目标为30分钟，恢复时间目标为15分钟.
通过更好的数据可视化和优化的业务逻辑实现增强了数据报告层.

Technologies: BigQuery，数据工程，Apache气流，Tableau，数据仓库, Data Warehouse Design, Google Cloud Platform (GCP), ETL, Salesforce, Salesforce API, Enterprise Resource Planning (ERP), REST APIs, API Design

数据工程和数据科学专家

2021 - 2023

Stretchline Holdings

通过集成七个国家的七个企业资源规划(ERP)系统，在Oracle Cloud Infrastructure中实施了一个数据湖解决方案.
开发高可用性和可扩展的etl，使用Oracle data Integrator将数据从源ERP系统获取到数据湖.
通过利用数据湖实现自动化和组织化的财务报告流程，从而减少工作量并提高准确性.
为财务职能领域的管理层创建洞察生成仪表板, sales, and manufacturing.
与不同的利益相关者合作，为组织带来数据驱动的决策文化.
启动大数据基础设施实施，整合传统ERP生态系统之外的数据源.

Technologies: Data Engineering, Data Science, ETL Tools, Data Lakes, Data Warehousing, SQL, Python, Oracle Data Integrator (ODI), Oracle Cloud, Automation, Data Pipelines, ELT, Dimensional Modeling, ETL, Business Intelligence (BI), JDBC, Databases, R Programming, Digital Manufacturing, Excel 365, Cron, Data Warehouse Design, Oracle Database, Data Analytics, Big Data, Git, Power Query, Applied Mathematics, Database Design, Data Analysis, Data Architecture, Data Visualization, Automated Data Flows, Reports, SQL Stored Procedures, Stored Procedure, OLAP, Schemas, Jupyter Notebook, JSON, Oracle, Database Administration (DBA), Relational Databases, BI Reporting, Reporting, Microsoft Excel, Statistical Modeling, Data Transformation, Dashboard Development, Star Schema, Data Processing, Data Processing Automation, CSV, Scripting, Crystal Reports, SSRS Reports, SQL Server报表服务(SSRS), Data Queries, BigQuery, Google BigQuery, Macros, Excel 2016, XML for Analysis (XMLA), Microsoft Power BI, Dashboards, BI Reports, Pipelines, Apache Spark, Query Optimization, Partitioning, Data Mining, Big Data Architecture, Oracle SQL Developer, Oracle SQL Data Modeler, Dashboard Design, Web Analytics, XML, Microsoft SQL Server, Web Scraping, NoSQL, ODBC, Enterprise Resource Planning (ERP), REST APIs, API Design, Microsoft Word, Excel Macros, DAX, Microsoft 365

Excel and Macros Developer

2022 - 2022

ORBEAT MANAGEMENT CORP

开发一个基于给定输入集创建合同的自动化工作流.
编写了一个应用程序脚本代码，从Google Sheet中读取数据并生成合同文件.
在客户端环境中实现解决方案.

Technologies: Microsoft Excel, Macros, Excel 2010, Excel 2016, G Suite, Google Apps Script, Automation, Google Sheets, APIs, REST APIs

Senior AI and ML Consultant

2021 - 2021

Averyx Group

开发基于机器学习的算法交易策略和投资组合管理技术.
与团队合作开发高度可扩展的机器学习解决方案.
使用版本控制系统GIT维护代码库.

Technologies: Amazon EC2, Machine Learning, Reinforcement Learning, Deep Reinforcement Learning, Git, Databases, Excel 365, APIs, Data Analytics, Data Analysis, Amazon Web Services (AWS), Schemas, Jupyter Notebook, JSON, Relational Databases, CSV, Scripting, Data Queries, Microsoft Excel, Macros, Excel 2016, Statistics, Forecasting, Pipelines, Amazon RDS, AWS Cloud Architecture, Data Mining, Microsoft SQL Server, Web Scraping, REST APIs, API Design, Microsoft 365

Quantitative Analyst

2020 - 2021

Cairnhill Capital Management

开发了基于不同级别的财务和统计过滤器的算法来构建公司股票投资组合.
自动化整个投资组合创建过程，缩短了两天的交付时间.
对公司的代码库进行版本管理和维护.

Technologies: MATLAB, SQL, Python, Automation, Cron, APIs, Dimensional Modeling, ETL, MySQL, Databases, R Programming, Excel 365, Data Warehouse Design, Data Analytics, Git, Business Intelligence (BI), Power Query, Applied Mathematics, Database Design, Data Analysis, Schemas, Jupyter Notebook, JSON, CSV, Scripting, Data Queries, Microsoft Excel, Macros, Forecasting, Data Mining, XML, Microsoft SQL Server, Microsoft 365

执行供应商绩效管理

2020 - 2021

Brandix Apparel Limited

联络引进一套取消物料检查的制度，以简化程序及获得经济效益.
与团队成员合作建立上游风险评估流程，在批量生产前预测质量和颜色失效.
自动化供应商记分卡与微软Excel VBA.

Technologies: Python, Microsoft Power BI, Excel 365, Excel VBA, Automation, Data Science, Data Analytics, Git, Business Intelligence (BI), Power Query, Applied Mathematics, Data Analysis, Data Visualization, Reports, CSV, Scripting, Microsoft Excel, Macros, Excel 2016, Dashboards, XML, SharePoint, ODBC, Microsoft Word, Excel Macros, Visual Basic, Visual Basic for Applications (VBA), Visual Basic 6 (VB6), DAX, Microsoft 365

Experience

Project Cerebro | Oracle Cloud中的数据湖和数据仓库解决方案

Stretchline集团希望更多地以数据为导向，并在见解生成和决策中建立数据驱动的文化. For this reason, 它引发了对数据存储库的需求，以便将所有数据筒仓整合到一个平台中.

Cerebro项目是为了开发一个数据湖解决方案而启动的, 哪个充当提供执行描述性功能的所有数据筒仓的数据存储库, predictive, and prescriptive analysis. 我曾担任数据工程和数据科学专家，负责推动数据工程和数据科学方面的工作. 最初，公司在全球范围内的所有ERP系统都集成到Oracle Cloud中. 一旦数据在对象存储中可用, 开发etl是为了根据各种业务用例对其进行清理和构建，并将其加载到数据仓库中. etl是使用Oracle Data Integrator开发的，具有很高的可扩展性和可用性. 一旦相关的数据点在数据仓库中, 创建了几个Power BI仪表板来支持管理决策. Also, utilizing the object storage data, 许多机器学习算法被用于优化和增强生产系统.

“核心数据集”| GCP上所有组织分析需求的单一来源真理

Braven是美国的一个非营利组织，它通过提供指导来帮助学生开始他们的职业生涯，从而实现经济稳定. 该组织需要数据来确保其大学课程的质量，并需要许多操作仪表板来支持学生的参与.

作为核心数据集团队的一员, 我在BigQuery上合作开发了一个工业规模的数据仓库, 使整个组织能够访问正确质量的数据. BigQuery充当中央数据存储库和所有数据需求的单一事实来源. 构建核心数据集是为了以非规范化的形式处理大规模OLAP工作负载. Utilizing these core data models, 我创建了几个Tableau仪表板，以便向组织中更广泛的受众提供运营洞察力.

在AWS上无限的数据集成和分析

“无限”开创了新的商业途径, 哪些将作为新上线网站的一部分产生数据.

作为一名数据架构师，我设计并实现了数据集成和分析平台. The platform is based on AWS. 它通过SFTP (Secure File Transfer Protocol)和JDBC (Java database connectivity)连接从多个网站的后端接收数据，并将原始数据存储在Amazon S3桶中. 然后，Amazon EMR集群消费数据以执行所需的分析，并使用PySpark将分析就绪的数据推送到Redshift. Finally, 转换后的数据在AWS QuickSight中用于可视化和分析各种商业智能需求.

基于AWS的加密货币数据分析大数据平台

一位澳大利亚客户想要分析60种加密货币的MACD信号，以获得800万个MACD输入组合. MACD是加密货币交易中用于做出买入或卖出决策的指标.

我在AWS云上开发了一个全自动的数据平台，用于提取历史货币价格行为, 为所有800万种输入组合生成EMA和MACD信号, 从而创建回测报告来评估所有组合的性能. 使用AWS Lambda将价格动作数据摄取到Amazon S3桶中, 并使用AWS EMR进行转换. 所有数据转换都使用无服务器架构来执行，以最大限度地降低成本. 该过程使用AWS Lambda函数实现自动化, AWS Step Functions, and Amazon EventBridge services.

Skills

Languages

SQL, Python, Excel VBA, Stored Procedure, Visual Basic, Visual Basic for Applications (VBA), Visual Basic 6 (VB6), XML, Google Apps Script

Frameworks

Apache Spark, Spark

Tools

Microsoft Power BI, AWS Glue, Amazon Athena, Power Query, Microsoft Excel, BigQuery, Apache Airflow, Excel 2010, Excel 2016, Oracle SQL Data Modeler, Microsoft Word, MATLAB, Cron, Amazon Elastic MapReduce (EMR), Spark SQL, Git, Amazon QuickSight, Crystal Reports, Google Sheets, Tableau, G Suite, pgAdmin, Oracle Exadata

Paradigms

Business Intelligence (BI), ETL, Dimensional Modeling, Database Design, OLAP, Automation, Data Science

Platforms

Oracle Data Integrator (ODI), AWS Lambda, Oracle Database, Amazon EC2, Amazon Web Services (AWS), Jupyter Notebook, Oracle, SharePoint, Google Cloud Platform (GCP), Salesforce, Visual Studio Code (VS Code), Oracle Cloud Infrastructure (OCI)

Storage

Data Lakes, Oracle Cloud, Databases, AWS Data Pipeline Service, Amazon S3 (AWS S3), Data Lake Design, Redshift, Data Pipelines, MySQL, SQL Stored Procedures, PostgreSQL, Relational Databases, SQL Server报表服务(SSRS), Oracle SQL Developer, Microsoft SQL Server, JSON, Database Administration (DBA), NoSQL, MongoDB, DBeaver, Amazon DynamoDB, Oracle RDS

Other

Data Engineering, Data Warehousing, ETL Tools, Excel 365, Data Warehouse Design, Data Analytics, ELT, Data Analysis, Data Architecture, Data Visualization, Reports, Schemas, BI Reporting, Reporting, Statistical Modeling, Data Transformation, Dashboard Development, Star Schema, Data Processing, Data Processing Automation, CSV, Scripting, SSRS Reports, Data Queries, Google BigQuery, Macros, Dashboards, BI Reports, Pipelines, Data Build Tool (dbt), AWS Cloud Architecture, Dashboard Design, Web Scraping, Data Modeling, AWS Certified Solution Architect, Solution Architecture, Enterprise Resource Planning (ERP), Excel Macros, DAX, Microsoft 365, Digital Manufacturing, Applied Mathematics, APIs, Machine Learning, Big Data, Automated Data Flows, XML for Analysis (XMLA), Statistics, Forecasting, Amazon RDS, Query Optimization, Partitioning, Data Mining, Big Data Architecture, Web Analytics, API Design, R Programming, Web Servers, SFTP, Management Accounting, Reinforcement Learning, Deep Reinforcement Learning, Oracle Data Guard, ClickUp, AWS数据库迁移服务(DMS)

Libraries/APIs

PySpark, ODBC, REST API, JDBC, Salesforce API

Education

2015 - 2020

Bachelor's Degree in Engineering

莫拉图瓦大学-莫拉图瓦，斯里兰卡

Certifications

DECEMBER 2023 - DECEMBER 2026

AWS Certified Database - Specialty

Amazon Web Services

JUNE 2023 - DECEMBER 2024

Oracle自治数据库云2023认证专家

Oracle

MAY 2023 - MAY 2026

AWS认证解决方案架构师-专业

Amazon Web Services

OCTOBER 2021 - OCTOBER 2023

Oracle Cloud Infrastructure 2021架构师助理

Oracle

SEPTEMBER 2021 - SEPTEMBER 2023

Oracle云基础设施基金会2021年会员

Oracle

JUNE 2021 - PRESENT

介绍在AWS上设计数据湖

Coursera

JANUARY 2018 - PRESENT

商业会计证书(文学士证书)

英国特许管理会计师公会

Collaboration That Works

How to Work with Toptal

在数小时内，而不是数周或数月，我们的网络将为您直接匹配全球行业专家.

Share your needs

在与Toptal领域专家的电话中讨论您的需求并细化您的范围.

Choose your talent

在24小时内获得专业匹配人才的简短列表，以进行审查，面试和选择.

Start your risk-free talent trial

与你选择的人才一起工作，试用最多两周. 只有当你决定雇佣他们时才付钱.

Top talent is in high demand.

Start hiring