Hasitha Ranawaka
Verified Expert in Engineering
数据工程师和软件开发人员
Hasitha立志成为为全球企业架构数据驱动解决方案的领导者. 他是一位具有数据工程专业知识的多技能工程师, cloud-native development, and engineering. 作为一名数据工程师,他在构建高度可扩展的数据平台方面经验丰富. 作为一名认证的云架构师,Hasitha擅长实施最先进的云解决方案. 作为一名工程师,他精通不同制造工艺的技术.
Portfolio
Experience
Availability
Preferred Environment
Amazon Web Services (AWS), Python, Visual Studio Code (VS Code), SQL, Apache Airflow
The most amazing...
...我构建了一个数据湖解决方案,将七个国家的七个企业资源规划系统集成到Oracle云基础设施中.
Work Experience
AWS解决方案架构师顾问(兼职)
eSolution
- 架构基于oracle的本地容灾环境向AWS云的迁移, 消除因数据中心关闭而导致业务中断的风险.
- 使用AWS数据库迁移服务(DMS)实现Oracle Cloud Infrastructure (OCI)到Amazon RDS的PostgreSQL数据库迁移.
- 就使用AWS DMS通过逻辑数据库复制为Oracle数据库实现自定义高可用性RDS提供咨询.
Microsoft Power BI Expert
evTerra Recycling, LLC
- 开发和维护Microsoft Power BI仪表板,用于报告采购职能领域的需求, inventory, sales, and manufacturing.
- Implemented cost-effective, 可扩展的数据管道,从REST api中提取和转换数据,消除了手动数据准备.
- 与EPR开发人员合作,在ERP中实现业务需求,从而更好地报告和使用数据.
Airflow and BigQuery Data Engineer
Braven, Inc.
- 实现气流ETL管道,以支持组织范围的分析工作负载.
- 启动和管理从Periscope到Tableau的仪表板迁移, 减少数周的数据准备清理工作量.
- 在BigQuery上为OLAP工作负载构建核心数据模型,以填充Tableau仪表板.
- 执行维护天文学家气流环境,以保持生产工作负载运行不中断.
- 实现了一个为PostgreSQL数据库量身定制的灾难恢复系统,恢复点目标为30分钟,恢复时间目标为15分钟.
- 通过更好的数据可视化和优化的业务逻辑实现增强了数据报告层.
数据工程和数据科学专家
Stretchline Holdings
- 通过集成七个国家的七个企业资源规划(ERP)系统,在Oracle Cloud Infrastructure中实施了一个数据湖解决方案.
- 开发高可用性和可扩展的etl,使用Oracle data Integrator将数据从源ERP系统获取到数据湖.
- 通过利用数据湖实现自动化和组织化的财务报告流程,从而减少工作量并提高准确性.
- 为财务职能领域的管理层创建洞察生成仪表板, sales, and manufacturing.
- 与不同的利益相关者合作,为组织带来数据驱动的决策文化.
- 启动大数据基础设施实施,整合传统ERP生态系统之外的数据源.
Excel and Macros Developer
ORBEAT MANAGEMENT CORP
- 开发一个基于给定输入集创建合同的自动化工作流.
- 编写了一个应用程序脚本代码,从Google Sheet中读取数据并生成合同文件.
- 在客户端环境中实现解决方案.
Senior AI and ML Consultant
Averyx Group
- 开发基于机器学习的算法交易策略和投资组合管理技术.
- 与团队合作开发高度可扩展的机器学习解决方案.
- 使用版本控制系统GIT维护代码库.
Quantitative Analyst
Cairnhill Capital Management
- 开发了基于不同级别的财务和统计过滤器的算法来构建公司股票投资组合.
- 自动化整个投资组合创建过程,缩短了两天的交付时间.
- 对公司的代码库进行版本管理和维护.
执行供应商绩效管理
Brandix Apparel Limited
- 联络引进一套取消物料检查的制度,以简化程序及获得经济效益.
- 与团队成员合作建立上游风险评估流程,在批量生产前预测质量和颜色失效.
- 自动化供应商记分卡与微软Excel VBA.
Experience
Project Cerebro | Oracle Cloud中的数据湖和数据仓库解决方案
Cerebro项目是为了开发一个数据湖解决方案而启动的, 哪个充当提供执行描述性功能的所有数据筒仓的数据存储库, predictive, and prescriptive analysis. 我曾担任数据工程和数据科学专家,负责推动数据工程和数据科学方面的工作. 最初,公司在全球范围内的所有ERP系统都集成到Oracle Cloud中. 一旦数据在对象存储中可用, 开发etl是为了根据各种业务用例对其进行清理和构建,并将其加载到数据仓库中. etl是使用Oracle Data Integrator开发的,具有很高的可扩展性和可用性. 一旦相关的数据点在数据仓库中, 创建了几个Power BI仪表板来支持管理决策. Also, utilizing the object storage data, 许多机器学习算法被用于优化和增强生产系统.
“核心数据集”| GCP上所有组织分析需求的单一来源真理
作为核心数据集团队的一员, 我在BigQuery上合作开发了一个工业规模的数据仓库, 使整个组织能够访问正确质量的数据. BigQuery充当中央数据存储库和所有数据需求的单一事实来源. 构建核心数据集是为了以非规范化的形式处理大规模OLAP工作负载. Utilizing these core data models, 我创建了几个Tableau仪表板,以便向组织中更广泛的受众提供运营洞察力.
在AWS上无限的数据集成和分析
作为一名数据架构师,我设计并实现了数据集成和分析平台. The platform is based on AWS. 它通过SFTP (Secure File Transfer Protocol)和JDBC (Java database connectivity)连接从多个网站的后端接收数据,并将原始数据存储在Amazon S3桶中. 然后,Amazon EMR集群消费数据以执行所需的分析,并使用PySpark将分析就绪的数据推送到Redshift. Finally, 转换后的数据在AWS QuickSight中用于可视化和分析各种商业智能需求.
基于AWS的加密货币数据分析大数据平台
我在AWS云上开发了一个全自动的数据平台,用于提取历史货币价格行为, 为所有800万种输入组合生成EMA和MACD信号, 从而创建回测报告来评估所有组合的性能. 使用AWS Lambda将价格动作数据摄取到Amazon S3桶中, 并使用AWS EMR进行转换. 所有数据转换都使用无服务器架构来执行,以最大限度地降低成本. 该过程使用AWS Lambda函数实现自动化, AWS Step Functions, and Amazon EventBridge services.
Skills
Languages
SQL, Python, Excel VBA, Stored Procedure, Visual Basic, Visual Basic for Applications (VBA), Visual Basic 6 (VB6), XML, Google Apps Script
Frameworks
Apache Spark, Spark
Tools
Microsoft Power BI, AWS Glue, Amazon Athena, Power Query, Microsoft Excel, BigQuery, Apache Airflow, Excel 2010, Excel 2016, Oracle SQL Data Modeler, Microsoft Word, MATLAB, Cron, Amazon Elastic MapReduce (EMR), Spark SQL, Git, Amazon QuickSight, Crystal Reports, Google Sheets, Tableau, G Suite, pgAdmin, Oracle Exadata
Paradigms
Business Intelligence (BI), ETL, Dimensional Modeling, Database Design, OLAP, Automation, Data Science
Platforms
Oracle Data Integrator (ODI), AWS Lambda, Oracle Database, Amazon EC2, Amazon Web Services (AWS), Jupyter Notebook, Oracle, SharePoint, Google Cloud Platform (GCP), Salesforce, Visual Studio Code (VS Code), Oracle Cloud Infrastructure (OCI)
Storage
Data Lakes, Oracle Cloud, Databases, AWS Data Pipeline Service, Amazon S3 (AWS S3), Data Lake Design, Redshift, Data Pipelines, MySQL, SQL Stored Procedures, PostgreSQL, Relational Databases, SQL Server报表服务(SSRS), Oracle SQL Developer, Microsoft SQL Server, JSON, Database Administration (DBA), NoSQL, MongoDB, DBeaver, Amazon DynamoDB, Oracle RDS
Other
Data Engineering, Data Warehousing, ETL Tools, Excel 365, Data Warehouse Design, Data Analytics, ELT, Data Analysis, Data Architecture, Data Visualization, Reports, Schemas, BI Reporting, Reporting, Statistical Modeling, Data Transformation, Dashboard Development, Star Schema, Data Processing, Data Processing Automation, CSV, Scripting, SSRS Reports, Data Queries, Google BigQuery, Macros, Dashboards, BI Reports, Pipelines, Data Build Tool (dbt), AWS Cloud Architecture, Dashboard Design, Web Scraping, Data Modeling, AWS Certified Solution Architect, Solution Architecture, Enterprise Resource Planning (ERP), Excel Macros, DAX, Microsoft 365, Digital Manufacturing, Applied Mathematics, APIs, Machine Learning, Big Data, Automated Data Flows, XML for Analysis (XMLA), Statistics, Forecasting, Amazon RDS, Query Optimization, Partitioning, Data Mining, Big Data Architecture, Web Analytics, API Design, R Programming, Web Servers, SFTP, Management Accounting, Reinforcement Learning, Deep Reinforcement Learning, Oracle Data Guard, ClickUp, AWS数据库迁移服务(DMS)
Libraries/APIs
PySpark, ODBC, REST API, JDBC, Salesforce API
Education
Bachelor's Degree in Engineering
莫拉图瓦大学-莫拉图瓦,斯里兰卡
Certifications
AWS Certified Database - Specialty
Amazon Web Services
Oracle自治数据库云2023认证专家
Oracle
AWS认证解决方案架构师-专业
Amazon Web Services
Oracle Cloud Infrastructure 2021架构师助理
Oracle
Oracle云基础设施基金会2021年会员
Oracle
介绍在AWS上设计数据湖
Coursera
商业会计证书(文学士证书)
英国特许管理会计师公会
How to Work with Toptal
在数小时内,而不是数周或数月,我们的网络将为您直接匹配全球行业专家.
Share your needs
Choose your talent
Start your risk-free talent trial
Top talent is in high demand.
Start hiring