德米特里•科兹洛夫，加拿大安大略省多伦多的开发者
德米特里• is 可用 租用
雇佣 德米特里•

德米特里•科兹洛夫

验证专家  in 工程

大数据架构师和开发人员

位置
加拿大安大略省多伦多
至今成员总数
2021年2月24日

德米特里•是一名高级大数据架构师，在数据仓库方面拥有16年以上的Experience, BI, ETL, 分析, 还有云. 他领导的团队在金融行业交付了24个项目, 保险, 电信, 政府, 教育, 矿业, 制造业, 和零售. 德米特里在快节奏的环境中茁壮成长, 表现出有效领导的能力, 管理, 支持团队, 并以BI的身份为多个项目提供咨询, 数据仓库, 大数据专家.

工程数据数据仓库数据仓库设计数据分析数据可视化数据分析数据迁移大数据数据治理SQLPL / SQLSQL存储过程甲骨文甲骨文 PL / SQL数据库

Portfolio

高德纳-工程
PL / SQL, 甲骨文, SQL, PostgreSQL, 亚马逊网络服务(AWS)， Python, 起程拓殖...
本特基服务有限责任公司
SQL，数据分析，统计，雪花，事件驱动架构，多摩君...
Vivid Machines公司.
SQL，亚马逊网络服务(AWS)，数据管道，数据工程，Python, ETL...

Experience

数据架构——20年SQL - 20年数据工程- 18年数据仓库设计——16年ETL - 16年商业智能(BI)——15年画面- 8年大数据——5年

Availability

兼职

首选的环境

SQL, ETL, 数据架构, 大数据, 商业智能(BI), 数据仓库, 表, 团队的领导, 雪花, 数据分析

最神奇的...

...我做过的最具挑战性的项目是为一家小型初创公司构建ETL框架，这对公司的发展至关重要.

工作Experience

三级数据工程师

2023年至今
高德纳-工程
  • 将甲骨文的数据结构和软件包迁移到PostgreSQL.
  • 对甲骨文和PostgreSQL进行了广泛的性能调优.
  • 使用Python Streamlit创建自定义报告解决方案.
技术:PL / SQL, 甲骨文, SQL, PostgreSQL, 亚马逊网络服务(AWS)， Python, 起程拓殖, CI / CD管道, 规模化敏捷框架(SAFe), 性能调优, 动态SQL

新闻媒体公司数据分析工程师

2022 - 2022
本特基服务有限责任公司
  • 对与雪花数据仓库集成的复发订阅数据进行统计分析.
  • 提供Facebook和YouTube的营销预算渠道归因分析.
  • 开发视频回放元数据分析和活动有效性分析.
技术:SQL，数据分析，统计，雪花，事件驱动架构，多摩君, 复发, 业务分析, 数据分析

云数据工程师

2022 - 2022
Vivid Machines公司.
  • 为苹果种植者开发复杂的表仪表板.
  • 为机器学习输出设计了一个数据模型.
  • 支持仪表板的自动化ETL管道.
技术:SQL，亚马逊网络服务(AWS)，数据管道，数据工程，Python, ETL, 数据仓库, 数据架构, 数据的湖泊, 数据库, 数据建模, 数据分析, api, 表, PostgreSQL, 事件驱动架构, 数据可视化, 谷歌云 SQL, 谷歌云平台(GCP)

高级数据工程师

2022 - 2022
SIG -主
  • 创建了一个工具来集成来自Hadoop数据和甲骨文数据集市的数据.
  • 帮助业务用户从两个来源创建自定义请求.
  • 向业务用户提供如何使用新工具的培训.
技术:SQL, 甲骨文, 甲骨文 PL / SQL, Python, Hadoop, 火花SQL, ETL, PL / SQL, 数据仓库, 大数据, Apache蜂巢, 数据管道, 性能调优, 动态SQL

高级数据架构师

2021 - 2022
加拿大公寓房地产投资信托基金
  • 支持企业架构团队的战略计划第二阶段.
  • 为多个主题领域设计了数据模型，并创建了逻辑和物理数据模型.
  • 将多个数据源集成到企业数据湖中.
技术:蔚蓝的, SQL Azure, Azure数据工厂, 数据的湖泊, 数据集市, 金伯尔方法, 数据建模, Microsoft Power BI, 数据分析, 数据治理

数据和ETL架构师

2021 - 2021
Haus
  • 在雪花上创建了一个操作跟踪数据集市. 从网站收集事件.
  • 创建营销数据集市，跟踪社交媒体支出和渠道归因.
  • 为管理和操作开发了一个表仪表板.
技术:雪花, 表, 亚马逊DynamoDB, 针数据, 事件驱动架构, 数据分析, 数据分析

数据和ETL架构师

2021 - 2021
标准正态
  • 为五个主要市场的能源交易设计了数据模型.
  • 将遗留数据从旧数据库迁移到新数据库.
  • 开发ETL管道，从源系统加载交易数据，并提供风险评估和分析工具.
技术:谷歌BigQuery, 谷歌云 SQL, PostgreSQL, Microsoft SQL Server, 数据架构, ETL, 金伯尔方法, 数据分析, 数据管道, 谷歌云平台(GCP)

数据和ETL架构师

2016 - 2021
黛西的情报
  • 开发了10个开发人员使用的全功能ETL框架.
  • 为零售和保险领域的公司设计企业数据架构.
  • 带领团队为客户导入17个零售和5个保险数据仓库.
  • 设计了一组表仪表板来监控ETL框架.
  • 开发了一个广泛的ETL包并实现了性能调优.
  • 领导将内部部署解决方案迁移到谷歌云的原型开发.
技术:SQL, Apache蜂巢, Hadoop, IBM Db2, ETL, 大数据, 数据仓库设计, 数据仓库, 表, PL / SQL, SQL存储过程, 数据架构, 数据库, PostgreSQL, 数据建模, 火花SQL, 金伯尔方法, 团队的领导, 数据分析, 数据可视化, 数据分析, 数据管道, 谷歌BigQuery, 谷歌云 SQL, 性能调优, 动态SQL, 谷歌云平台(GCP)

BI和数据架构师

2014 - 2016
拜耳加拿大
  • 为高管、客户经理和销售代表设计了许多表仪表板数据集市.
  • 领导陆上和海上ETL和BI开发团队.
  • 解决了数据库和仪表板性能问题.
技术:表, 甲骨文, PL / SQL, Microsoft SQL Server, ETL, 商业智能(BI), PostgreSQL, 数据库, 团队的领导, 数据分析, 数据可视化

高级FATCA数据架构师

2014 - 2016
道明银行集团
  • 为不同的源系统设计了从端到端解决方案.
  • 为数据仓库和数据集市实现了全面的数据建模.
  • 担任性能调优专家，优化复杂查询和存储过程.
  • 审查数据体系结构、体系结构蓝图和业务需求文档.
技术:甲骨文12 c, PL / SQL, 欧文, 业务分析, 解决方案设计, 数据架构, 数据管道, 谷歌云, 性能调优

BI架构师

2014 - 2015
Innovapost
  • 为RDP和BOBJ创建BI语义层、元数据和报告定义.
  • 对甲骨文数据集市查询进行了广泛的性能调优.
  • 将本地MS Access解决方案转换为基于甲骨文和BusinessObjects服务器的企业架构.
技术:商业智能(BI), SAP业务对象(BO), 表, SQL, 欧文数据建模器, 甲骨文, 数据集市, 金伯尔方法, 数据分析, 数据可视化

高级数据架构师

2012 - 2014
完整的金融
  • 设计了企业数据仓库(EDW)中的所有层，以从Guidewire ClaimCenter获取数据馈送.
  • 构思和设计企业数据仓库(EDW)中的所有层，以获取来自Detica NetReveal的数据馈送.
  • 参与了一个数据仓库增强计划，该计划用一个数据库替换了多个数据中心.
技术:甲骨文, SQL, 甲骨文 PL / SQL, 欧文, 数据架构, 数据金库, Sybase PowerDesigner, Informatica ETL, ETL, 业务分析, 金伯尔方法, 数据治理

高级数据仓库和BI解决方案设计师

2011 - 2013
罗杰斯通信
  • 从业务/数据分析师那里获取业务/数据需求，并将这些需求转换为BI设计人员/开发人员所需的信息交付逻辑设计和技术规范.
  • 领导战略, 设计, 以及商业智能和数据仓库领域解决方案的实现.
  • 设计基于项目的数据模型，并将其添加到BI工具中.
技术:甲骨文, Teradata, 甲骨文 PL / SQL, MicroStrategy, 欧文数据建模器, SQL存储过程, 动态SQL

高级ETL开发人员

2008 - 2010
布里斯托尔西
  • 执行全面的数据仓库评估.
  • 为企业数据仓库(EDW)和众多数据集市设计逻辑和物理数据模型.
  • 开发复杂的映射，并对查询和PL / SQL存储过程执行大量的SQL调优和优化.
  • 领导和指导团队，创建和利用最佳实践文档，以激发最佳团队绩效.
技术:甲骨文, 数据架构, SQL, 甲骨文 PL / SQL, 甲骨文 Warehouse Builder (OWB), 甲骨文 Data Integrator (ODI), 欧文数据建模器, 金伯尔方法, 数据管道, 性能调优, 动态SQL

高级数据仓库架构师

2008 - 2008
淡水河谷加拿大
  • 审查现有的加拿大淡水河谷数据仓库流程文档, 开发方法, 数据模型, 和ETL.
  • 与淡水河谷加拿大技术人员进行访谈，了解当前的数据仓库功能，并收集未来的方法和体系结构需求.
  • 参加研讨会，收集有关当前数据仓库功能的信息, 未来的方法, 架构需求并验证项目发现和建议.
  • 协助项目经理提出方法建议, 体系结构, 以及完成内部审计建议所需的其他改进.
技术:欧文数据建模器, Microsoft SQL Server, Microsoft Visio, 数据仓库设计, 数据仓库, 数据治理

高级ETL开发人员

2006 - 2008
大学
  • 领导ETL开发团队开发增量1数据仓库. 计划、分配、管理和跟踪他们的工作，协调资源和任务依赖关系. 为团队成员设定技术方向.
  • 管理开发、质量保证、部署、初始化和日常加载过程.
  • 开发复杂的映射，并对查询和PL / SQL存储过程执行大量的SQL调优和优化.
  • 执行业务分析，设计数据仓库，并创建映射规范.
技术:数据仓库设计, 数据仓库, ETL, 甲骨文 PL / SQL, 甲骨文 Warehouse Builder (OWB), 甲骨文公司的设计师, 数据架构, SQL存储过程, 性能调优

高级业务分析师

2006 - 2006
英国人
  • 作为整个BI项目的一部分，为索赔和汇总公开主题领域设计整体解决方案需求.
  • 通过文档和客户访谈收集需求，并分析源系统数据.
  • 为数据仓库和数据集市的数据模型执行逻辑和物理设计.
  • 为ETL过程和组合报告规范创建了大量的映射规范.
技术:业务分析, SQL, 欧文数据建模器, 数据架构, ETL规范, 数据治理

高级ETL开发人员

2005 - 2006
阿兰
  • 在一个基于项目的阵营中领导ETL开发团队. 计划、分配、管理和跟踪工作. 为团队成员设置技术方向的协调资源和任务依赖关系.
  • 与BI团队和架构师合作开发高级流程设计和实体模型，并为支持团队提供培训.
  • 设计ETL解决方案体系结构和数据体系结构.
  • 开发复杂的映射，并对查询和PL / SQL存储过程执行大量的SQL调优和优化.
技术:SQL, 甲骨文 PL / SQL, 欧文数据建模器, 数据架构, ETL, Unix Shell脚本, 甲骨文 Warehouse Builder (OWB)

高级ETL开发人员

2005 - 2005
加拿大帝国商业银行
  • 开发并记录了大量的提取物, 变换, 并为Basel II项目的不同数据源加载PL / SQL包, 批发信贷数据仓库.
  • 对查询和PL / SQL存储过程执行广泛的SQL调优和优化.
  • 与其他团队成员合作，管理其他学科领域.
技术:SQL, 甲骨文, 甲骨文 PL / SQL, 存储过程, ETL, 数据仓库, 数据仓库设计

高级ETL开发人员

2004 - 2004
动力基金
  • 为几个数据集市开发了ETL(提取、转换、加载)例程.
  • 与一组开发人员就支持甲骨文表的开发进行了咨询, 索引, 的观点, 触发器, 包, 程序, 内联函数, 和SQL查询.
  • 对视图、查询和PL / SQL存储过程执行广泛的SQL调优和优化.
技术:SQL, 甲骨文 PL / SQL, 甲骨文, ETL, SQL存储过程, Unix Shell脚本, 数据仓库设计, 数据仓库

高级数据应用开发人员

2000 - 2004
PdMAIN
  • 领导和培训一个开发团队, 解决方案分析, 并为TDS Automotive不同站点的众多实施提供新版排序流程的支持专家.
  • 创建了许多PL / SQL存储程序单元(包), 程序, 功能, 和触发器)和甲骨文表单和甲骨文报表的不同模块的PdMAIN的ERP系统.
  • 开发了完整的OLTP数据体系结构的逻辑和物理设计.
技术:SQL, 企业资源规划(ERP), 甲骨文 PL / SQL, 甲骨文, 存储过程, 欧文数据建模器, 数据架构, 甲骨文形式 & 报告

ETL框架

我最具挑战性但也最成功的项目之一是与一家目标远大但没有ETL工具预算的小型初创公司合作.

该初创公司在IBM Db2上的原型解决方案存储过程. 他们的数据摄入量将呈指数级增长. 因此，他们决定迁移到Hive/Hadoop集群.

以满足他们不断发展的需求，并利用他们的开发团队Skills, 我设计并开发了一个端到端的ETL框架，在Hive/Hadoop环境下像ETL进程一样运行存储过程, 将所有元数据保存在Db2服务器上, 并且有表仪表板作为操作支持.

该框架能够为多达10名开发人员和3名支持操作员组成的团队提供服务. 我们将其用于17个零售和5个保险数据仓库的ETL开发. 后来，我们将其迁移到GCP云.

ETL框架对公司的成长至关重要, 允许它扩展开发和支持业务至少五年.

高级数据架构师

我设计了一个分布式的能源交易数据模型. 然后，我将数据从遗留系统迁移到Postgres和BigQuery. 我还将新架构扩展到新的交易市场，并设计了ETL管道.

高级场景设计师

我为一个创新的, 帮助水果种植者在现有种植面积上生产更多食物的尖端视觉技术. 可视化以近乎实时的方式呈现ML结果以及准确的数据.

语言

SQL，存储过程，雪花，Python

框架

Hadoop，规模化敏捷框架(SAFe)

工具

表, 欧文, 甲骨文 Warehouse Builder (OWB), Sybase PowerDesigner, Informatica ETL, Microsoft Visio, Microsoft Power BI, 甲骨文公司的设计师, 针数据, 火花SQL, 多摩君, 复发, 起程拓殖

范例

ETL，商业智能(BI)， Kimball方法论，事件驱动架构

平台

甲骨文、甲骨文数据集成商(ODI)、谷歌云平台(GCP)、亚马逊网络服务(AWS)、Azure

存储

PL / SQL, Apache蜂巢, IBM Db2, SQL存储过程, 甲骨文12 c, 甲骨文 PL / SQL, PostgreSQL, 数据库, 数据管道, 动态SQL, Microsoft SQL Server, Teradata, 谷歌云, 谷歌云 SQL, 亚马逊DynamoDB, 数据的湖泊, SQL Azure

其他

数据架构, 大数据, 数据仓库, 欧文数据建模器, 团队的领导, 业务分析, 解决方案设计, 数据集市, ETL规范, 数据仓库设计, 谷歌BigQuery, 工程数据, 数据分析, 数据可视化, 数据建模, 数据分析, 统计数据, 数据迁移, 性能调优, 数据治理, 数学, 计算机科学, SAP业务对象(BO), 数据金库, Unix Shell脚本, 企业资源规划(ERP), 甲骨文形式 & 报告，微策略，api, Azure数据工厂，CI/CD管道

1990 - 1996

数学和计算机科学硕士学位

第聂伯罗国立大学-第聂伯罗，乌克兰

2005年7月至今

甲骨文认证专家

甲骨文