大数据开发

项目实施全过程

覆盖项目实施顶层能力的全部过程,打造职业生涯布局和高度.

数据仓设计与建设

实时数据仓,离线数据仓的架构设计与建设.

数据治理与实时计算

大数据治理与实时计算技术设计与建设

多种编程语言

Java为主要编程语言,第二语言(按需)go/pyhon等,扩展语言视野.

大数据研发专业 打造大数据工程师,大数据开发工程师是负责构建、维护和优化大数据应用程序的专业人员。他们使用各种大数据技术和工具来处理和分析大规模数据集,从而提供有价值的业务见解.

什么是大数据工程师

大数据开发工程师是负责构建、维护和优化大数据应用程序的专业人员。他们使用各种大数据技术和工具来处理和分析大规模数据集,从而提供有价值的业务见解.

数据处理

大数据开发工程师需要使用各种数据处理工具和技术来获取、清洗和转换数据。他们负责编写数据清洗和数据转换的代码,以确保数据格式正确,并符合分析需求。.

数据仓库

大数据开发工程师负责构建和维护数据仓库,以存储和管理大数据集。他们需要使用各种大数据工具和技术来处理和管理数据仓库,并确保数据的高可用性和可靠性.

数据分析

大数据开发工程师需要使用各种数据分析技术和工具来分析和挖掘数据集。他们需要编写数据分析程序,并将数据转换成可视化图表和报告,以帮助业务部门做出更明智的决策.

优化性能

大数据开发工程师需要对大数据应用程序进行优化,以确保程序能够高效地处理和分析数据。他们需要对程序进行调优,并采用最佳实践来提高应用程序的性能.

总结

总的来说,大数据开发工程师需要熟悉各种大数据技术和工具,如Hadoop、Spark、Hive等,以及编程语言如Java、Python等。还需要有扎实的编程和数据处理技能,以及良好的问题解决和团队合作能力,以成功地构建和维护大规模的数据处理应用程序.

随着大数据技术的快速发展,大数据开发工程师需要不断学习和更新自己的知识和技能,以适应不断变化的市场需求.

我们特别设计的计算机基础不仅适用于0基础的学员,对于有基础的同学,也是很好的补充.

计算机基础
  • 冯·诺伊曼体系
  • 计算机硬件-工业之美
  • 计算机的语言
操作系统
  • 计算机与操作系统的关系
  • 程序是怎么跑起来的
  • 进程与线程
  • 存储系统
计算机网络
  • 计算机网络的组成
  • 网络模型
  • TCP/IP协议
需求
  • 用户需求
  • 产品需求
  • 需求排期
需求分析与可视化
  • 业务场景与业务模型的抽象分析方法
  • 需求映射矩阵与RMM模型
业务模型
  • 业务模型与BDD模型分析法
  • 数据流图与DFD分析法
  • DDD领域模型驱动设计
软件交互
  • UE低保真交互设计
  • 界面元素分析及DAR模板
架构设计
  • 基于场景的评估SAAM模型分析法
  • 架构权衡分析法ATAM模型分析法
  • 分布式架构
  • 中间件架构
  • 微服务架构
  • 高性能的关键架构设计
接口设计
  • 单一职责原则(Single Responsibility Principle)
  • 开闭原则(Open Closed Principle)
  • 里氏替换原则(Liskov Substitution Principle)
  • 迪米特法则(Law of Demeter)
  • 接口隔离原则(Interface Segregation Principle)
  • 依赖倒置原则(Dependence Inversion Principle)
数据库设计
  • 数据库选型
  • 数据库的本质区别
  • PD UML建模
  • 业务模型与数据库模型
  • 数据库业务论证法
Hadoop生态
  • Hadoop 大数据生态介绍
  • HDFS 分布式文件系统
  • MAPREDUCE&YARN
  • Hadoop 大数据生态介绍
  • Hadoop 调优系列
SPARK 生态
  • Spark 基础、sparkCORE、sparkSQL、SPARK 调优开发
  • SPARKStreamming 开发与企业实战
KAFKA 中间消息件
  • KAFKA 基础
  • KAFKA 晋级,以及开发实战讲解
HBASE 列式存储
  • HBASE 基础
  • HBASE晋级、调优讲解
FLINK 生态
  • FLINK 基础
  • FLINKDATASTREAM、FLINKTABLE&SQL 讲解
SPARK项目
  • DMP 数据管理平台、智能应用画像标签平台
基于 FLINK 项目
  • 咪咕视频实时部分、哔哩起飞 DSP 实时分析平台
基于HIVE项目
  • 咪咕视频离线、中台模块
linux操作系用
  • 常用命令
  • 服务器部署
  • 高级功能
容器虚拟化
  • Kubernetes(K8S)容器虚拟化技术
  • Docker容器技术
一体化运维
  • DevOps开发、运维一体化
  • 项目管理能力

  • 项目估算能力

  • 系统设计能力

  • 系统前端研发能力

  • 系统后台研发能力

  • 系统运维能力

  • 系统交付能力

项目实施能力

项目实施交付能力(PM),是我们设计的顶层能力。所有专业的教学体系都是围绕着项目实施交付能力展开。 项目实施对项目管理,项目估算,项目报价,项目规划,项目研发,项目上线交付等整个项目全过程 进行了详尽的实战设计。是我们突破职业瓶颈的和突出个人综合能力的利器。博添以项目交付实施为目标, 在实战中贯穿项目实施能力,融为一体,知行合一,达到企业要求的项目管理型人才。 可以看到在《大数据研发》专业中,我们能掌握的项目实施能力有如下方面:

  • 云计算

  • 大数据

  • 人工智能

  • 区块链

  • 物联网

  • web3.0

领域能力

领域驱动是实训体系设计的第二条基准线。在现在的市场中,企业需求越来越高,这也是当前社会发展的一种映射。 只在一个领域有所长,其他领域一概不知的情况下,人才优势就不会体现的非常明显。在博添,根据实战项目的需要, 我们不会只纠结一一个领域的技术,如果项目需要大数据·人工智能·等多方面的领域技能,那么在咱们的实训体系中 是全部包含的,我们要做到多领域的涉猎,不局限于技术的层面,实战项目需要什么,我们就用什么,做到真正的实战先行, 在《大数据研发》专业中,我们会涉及到如下(选择性)领域的内容:

Hadoop生态
  • Hadoop 大数据生态介绍
  • HDFS 分布式文件系统
  • MAPREDUCE&YARN
  • Hadoop 大数据生态介绍
  • Hadoop 调优系列
SPARK 生态
  • Spark 基础、sparkCORE、sparkSQL、SPARK 调优开发
  • SPARKStreamming 开发与企业实战
KAFKA 中间消息件
  • KAFKA 基础
  • KAFKA 晋级,以及开发实战讲解
HBASE 列式存储
  • HBASE 基础
  • HBASE晋级、调优讲解
FLINK 生态
  • FLINK 基础
  • FLINKDATASTREAM、FLINKTABLE&SQL 讲解
SPARK项目
  • DMP 数据管理平台、智能应用画像标签平台
基于 FLINK 项目
  • 咪咕视频实时部分、哔哩起飞 DSP 实时分析平台
基于HIVE项目
  • 咪咕视频离线、中台模块

技术能力

在“战略”的层面,实训体系之所以把技术放在最后,是突出了项目实战的主导位置。 实训体系的建立也是这样建立的,没有项目实战,我们宁愿不教技术。技术服务于项目,没有 针对型的实战项目,技术也只是一纸空谈。这个我们在理论为主的教学中已经深刻的体会到了它 的枯燥以及面向社会工作时的茫然。在“战术”的层面,技术当然也是必不可少的,具体的工作要建立在技术的 基础上方能完成,“战略”与“战术”的结合才是最终的完全体。在《大数据研发》专业中 您可以掌握的具体技术有如下部分:

需求旺盛,薪资高

来源于BOSS招聘

需求旺盛,薪资高

来源于智联招聘

需求旺盛,薪资高

来源于百度百聘

市场需求旺盛

大数据研发市场需求旺盛,在将来的企业中更受企业欢迎。 我们可以看到,在最近2023年9月份的网站招聘信息中,boss招聘/智联招聘/百度百聘的招聘 量和薪资都比较不错。新在基本可以稳定在20000左右,高级的可以到30000以上,好的市场行情 为我们带来更好的就业结果,也从侧面证实了市场对大数据工程师的需求度和发展前景。

  • 市场需求量大.
  • 就业薪资好.
  • 未来趋势好.
  • 发展前景好.

就业岗位

大数据研发可以适应的岗位不只是大数据工程师一种,甚至可以延伸很多岗位,在我们就业的时候 可以有更多的选择和更好的扩展。可以适应的岗位有:

大数据开发工程师

一线薪资:2W+

大数据分析工程师

一线薪资:1.5W+

Logo ©2016-2024版权所有 琛达信息技术有限公司 鲁ICP备2022001791号

琛达信息

我们是一家高新技术研发型企业.

致力于企业数字化转型,智能化升级解决方案.

同时为社会培养更优质的技术研发型人才.

关注 方式

联系 方式

长清区晶格广场Z-2座17层
山东省济南市, 中国
chendainfo@163.com

185 1010 3400
186 6019 2722