为进一步推动大数据、人工智能技术的发展与进步,帮助更多企事业单位、高校培养大数据与人工智能专业人才,星环科技将于2018年9月-10月在上海、北京、广州三地分别推出大数据平台数据工程师、开发工程师(数仓与数集/实时流处理/搜索与检索三个方向)、架构师以及AI工程师培训班,欢迎大数据、人工智能相关从业人员、教师积极报名参加!

本课程的内容涵盖了Hadoop生态圈介绍、大数据平台部署以及星环大数据平台组件介绍。Hadoop生态圈介绍包括HDFS、MapReduce、Spark、Yarn等组件,主要从原理、操作方面进行讲解;大数据平台部署包括:软硬件要求、角色分配、平台部署;星环大数据平台四大组件:Inceptor、Hyperbase、Slipstream、Search,主要从组件的架构原理、安装、配置、运维等方面进行讲解。

授课对象

运维实施工程师、系统管理员、IT项目经理

预备技能

熟练使用linux,了解SQL语法及数据库基本概念

课程安排(9:30-17:30)

Hadoop生态圈

Hadoop生态圈概述

分布式存储HDFS

分布式计算框架

分布式资源调度

Hadoop生态圈

Sqoop数据抽取

Flume数据采集

分布式消息队列Kafka

大数据平台

大数据平台介绍

大数据平台软硬件要求

集群角色分配

大数据平台部署

服务安装与使用

分布式SQL引擎Inceptor

SQL集成开发环境Waterdrop

实时流处理引擎Slipstream

服务安装与使用

集群运维

大规模搜索引擎Search

NoSQL数据库Hyperbase

平台管理运维Transwarp Manager

集群运维

闭卷笔试

开卷上机考试

培训安排

本课程以文本搜索和高并发检索两个场景为主线,依次从场景描述、业务需求、技术路线、实现步骤、案例分享、总结等方面进行讲解,旨在使学员清楚搜索与检索有哪些典型业务场景、掌握如何使用Search和Hyperbase实现典型业务场景、了解项目上的搜索与检索应用案例。

授课对象

应用研发工程师、数据库工程师、项目经理

预备技能

✦ 熟练使用Linux、SQL,对星环大数据平台Search和Hyperbase组件有比较深入了解✦ 参加并通过星环大数据平台数据工程师培训

课程安排(9:30-17:30)

搜索与检索综述

搜索与检索场景介绍

搜索与检索场景特点

搜索与检索场景典型应用

相关技术组件

NewSQL数据库Hyperbase

全文搜索引擎Search

大数据SQL引擎Inceptor

典型场景及案例

非结构化数据存储

案例-票据影像数据管理

高并发检索

案例-银行电子账单系统

关键字搜索

案例-全网舆情分析系统

不指定列的数据分析

案例-公安云海情报系统

高聚合率统计分析

案例-舆论热词频次统计分析

典型场景及案例

图片存储引擎的核心实现

全文搜索引擎的核心实现

高聚合率统计分析引擎的核心实现

开卷上机考试

培训安排

本课程以数据集市场景为主线,依次从场景描述、业务需求、技术路线、实现步骤、案例分享、总结等方面进行讲解,旨在使学员清楚数据集市有哪些典型业务场景、掌握如何使用Holodesk或Rubik实现典型业务场景、了解项目上的数据集市应用案例等。

授课对象

应用研发工程师、ETL工程师、项目经理

预备技能

✦ 熟练使用linux、SQL,对星环大数据平台Inceptor、Holodesk等组件有比较深入了解✦ 参加并通过星环大数据平台数据工程师培训

课程安排(9:30-17:30)

课程及数据集市介绍

TDH星环平台概述

数据集市概述

相关技术组件

分布式执行计算引擎Inceptor

分布式高性能存储组件Holodesk

星环大数据TDH平台部署

相关技术组件

可视化OLAP Cube分析工具Rubik

轻量级自主式BI分析工具Pilot

典型场景

ROLAP案例实战

MOLAP案例实战

案例分享

某省农信驾驶管理仓系统

开卷上机考试

培训安排

本课程以实时流处理场景为主线,依次从场景描述、业务需求、技术路线、实现步骤、案例分享、总结等方面进行讲解,旨在使学员清楚实时流处理有哪些典型业务场景、掌握如何使用Slipstream实现典型业务场景、了解项目上的实时流处理应用案例等。

授课对象

应用研发工程师、ETL工程师、项目经理

预备技能

✦ 熟练使用Linux、SQL,对星环大数据平台Slipstream组件有比较深入了解✦ 参加并通过星环大数据平台数据工程师培训

课程安排(9:30-17:30)

流处理综述

流处理场景介绍

流处理场景特点

流处理场景典型应用

相关技术组件

流处理平台介绍

分布式消息队列Kafka

Kafka API开发

Kafka常用参数

流处理引擎

流处理引擎对比分析

实时流处理引擎Slipstream

Slipstream UDF 开发

Slipstream JDBC开发

Slipstream难点及参数

典型场景及案例

实时规则研判

案例-公安交警集成指挥平台

实时窗口统计

案例-风电集中监控系统

复杂事件处理

案例-银行实时反欺诈系统

PLSQL处理复杂逻辑

案例-银行实时风控系统

流式机器学习和数据挖掘

案例-石化实时故障检测系统

课程总结

综合案例分析

实时流处理课程总结

培训安排

本课程从需求分析、产品选型、细节设计、案例分享等多个角度,帮助用户掌握如何在星环TDH平台下设计出一套多功能、高性能的大数据解决方案。

授课对象

技术售前工程师、系统设计师、项目经理、架构师

预备技能

✦ 具备完整的IT项目经验,一定关系型数据库的使用经验✦ 参加并通过星环大数据平台数据工程师培训

✦ 参加并通过星环大数据平台开发工程师培训或者有较长时间使用Hadoop相关产品经验

课程安排(9:30-17:30)

TDH产品架构

TDH5.0新特性

产品选型

产品选型:TDH vs MPP

产品选型:TDH vs ApacheHadoop

产品选型:计算引擎对比

产品选型:搜索检索技术

产品选型:图计算

产品选型:流处理

产品选型:多租户管理

项目需求

需求收集与分析

架构设计

典型场景判断

数据集成设计

数据流转设计

多租户管理

集群规划

各组件性能指标

集群容量规划

集群角色分配

资源分配与调度

典型场景与案例

典型场景:统计分析场景

典型场景:检索查询场景

典型场景:流处理场景

典型场景:数据挖掘场景

典型场景:综合场景

培训安排

本课程主要针对具有一定人工智能理论和机器学习算法基础,同时想要在人工智能领域继续深造并且进行实际案例实践的学员。培训内容主要包括人工智能与机器学习概述,星环Sophon人工智能平台,机器学习建模流程,机器学习算法基础,机器学习案例实践,人工智能典型案例分析等。希望学员通过此次培训能够了解人工智能和机器学习技术的发展趋势,前沿技术研究和典型应用场景。同时,巩固机器学习算法基础,熟悉星环Sophon人工智能平台,并以此进行案例实践。

授课对象

数据挖掘工程师、数据分析师、数据工程师、项目经理

预备技能

✦ 计算机/数学相关专业,具备一定统计分析知识✦ 具备编程基础(R/Java/Python/ Matlab均可)✦ 掌握数据库基本概念与SQL编程基础✦ 了解机器学习基本概念

课程安排(9:30-17:30)

人工智能与机器学习概述

人工智能与机器学习基本概念

人工智能与机器学习技术发展趋势

人工智能与机器学习典型技术方案

人工智能与机器学习典型应用场景

星环Sophon人工智能平台

星环Sophon人工智能平台概述

星环Sophon人工智能平台安装部署

星环Sophon人工智能平台案例实践

机器学习算法与建模基础

机器学习建模流程介绍

建模流程之数据预处理

建模流程之特征工程

建模流程之算法选择

机器学习算法基础与应用案例

建模流程之模型评估

建模流程之模型应用

人工智能场景最佳实践

人工智能场景分析

人工智能场景技术路线

人工智能场景操作实践

人工智能综合案例实战

人工智能案例业务需求

人工智能案例数据需求

人工智能案例操作实战

人工智能基础培训结课考核

针对指定的业务需求分析并寻求解决方案,并进行模型评估和模型解释

培训安排

报名咨询

开课通知

✦ 报名截止后,会提前(培训前一周的周二)将正式开课邀请函邮件发送给已报名学员✦ 如需确认报名是否成功或想提前收到正式邀请函,请发邮件至 咨询

培训证书

▲ 证书照片供参考,具体以实物为准