- Spark
基于spark的机器学习项目实战
根据图识,项目将分为三个部分。整个项目基本思路是如何通过爬虫爬取大量数据放到Hbase,然后通过ETL工具初步转化筛选将数据存到mongodb,抽取mongodb的数据进行清洗处理算出模型放到hdfs。后续进来数据通过模型运算出数据的类型。项目系统主要包括前端+后端+机器学习,前端采用React Native,Native,后端采用Dubbo+Spring+java,机器学习采用Spark进行实现,本项目机器学习-spark代码运行在mesos上。本课程我们只针对以上图示的浅蓝色部分内容(即与机器学习相关的内容),通过用真实的智能客户项目系统作为案例(案例附带源码,可以直接做二次开发),主要根据项目实例穿讲机器学习以及相关知识,包括有:数据提取,数据清洗以及分词,数据特征值提取、机器学习模型计算、数据分类等等,进行详细讲解。本课程所需掌握的技术:java、scala、IK、Hdfs、Spark ml、Spark Streaming、Spark SQL、Kafka、Zookeeper、Mongodb、Spring-Data-Mongodb,由于每个技术需要掌握的程度不一样,对于我们用到的一些开源技术,课程中将会是简单介绍如何使用,不会着重讲解。课程重点讲解spark ml、spark Streaming,以及如何使用这些技术进行项目的实战,贯穿项目系统并且最后串联所有技术。spark基于2.0.1版本讲解
共54节 926人已学习¥99.0 免费试学 - 其他
scala基础语言学习
scala语言学习,通过此课程快速掌握scala语法,并快速上手写代码。scala利用jvm,熟悉java的小伙伴能快速几天就能掌握scala。目前好多大数据编写是利用scala进行的,掌握一门语言更有利于以后发展。
共9节 340人已学习免费 免费试学 - Java
springboot从入门到精通
spring boot从入门到精通,从基础配置到架构实践应用。包括redis、mysql等服务组件整合以及应用。
共24节 307人已学习¥18.0 免费试学 - Java
从无到有搭建互联网技术架构和运维架构
本课程主要是针对如何从无到有搭建中小型互联网公司后台服务架构和运维架构的课程,课程所涉及的内容均是当前应用最广泛的技术和工具。本课程所讲解的技术体系已经在多个中小型互联网公司中实战运行使用,目前运行已经非常稳定,数据量也是在不断持续增加。并且,这个技术体系也正在被其他很多互联网公司应用,希望通过此课程,让大家能快速熟练掌握各个技术,并且能实际应用到项目中。课程将会通过实际案例讲解,并且会提供完整的视频案例源码供学员学习使用,同时有需要的企业或学员可以直接拿本套教学案例代码来使用或者二次开发。
共108节 247人已学习¥200.0 免费试学
- 1
张勇
后端技术经理
工作10年,外包、知名互联网公司、小创业公司、集团公司都做过。核心在于企业技术架构以及机器学习领域。三人行必有我师,希望我们一起探讨成长。
课程数 4 学生数 1820