在 React 中,子组件向父组件传递数据通常通过回调函数的方式实现。以下是在使用 React 和 TypeScript 中实现子传父的一种常见方式: 在父组件中定义一个用于接收子组件数据的回调函数。通常将该函数作为 pro...
- 雷迪森 2023-11-19
react.js 前端 前端框架 React 如何实现子传父
- 雷迪森 2023-11-18
人工智能 其他 经验分享 如何使用 Midjourney?AI绘画应用保姆级教程
一:基础篇 1:注册 首先,你需要注册一个 Discord 账号,然后加入 Midjourney 的 Discord 服务器。或者去 Midjourney 的官网点击右下角的 Join the Beta: 2:在 Disc...
- 雷迪森 2023-11-17
ue4基础1
ue4基础操作 鼠标左键 移动位置 鼠标右键 移动视角 鼠标中键 上下移动 按住鼠标左键 wasd q 镜头的下移 e 镜头的上移 按住鼠标左键 或右键 z 广角 c 聚焦 如果拉的很远,按世界大纲的模型或者 按F聚焦...
- 雷迪森 2023-11-15
chatgpt怎么写方案
作为互联网公司的产品经理,我会从以下几个方面来回答“chatgpt怎么写方案”:1.定义目标和用户需求:要明确chatgpt的目标是什么,比如是为了提供个性化的对话体验,还是为了解决特定领域的问题。要了解用户的需求和期望,例...
- 雷迪森 2023-11-13
tcp/ip 网络 TCP协议和UDP协议的区别
目录 一、简介UDP和TCP来源 OSI七层结构 TCP/IP协议模型 二、TCP协议: 1、TCP的功能: 2、UDP的代码实现: 3、TCP协议的组成: 4、TCP的连接管理:TCP的三次握手(建立连接)...
- 雷迪森 2023-11-13
java eclipse 我的docker随笔41:mqtt服务部署
一、引言 因工作需要,需部署 mqtt 服务器进行测试。 二、技术小结 dockerhub 上相关镜像,直接拉取可用。经查,eclipse-mosquitto有官方认证OFFICIAL,故使用之,版本为2.0.15。先启动容...
- 雷迪森 2023-11-11
chatgpt能帮你找数据吗
从互联网运营的角度来看,chatgpt无法直接帮助你找到数据。chatgpt是一个基于人工智能技术的对话系统,它可以理解和回答用户提出的问题。但它并不具备直接获取和搜索互联网上的数据的能力。...
- 雷迪森 2023-11-11
chatgpt怎么国产化
要从互联网运营的角度回答“chatgpt怎么国产化”,我们可以考虑以下几个方面:1.数据收集和训练:国产化chatgpt需要大量中文数据来进行训练。这可能涉及到收集互联网上的中文文本、对话数据、社交媒体内容等。数据应该覆盖不...
- 雷迪森 2023-11-07
AI Draw
AIDraw是一个基于AI的头像生成素描风格的神器,通过智能AI技术,能在短短的几秒钟内就可以快速将照片变成有意思的素描画。...
- 雷迪森 2023-10-26
Win10怎么设置以管理员身份运行cmd命令
我们先找到cmd.exe命令所在的位置,然后右键发送到桌面快捷方式:然后选中该快捷方式右键,选择属性然后按照如下截图步骤操作:设置好后,双击打开快捷方式,就是以管理员身份运行cmd.exe了!...
- 雷迪森 2023-10-26
柚子快报激活码778899分享:大数据技术之
1 linux的入门1.1 Linux的介绍2 VM和linux的安装2.1 安装vm和Centos2.1.1 基本说明2.1.2 CentOS安装的步骤2.1.3 CentOS安装技术难点 -˃ 网络配置三种方式理解(难点...
- 雷迪森 2023-10-26
柚子快报激活码778899分享:大数据技术之
10 组管理和权限管理10.1 Linux组的基本介绍10.2 文件/目录的所有者10.3 文件/目录的所在组10.4 权限的基本介绍10.5 rwx权限详解10.6 修改权限指令-chmod10.7 修改文件所有者-cho...
- 雷迪森 2023-10-26
柚子快报激活码778899分享:大数据技术之
1 Shell概述2 Shell解析器3 Shell脚本入门4 Shell中的变量4.1 系统变量4.2 自定义变量4.3 特殊变量:`$n`4.4 特殊变量:`$#`4.5 特殊变量:`$*、$@`4.6 特殊变量:`$?...
- 雷迪森 2023-10-26
Centos7X永久更改主机名 与 Centos6X永久更改主机名 的区别
Centos7X永久更改主机名 修改配置文件 vim /etc/hostname 保存退出,重启系统Centos6X永久更改主机名修改配置文件 vim /etc/sysconfig/network 保存退出,重启系统...
- 雷迪森 2023-10-26
柚子快报邀请码778899分享:大数据技术之
第1章 大数据概论1.1 大数据概念1.2 大数据特点(4V)1.3 大数据应用场景1.4 大数据发展前景1.5 大数据部门业务流程分析1.6 大数据部门组织结构(重点)第2章 从Hadoop框架讨论大数据生态2.1 Had...
- 雷迪森 2023-10-26
柚子快报邀请码778899分享:大数据技术之
第4章 Hadoop运行模式4.1 本地运行模式4.1.1 官方Grep案例4.1.2 官方WordCount案例4.2 伪分布式运行模式4.2.1 启动HDFS并运行MapReduce程序4.2.2 启动YARN并运行Ma...
- 雷迪森 2023-10-26
柚子快报激活码778899分享:大数据技术之
第1章 HDFS概述1.1 HDFS产出背景及定义1.2 HDFS优缺点1.3 HDFS组成架构1.4 HDFS文件块大小(面试重点)第2章 HDFS的Shell操作(开发重点)第3章 HDFS客户端操作(开发重点)3.1...
- 雷迪森 2023-10-26
柚子快报激活码778899分享:大数据技术之
第6章 DataNode(面试开发重点)6.1 DataNode工作机制6.2 数据完整性6.3 掉线时限参数设置6.4 服役新数据节点6.5 退役旧数据节点6.5.1 添加白名单6.5.2 黑名单退役6.6 Datanod...
- 雷迪森 2023-10-26
柚子快报邀请码778899分享:大数据技术之
第1章 MapReduce概述1.1 MapReduce定义1.2 MapReduce优缺点1.2.1 优点1.2.2 缺点1.3 MapReduce核心思想1.4 MapReduce进程1.5 官方WordCount源码1...
- 雷迪森 2023-10-24
柚子快报邀请码778899分享:大数据技术之
第3章 MapReduce框架原理3.1 InputFormat数据输入3.1.1 切片与MapTask并行度决定机制3.1.2 Job提交流程源码和切片源码详解3.1.3 FileInputFormat切片机制3.1.4...
- 雷迪森 2023-10-24
柚子快报激活码778899分享:大数据技术之
3.3.4 WritableComparable排序3.3.5 WritableComparable排序案例实操(全排序)3.3.6 WritableComparable排序案例实操(区内排序)3.3.7 Combiner合...
- 雷迪森 2023-10-24
柚子快报邀请码778899分享:大数据技术之
第6章 Hadoop企业优化(重中之重)6.1 MapReduce 跑的慢的原因6.2 MapReduce优化方法6.2.1 数据输入6.2.2 Map阶段6.2.3 Reduce阶段6.2.4 I/O传输6.2.5 数据倾...
- 雷迪森 2023-10-24
柚子快报邀请码778899分享:大数据技术之
第1章 Zookeeper入门1.1 概述1.2 特点1.3 数据结构1.4 应用场景1.5 下载地址第2章 Zookeeper安装2.1 本地模式安装部署2.2 配置参数解读第3章 Zookeeper内部原理3.1 选举机...
- 雷迪森 2023-10-24
柚子快报邀请码778899分享:大数据技术之
第8章 HDFS HA 高可用8.1 HA概述8.2 HDFS-HA工作机制8.2.1 HDFS-HA工作要点8.2.2 HDFS-HA手动故障转移工作机制8.2.3 HDFS-HA自动故障转移工作机制8.3 HDFS-HA...
- 雷迪森 2023-10-24
柚子快报激活码778899分享:大数据技术之
第1章 Hive入门1.1 什么是Hive1.2 Hive的优缺点1.2.1 优点1.2.2 缺点1.3 Hive架构原理1.4 Hive和数据库比较1.4.1 查询语言1.4.2 数据存储位置1.4.3 数据更新1.4.4...
- 雷迪森 2023-10-24
柚子快报邀请码778899分享:大数据技术之
第4章 DDL数据定义4.1 创建数据库4.2 查询数据库4.2.1 显示数据库4.2.2 查看数据库详情4.3.3 切换当前数据库4.3 修改数据库4.4 删除数据库4.5 创建表4.5.1 管理表(内部表)4.5.2 外...
- 雷迪森 2023-10-24
count(*)、count(1)和count(column)区别以及执行效率高低比较
【mysql】count(* 、count(1 和count(column 区别小结: count(* 对行的数目进行计算,包含NULL。 count(column 对特定的列的值具有的行数进行计算,不包含NULL值...
- 雷迪森 2023-10-24
柚子快报激活码778899分享:大数据技术之
第6章 查询6.1 基本查询(select … from)6.1.1 全表和特定列查询6.1.2 列别名6.1.3 算术运算符6.1.4 常用函数(聚合函数)6.1.5 limit语句6.2 where语句6.2.1 比较运...
- 雷迪森 2023-10-24
柚子快报激活码778899分享:大数据技术之
第8章 压缩和存储(Hive高级)8.1 Hadoop源码编译支持Snappy压缩8.1.1 资源准备8.1.2 jar包安装8.1.3 编译源码8.2 Hadoop压缩配置8.2.1 MR支持的压缩编码8.2.2 压缩参数...
- 雷迪森 2023-10-19
Dreamina
Dreamina,用户可以根据一段文字生成四幅由AI生成的创意图,用户还可以对生成的图片进行修整,包括调整图片的大小比例和选择不同的模板类型。...
- 雷迪森 2023-10-05
柚子快报邀请码778899分享:大数据技术之
第10章 Hive实战之谷粒影音10.1 需求描述10.2 项目10.2.1 数据结构10.2.2 ETL原始数据10.3 准备工作10.3.1 创建表10.3.2 导入ETL后的数据到原始表10.3.3 向ORC表插入数据...
- 雷迪森 2023-10-05
柚子快报邀请码778899分享:大数据技术之
一、知识梳理1.1、背景表结构1.1.1、order by1.1.2、sort by1.1.3、distribute by1.1.4、cluster by1.2、行转列、列转行(UDAF 与 UDTF)1.2.1、行转列1....
- 雷迪森 2023-10-05
柚子快报邀请码778899分享:大数据技术之
第1章 Flume概述1.1 Flume定义1.2 Flume组成架构1.2.1 Agent1.2.2 Source1.2.3 Channel1.2.4 Sink1.2.5 Event1.3 Flume拓扑结构1.4 Flu...
- 雷迪森 2023-10-05
柚子快报邀请码778899分享:大数据技术之
第1章 Kafka概述1.1 消息队列1.2 为什么需要消息队列1.3 什么是Kafka1.4 Kafka架构第2章 Kafka集群部署2.1 环境准备2.1.1 集群规划2.1.2 jar包下载2.2 Kafka集群部署2...
- 雷迪森 2023-10-05
HBase 默认配置文件 hbase-default.xml 注释解析
HBase默认配置文件注释解析:...
- 雷迪森 2023-10-05
HBase 默认刷写文件 flush
对这些文件进行合并重写为一个新文件,设置个数越大可以减少触发合并的时间,但是每次合并的时间就会越长 --˃ flush会阻塞客户端读写 --˃...
- 雷迪森 2023-10-01
HBase 构建 Scanner 体系图解
HBase 构建 Scanner 体系图解...
- 雷迪森 2023-10-01
柚子快报邀请码778899分享:大数据技术之
第1章 Sqoop 简介第2章 Sqoop 原理第3章 Sqoop 安装3.1 下载并解压3.2 修改配置文件3.3 拷贝 JDBC 驱动3.4 验证 Sqoop3.5 测试 Sqoop 是否能够成功连接数据库第4章 Sqo...
- 雷迪森 2023-10-01
柚子快报激活码778899分享:大数据技术之
一 概述1.1 为什么需要工作流调度系统1.2 常见工作流调度系统1.3 各种调度工具特性对比1.4 Azkaban 与 Oozie 对比二 Azkaban(阿兹卡班) 介绍三 Azkaban 安装部署3.1 安装前准备3....
- 雷迪森 2023-10-01
柚子快报激活码778899分享:大数据技术之
第1章 Oozie 的简介第2章 Oozie 的功能模块介绍2.1 模块2.2 常用节点第3章 Oozie 的部署3.1 部署 Hadoop(CDH版本的)3.1.1 解压缩 CDH 版本的 hadoop3.1.2 修改 C...
- 雷迪森 2023-10-01
Java 中:不允许逻辑操作、运算操作放在方法块外面,编译器会进行优化
Java 中:不允许逻辑操作、运算操作放在方法块外面,编译器会进行优化!!!代码: // 生产数据 // 用于存放待随机的电话号码以上代码等价于:即编译对代码进行优化后的结果 // 生产数据 // 用...
- 雷迪森 2023-10-01
柚子快报邀请码778899分享:IDEA 中关闭单词拼写检查
IDEA 里面的单词拼写检查是默认开启的,有时候看着不是单词的拼写下面出现波浪线感觉很难受,可以关闭单词拼写。打开设置,Editor -˃ Inspections,勾选掉 Spelling。如下图:将typo后面的勾去掉即可...
- 雷迪森 2023-10-01
柚子快报邀请码778899分享:大数据项目之
一、NTP 配置时间服务器1.1、检查当前系统时区1.2、同步时间1.3、检查软件包1.4、修改 ntp 配置文件1.5、重启 ntp 服务1.6、设置定时同步任务二、Linux 集群服务群起脚本2.1、介绍2.2、编写脚本...
- 雷迪森 2023-10-01
柚子快报邀请码778899分享:大数据项目之
一、通用优化1.1、NameNode 的元数据备份使用 SSD1.2、定时备份 NameNode 上的元数据1.3、为 NameNode 指定多个元数据目录1.4、设置 dfs.namenode.name.dir.resto...
- 雷迪森 2023-10-01
【MySQL】MySQL 中的 int(11) 到底代表什么意思?
一、前言二、简介三、结论四、参考链接一、前言 在工作中经常要与 mysql 打交道,但是对 mysql 的各个字段类型一直都是一知半解,因此写本文总结记录一番。二、简介 对于 int 类型的一些基础知识其实上图已经说的很...
- 雷迪森 2023-09-23
柚子快报邀请码778899分享:大数据技术之
第一章 Scala 语言概述1.1 why is Scala 语言?1.2 Scala 语言诞生小故事1.3 Scala 和 Java 以及 jvm 的关系分析图1.4 Scala 语言的特点1.5 Windows 下搭建...
- 雷迪森 2023-09-23
柚子快报邀请码778899分享:大数据技术之
第二章 变量2.1 变量是程序的基本组成单位2.2 Scala 变量的介绍2.2.1 概念2.2.2 Scala 变量使用的基本步骤2.3 Scala 变量的基本使用2.4 Scala 变量使用说明2.4.1 变量声明基本语...
- 雷迪森 2023-09-23
柚子快报邀请码778899分享:大数据技术之
第三章 运算符3.1 运算符介绍3.2 算术运算符3.2.1 介绍3.2.2 算术运算符一览图3.2.3 案例演示3.2.4 细节说明3.3.5 课堂练习3.3 关系运算符(比较运算符 3.3.1 基本介绍3.3.2 关系运...
- 雷迪森 2023-09-23
柚子快报邀请码778899分享:大数据技术之
第五章 函数式编程-基础5.1 函数式编程内容说明5.1.1 函数式编程内容5.1.2 函数式编程授课顺序5.2 函数式编程介绍5.2.1 几个概念的说明5.2.2 方法、函数、函数式编程和面向对象编程关系分析图5.2.3...
- 雷迪森 2023-09-23
柚子快报激活码778899分享:大数据技术之
第七章 面向对象编程-中级7.1 包7.1.1 Java 中的包7.1.2 Scala 中的包7.1.3 Scala 包的特点概述7.1.4 Scala 包的命名7.1.5 Scala 会自动引入的常用包7.1.6 Scal...
- 雷迪森 2023-09-23
柚子快报邀请码778899分享:大数据技术之
第八章 面向对象编程-高级8.1 静态属性和静态方法8.1.1 静态属性-提出问题8.1.2 基本介绍8.1.3 伴生对象的快速入门8.1.4 伴生对象的小结8.1.5 最佳实践-使用伴生对象解决小孩游戏问题8.1.6 伴生...
- 雷迪森 2023-09-23
柚子快报激活码778899分享:大数据技术之
第十章 数据结构(上 -集合10.1 数据结构特点10.1.1 Scala 集合基本介绍10.1.2 可变集合和不可变集合举例10.2 Scala 不可变集合继承层次一览图10.2.1 图10.2.2 小结10.3 Scal...
- 雷迪森 2023-09-22
柚子快报邀请码778899分享:大数据技术之
第十一章 数据结构(下 -集合操作11.1 集合元素的映射-map11.1.1 map 映射函数的操作11.1.2 高阶函数基本使用案例1+案例211.1.3 使用 map 映射函数来解决11.1.4 模拟实现 map 映射...
- 雷迪森 2023-09-22
柚子快报邀请码778899分享:大数据技术之
第十三章 函数式编程-高级13.1 偏函数(partial function 13.1.1 提出一个需求,引出思考13.1.2 解决方式-filter + map 返回新的集合13.1.3 解决方式-模式匹配13.1.4 偏...
- 雷迪森 2023-09-22
柚子快报激活码778899分享:大数据技术之
第十四章 使用递归的方式去思考,去编程14.1 基本介绍14.2 Scala 提倡函数式编程(递归思想 14.3 应用案例1-求和14.4 应用案例2-求最大值14.5 应用案例3-翻转字符串14.6 应用案例4-求阶乘14...
- 雷迪森 2023-09-22
柚子快报邀请码778899分享:大数据技术之
第十五章 客户信息管理系统15.1 项目的开发流程15.2 项目的需求分析15.3 项目的界面15.4 项目的设计-程序框架图15.5 项目的功能实现15.5.1 完成 Customer 类15.5.2 完成显示主菜单和退出...
- 雷迪森 2023-09-22
柚子快报激活码778899分享:大数据技术之
第十七章 设计模式17.1 学习设计模式的必要性17.2 掌握设计模式的层次17.3 设计模式的介绍17.4 设计模式的类型17.5 简单工厂模式(生产类 17.5.1 基本介绍17.5.2 看一个具体的需求17.5.3 使...
- 雷迪森 2023-09-22
IDEA 取消参数名称(形参名)提示
IDEA 会自动显示形式参数的变量名称,这在一开始使用时感觉很方便、友好。有时候也会显得排版很乱,下面是取消自动显示形式参数名称的方法:把 Show parameter name hints 选项前面的勾去掉,点击OK。完成...
- 雷迪森 2023-09-22
柚子快报邀请码778899分享:大数据技术之
第十九章 Scala语言的数据结构和算法19.1 数据结构(算法 的介绍19.2 看几个实际编程中遇到的问题19.2.1 一个五子棋程序19.2.2 约瑟夫问题(丢手帕问题 19.2.3 其它常见算法问题19.3 稀疏数组...
- 雷迪森 2023-09-22
最新版本的 Chrome 浏览器如何设置网页编码?
问题描述: 由于使用频率较低,以及促进网页编码规范,Chrome 浏览器在 55 版本以后删除了手动设置网站编码的功能。 但是对于部分没有设置编码或编码设置不正确的网站,新版 Chrome 浏览器可能会因为无法准确判断其...
- 雷迪森 2023-09-19
柚子快报邀请码778899分享:Linux学习
一、准备工作二、安装过程三、配置环境变量四、Eclipse 开发环境配置一、准备工作安装环境:CentOS 6.8 桌面版(其他发行版本安装过程基本一样)所需软件:(下载时选择 Linux 版 tar.gz 格式) 1、O...
- 雷迪森 2023-09-19
柚子快报激活码778899分享:Linux学习
对于 Linux 虚拟机,您可以使用命令行工具手动安装或升级 VMware Tools。本次演示的 Linux 虚拟机为 CentOS6.8。先决条件开启虚拟机。确认客户机操作系统正在运行。由于 VMware Tools 安...
- 雷迪森 2023-09-19
java.lang.IllegalArgumentException: URLDecoder: Incomplete trailing escape (%) pattern 的问题处理
1、问题描述 最近在做有关大数据的项目中,解码客户端的请求参数时抛出异常:详细错误如下:2019-04-16 18:49:28,087 WARN [main] com.z.transformer.util.LoggerUt...
- 雷迪森 2023-09-19
【Hive】FAILED: ParseException line 5:2 Failed to recognize predicate 'date'. Failed rule: 'identifier' in column specification
1. 问题描述在 Hive1.2.1 版本运行如下 HQL 时:会抛出如下异常:2. 问题分析在 Hive1.2.0 版本开始增加了如下配置选项,默认值为 true。该选项的目的是:是否启用对 SQL2011 保留关键字的支...
- 雷迪森 2023-09-19
【Eclipse】出现 'Setting build path' has encountered a problem 的解决方法
今天,我在修改Eclipse项目的 JRE 环境时,老是报这个错误,很纳闷,到底是由于什么原因,导致的这个问题:后面发现了,是在这个项目里面的 .classpath 的这个文件有问题,所以对待这个问题的解决的方法就是:可以新...
- 雷迪森 2023-09-19
柚子快报邀请码778899分享:大数据技术之
第1章 Spark 概述1.1 什么是 Spark1.2 Spark 特点1.3 Spark 的用户和用途第2章 Spark 集群安装2.1 集群角色2.2 机器准备2.3 下载 Spark 安装包2.4 配置 Spark...
- 雷迪森 2023-09-04
Makelogo Ai
MakelogoAi是一种AI的Logo生成器设计工具,MakeLogo.AI使用先进的人工智能,根据用户输入生成独特的Logo。...
- 雷迪森 2023-09-02
【Hadoop & Ecilpse】Exception in thread "main" org.apache.hadoop.security.AccessControlException: Permission denied: user=bruce, access=WRITE, inode="/out2/
问题再现: 使用本机 Ecilpse (Windows环境 去访问远程 hadoop 集群出现以下异常:问题原因: 因为远程提交的情况下如果没有 hadoop 的系统环境变量,就会读取当前主机的用户名,所以 hado...
- 雷迪森 2023-09-02
柚子快报激活码778899分享:大数据技术之
1、准备安装包2、Spark Standalone 即独立模式 2.1、解压安装包到你安装的目录。 2.2、拷贝 conf 目录下的 slaves 文件,将 slave 节点的 hostname 写在文件中,每行一个。 ...
- 雷迪森 2023-09-02
【转载】Google 后 Hadoop 时代的新 “三驾马车” -- Caffeine(搜索)、Pregel(图计算)、Dremel(查询)
摘要:Google 在 2003 年到 2004 年公布了关于 GFS、MapReduce 和 BigTable 三篇技术论文(旧三驾马车),这也成为后来云计算发展的重要基石,如今 Google 在后 Hadoop 时代的新...
- 雷迪森 2023-09-02
柚子快报激活码778899分享:大数据技术之
第1章 RDD 概念1.1 RDD 为什么会产生1.2 RDD 概述1.2.1 什么是 RDD1.2.2 RDD 的属性1.3 RDD 弹性1.4 RDD 特点1.4.1 分区1.4.2 只读1.4.3 依赖1.4.4 缓存...
- 雷迪森 2023-09-02
柚子快报邀请码778899分享:大数据技术之
1、RDD 全称 弹性分布式数据集 Resilient Distributed Dataset它就是一个 class。继承了 Serializable 和具有 Logging 的特质,为什么要Serializable?答:因...
- 雷迪森 2023-09-02
柚子快报激活码778899分享:大数据技术之
第1章 Spark SQL 概述1.1 什么是 Spark SQL1.2 RDD vs DataFrames vs DataSet1.2.1 RDD1.2.2 DataFrame1.2.3 DataSet1.2.4 三者的共...
- 雷迪森 2023-09-02
柚子快报邀请码778899分享:大数据技术之
========== Spark SQL ==========1、Spark SQL 是 Spark 的一个模块,可以和 RDD 进行混合编程、支持标准的数据源、可以集成和替代 Hive、可以提供 JDBC、ODBC 服务器...
- 雷迪森 2023-09-02
柚子快报邀请码778899分享:Linux学习
测试中,需要通过 Netcat 发送数据。配置环境:CentOS 6.81、下载安装包到指定目录,例如本博主的是:/opt/software/2、解压缩文件到指定目录(注意:要先创建 /opt/module/netcat/...
- 雷迪森 2023-09-02
柚子快报激活码778899分享:大数据技术之
第1章 Spark Streaming 概述1.1 什么是 Spark Streaming1.2 为什么要学习 Spark Streaming1.3 Spark 与 Storm 的对比第2章 运行 Spark Streami...
- 雷迪森 2023-09-02
柚子快报邀请码778899分享:大数据技术之
========== Spark Streaming 是什么 ==========1、SPark Streaming 是 Spark 中一个组件,基于 Spark Core 进行构建,用于对流式进行处理,类似于 Storm。...
- 雷迪森 2023-08-18
柚子快报邀请码778899分享:大数据技术之
第1章 Spark GraphX 概述1.1 什么是 Spark GraphX1.2 弹性分布式属性图1.3 运行图计算程序第2章 Spark GraphX 解析2.1 存储模式2.1.1 图存储模式2.1.2 GraphX...
- 雷迪森 2023-08-18
柚子快报邀请码778899分享:大数据技术之
========== Spark GraphX 概述 ==========1、Spark GraphX是什么? (1)Spark GraphX 是 Spark 的一个模块,主要用于进行以图为核心的计算还有分布式图的计算。 ...
- 雷迪森 2023-08-18
柚子快报邀请码778899分享:大数据技术之
第1章 Spark 整体概述1.1 整体概念1.2 RDD 抽象1.3 计算抽象1.4 集群模式1.5 RPC 网络通信抽象1.6 启动 Standalone 集群1.7 核心组件1.8 核心组件交互流程1.9 Block...
- 雷迪森 2023-08-18
柚子快报邀请码778899分享:大数据技术之
========== Spark 通信架构 ==========1、spark 一开始使用 akka 作为网络通信框架,spark 2.X 版本以后完全抛弃 akka,而使用 netty 作为新的网络通信框架。最主要原因:s...
- 雷迪森 2023-08-18
柚子快报激活码778899分享:大数据技术之
第1章 Spark 性能优化1.1 调优基本原则1.1.1 基本概念和原则1.1.2 性能监控方式1.1.3 调优要点1.2 数据倾斜优化1.2.1 为何要处理数据倾斜(Data Skew)1.2.2 如何定位导致数据倾斜的...
- 雷迪森 2023-08-18
柚子快报激活码778899分享:大数据技术之
========== Spark 的监控方式 ==========1、Spark Web UI Spark 内置应用运行监控工具(提供了应用运行层面的主要信息--重要)2、Ganglia...
- 雷迪森 2023-08-18
柚子快报邀请码778899分享:大数据技术之
第1章 机器学习概述1.1 机器学习是啥?1.2 机器学习能干啥?1.3 机器学习有啥?1.4 机器学习怎么用?第2章 机器学习的相关概念2.1 数据集2.2 泛化能力2.3 过拟合和欠拟合2.4 维度、特征2.5 模型2....
- 雷迪森 2023-08-18
柚子快报邀请码778899分享:大数据技术之
第4章 凸优化算法4.1 梯度下降4.2 牛顿法4.3 拟牛顿法4.4 BFGS 算法第5章 L1、L2 正则化5.1 从经验风险最小化到结构经验最小化5.2 范数与正则项5.3 贝叶斯先验第6章 线性回归算法6.1 数学模...
- 雷迪森 2023-08-18
柚子快报邀请码778899分享:大数据技术之
一 概述1.1 什么是搜索?1.2 如果用数据库做搜索会怎么样?1.3 什么是全文检索和 Lucene?1.4 什么是 Elasticsearch?1.5 Elasticsearch 的适用场景1.6 Elasticsear...
- 雷迪森 2023-08-18
柚子快报激活码778899分享:大数据技术之
1. ELK 简单介绍2. ELK 的用途3. ELK 的优点4. ELK 旧版架构5. ELK 新版架构6. 新版 ELK 架构介绍1. ELK 简单介绍 ELK 是 elastic(美国数据搜索软件初创公司 公司提供...
- 雷迪森 2023-08-11
柚子快报邀请码778899分享:大数据技术之
第一章 NoSQL 入门概述1.1 入门概述1.1.1 单机 MySQL 的美好年代1.1.2 Memcached(缓存 + MySQL + 垂直拆分1.1.3 MySQL 主从复制--读写分离1.1.4 分表分库 + 水...
- 雷迪森 2023-08-11
柚子快报邀请码778899分享:大数据技术之
第四章 解析 Redis 配置文件 redis.conf4.1 Units 单位4.2 INCLUDES 包含4.3 GENERAL 通用4.4 SNAPSHOTTING 快照4.5 SECURITY 安全4.6 LIMIT...
- 雷迪森 2023-08-11
柚子快报邀请码778899分享:大数据技术之
第一章 数据库的概述1.1 什么是数据库1.2 数据库分类第二章 MongoDB 的简介、下载、安装、启动、配置和关闭2.1 MongoDB 简介2.2 下载 MongoDB2.3 安装 MongoDB2.4 启动 Mong...
- 雷迪森 2023-08-11
柚子快报邀请码778899分享:大数据技术之
第一章 计算机基础知识1.1 课程介绍1.2 计算机是什么1.3 计算机的组成1.4 计算机的使用方式1.5 windows 的命令行1.6 环境变量(environment variable)1.7 path 环境变量1....
- 雷迪森 2023-08-11
柚子快报邀请码778899分享:大数据技术之
第三章 流程控制语句3.1 简介3.2 条件判断语句(if 语句)3.2.1 if 语句3.2.2 input 函数3.2.3 if-else 语句3.2.4 if-elif-else 语句3.2.5 if 练习3.3 循环...
- 雷迪森 2023-08-11
柚子快报邀请码778899分享:大数据技术之
第五章 函数5.1 函数的简介5.2 函数的参数5.3 函数参数传递的方式5.4 函数的不定长参数5.5 函数的返回值5.6 函数的文档字符串--函数的说明5.7 变量的作用域与命名空间5.8 函数的递归5.9 高阶函数5....
- 雷迪森 2023-08-11
柚子快报激活码778899分享:大数据技术之
第七章 异常7.1 异常的简介和异常的处理7.2 异常的传播7.3 异常对象7.4 自定义异常对象第八章 文件8.1 文件--打开8.2 文件--关闭8.3 文件--简单读取8.4 文件--读取大文件8.5 文件--read...
- 雷迪森 2023-08-11
柚子快报邀请码778899分享:01
有监督学习--简单线性回归模型(最小二乘法代码实现)0.引入依赖1.导入数据(data.csv)2.定义损失函数3.定义模型拟合函数4.测试:运行最小二乘算法,计算 w 和 b5.画出拟合曲线6.附录-测试数据有监督学习--...
- 雷迪森 2023-08-11
柚子快报激活码778899分享:02
有监督学习--简单线性回归模型(梯度下降法代码实现)0.引入依赖1.导入数据(data.csv)2.定义损失函数3.定义模型的超参数4.定义核心梯度下降模型函数5.测试:运行梯度下降算法,计算最优的 w 和 b6.画出拟合曲...
- 雷迪森 2023-08-08
柚子快报激活码778899分享:04
有监督学习--分类模型--K 近邻(kNN)0.引入依赖1.数据的加载和预处理2.核心算法实现3.测试4.自动化测试有监督学习--分类模型--K 近邻(kNN)0.引入依赖import numpy as np # 数值计算、...
- 雷迪森 2023-08-08
柚子快报邀请码778899分享:03
有监督学习--简单线性回归模型(调用 sklearn 库代码实现)0.引入依赖1.导入数据(data.csv)2.定义损失函数3.导入机器学习库 sklearn4.测试:运行算法,从训练好的模型中提取出系数和截距5.画出拟合...
- 雷迪森 2023-08-08
柚子快报邀请码778899分享:05
无监督学习--聚类模型--K 均值0.引入依赖1.数据的加载和预处理2.算法实现3.测试无监督学习--聚类模型--K 均值0.引入依赖import numpy as npimport matplotlib.pyplot as...
- 雷迪森 2023-08-08
柚子快报邀请码778899分享:07
LFM--梯度下降法--实现基于模型的协同过滤0.引入依赖1.数据准备2.算法的实现3.测试LFM--梯度下降法--实现基于模型的协同过滤0.引入依赖import numpy as np # 数值计算、矩阵运算、向量运算im...