Spark并行度和任务调度 2023年11月17日 上午12:14 • 大数据 • 阅读 99 原创文章受到原创版权保护。转载请注明出处:https://www.johngo689.com/821592/ 转载文章受原作者版权保护。转载请注明原作者出处! 大数据 赞 (0) 0 生成海报 【自取】最近整理的,有需要可以领取学习: Linux核心资料大放送~ 全栈面试题汇总(持续更新&可下载) 一个提高学习100%效率的工具! 【超详细】深度学习面试题目! LeetCode Python刷题答案下载! LeetCode Java版刷题答案下载! LeetCode C++ 版本,抓紧保存! LeetCode GO语言 刷题答案下载! 大家都在看 从问题域和解决域看需求评审 01、 什么是需求评审? 需求是用户在产品使用过程中,发现产品存在无法满足的业务场景或无法解决的业务问题,进而提出的诉求。 需求评审可以区分为两个维度,一个是评审需求的问题域,即该… 大数据 2023年6月3日 0083 Node以数据块的形式读取文件 在Node中,http响应头信息中Transfer-Encoding默认是chunked。 Transfer-Encoding:chunked Node天生的异步机制,让响应可以逐… 大数据 2023年6月3日 0093 03_MapReduce框架原理_3.4 InputSplit 切片类(源码) InputSplit 切片类 1.0 类的作用 InputSplit 他在逻辑上包含了提供给处理这个Inputsplit的Mapper的所有的key-value 1.1 抽象方法 … 大数据 2023年5月26日 0069 Redis02:企业架构介绍以及redis介绍 大数据 2023年11月16日 0050 【Attention,Self-Attention Self Attention Self_Attention】通俗易懂 Attention is, to some extent, motivated by how we pay visual attention to different region… 大数据 2023年5月28日 00136 Flume聚合 案例需求: hadoop102 上的 Flume-1 监控文件/opt/module/group.log, hadoop103 上的 Flume-2 监控某一个端口的数据流, Fl… 大数据 2023年6月3日 0063 SQLite数据库 数据(Data) 能够输入计算机并能被计算机程序识别和处理的信息集合 数据库 (Database) 数据库是在数据库管理系统管理和控制之下,存放在存储介质上的数据集合 常用的数据库… 大数据 2023年11月11日 0036 sqlite日期操作方法 SQLite的日期操作:SQLite支持五中日期时间函数, 如下: strftime时间字串格式化 %d day of month: 00%f fractional seconds… 大数据 2023年11月10日 0046 .Net Core 2.2升级3.1的避坑指南 写在前面 微软在更新.Net Core版本的时候,动作往往很大,使得每次更新版本的时候都得小心翼翼,坑实在是太多。往往是悄咪咪的移除了某项功能或者组件,或者不在支持XX方法,这就很… 大数据 2023年6月3日 0074 win10搭建spark3.1环境(超详细) 大数据 2023年11月16日 0067 Hive 如何进行权限控制 大数据 2023年11月14日 0058 Kafka2.8安装 1.概述 最近Kafka官网发布了2.8版本,在该版本中引入了KRaft模式。鉴于新版本和新特性的引入,相关使用资料较少,那边本篇博客笔者将为大家介绍Kafka2.8的安装和使用。… 大数据 2023年5月28日 0072 Hadoop伪分布式搭建 本教程基于hadoop 2.7.7、java 1.8、CentOS 8.3 基本配置顺序相同,有区别处会标明 使用此教程之前确保虚拟机安装完毕,并且可以连接Xshell 1. 基础… 大数据 2023年6月3日 0080 NLP-LSTM NLP-LSTM 一、LSTM介绍 二、LSTM拆解 * 1、遗忘门、输入门、输出门 2、候选记忆元 3、记忆元 4、隐藏状态 三、总结 一、LSTM介绍 LSTM(Long Sh… 大数据 2023年5月28日 0076 【安卓-存储】安卓存储sqlite之实现 安卓的存储用的是sqlite轻型数据库 已经默认集成到安卓系统里,直接调用就可以 那么如何调用呢,有没有一个ORM框架能够简便的操作sqlite数据库呢 有的,那就是greenda… 大数据 2023年11月11日 0061 java使用两对大括号添加集合元素的问题 使用两对大括号实际上是创建了一个内部类,并在内部类内部使用代码块的方式在创建对象的时候进行初始化 ArrayList list = new ArrayList<>(){… 大数据 2023年6月3日 0087