首页 > 其他
Spark:RDD的设计与运行原理
# Spark:RDD的设计与运行原理 ## 1.RDD设计背景在实际应用中,存在许多迭代式算法和家忽视数据挖掘工具,这些应用场景的共同之处是,不同计算阶段之间会重用中间结果,即下一个阶段的输出结果会作为下一个阶段的输入。但是,目前的MapReduce框架都是把中间结果写入到HDFS中,带来了大量的 ...
分类:其他   时间:2019-01-18 16:01:48    收藏:0  评论:0  赞:0  阅读:17
什么是hadoop
面试现在这家公司的时候,领导说有意让我接触大数据这块的项目,当时可把我高兴的。虽然来这快两年了也没接触大数据,词倒是听了几个。hadoop念着挺顺口,到底是个什么东西呢。搜索了一波,总结如下。 hadoop是什么? Hadoop就是一个分布式计算的解决方案. 能看懂吗。看不懂的继续往下看看 hado ...
分类:其他   时间:2019-01-18 16:01:15    收藏:0  评论:0  赞:0  阅读:14
接口如何处理重复请求?
1、利用JavaScript防止重复请求 如请求没有完成时按钮禁用 2、利用Session令牌防止重复请求 在服务器端生成一个唯一的随机标识号,称为Token(令牌),同时在当前用户的Session域中保存这个Token。然后将Token发送到客户端,请求接口的时候连同这个Token一起提交到服务器 ...
分类:其他   时间:2019-01-18 16:00:46    收藏:0  评论:0  赞:0  阅读:15
collections模块
1. collections deque实现了list的append()和pop()操作外,还支持了appendleft()和popleft()操作,高效率的对list头部尾部进行操作 1.3 Counter ...
分类:其他   时间:2019-01-18 16:00:32    收藏:0  评论:0  赞:0  阅读:9
BZOJ3597 SCOI2014方伯伯运椰子(分数规划+spfa)
即在总流量不变的情况下调整每条边的流量。显然先二分答案变为求最小费用。容易想到直接流量清空跑费用流,但复杂度略有些高。 首先需要知道(不知道也行?)一种平时基本不用的求最小费用流的算法——消圈法。算法基于下面的定理:如果残量网络中有负环,当前费用流一定不是最小费用流(似乎很显然?)。注意到分数规划之 ...
分类:其他   时间:2019-01-18 16:00:00    收藏:0  评论:0  赞:0  阅读:13
u盘启动盘安装centos7.5操作系统
1、下载CentOS 7.5的安装镜像:CentOS-7-x86_64-DVD-1804.iso 2、下载UltraISO:https://cn.ultraiso.net/xiazai.html 3、打开UltraISO,它的操作界面如下图所示,点击左上角的文件,然后再点打开。选择我们刚才展示的Ce ...
分类:其他   时间:2019-01-18 15:59:41    收藏:0  评论:0  赞:0  阅读:12
不应该使用String.valueOf的场景
今天在接口中接收参数转换String时遇到一个巨大的坑,也是自己疏忽大意所致 事情是这样的,项目中接口的公共入参对象为Map<String,Object>,而sql中需要的参数为String数组。 我习惯性的取出参数value后就用String.valueOf转换了一下切分为数组传了过去,结果在测试 ...
分类:其他   时间:2019-01-18 15:59:08    收藏:0  评论:0  赞:0  阅读:12
电压输出型传感器与电流输出型传感器的区别
传感器输出有很多形式,但是大多是电流输出和电压输出,有些客户在选择传感器的时候不知道应该选择电路输出还是电压输出,下面我们就来说说这两种输出的区别,下面我们以压力传感器为例进行说明。压力传感器是应用最多的一款传感器之一,电流输出和电压输出的压力传感器都非常常见,这两种输出主要有下面几个区别,首先,早 ...
分类:其他   时间:2019-01-18 15:58:10    收藏:0  评论:0  赞:0  阅读:10
tf.transpose函数的用法讲解
tf.transpose函数中文意思是转置,对于低维度的转置问题,很简单,不想讨论,直接转置就好(大家看下面文档,一看就懂)。 本文主要讨论高维度的情况: 为了形象理解高维情况,这里以矩阵组合举例: 先定义下: 2 x (3*4)表示2个3*4的矩阵,(其实,它是个3维张量)。 x = [[[1,2 ...
分类:其他   时间:2019-01-18 15:57:55    收藏:0  评论:0  赞:0  阅读:12
19 01 18 dango 模型
定义属性 Django根据属性的类型确定以下信息: 当前选择的数据库支持字段的类型 渲染管理表单时使用的默认html控件 在管理站点最低限度的验证 django会为表创建自动增长的主键列,每个模型只能有一个主键列,如果使用选项设置某属性为主键列后django不会再创建自动增长的主键列。 默认创建的主 ...
分类:其他   时间:2019-01-18 15:57:38    收藏:0  评论:0  赞:0  阅读:11
面试-JVM
Java虚拟机相关操作: 分区问题: 堆:存放创建的对象 栈:每个线程一个栈 程序计数器:每个栈一个程序计数器 静态区: GC问题: 垃圾收集问题 ...
分类:其他   时间:2019-01-18 15:56:12    收藏:0  评论:0  赞:0  阅读:8
对vue生命周期的理解
总共分为8个阶段,创建前/后,载入前/后,更新前/后,销毁前/后; 创建前/后:在beforeCreated阶段,vue实例的挂载元素$el和数据对象data都为undefined,还未初始化。在created阶段,vue实例的数据对象data有了,$el还没有; 载入前/后:在beforeMoun ...
分类:其他   时间:2019-01-18 15:55:54    收藏:0  评论:0  赞:0  阅读:11
Timeline Style
from: https://freefrontend.com/css-timelines/ css: html5: 效果: ...
分类:其他   时间:2019-01-18 15:55:38    收藏:0  评论:0  赞:0  阅读:7
Loj#6433「PKUSC2018」最大前缀和(状态压缩DP)
题面 "Loj" 题解 先转化题意,其实这题在乘了$n!$以后就变成了全排列中的最大前缀和的和(有点拗口)。$n\leq20$,考虑状压$DP$ 考虑一个最大前缀和$\sum\limits_{i=1}^pa_i$,这个位置$p$是最大前缀和的右界当且仅当对于$\forall r p$有:$\sum\ ...
分类:其他   时间:2019-01-18 15:55:23    收藏:0  评论:0  赞:0  阅读:11
脚本之循环语句
while,until,forbreak:提前退出循环可以控制死循环continue:提前结束本轮循环,而进入下一次循环while的特殊用法一:while:;dodonewhile的特殊用法二:whilereadLINE;dodone</PATH/TO/SOMEFILE/etc/passwd
分类:其他   时间:2019-01-18 15:35:08    收藏:0  评论:0  赞:0  阅读:17
oa办公自动化为企业带来哪些实用价值?
oa办公自动化近年来得到了快速发展,尤其是在信息互联不断加剧的今天,为更好的提升企业组织管理能力,改善协同办公关系,增进企业办公效率,加速信息化建设变得愈加重要。oa办公自动化的出现无疑满足了人们对办公高效、简洁,舒适、自由的需求。  1、建立内部的信息平台,增进企业协同效率  通过建立内部的信息平台,各个项目部的经验和技术、合作厂家等,可以即时总结共享。各项目部通过oa办公自动化共享的信息,迅速
分类:其他   时间:2019-01-18 15:34:04    收藏:0  评论:0  赞:0  阅读:19
bootstraptable设置列默认值
示例:见代码一,通过formatter可以控制显示字段的值,假设渲染bootstraptable时该值未被渲染,同时页面提交时该值也未被修改,在后台该值为null,而不是formatter中设置的'',要想达到设置默认值效果,需要加上row.name = ''; 见代码二。 代码一: 代码二: ...
分类:其他   时间:2019-01-18 15:32:42    收藏:0  评论:0  赞:0  阅读:19
两数之和
一、求两数之和 题目描述: 给定一个整数数组 nums 和一个目标值 target,请你在该数组中找出和为目标值的那 两个 整数,并返回他们的数组下标 你可以假设每种输入只会对应一个答案。但是,你不能重复利用这个数组中同样的元素 示例: 给定 nums = [2, 7, 11, 15], targe ...
分类:其他   时间:2019-01-18 15:32:22    收藏:0  评论:0  赞:0  阅读:22
3D城市模型
3D城市模型-面向对象-自定义组件 效果图: ...
分类:其他   时间:2019-01-18 15:31:59    收藏:0  评论:0  赞:0  阅读:22
JVM性能调优 第七章 内存分配策略
理解了jvm内存分配策略不仅是程序性能调优的重要知识,还能够给养成自己一种良好的代码思路,一个程序的代码差异往往都是在这里体现出来的。 一、对象优先分配到Eden区域 一般来说,新创建的对象都会直接分配到Eden区域,如果Eden区域内存不够,JVM就会触发GC(垃圾回收),一般来说在JVM中有3种 ...
分类:其他   时间:2019-01-18 15:31:17    收藏:0  评论:0  赞:0  阅读:16
1387796条   上一页 1 ... 3 4 5 6 7 ... 69390 下一页
© 2014 designnerd.net 版权所有 鲁ICP备09046678号-4
打开技术之扣,分享程序人生!
             

鲁公网安备 37021202000002号