首页 > 2020年11月07日 > 全部分享
hadoop解决数据倾斜方法
1)提请在map端进行combiner,减少传入的数据量 在mapper加上combiner相当于提前进行reduce,即把一个Mappper中的相同key进行了聚合,减少shuffle过程中传输数据量,以及reducer端的计算量。【注意:map端的提前聚合不能影响最终的结果,eg:求平均值的就不 ...
分类:其他   时间:2020-11-07 10:39:44    收藏:0  评论:0  赞:0  阅读:24
os模块之:目录与文件
OS:opreate system OS模块是Python标准库中的一个用于访问操作系统功能的模块 使用OS模块中提供的接口,可以实现跨平台访问 通用操作 1,获取平台信息 2,对目录的操作 3,判断操作 第一:系统操作 os.sep:系统路径的分隔符 os.name:你正在用的平台 os.gete ...
分类:其他   时间:2020-11-07 10:39:30    收藏:0  评论:0  赞:0  阅读:26
操控MySQL数据库
Python想要操控MySQL,先要安装库,在Python3.x下,该包名为MySQLclient。 安装,在cmd中运行:pip install MySQLClient 使用流程: 导入包-->创建Connection-->获取Cursor-->……-->关闭Cursor-->关闭Connecti ...
分类:数据库技术   时间:2020-11-07 10:39:16    收藏:0  评论:0  赞:0  阅读:35
有关于Java Map,应该掌握的8个问题
前言最近几天看了几篇有关于JavaMap的外国博文,写得非常不错,所以整理了Javamap应该掌握的8个问题,都是日常开发司空见惯的问题,希望对大家有帮助;如果有不正确的地方,欢迎提出,万分感谢哈~本章节所有代码demo已上传github1、如何把一个Map转化为List日常开发中,我们经常遇到这种场景,把一个Map转化为List。map转List有以下三种转化方式:把map的键key转化为lis
分类:编程语言   时间:2020-11-07 10:39:05    收藏:0  评论:0  赞:0  阅读:24
C++11 多线程详解
写在前面:说到多线程编程,那么就不得不提并行和并发,多线程是实现并发(并行)的一种手段。并行是指两个或多个独立的操作同时进行。注意这里是同时进行,区别于并发,在一个时间段内执行多个操作。在单核时代,多个线程是并发的,在一个时间段内轮流执行;在多核时代,多个线程可以实现真正的并行,在多核上真正独立的并 ...
分类:编程语言   时间:2020-11-07 10:38:52    收藏:0  评论:0  赞:0  阅读:38
常用 Linux 命令的基本使用
常用 Linux 命令的基本使用 01. 学习 Linux 终端命令的原因 Linux 刚面世时并没有图形界面,所有的操作全靠命令完成,如 磁盘操作、文件存取、目录操作、进程管理、文件权限 设定等 在职场中,大量的 服务器维护工作 都是在 远程 通过 SSH 客户端 来完成的,并没有图形界面,所有的 ...
分类:系统服务   时间:2020-11-07 10:38:38    收藏:0  评论:0  赞:0  阅读:27
APP 弱网测试
1、fiddler要和手机连入同一网络,修改手机wifi--设置高级选项--手动代理--输入当前电脑ip和fiddler中的端口号8888 2 在fiddler 中Rules 下点击Customize Rules 3 在弹出的Fiddler Script窗口中搜索“Delay sends”,找到如下 ...
分类:移动平台   时间:2020-11-07 10:38:24    收藏:0  评论:0  赞:0  阅读:22
让 Debian 服务器变成一个内网上外网的路由器
1 目标 使内网主机通过网关主机访问外网。 2 前置条件 2.1 网关主机 Router 两块网卡: 2: enp0s3: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc pfifo_fast state UP group default qlen ...
分类:其他   时间:2020-11-07 10:38:00    收藏:0  评论:0  赞:0  阅读:119
Go语言入门(环境搭建和HelloWorld)
1、初识GO语言 1.1、go语言是什么? Go 是一个开源的编程语言,支持交叉编译、编译快速,开发效率好,支持匿名函数与闭包,执行性能强,天生支持并发。 1.2、Go语言用途 Go 语言被设计成一门应用于搭载 Web 服务器,存储集群或类似用途的巨型中央服务器的系统编程语言。同时也用于游戏服务端的 ...
分类:编程语言   时间:2020-11-07 10:37:45    收藏:0  评论:0  赞:0  阅读:29
enum of Python
enum 某个变量有若干有表征意义的离散值, 则可以考虑使用枚举。 例如系统运行错误码、HTTP状态码。 https://docs.python.org/3.5/library/enum.html An enumeration is a set of symbolic names (members) ...
分类:编程语言   时间:2020-11-07 10:37:35    收藏:0  评论:0  赞:0  阅读:28
FCIP 快速移植-2020年11月7日08:05:15
FCIP 快速移植 环境安装 1.Anaconda 安装 2.打开 Anaconda Prompt (Anaconda3)在界面分别输入 pip install tushare pip install pandas pip install PyEmail 3.notepad++ 快速运行 cmd / ...
分类:其他   时间:2020-11-07 10:37:22    收藏:0  评论:0  赞:0  阅读:26
String
String 字符串是常量,创建后不可更改(改变变量值时,要重新开辟,不能直接修改) 字符串字面值存储在字符串池中,实现共享 String s = "hello";产生一个对象,字符串池中存储 String s = new String("hello");产生两个对象,堆、池各存储一个(实际,堆指向 ...
分类:其他   时间:2020-11-07 10:37:11    收藏:0  评论:0  赞:0  阅读:35
转移指令原理
转移指令 可以修改IP或同时修改CS,IP的系统指令称为转移指令,可分为以下几类: 转移行为: 只修改IP,称为段内转移,如jmp ax 同时修改CS和IP,称为段间转移,如jmp 1000:0 修改范围: 短转移:修改IP范围-128~127 近转移:修改IP范围-32768~32767 转移指令 ...
分类:其他   时间:2020-11-07 10:37:00    收藏:0  评论:0  赞:0  阅读:19
Inception系列之Inception_v1
目前,神经网络模型为了得到更好的效果,越来越深和越来越宽的模型被提出。然而这样会带来以下几个问题: 1)参数量,计算量越来越大,在有限内存和算力的设备上,其应用也就越难以落地。 2)对于一些数据集较少的场景,太大的模型反而容易过拟合,但模型太小则泛化能力不够。 3)容易出现梯度消失的问题。 解决这些 ...
分类:其他   时间:2020-11-07 10:36:48    收藏:0  评论:0  赞:0  阅读:45
重学python-列表的一些操作
随机打印2个0-100之间的数字(包含0和100) 想把这些数字放到列表中的话,直接按下面的写法完成即可 这样就产生了一个随机数的列表 、 ...
分类:编程语言   时间:2020-11-07 10:36:35    收藏:0  评论:0  赞:0  阅读:22
LeetCode 1283 - Find the Smallest Divisor Given a Threshold (Medium)
Given an array of integers nums and an integer threshold, we will choose a positive integer divisor and divide all the array by it and sum the result ...
分类:其他   时间:2020-11-07 10:36:25    收藏:0  评论:0  赞:0  阅读:27
读写excel文档
Python有专门的库读写excel文件,这些库包括 xlrd,xlwt,xlutils,openpyxl,xlsxwriter几种 excel老版本文件格式为xls,新版本为xlsx xlrd负责读取excel文件,支持格式xls,xlsx xlwt负责写入excel文件,只支持xls格式 xlu ...
分类:其他   时间:2020-11-07 10:36:16    收藏:0  评论:0  赞:0  阅读:19
Python界面
如何从众多的Python GUI框架和工具包中进行选择是个头疼的问题 Tkinter 模块Tk GUI 工具包的接口。 Tkinter 是 Python 的标准 GUI 库。 Tkinter 是内置到 python 的安装包中、只要安装好 Python 之后就能直接导入模块、而且 IDLE 也是用 ...
分类:编程语言   时间:2020-11-07 10:36:04    收藏:0  评论:0  赞:0  阅读:13
康托展开&逆康托展开
这玩意的题目都比较少.....因为实在是太裸了 康托展开是什么? 大概就是给你一个全排列,让你求出它在所有全排列里面的排名.... 说起来比较难说,给例子你就懂了: 例如: 5 4 5 1 3 2 它的排名怎么求呢? 解法一:全排列后看排名就行了。很简单的求出来是92。 那么假如是这样子呢? 15 ...
分类:其他   时间:2020-11-07 10:35:53    收藏:0  评论:0  赞:0  阅读:28
.Net core 应用发布时去除多余的语音包
在.net core中, 生成或者发布的时候含有大量的其他语言包, 如下图 原因 因为没有为项目指定语言,所以会列出多个语言包 解决 编辑项目的.csproj文件,在 PropertyGroup 节点下 添加指定语言包 <SatelliteResourceLanguages>en</Satellit ...
分类:Web开发   时间:2020-11-07 10:35:42    收藏:0  评论:0  赞:0  阅读:41
367条   上一页 1 ... 13 14 15 16 17 ... 19 下一页
关于我们 - 联系我们 - 留言反馈 - 联系我们:wmxa8@hotmail.com
© 2014 bubuko.com 版权所有
打开技术之扣,分享程序人生!