#PA

Windows使用Idea编译spark源码

 1.环境准备JDK1.8Scala2.11.8Maven3.3+IDEAwithscalaplugin2.下载spark源码下载地址 https://archive.apache.org/dist/spark/spark-2.0.0/spark-2.0.0.tgz将下载好的spark源码解压到c:...

spark 2.0.0集群安装与hive on spark配置

 1.环境准备:JDK1.8hive2.3.4hadoop2.7.3hbase1.3.3scala2.11.12mysql5.7 2.下载spark2.0.0cd/home/worksapce/softwarewgethttps://archive.apache.org/dist/spark/spa...

hive on spark的坑

原文地址:http://www.cnblogs.com/breg/p/5552342.html装了一个多星期的hiveonspark遇到了许多坑。还是写一篇随笔,免得以后自己忘记了。同事也给我一样苦逼的人参考。先说明一下,这里说的Hive on Spark是Hive跑在Spark上,用的是Spark...
代码星球 ·2020-04-05

Spark2.0.0源码编译

 Hive默认使用MapReduce作为执行引擎,即Hiveonmr,Hive还可以使用Tez和Spark作为其执行引擎,分别为HiveonTez和HiveonSpark。由于MapReduce中间计算均需要写入磁盘,而Spark是放在内存中,所以总体来讲Spark比MapReduce快很多。默认情况下,Hi...
代码星球 ·2020-04-05

hive spark版本对应关系

查看hivesource下面的pom.xml,可以找到官方默认发布的hive版本对应的spark版本,在实际部署的时候,最好按照这个版本关系来,这样出现兼容问题的概率相对较小。下面面列出一部分对应关系,在实际部署中可以到github上去查询具体的版本对应关系,地址为https://github.com/apache/h...

linux pagecache与内存占用

实验环境 CentOSLinuxrelease7.3.1611(Core) 3.10.0-514.6.1.el7.x86_64 1.概念介绍   linux系统中通常使用free命令来查看内存使用情况,free命令主要是从/proc/meminfo文件中读取的...
代码星球 ·2020-04-05

关于robotframework,app,appium的xpath定位问题及常用方法

(转自:https://www.cnblogs.com/xiaoqi111/p/6250253.html)关于类似的帖子好像很多,但是没有找到具体能帮我解决问题的办法。还是自己深究了好久才基本知道app上面的xpath定位和web上的不同点:先放一个图: A,先说说不用xpath的场景,一般是用于存在id或者...

axios 的 get 方法 params 传参 400 的问题

axios的get方法params传参,在输入框中输入某些特殊字符例如中括号,请求时会直接报400错误,BadRequest。原因:axios的get方法,在使用params传参时,已经对对象参数进行了序列化处理方案:在创建axios实例时,增加可选的序列化属性paramsSerializer,在负责序列化'param...

使用 webpack-bundle-analyzer 分析 webpack 代码库拆分块

github:https://github.com/webpack-contrib/webpack-bundle-analyzer1.安装:  cnpminstallwebpack-bundle-analyzer--save-dev2.在vue.config.js中:  constBundleAnalyzerPlugi...

onbeforeunload、onpagehide、onunload、onload、onpageshow的正确执行顺序

一、Chrome支持onbeforeunload、onpagehide、onunload,只是在这些方法执行的时候alert,console这些方法已经被注销了。二、浏览器跳转、关闭、刷新时都按a,b,c,d,e的顺序执行<ahref="http://www.baidu.com">跳转到百度</a&g...

webpack Uncaught ReferenceError: Swiper is not defined

一、报错原因:Swiper的JS文件没有加载成功,或者说swiper丢失了依赖(正常操作是:加载后再初始化Swiper)二、解决方法:在初始化Swiper的js文件中导入Swiper  importSwiperfrom'../lib/swiper-4.2.2.min.js';  ...

Webpack v4.8.3 快速入门指南

一、进入https://webpack.docschina.org/官方文档,点击"文档"进入文档页面,文档中包含 “概念,配置,API,指南,LOADERS,插件" 6项:二、点击”指南“选项,阅读快速入门指南:三、1.本地安裝开发依赖cnpminstallwe...

vue-cli3配置webpack-bundle-analyzer插件

为优化vue项目性能,需要使用webpack-bundle-analyzer分析报文件,找出最占用空间的插件有哪些,对应做出优化网上看了一些网站,有的写的太麻烦了,现将最简单的一种写出来供大家参考安装: npminstallwebpack-bundle-analyzer--save-dev &nbs...

vue之$root,$parent

vue状态管理使用vuex,如果项目不大,逻辑不多,name我们没必要用vuex给项目增加难度,只需要用$root设置vue实例的data就行了,如下main.jsnewVue({data(){return{loading:true}},router,store,render:h=>h(App)}).$mount...
代码星球 ·2020-04-05

Android Studio:You need to use a Theme.AppCompat theme (or descendant) with this activity. AlertDialog

学习《第一行代码》的时候遇到的问题。 Process:com.example.sevenun.littledemo,PID:2085java.lang.RuntimeException:Unabletostartreceivercom.example.sevenun.littledemo.receiver.F...
代码星球 ·2020-04-05
首页上一页...375376377378379...下一页尾页