记录一次Spark SQL的优化过程

  • Post author:
  • Post category:其他

1、背景 集群有一个 spark sql 的任务,每天需要跑38561秒,噢,来计算一下38561/60/60 这就是10.7个小时呀,就是下面那这种样子: 2、排查过程 2.1 查看任务日志 发现第9个job跑了10.4h,那一定就是这个job有问题了,点进去继续看 Stage_id 为23的运行了10.4h,其它的只用不到2min,点进去继续看 按照 Task Time 倒序排列,发现有个服务…

继续阅读 记录一次Spark SQL的优化过程

Vue自动获取焦点并且光标移至最后

  • Post author:
  • Post category:vue

项目需求 : 每次进入页面时,需要 自动聚焦 到一个文本框上,让其右侧的设置面板显现出来。 ( 这里之所以 p 标签可以进行聚焦是因为其设置了 contenteditable 为 true 了 ) 并且 光标 最好是自动移至到最后面,优化用户的体验。 代码实现 : <template> <div> <p id="noteInput" v-html="text" con…

继续阅读 Vue自动获取焦点并且光标移至最后

vscode中git.path设置无效

  • Post author:
  • Post category:其他

1.问题描述:Unable to initialize Git; AggregateError(2) Error: Invalid Git configuration 快速找到git执行路径----git-bash输入where git vscode中设置了git.path的执行路径,但是依然报错 提示未找到git,请重新安装git 错误信息为:does not match the path an…

继续阅读 vscode中git.path设置无效

一个java前后端快速开发框架jeesite

  • Post author:
  • Post category:java

官网: https://www.jeesite.com/ 文档: 在线文档 | JeeSite 快速开发平台 需要缴费买授权 技术栈: JeeSite 基于 Spring Boot 2 +JeeSite 严格遵循 Web 安全规范,MyBatis +Shiro +J2Cache前后台双重验证,数据编码传匆Redis + Beetl 等 定架构; 前端密码加密存储,密码安全第基于 Bootstrap…

继续阅读 一个java前后端快速开发框架jeesite

mysql 枚举类型 jdbc_将枚举列表保存到MySql时,Spring Data JDBC SQLFeatureNotSupportedException…

  • Post author:
  • Post category:mysql

I've a model named Role. A role has a list of Permissions, simple as that. Using org.springframework.boot:2.2.5.RELEASE, spring-jdbc version 5.2.24, mysql-connector-java-8.0.19, mysql server version 5…

继续阅读 mysql 枚举类型 jdbc_将枚举列表保存到MySql时,Spring Data JDBC SQLFeatureNotSupportedException…

C#通过OpenCL调用显卡GPU做高效并行运算

  • Post author:
  • Post category:其他

GPU的并行运算能力远超CPU,有时候我们会需要用到超大数据并行运算,可以考虑用GPU实现,这是一篇C#调用GPU进行运算的入门教程. 1: 下载相关的库: https://sourceforge.net/projects/openclnet/ 看起来已经N久没更新了, 不过没关系,这只是API声明和参数,opencl本身是有在更新的. 里面有源码也有DLL,可以引用DLL,也可以直接把源码添加到…

继续阅读 C#通过OpenCL调用显卡GPU做高效并行运算

html输入框中各种正则表达式设置

  • Post author:
  • Post category:其他

<%@ page language="java" contentType="text/html; charset=gb2312" pageEncoding="gb2312"%> <!DOCTYPE html PUBLIC "-//W3C//DTD HTML 4.01 Transitional//EN" "http://www.w3.org/TR/html4/loose.dtd"&…

继续阅读 html输入框中各种正则表达式设置

opengl 创建窗口

  • Post author:
  • Post category:其他

#include <Windows.h> LRESULT CALLBACK GLWindowProc(HWND hwnd,UINT msg,WPARAM wParam,LPARAM lParam) { switch (msg) { case WM_CLOSE: PostQuitMessage(0); break; default: break; } return DefWindowPr…

继续阅读 opengl 创建窗口

机构存储DSpace系统简介

  • Post author:
  • Post category:其他

摘要:本文从 DSpace 系统的数据处理、用户与数字对象管理、浏览与检索、统计功能、订阅服务、系统结构、开放源代码七个方面介绍了 DSpace 系统。 关键词: DSpace ; Institutional Repository ; 机构存储 Introduction of Institutional Repository DSpace System Abstract: Introducing …

继续阅读 机构存储DSpace系统简介

深入理解 Spring Cloud Gateway 的原理

  • Post author:
  • Post category:其他

大家好,今天给大家带来一篇微服务框架中非常重要的一个组件:API 网关。 前言 在 PassJava 项目中,我用到了 Spring Cloud Gateway 作为 API 网关,客户端的所有的请求都是先经过网关,然后再转发到会员微服务、题目微服务等。 比如 API 网关和会员微服务对应的访问地址如下: API 网关地址:http://localhost:8060 会员微服务地址:http://…

继续阅读 深入理解 Spring Cloud Gateway 的原理