spark在 python 中运用

  • Post author:
  • Post category:python

RDD属性。 只读:不能修改,只能通过转换操作生成新的 RDD。 分布式:可以分布在多台机器上进行并行处理。 弹性:计算过程中内存不够时它会和磁盘进行数据交换。 基于内存:可以全部或部分缓存在内存中,在多次计算间重用 # -*- coding: utf-8 -*- # uptime 8 月 26 import requests # v36 二级违禁专项排查 import time import j…

继续阅读 spark在 python 中运用

【Python】基础数据结构:列表——元组——字典——集合

  • Post author:
  • Post category:python

文章目录 一、简述 二、Python中的列表详解 2.1 创建列表 2.2 访问列表元素 2.3 修改列表元素 2.4 列表切片 2.5 列表方法 2.6 列表推导式 三、Python中的元组详解 3.1 创建元组 3.2 访问元组元素 3.3 元组是不可变的 3.4 元组切片 3.5 元组方法 四、Python中的字典详解 4.1 创建字典 4.2 访问字典元素 4.3 修改字典元素 4.4 字…

继续阅读 【Python】基础数据结构:列表——元组——字典——集合

Python基础教程(七)matplotlib–plot介绍

  • Post author:
  • Post category:python

编程字典Pandas教程 http://codingdict.com/article/8270 清华计算机博士带你学-Python金融量化分析 https://www.bilibili.com/video/BV1i741147LS?t https://matplotlib.org/stable/index.html 1. 介绍 matplotlib.pyplot是一个有命令风格的函数集合,它看起来…

继续阅读 Python基础教程(七)matplotlib–plot介绍

python小计(数据库批量in查询自动加分号)

  • Post author:
  • Post category:python

# 读入一个多行的文件,给每行的数据加双引号并保存为一行输出 import os aa = '' with open('D:\\bb.txt', 'rb') as lines: for line in lines: line = '"' + line.decode().replace(os.linesep, "") + '",' + os.linesep aa += line b = ''.joi…

继续阅读 python小计(数据库批量in查询自动加分号)

Python中cannot unpack non-iterable int object问题的可能解决方法

  • Post author:
  • Post category:python

在写代码的时候,并列语句我写成了这样: x1=vec[i][0],y1=vec[i][1],x2=vec[j][0],y2=vec[j][1] c++的习惯,应该用分号: x1=vec[i][0];y1=vec[i][1];x2=vec[j][0];y2=vec[j][1] 版权声明:本文为tianyizhicheng原创文章,遵循 CC 4.0 BY-SA 版权协议,转载请附上原文出处链接和本声…

继续阅读 Python中cannot unpack non-iterable int object问题的可能解决方法

python手机版下载-手机python下载

  • Post author:
  • Post category:python

广告关闭 2017年12月,云+社区对外发布,从最开始的技术博客到现在拥有多个社区产品。未来,我们一起乘风破浪,创造无限可能。 说明: python 2python 3都支持。 示例代码 说明: 所有示例代码仅作参考,无法直接编译和运行,需根据实际情况进行修改。 准备必要参数# 短信应用 sdk appidappid = 1400009099 # sdk appid 以1400开头#短信应用 sd…

继续阅读 python手机版下载-手机python下载

【python常用数据变换】如何把dataframe中非0值替换为列名?

  • Post author:
  • Post category:python

用numpy的 mask 和 where 能解决这个问题。 问题描述 转换前 希望转换后 希望把dataframe中不为0的数据转换为列名,其他保持为0. value = np.random.randint(low=0, high=2 ,size=(5,3)) df = pd.DataFrame(value, columns = ['a','b','c']) mask = (df>0).va…

继续阅读 【python常用数据变换】如何把dataframe中非0值替换为列名?

马氏链,Metropolis-Hastings采样与Gibbs采样的理解(附有python仿真)

  • Post author:
  • Post category:python

文章目录 马氏链 原理 采样方法 MH采样 原理 代码 Gibbs采样 原理 代码 马氏链 原理 采样方法 所谓的采样方法,主要就是利用了马氏链的性质 π n ( x ) \pi_n(x) π n ​ ( x ) 为一个离散的概率分布 π n ( x ) = [ π n ( 1 ) , π n ( 2 ) , . . . , π n ( m ) ] \pi_n(x)=[\pi_n(1),\pi_n…

继续阅读 马氏链,Metropolis-Hastings采样与Gibbs采样的理解(附有python仿真)

Cubietruck开发板折腾002:安装Python管理工具pip

  • Post author:
  • Post category:python

前面我尝试了linaro更新Ubuntu软件源,之所以要换源就是因为官方的那个源资源太少了,有些软件找不到,因为linaro就是基于Ubuntu开发的,所以更换了比较流行的Ubuntu源。 下面我们来安装下Python( Python 是一种解释型、面向对象、动态数据类型的高级程序设计语言),启动Cubietruck开发板,进入linaro-server服务器版本,可以用Putty来连接,打开命令…

继续阅读 Cubietruck开发板折腾002:安装Python管理工具pip

python监控redis主从_监控redis python脚本

  • Post author:
  • Post category:python

#!/bin/env python #-*- coding:utf-8 -*-import json import time import socket import os import re import sys import commands import urllib2, base64 import requestsclassRedisStats: redis_cli= '/data/red…

继续阅读 python监控redis主从_监控redis python脚本