跳至主要內容

jackssybin 的个人博客

python3线程池/进程池应用ThreadPoolExecutor

  |   0 评论   |   3790 浏览

多种方法实现 python 线程池 一、 既然多线程可以缩短程序运行时间，那么，是不是线程数量越多越好呢？ 显然，并不是，每一个线程的从生成到消亡也是需要时间和资源的，太多的线程会占用过多的系统资源（内存开销，cpu开销），而且生成太多的线程时间也是可观的，很可能会得不偿失，这里给出一个最佳线程数量的计算方式： 最佳线程数的获取： 1、通过用户慢慢递增来进行性能压测，观察QPS（即每秒的响应请求数，也即是最大吞吐能力。），响应时间 2、根据公式计算:服务器端最佳线程数量=((线程等待时间+线程cpu时间)/线程cpu时间) * cpu数量 3、单用户压测，查看CPU的消耗，然后直接乘以百分比，再进行压测，一般这个值的附近应该就是最佳线程数量。 二、如何实现线程池？ 1、使用threadpool模块，这是个python的第三方模块，支持python2和python3 #! /usr/bin/env python # -- coding: utf-8 -- import threadpool import time def sayhello (a): print("hello: "+a....

Ubuntu16.04中PHP7.2 安装pdo_mysql扩展 有更新！

  |   0 评论   |   2953 浏览

1.查看php版本 php -v 当前7.2版本 2.查看是否安装mysql扩展 两种方式 php -m php -r 'phpinfo();' #查看加载顺序 grep -Hrv ";" /etc/php | grep -E "extension(\s+)?=" 3. 安装mysql扩展 sudo apt install php7.2-mysql 4. 修改配置文件 cd /etc/php/7.2/cli //进入配置文件目录 sudo vim php.ini //vim打开配置文件 //可能会输入root用户密码 /pdo //查找，输入后按enter键即可 //按i键进入vim编辑模式 extension=php_pdo_mysql.dll //去掉extensions前面的;号 //按shift + : 号，然后输入wq

mysql允许远程连接

  |   0 评论   |   2132 浏览

1.本地登陆 赋权 GRANT ALL PRIVILEGES ON . TO 'root'@'%' IDENTIFIED BY '密码' WITH GRANT OPTION;  FLUSH PRIVILEGES; 2. 修改本地绑定端口 /etc/mysql/**mysql.cnf 查找bind 127.0.0.1 注释掉即可

阿里云Ubuntu16.04安装Java8_redis 有更新！

  |   0 评论   |   2933 浏览

一、java8安装 1 Java 8 下载地址 链接：https://pan.baidu.com/s/1NN4XBL5g1Xn7EwzM4YET0g 提取码：m4mq 2 以root用户登录将下载的jdk-8u92-linux-x64.tar.gz文件放到~/data/soft/目录下，使用如下命令解压 tar zxvf jdk-8u92-linux-x64.tar.gz -C ~/data/soft 3 将java目录添加到etc/profile文件中 export JAVA_HOME=/root/data/jdk1.8 export JRE_HOME=${JAVA_HOME}/jre export CLASSPATH=.:${JAVA_HOME}/lib:${JRE_HOME}/lib export PATH=${JAVA_HOME}/bin:$PATH 4 验证java java -version 二、redis安装 安装Redis服务器端 sudo apt-get install redis-server 安装完成后，Redis服务器会自动启动，我们检查Redis服务....

mybatis,mysql的时区问题 有更新！

  |   0 评论   |   2248 浏览

1.公司运营装mysql的时候的时区不是固定的，随机的，所以我们要想办法解决这个问题，应该运营的权限控制的很严，不能要他们更改； 首先解决从数据库读取到java，指定我们所需要的时区，只需要在配置文件的mysql链接的时候指定自己所需的文 datasource.jdbcUrl=jdbc:mysql://xxx.xx.xx.xx:3306/bms?characterEncoding=UTF-8&useSSL=false&serverTimezone=Asia/Shanghai 2.如果我们写接口的时候使用的JsonFormat注解的时候，我们也需要指定想同的时区，否则又会出现时区误差 @JsonFormat(pattern = ApplicationConstants.DATE_FORMAT,timezone="GMT+8")

IO多路复用机制详解 有更新！

  |   0 评论   |   2079 浏览

服务器端编程经常需要构造高性能的IO模型，常见的IO模型有四种： 一. 同步阻塞IO（Blocking IO）：即传统的IO模型。 二. 同步非阻塞IO（Non-blocking IO）：默认创建的socket都是阻塞的，非阻塞IO要求socket被设置为NONBLOCK。注意这里所说的NIO并非Java的NIO（New IO）库。 三. IO多路复用（IO Multiplexing）：即经典的Reactor设计模式，有时也称为异步阻塞IO，Java中的Selector和Linux中的epoll都是这种模型。 四. 异步IO（Asynchronous IO）：即经典的Proactor设计模式，也称为异步非阻塞IO。 同步和异步的概念描述的是用户线程与内核的交互方式： 同步是指用户线程发起IO请求后需要等待或者轮询内核IO操作完成后才能继续执行； 异步是指用户线程发起IO请求后仍继续执行，当内核IO操作完成后会通知用户线程，或者调用用户线程注册的回调函数。 阻塞和非阻塞的概念描述的是用户线程调用内核IO操作的方式： 阻塞是....

ubutun安装chrome浏览器 有更新！

  |   0 评论   |   2357 浏览

一、安装Chrome浏览器 1、安装依赖 sudo apt-get install libxss1 libappindicator1 libindicator7 2、下载Chrome安装包 wget https://dl.google.com/linux/direct/google-chrome-stable_current_amd64.deb 3、安装 sudo dpkg -i google-chrome*.deb sudo apt-get install -f 4、ubuntu如何安装lsb_release工具? sudo apt-get install lsb-core -y 二、安装ChromeDriver 1、安装xvfb以便我们可以无头奔跑地运行Chrome sudo apt-get install xvfb 2、安装依赖 sudo apt-get install unzip 3、下载安装包 wget -N http://chromedriver.storage.googleapis.com/2.26/chromedriver_linux....

阿里云ubutun python3.5.2卸载更新到3.6方法亲测有效

  |   0 评论   |   2102 浏览

1.首先卸载一下python3.5的包 sudo apt-get remove python3.5 2.卸载python3.5以及它的依赖包 sudo apt-get remove --auto-remove python3.5 3.手动删除usr/bin 下面的包 如果前两步还不能删除完，自己去usr/bin/下删除python3.5相关的文件 4.安装python3.6 sudo apt-get install software-properties-common sudo add-apt-repository ppa:jonathonf/python-3.6 sudo apt-get update sudo apt-get install python3.6 5.安装python3.6 pip apt-get install python3-pip python3.6 -m pip install --upgrade pip 6.安装python3.6 pip 查询安装版本 python3 -V python -V pip -V

什么是区块链？ 区块链的入门介绍,场景应用 有更新！

  |   0 评论   |   2197 浏览

原作者：阮一峰 www.ruanyifeng.com/blog/2017/12/blockchain-tutorial.html 区块链（blockchain）是眼下的大热门，新闻媒体大量报道，宣称它将创造未来。 可是，简单易懂的入门文章却很少。区块链到底是什么，有何特别之处，很少有解释。 一、区块链的本质 区块链是什么？一句话，它是一种特殊的分布式数据库 首先，区块链的主要作用是储存信息。任何需要保存的信息，都可以写入区块链，也可以从里面读取，所以它是数据库。 其次，任何人都可以架设服务器，加入区块链网络，成为一个节点。区块链的世界里面，没有中心节点，每个节点都是平等的，都保存着整个数据库。你可以向任何一个节点，写入/读取数据，因为所有节点最后都会同步，保证区块链一致。 二、区块链的最大特点 分布式数据库并非新发明，市场上早有此类产品。但是，区块链有一个革命性特点。 **区块链没有管理员，它是彻底无中心的。**其他的数据库都有管理员，但是区块链没有。如果有人想对区块链添加审核，也实现不了，因为它的设计目标就是防止出现居于中心地位的管理当局。 正是因为无法管理，区块链才能做到无法被....

js京东全民养红包一步完成 有更新！

  |   0 评论   |   1735 浏览

京东喜迎双十一 这个活动和天猫的活动几乎可以说很像了，都是浏览商家店铺获取金币， 可是这样进度太慢了。于是浏览的大佬的贴子，终于找到可以一键完成养红包的所有任务了。 使用步骤 一、打开谷歌浏览或者火狐也浏览也行（支持开发者模式），按 F12 进入，切换手机模式如图： 738 x 395 1366 x 732 二、进入京东官网 1.登入你的京东账号：http://www.jd.com 2.进入活动页面：https://happy.m.jd.com/babelDiy/GZWVJFLMXBQVEBDQZWMY/XJf8bH6oXDWSgS91daDJzXh9bU7/index.html 三、使用 js 脚本 把脚本复制到 Console 点击回车就可以看见任务在自动完成 下面是脚本代码： let productList = [], shopList = [], url = "https://api.m.jd.com/client.action"; function autoPost(id,type){ fetch(`${url}?timestamp=${new Date().getTime....

linux下一些常用命令 有更新！

  |   4 评论   |   4797 浏览

1.根据端口查进程 lsof -i:port netstat -nap | grep port 2.根据进程号查端口: lsof -i|grep pid netstat -nap | grep pid 3.根据进程名查找pid、port： ps -ef |grep tomcat ps -ef |grep port(根据port查找相关进程) ps -ef |grep pid(根据pid查找相关进程) 4.根据进程号查服务路径： ll /proc/26357/cwd #26357是进程号 1 root root 0 Oct 25 10:08 /proc/26357/cwd -> /root/data/proxy_pool/Api/ 5.查询所有进程号 top top 6.查看进程中的线程号信息 ps -T -p 18043 # ps 语法 1.top -H -p 18043 #top 实时的哈 shift+H开启show threads on功能，展示线程资源占用情况 　　找到消耗CPU等最多的PID为:18045 2. printf "%x\n" 18045 --&gt....

Nginx 虚拟主机配置 有更新！

  |   0 评论   |   1948 浏览

1.虚拟主机概念 所谓虚拟主机，在 Web 服务里就是一个独立的网站站点，这个站点对应独立的域名（也可能是IP 或端口），具有独立的程序及资源，可以独立地对外提供服务供用户访问。 在 Nginx 中，使用一个 server{} 标签来标识一个虚拟主机，一个 Web 服务里可以有多个虚拟主机标签对，即可以同时支持多个虚拟主机站点。 虚拟主机有三种类型：基于域名的虚拟主机、基于端口的虚拟主机、基于 IP 的虚拟主机。 2.基于域名的虚拟主机 域名的虚拟主机是生产环境中最常用的。 2.1 编辑配置文件 [root@localhost conf]# vim nginx.conf worker_processes 1; events { worker_connections 1024; } http { include mime.types; default_type application/octet-stream; sendfile on; keepalive_timeout 65; server { listen 80; server_name www.abc.com; l....

java解决Hash碰撞冲突方法总结

  |   0 评论   |   2853 浏览

1.什么是hash碰撞 对象Hash的前提是实现equals()和hashCode()两个方法，那么HashCode()的作用就是保证对象返回唯一hash值，但当两个对象计算值一样时，这就发生了碰撞冲突。如下将介绍如何处理冲突，当然其前提是一致性hash。 为什么hashcode会相同？ hashCode是所有java对象的固有方法，如果不重载的话，返回的实际上是该对象在jvm的堆上的内存地址，而不同对象的内存地址肯定不同，所以这个hashCode也就肯定不同了。如果重载了的话，由于采用的算法的问题，有可能导致两个不同对象的hashCode相同。 hashCode的重载实现需要满足不变性，即一个object的hashCode不能前一会是1，过一会就变成2了。hashCode的重载实现最好依赖于对象中的final属性，从而在对象初始化构造后就不再变化。一方面是jvm便于代码优化，可以缓存这个hashCode；另一方面，在使用hashMap或hashSet的场景中，如果使用的key的hashCode会变化，将会导致bug，比如放进去时key.hashCode()=1，等到要取出来时key....

java基础知识需要注意的一些点 有更新！

  |   0 评论   |   2627 浏览

1.看看Integer 你注意到了没 @Test public void testInteger() { System.out.println(("----- testInteger method test ------")); Integer a =128; Integer b =128; System.out.println(a.equals(b)); System.out.println(a==b); Integer c =127; Integer d =127; System.out.println(c.equals(d)); System.out.println(c==d); } 结果： true false true true 为什么？ Integer类型当正整数小于128时是在内存栈中创建值的，并将对象指向这个值， 这样当比较两个栈引用时因为是同一地址引用两者则相等。 当大于127时将会调用new Integer()， 两个整数对象地址引用不相等了。 这就是为什么当值为128时不相等，当值为100时相等了。 2.看看 变量传值的问题 @Test public vo....

Rust学习之二猜字谜

  |   0 评论   |   1495 浏览

1.首先cargo一个项目 cargo new guessing_game 2.修改toxml 添加依赖 [dependencies] rand = "0.3.14" 3.切换数据源,一来源 对于在国内的人来说，Rust开发时有时使用官方的源太慢，可以考虑更换使用国内中科大的源。更换方法如下： 在 $HOME/.cargo/config 中添加如下内容（如果文件不存在请直接新建该文件）： [source.crates-io] registry = "https://mirrors.ustc.edu.cn/crates.io-index" replace-with = 'ustc' [source.ustc] registry = "https://mirrors.ustc.edu.cn/crates.io-index" 4.引入依赖的api文档 cargo doc --open 5.最终代码 use std::io; use std::cmp::Ordering; use rand::Rng; fn main() { println!("Guess the....

如何定位java进程中使用最耗内存的进程 有更新！

  |   0 评论   |   2926 浏览

1.清除进程和线程的关系 2.知道linux查看进程对应线程的命令 查看进程命令 ps -ef |grep java 查看进程对应线程命令 top -Hp <pid> 找到最大线程的pid号 3.打印堆栈信息 jstack <pid> jstack 里面存的是16进制的数字。所以需要把十进制转换为16进制 printf "%x\n" pid jstack pid |grep 'nid' -C5 –color 找到了16进制的pid号。那就直接可以在jstack里搜索找到对应进程信息了，就能找到对应的代码了 生成dump文件： jmap -dump:format=b,file=/path/heap.bin 进程ID jmap -dump:live,format=b,file=/path/heap.bin 进程ID live参数： 表示我们需要抓取目前在生命周期内的内存对象,也就是说GC收不走的对象,然后我们绝大部分情况下,需要的看的就是这些内存。而且会减小dump文件的大小。 4.案例 背景 1、java 正则表达式回溯造成 CPU 100% ....

记一个七牛云生成图片水印的问题

  |   0 评论   |   1779 浏览

1.首先七牛云生成图片是没问题的 2.但诡异的是当图片上水印的文字很长的时候，就会涉及到换行问题。换行呢。有主动换行和被动换行。 主动换行：是我们自主把文字按照一定长度切换成两组文字然后赋值到图片上。 被动换行：就是今天我们遇到的问题，图片加水印然后线上环境app端图片都不显示了。但看后台数据图片是有内容的。在pc端也是能看到的。 图我就不截了。 用户看到的现象是：图片打不开了 程序员看到的现象是: 图片地址已经存入到数据库，但是图片地址有问题，存入到数据库的时候看到库里地址有换行符。 那作为程序员就开始分析为啥会有这个现象了。 1.通过日志找到入库sql，发现入库的时候就有问题。 2.既然入库的时候就有问题，那看这个字段是啥时候生成的。从前端过来的时候是否有问题， 经查找日志，发现从前端过来的时候，没问题， 那就是这个字段被加水印的时候弄坏的，多了空格。加水印是依照七牛的方式base64对图片文字加密。 这里就有问题了，base64加密字符会换行，经查证 据RFC 822规定，每76个字符，还需要加上一个回车换行 就是因为这个回车换行导致的。问题就找到了。 解决方式: 换用Ap....