乐胖代购免代理版

MSSQL、MySQL 数据库删除大批量千万级百万级数据的优化

SQLServer上面删除1.6亿条记录，不能用Truncate（因为只是删除其中少部分数据）。经过实验，每次删除400万条要花1.5-3小时，而且是越到后面越慢，正常的话，需要大约102个小时，大约4天半时间。这在生产环境下是不能接受的。经过一个处理之后，我每次删除400万条记录花5-6分钟，删除全部1.6亿条记录花了4-5个小时！为什么？？每次删除记录，数据库都要相应地更新索引，这是很慢的IO

mysql优化

转载 2018-08-24 11:51:10 6869 阅读

nginx1.10.2源码安装配置参数参考

[root@localhost nginx-1.10.2]# ./configure --help --help print this message --prefix=PATH

配置

编译

nginx

原创 2016-12-09 17:02:55 974 阅读 1收藏

centos7防火墙简单说明

防火墙是一种位于内部网络与外部网络之间的网络安全系统。一项信息安全的防护系统，依照特定的规则，允许或是限制传输的数据通过。防火墙通常工作在网络层，也即IPv4或IPv6的IP包上。是否允许包通过防火墙，取决于防火墙配置的规则。这些规则既可以是内建的，也可以是用户自定义的。每一个包要进出防火墙，均需要满足防火墙配置的规则。每一条规则均有一个目标动作，具有相同动作的规则可以分组在一起。对于Linux系

centos7 firewall ipt

转载 2016-11-25 13:41:35 929 阅读 1收藏

Web开发（进阶）- Django【进阶篇】

跨站请求伪造一、简介django为用户实现防止跨站请求伪造的功能，通过中间件 django.middleware.csrf.CsrfViewMiddleware 来完成。而对于django中设置防跨站请求伪造功能有分为全局和局部。全局：　　中间件 django.middleware.csrf.CsrfViewMiddleware局部：@csrf_protect，为当前函数强制设

django python

转载精选 2016-11-21 13:46:01 1090 阅读

Web开发（进阶）- Web框架本质

Web框架本质众所周知，对于所有的Web应用，本质上其实就是一个socket服务端，用户的浏览器其实就是一个socket客户端。#!/usr/bin/env python #coding:utf-8 import socket def handle_request(client):

django python

转载精选 2016-11-21 13:26:21 498 阅读

Web开发（进阶）- Django【基础篇】

Python的WEB框架有Django、Tornado、Flask 等多种，Django相较与其他WEB框架其优势为：大而全，框架本身集成了ORM、模型绑定、模板引擎、缓存、Session等诸多功能。基本配置一、创建django程序终端命令：django-admin startproject sitenameIDE创建Django程序时，本质上都是自动执行上述命令其他常用命令：　　python m

django python

转载精选 2016-11-21 11:52:52 1050 阅读

SGE的常用操作

网格计算和SGE从概念上讲，网格很简单。它是执行任务的计算资源的集合。对用户而言，它就是一个大系统，提供单个切入点，以访问强大而分散的资源。用户将网格视作单个计算资源SGE的工作原理Sun Grid Engine 软件为用户提供了向Sun Grid Engine 系统提交要求计算的任务的方法，以透明地分配相关的工作负荷。用户可以向Sun Grid Engine 系统提交批处理作业、交互式作业和并行

sge rocks rocksclust

原创 2016-11-10 11:35:53 10000+阅读

rocks集群部署

rocks cluster是一个开源的集群管理系统，本文的内容主要参考自rocks cluster的官方文档，详细内容可参考http://www.rocksclusters.org官网给的网络拓扑图rocks管理节点安装1、添加管理主节点（Frontend Node）①、下载镜像地址ftp://ftp.rocksclusters.org/pub/rocks/rocks-6.2/linux/area

cluste

rocks

原创 2016-11-09 15:41:12 10000+阅读 4收藏 3评论

paramiko安装和使用

paramiko介绍：paramiko是用python语言写的一个模块，遵循SSH2协议，支持以加密和认证的方式，进行远程服务器的连接。由于使用的是python这样的能够跨平台运行的语言，所以所有python支持的平台，如Linux, Solaris, BSD, MacOS X, Windows等，paramiko都可以支持，因此，如果需要使用SSH从一个平台连接到另外一个平台，进行

python

paramiko

原创 2016-10-20 17:28:09 869 阅读

python多进程编程

序. multiprocessingpython中的多线程其实并不是真正的多线程，如果想要充分地使用多核CPU的资源，在python中大部分情况需要使用多进程。Python提供了非常好用的多进程包multiprocessing，只需要定义一个函数，Python会完成其他所有事情。借助这个包，可以轻松完成从单进程到并发执行的转换。multiprocessing支持子进程、通信和共享数据、执行不同形式

python

多进程

原创 2016-10-13 17:09:40 419 阅读 1点赞

当当网Docker应用实践

当当网

应用实践

Docker

转载 2016-09-29 10:40:13 535 阅读 1点赞

VMware Vsphere高可性

1 应用层高可用性：如实现mysql、oracle数据库应用程序的储群集，主要是判断mysql、oracle应用程序是否停止运行。2 操作系统高可用性：如windows的故障转移群集（windows failover clustering WFC）。3 虚拟化层的高可用性：如vsphere high availabil

VMware Vsphere高可性

转载精选 2016-09-28 14:02:04 858 阅读

MySQL5.6多实例部署

无论是迫于预算，亦或者是领导要求，多实例的安装也是DBA必须掌握的技术，她的启停和登录方式和单实例安装数据库略有不同，本文记录下如何完成MySQL5.6多实例部署。首先我们看一下my.cnf和单实例的区分：[root@HE1 scripts]# cat /etc/my.cnf [client] #port = 3306 #socket = /tmp/mysql.sock #default-char

MySQL

部署

多实例

原创 2016-09-12 09:04:54 461 阅读 1点赞

ngxtop：在命令行实时监控 Nginx 的神器

Nginx网站服务器在生产环境中运行的时候需要进行实时监控。实际上，诸如Nagios, Zabbix, Munin 的网络监控软件是支持 Nginx 监控的。如果你不需要以上软件提供的综合性报告或者长期数据统计功能，只是需要一种快速简便的办法去监控 Nginx 服务器的请求的话，我建议你采用一个叫 ngxtop 的命令行工具。你马上就会发现 ngxtop 从界面和名称都借鉴了著

ngxtop nginx 监控

转载精选 2016-08-30 08:40:42 534 阅读 2收藏

Maxscale实现mysql的读写分离

1MaxScale 是干什么的？配置好了MySQL的主从复制结构后，我们希望实现读写分离，把读操作分散到从服务器中，并且对多个从服务器能实现负载均衡。读写分离和负载均衡是MySQL集群的基础需求，MaxScale 就可以帮着我们方便的实现这些功能。2MaxScale 的基础构成MaxScale 是MySQL的兄弟公司 MariaDB 开发的，现在已经发展得非常成熟。MaxScale 是插件式结构，

mysql

读写分离

maxscale

原创 2016-08-23 13:27:41 1165 阅读

网络状态工具ss命令详解

ss命令用于显示socket状态. 他可以显示PACKET sockets, TCP sockets, UDP sockets, DCCP sockets, RAW sockets, Unix domain sockets等等统计. 它比其他工具展示等多tcp和state信息. 它是一个非常实用、快速、有效的跟踪IP连接和sockets的新工具.SS命令可以提供如下信息：所有的TCP sock

linux

ss

原创 2016-08-18 09:29:09 1201 阅读

redis配置文件redis.conf说明

redis配置文件参数说明:1. Redis默认不是以守护进程的方式运行，可以通过该配置项修改，使用yes启用守护进程daemonize no2. 当Redis以守护进程方式运行时，Redis默认会把pid写入/var/run/redis.pid文件，可以通过pidfile指定pidfile /var/run/redis.pid3. 指定Redis监听端口，默认端口为

conf

redis

原创 2016-08-12 10:54:54 569 阅读 1收藏

Redis 3.0 编译安装

官方主站：http://www.redis.io/ 下载地址：http://www.redis.cn/download.htmlCommand API： http://www.redis.cn/commands.html Redis官方文档：http://redis.io/documentation一.Redis 介绍：Redi

安装

Redis

原创 2016-08-12 10:51:36 633 阅读 1收藏

php优化（一）

PHP缓存加速介绍1、操作码介绍及缓存原理当客户端请求一个php程序时，服务器的PHP引擎会解析该PHP程序，并将其编译为特定的操作码文件（Operate Code,opcode）该文件是执行PHP代码后的一种二进制表示形式。默认情况下，这个编译好的操作码文件由PHP引擎执行后丢弃。而操作码缓存（Opcode cache）的原理就是讲编译后的操作码保存下来，冰岛共享内存里，以便在下一次调用该PHP

php

优化

原创 2016-08-08 12:03:03 907 阅读

php优化（二）

配置xcache插件加速1.xcache.ini参数说明 xcache软件的解压目录xcache-3.2.0下存在一个名为xcache.ini的配置文件，即为xcache的配置文件。参数说明如下：xcache配置文件参数解释说明[xcache-common]extension = xcache.so加载xcache.so，路径相对于extension_dir的配置。自3.0版本开始不再

php

优化

原创 2016-08-08 11:59:18 739 阅读

分布式存储介绍

本篇将先介绍前三部分：一、存储类型二、文件系统三、存储介质四、Raid和副本五、SRVSAN的架构六、SRVSAN的安全隐患七、解决的方法一、存储类型一般情况下，我们将存储分成了4种类型，基于本机的DAS和网络的NAS存储、SAN存储、对象存储。对象存储是SAN存储和NAS存储结合后的产物，汲取了SAN存储和NAS存储的优点。图1我们来了解一下应用是怎么样获取它想要的存在存储里的某个文件信息，并用

存储

分布式

原创 2016-08-05 10:25:23 1305 阅读 1收藏

深入理解虚拟机、容器和Hyper技术

本文首先介绍了操作系统，然后引出容器技术以及虚拟机技术，最后介绍了Docker和Hyper技术。通过本文可以清楚地对三者有感性认识。操作系统概述我们可以把操作系统简化为：操作系统 = 内核 + apps其中内核负责管理底层硬件资源，包括CPU、内存、IO设备等，并向上为apps提供系统调用接口，上层apps应用必须通过系统调用方式使用硬件资源，通常并不能直接访问资源。这里的apps指的是用户接口，

虚拟化

docker

原创 2016-07-28 11:44:50 929 阅读

Nginx主配置文件nginx.conf中文详解

优化

nginx

原创 2016-07-22 11:00:17 2291 阅读 1点赞 2收藏

Tengine/Nginx性能优化及杂谈

谷歌、度娘搜索Nginx优化，能搜索出很多的文章，动不动就几万并发，十万并发，看着好像真是那么回事似的。从使用Tengine的过程中，对Tengine/Nginx的优化，我个人认为Tengine的优化是脱离不开使用它的环境及部署结构的，单说优化 Tengine的意义并不大，况且每家公司的业务各不相同，所以优化不是简单的事情。即便如此，我总结了下，从以下几个方便入手浅谈下 Tengine/N

优化

nginx

原创 2016-07-22 10:17:51 2906 阅读 1点赞 1收藏

linux常用端口

常用端口端口号码 / 层名称注释1tcpmuxTCP 端口服务多路复用5rje远程作业入口7echoEcho 服务9discard用于连接测试的空服务11systat用于列举连接了的端口的系统状态13daytime给请求主机发送日期和时间17qotd给连接了的主机发送每日格言18msp消息发送协议19chargen字符生成服务；发送无止境的字符流20ftp-dataFTP 数据端口21ftp文件传

端口

常用

原创 2016-07-06 16:19:02 2383 阅读 1收藏

龙存存储部署管理维护文档

目录龙存存储集群部署2元数据服务器部署2数据存储服务器部署3客户端部署3监控部署4单机版LoongBox4loongBox部署4登陆WEB页面进行配置5集群监控部署LeoManagerNeo10连接配置10打开连接12配置存储服务器13配置元数据服务器：14配置应用服务器：15启动元数据服务器16启动存储服务器16启动应用服务器16NAS管理：17NFS和Samba共享21设置文件分布

存储

龙存

LoongStore

原创 2016-06-17 17:08:55 2103 阅读 1点赞

通信协议——HTTP、TCP、UDP

TCP HTTP UDP:都是通信协议，也就是通信时所遵守的规则，只有双方按照这个规则“说话”，对方才能理解或为之服务。TCP HTTP UDP三者的关系:TCP/IP是个协议组，可分为四个层次：网络接口层、网络层、传输层和应用层。在网络层有IP协议、ICMP协议、ARP协议、RARP协议和BOOTP协议。在传输层中有TCP协议与UDP协议。

TCP

HTTP

通信协议

原创 2016-06-16 08:36:10 676 阅读 2收藏

MySQL索引原理及慢查询优化

MySQL凭借着出色的性能、低廉的成本、丰富的资源，已经成为绝大多数互联网公司的首选关系型数据库。虽然性能出色，但所谓“好马配好鞍”，如何能够更好的使用它，已经成为开发工程师的必修课，我们经常会从职位描述上看到诸如“精通MySQL”、“SQL语句优化”、“了解数据库原理”等要求。我们知道一般的应用系统，读写比例在10:1左右，而且插入操作和一般的更新操作很少出现性能问题，遇到最多的，也是最容易

mysql

优化

索引

原创推荐 2016-06-15 08:57:24 1538 阅读 2点赞 13收藏

CRM 客户端程序开发：获取表单界面上各种字段的值及其他属性

我们写程序常用的就是获取字段的值，对于不同的字段类型，通过getValue() 获取到的值如下，这个表摘自SDK中的 Xrm.Page.data.entity attribute (client-side reference) 章节。Attribute Type Return Type booleanBooleandatetimeDateTo get the string version of a

crm

表单

dynamics

原创 2016-06-13 09:52:02 1501 阅读

CRM 客户端程序开发：根据主键使用OData获取记录的值

根据官方的建议，在表单界面使用OData终结点最好使用REST版本，而不是jQuery版本，所以我这个示例是按照官方的建议来做的。因为我的JavaScript水平不怎么高，我就直接利用SDK里面的示例辅助JavaScript类库吧。这个类库的位置在 SDK\SampleCode\JS\RESTEndpoint\JavaScriptRESTDataOperations \JavaScriptRES

客户端

crm

dynanmics

原创 2016-06-13 09:47:32 987 阅读

官方博客	全部文章	热门标签	班级博客
了解我们	网站地图	意见反馈

鸿蒙开发者社区	51CTO学堂
51CTO	软考资讯

51CTO博客

红塔山

MSSQL、MySQL 数据库删除大批量千万级百万级数据的优化

nginx1.10.2源码安装配置参数参考

centos7防火墙简单说明

Web开发（进阶）- Django【进阶篇】

Web开发（进阶）- Web框架本质

Web开发（进阶）- Django【基础篇】

SGE的常用操作

rocks集群部署

paramiko安装和使用

python多进程编程

当当网Docker应用实践

VMware Vsphere高可性

MySQL5.6多实例部署

ngxtop：在命令行实时监控 Nginx 的神器

Maxscale实现mysql的读写分离

网络状态工具ss命令详解

redis配置文件redis.conf说明

Redis 3.0 编译安装

php优化（一）

php优化（二）

分布式存储介绍

深入理解虚拟机、容器和Hyper技术

Nginx主配置文件nginx.conf中文详解

Tengine/Nginx性能优化及杂谈

linux常用端口

龙存存储部署管理维护文档

通信协议——HTTP、TCP、UDP

MySQL索引原理及慢查询优化

CRM 客户端程序开发：获取表单界面上各种字段的值及其他属性

CRM 客户端程序开发：根据主键使用OData获取记录的值

欢迎