乐胖代购免代理版

nfs调优思路

nfs的调优有两个方面：性能调优安全性的保障其中，性能调优方面可以分为三个方向来进行：磁盘层（nfs server端上磁盘读写的性能）应用层（针对于nfs建立的应用程序）网络层（nfs依赖的传输网络）磁盘层面的调优可以通过划分raid来进行client端和server端的调优都需要考虑到，下面有几个常用的调优措施：1、通过设置nfs数据块大小来调优[root@toolbox ~]# cat /pr

linux

nfs

运维

调优

原创 2019-02-14 19:35:50 10000+阅读 1点赞

oom机制分析及对应优化策略

近日接了一些oom案子，此类问题通常是客户自身业务导致的问题。但现在客户的提问越来越复杂，通常情况下我们需要站在客户一侧提供“协助”的技术服务。oom类案例通过一年多的学习和探讨，我将其分为3类：1、内存真的不足2、文件数到达上限3、lowmem内存不足内存真的不足的情况针对于64位系统，这时可能导致的原因有：进程hung住占用大量内存、进程申请连续大页导致溢出、本身内存负载接近临界值。这时可尝试

云计算

oom

linux

运维

原创 2019-01-17 09:58:35 6993 阅读 1点赞 1收藏

tcpdump原理

基本原理1.先创建socket，内核dev_add_packet()挂上自己的钩子函数2.然后在钩子函数packet_recvmsg中，把skb放到自己的接收队列中，3.接着系统调用recv取出skb来，把数据包skb->data拷贝到用户空间4.最后关闭socket，内核dev_remove_packet()删除自己的钩子函数内核数据处理流程内核在收到网卡发出的软中断后进行数据包的处理,在

内核

云计算

抓包

原理

tcpdump

原创 2018-12-29 15:14:54 10000+阅读 1点赞

virtio分析

virtiovirtio是一个通用的io虚拟化框架，hypervisor通过他模拟出一系列的虚拟化设备，并使得这些设备在虚拟机内部通过api调用的方式变得可用。它为客户机提供了一个高效访问块设备的方法。它包含4个部分：前端驱动、后端驱动、vring及通信间统一的接口。与其他的模拟io方式对比，virtio减少了虚拟机的退出和数据拷贝，能够极大地提高IO性能。计算机中存在不同的总线标准，而virti

虚拟化

内核

virtio

云计算

linux

原创精选 2018-12-28 20:09:37 10000+阅读 1点赞 2收藏

cgroup底层研究

cgroup是一个内核的功能，他的作用是将系统中的进程进行分组化管理。docker、openshift就是基于cgroup上建立的。相关概念task 一个任务就是一个进程control group 就是一个进程集合，可以把它理解成一个房间，每个房间都是相互隔离的。hierachy（层级） control group存在父子的概念，负责可以使用子组里的资源subsystem 如果组内的

cgroup

linux

运维

云计算

系统

翻译 2018-08-21 21:10:26 6163 阅读 1点赞 1收藏

CMCI介绍以及常用日志解析

CMCIStarting with 45 nm Intel 64 processor on which CPUID reports DisplayFamily_DisplayModel as 06H_1AH (seeCPUID instruction in Chapter 3, “Instruction Set Reference, A-L” in the Intel® 64 and IA-32

硬件

linux

CMCI

intel

cpu

原创 2018-08-17 13:41:12 10000+阅读

【研究任务】热迁移方式——pre-copy、post-copy和x-multifd

Postcopy先把虚拟机现有的CPU state, registers and, optionally, non-pageable memory（内存中不会进行交换或者移动的内存）等信息传输到目的服务器，不管dirty page，并迅速把虚拟机在目的服务器启动起来。同时，源服务器也会动态的把剩余的memory推送到目的服务器上。但是当虚拟机运行调用到还没传输过来的memory时，会触发page-

热迁移

云计算

运维

linux

copy

转载 2018-08-13 09:52:18 10000+阅读

linux系统计时器

linux时钟有很多种，粗略来分可分成两类：提供中断的周期性时钟（rtc、pit等），提供计数的递增型时钟（如tsc）这里简单罗列几种常见的。（1）RTC（2）TSC（3）KVM_CLOCK（4）acpi_pm查看当前系统支持的时钟cat /sys/devices/system/clocksource/clocksource0/available_clocksource查看当前使用的时钟cat /

linux

rtc

tsc

kvm

clock

原创 2018-07-26 14:48:00 6936 阅读 1评论

skb解析

skb(Struct sk_buffer)是TCP/IP堆栈中用于收发包的缓冲区域。它在接收数据的时候会进行2次拷贝，以提升性能：数据包进入网卡驱动后拷贝一次，从内核空间递交给用户空间的应用时再拷贝一次。网络中所有数据包的封装及解封都是通过这个结构进行的。struct sk_buff { struct sk_buff &n

网络

linux

skb

内核

收发包

原创 2018-07-06 22:00:40 10000+阅读

【研究任务】精准控制进程cpu使用率

一、cpu的使用率计算cpu的使用率的获取可以通过top命令或者/proc/<pid>/stat文件以下是计算cpu使用率有关的参数：pid=17184进程号utime=45010该任务在用户态运行的时间，单位为jiffiesstime=4050该任务在核心态运行的时间，单位为jiffiescutime=0所有已死线程在用户态运行的时间，单位为jiffiescstime=0所有已死在核

python

云计算

运维

调优

linux

原创 2018-06-22 20:56:00 6161 阅读 1点赞

【研究任务】linux系统开机启动过程

总览加载BIOS一个特殊的应将电路在CPU的一个引脚上产生一个RESET逻辑值，然后会把一些寄存器(包括cs和eip)设置成固定的值然后执行在物理地址为0xFFFF FFF0处找到的代码，硬件把这个地址映射到某个只读、持久的存储芯片中，该芯片通常为ROM而ROM中存放的程序集在80x86体系统通常叫做BIOSBIOS由两部分组成: POST代码和运行时服务加载mbr硬盘上第0磁道第一个扇区被称为M

Linux

运维

云计算

基础知识

故障排查

原创 2018-06-19 22:42:19 1675 阅读 1点赞 1收藏

【研究任务】KVM热迁移

所谓热迁移，就是在用户无感知的情况下，把虚机由远端迁移到目的端。一、原理理解KVM的热迁移分为共享存储和非共享存储两种，其最终目的都是为了将内存和磁盘中的数据转移到目的端。总共要进行5个阶段源端：1、set_params阶段：此阶段根据热迁命令与参数，遍历savevm_handlers链表，初始化各个模块的迁移特征参数，完成后向目的端发送qemu_put_be_32（f, QEMU_VM_FILE

KVM

热迁移

云计算

运维

虚拟化

原创精选 2018-06-19 22:35:43 10000+阅读 1点赞 1收藏

浅谈开源Kafka与腾讯云cKafka

今天下午参加了腾讯云+社区组织的kafka公开课，收获良多。正巧在工作中也遇到过kafka的问题，今天听完之后产生了非常多的感想。无奈篇幅有限，本人又文笔愚钝，所以今天的分享主要提及对我感触最深的内容。分享的顺序还是按照老形式来进行吧（提出疑问——解决疑问）【提出疑问】1、为什么要设计kafka？2、开源的kafka架构是怎么样的？3、腾讯云的ckafka架构是怎样的？4、腾讯云的ckafka架构

大数据

kafka

运维

消息队列

原创 2018-06-19 22:26:12 7646 阅读 2点赞 1评论

timestamp和recycle同时开启，导致连接成功率降低

现象简介若同时开启timestamp和recycle参数，会由于引发per-host的PAWS机制，导致连接成功率降低。【产生问题】1、什么是timestamp和recycle？2、什么是PAWS机制？3、为什么成功率会降低？什么是timestamp和recycle？（1）什么是timestamptcp_timestamps的本质是记录数据包的发送时间。基本步骤如下：1. 发送方在发送数据时，将一

linux

网络

内核

运维

系统

原创 2018-06-08 23:08:07 5257 阅读 2点赞

【数据分析】python分析百度搜索关键词的频率

涉及知识点 1、抓取数据 2、分页爬虫规律分析1、抓取数据，发现每一项都是data-tools标签2、分页分析代码import requests from bs4 import BeautifulSoup import re import json

爬虫

自动化

数据分析

python

基础

原创 2018-06-08 23:03:15 4650 阅读 2点赞 3收藏 1评论

【研究任务】linux内存管理机制——内核空间

Linux内存中线性地址为4G，0~3G为用户空间，3~4G为内核空间一、内核空间内核空间是3~4G的内存地址，主要用来存储高优先级的代码在X86结构中的内核地址存在三种类型的区域： ZONE_DMA 内

内核

linux

系统

云计算

运维

原创 2018-06-06 21:04:39 10000+阅读 1点赞

【第一天】django快速开发——环境部署、表单、数据库操作、模板、文件学习

安装django1、安装 setuptoolsyum install python-setuptools2、完成之后，就可以使用 easy_install 命令安装 djangoeasy_install django注意：django对于pip和setuptools的版本有严格要求，如果不想那么麻烦建议直接装个python3.6django管理命令django-adm

django

开发

自动化运维

系统技术

web开发

原创 2018-06-03 12:48:03 1523 阅读 1点赞

【第一天】django快速开发——环境部署、表单、数据库操作、模板、文件学习

安装django1、安装 setuptoolsyum install python-setuptools2、完成之后，就可以使用 easy_install 命令安装 djangoeasy_install django注意：django对于pip和setuptools的版本有严格要求，如果不想那么麻烦建议直接装个python3.6django管理命令django-adm

django

开发

自动化运维

系统技术

web开发

原创 2018-06-03 12:47:57 3441 阅读 1点赞

【序】django快速开发

我目前处于云计算运维岗。在每天需要进行诸多繁琐的巡检，为此组内早在14年开始就打造了一个自动化运维平台，日常中绝大多数任务都得以简化。我入职公司差不多有半年左右了，也被派发到组内系统建设这个项目。由于本人之前涉猎偏重于系统技术，开发方面底蕴较薄，深感惭愧。抱着快速学习的心态，将学习所得总结于此，希望能够

django

感想

linux

原创 2018-06-02 10:16:02 2430 阅读 3点赞 1评论

官方博客	全部文章	热门标签	班级博客
了解我们	网站地图	意见反馈

鸿蒙开发者社区	51CTO学堂
51CTO	软考资讯

51CTO博客

老张的技术博客

nfs调优思路

oom机制分析及对应优化策略

tcpdump原理

virtio分析

cgroup底层研究

CMCI介绍以及常用日志解析

【研究任务】热迁移方式——pre-copy、post-copy和x-multifd

linux系统计时器

skb解析

【研究任务】精准控制进程cpu使用率

【研究任务】linux系统开机启动过程

【研究任务】KVM热迁移

浅谈开源Kafka与腾讯云cKafka

timestamp和recycle同时开启，导致连接成功率降低

【数据分析】python分析百度搜索关键词的频率

【研究任务】linux内存管理机制——内核空间

【第一天】django快速开发——环境部署、表单、数据库操作、模板、文件学习

【第一天】django快速开发——环境部署、表单、数据库操作、模板、文件学习

【序】django快速开发

欢迎