大数据陈浩的博客_python,Mysql,Hadoop,服务器&存储,路由交换,redis,安全技术,Vmware,思科路由交换,华为路由交换,网络安全_51CTO博客
51CTO首页
AI.x社区
博客
学堂
精品班
软考社区
免费课
企业培训
鸿蒙开发者社区
WOT技术大会
IT证书
公众号矩阵
移动端
短视频 免费课程 课程排行 直播课 软考学堂
全部课程 厂商认证 IT技术 24年11月软考 PMP项目管理 免费题库
在线学习
文章 资源 问答 课堂 专栏 直播
51CTO
鸿蒙开发者社区
51CTO技术栈
51CTO官微
51CTO学堂
51CTO博客
CTO训练营
鸿蒙开发者社区订阅号
51CTO软考
51CTO学堂APP
51CTO学堂企业版APP
鸿蒙开发者社区视频号
51CTO软考题库
GPU 虚拟化实践

GPU 虚拟化实践

导读：在 Kubernetes 集群中运行 GPU 应用时，可以解决 AI 训练等场景中申请独立卡造成资源浪费的情况，让计算资源得到充分利用。一、容器 GPU 虚拟化首先，我们这里谈到的，都是 nVidia 生产的 GPU、都只考虑 CUDA 计算场景。其次，这里的虚拟化指的是 OS 虚拟化的容器技术，不适用于 KATA 这样的、基于系统虚拟化的安全容器。CUDA 的生态CUDA 开发者使用的，

Pod
CUDA
API
置顶 原创 10月前 431 阅读
手动安装openstack并配置虚拟化集成VM

手动安装openstack并配置虚拟化集成VM

手动安装openstack并配置虚拟化集成VM云计算含义：弹性质可以随便增加内存和cpu，硬盘对用户是透明的对数据进行去重应用，数据，跑的时间，中间件，系统虚拟机，服务器，存储，网络计算分层云计算绝不等于虚拟化云计算用到虚拟化的技术nova负责计算节点quantum 负责虚拟网络swift 负责云存储‘libvirt 负责 虚拟机管理，虚拟机设备管理 远程过程目录：安装先决条件1.环境2.域名解析

云计算
置顶 原创 2017-10-19 11:10:05 10000+阅读 12点赞 14收藏 2评论
大数据TensorFlowOnSpark安装

大数据TensorFlowOnSpark安装

1. 概述大数据tensorflowonspark 进行安装和测试。2 .环境所选操作系统地址和软件版本节点类型Centos7.3 64位192.168.2.31（master）Java：jdk 1.8 Scala:2.10.4 Hadoop:2.7.3 Spark:2.12.3TensorFlowOnSpark:0.8.0Python2.7MasterCentos7.3&nb

大数据
置顶 原创 精选 2017-10-19 09:23:26 10000+阅读 8点赞 2收藏
#Word文档导入#大数据presto+Alluxio​

#Word文档导入#大数据presto+Alluxio​

大数据presto+Alluxio​ 1.Presto安装​ 角色分配​IP地址​HOSTNAME​NodeID​角色​172.16.16.241​incubator-test-dc-001​presto-cdh01​coordinator​172.16.16.246​incubator-test-dc-002​presto-cdh02​worker​172.16.16.25

cloudera
hive
apache
置顶 原创 推荐 2022-05-16 16:55:10 2285 阅读 1点赞 1评论 yyds干货盘点
#云原生征文#k8s高可用三台master部署 图文并茂

#云原生征文#k8s高可用三台master部署 图文并茂

每台机器都要部署nginx1.前提：k8s相关服务必须安装完关闭每台机器防火墙,postfix，selinux，swapsystemctl disable firewalld && systemctl stop firewalldsystemctl disable postfix && systemctl stop postfixsetenforce 0 &

docker
nginx
vim
置顶 原创 推荐 2022-05-23 16:36:19 2368 阅读 1点赞 1评论
对象存储服务OBS备份及恢复,迁移

对象存储服务OBS备份及恢复,迁移

对象存储obs备份及迁移

数据
hdfs
备份恢复
obs
置顶 原创 2022-03-25 17:46:46 2160 阅读 1收藏 1评论 51CTO博主之星评选

K8s手动方式搭建平台及问题汇总

现在换了份工作，新环境使用k8s容器环境管理，心思着把以前的相关文档汇总起来编写成博文方便自己复习k8s概要kubernetes，简称K8s，是用8代替8个字符“ubernete”而成的缩写。是一个开源的，用于管理云平台中多个主机上的容器化的应用，Kubernetes的目标是让部署容器化的应用简单并且高效（powerful）,Kubernetes提供了应用部署，规划，更新，维护的一种机制Kuber

k8s
手动部署
docker
置顶 原创 推荐 2021-03-10 11:14:07 4476 阅读 5点赞 5收藏 1评论

【女神节有奖征文】付出行动才有所回报！

短短的文字，承载着满满的回忆……不经意相识,或许是缘分，或许是注定的。在这短短的几十天。深深地喜欢上了你。我不懂浪漫，不懂甜言蜜语。但是有一颗挚爱的心。不想等到阿亮刚懂得自己的心。可是小水已经离开了！时间依然在流逝。我会一直陪着你。永远守护着你。佛说：前世的五百次回眸，才换来今生的擦肩而过。如果真的是，我愿用一万次去换与你的相遇，并告诉你：“好想好好爱你。”个人的独白那是一个风雨交加的夜晚，嘿说错

情感天地
女神节有奖征文
置顶 原创 精选 2021-03-09 18:37:25 1692 阅读 17点赞 14评论

记录一次事故处理50%kudu表无法进行正常访问

记录一次事故处理50%kudu表无法进行正常访问测试环境kudu集群事故，影响：测试效果，测试进度，生产发布延迟，需警惕，特此写出过程操作需谨慎！操作需谨慎！操作需谨慎！任务环境都要以生产环境而对待！事故原因：昨天于上午10点，业务说kudu表无法使用后，影响测试，无法正常发布。去scm平台发现kudu_tablet挂了5台运维查看信息日志后，做近一步处理1.重启kudu—tablet发现无法启动

kudu表无法访问
kudu规范
kudu_tablet
置顶 原创 推荐 2020-12-21 15:27:43 10000+阅读 1点赞 1评论

大数据PAZR集成ldap实操！what？

大数据PAZR集成ldap实操！what？ p:presto a:allixop z:zeppelin r:rancher

CDH运维
zeppline
presto
alluxio
rancher
置顶 原创 推荐 2020-07-07 17:45:03 7478 阅读 2点赞 1收藏

elasticsearch如何安全加固？

elasticsearch2.4.6安全安全从来不是等到出事才要注意的事情，可以说安全是第一重要的事情。技术总监、运维总监、架构师还是一线工程师，都应该有安全意识。Elasticsearch的用户现在越来越多，有些更加已经成为公司的基础服务，所以数据的安全更为重要。资源下载：http://down.51cto.com/data/24467461.基础环境1.1基础环境说明系统：CentOS7.3E

elastic
elasticsearch
安全
置顶 原创 精选 2018-05-08 10:51:56 10000+阅读 5点赞 8收藏 8评论

详解Linux运维工程师高级篇（大数据安全方向）

详解linux运维工程师高级篇（大数据安全方向）

大数据
安全
kerberos
置顶 原创 推荐 2018-02-07 18:57:15 10000+阅读 25点赞 22收藏 10评论

详解Linux运维工程师打怪升级篇

详解 Linux 运维工程师打怪升级篇积累经验篇做运维也快4年多了，就像游戏打怪升级，升级后知识体系和运维体系也相对变化挺大，学习了很多新的知识点。运维工程师 是从一个呆逼进化为苦逼再成长为牛逼的过程，前提在于你要能忍能干能拼，还要具有敏锐的嗅觉感知前方潮流变化。如：今年大数据，人工智能比较火。。。(相对表示就是 python 比较火）前面也讲了运维基础篇，发现对很多人收益挺大，接下来也写下关于这

运维理念
运维技能
置顶 原创 推荐 2017-07-21 13:18:01 10000+阅读 84点赞 64收藏 20评论

大数据平台一键安装OS【定制化OS镜像制作】

   定制化 大数据平台一键安装OS大数据平台一键安装OS系列大数据平台一键安装OS【搭建脚本篇】定制化OS镜像制作1.操作环境操作环境：VMware Workstarion 9 and vSphere client系统：CentOS -6.8-x86_64工具：gconf-editor anaconda repodata createrepo mkisofs rsync2.主

大数据
一键安装
置顶 原创 推荐 2017-06-29 16:13:11 10000+阅读 12点赞 3收藏 7评论

记录一次linux线上服务器被黑事件

1.原因：本来在家正常休息了，我们放在上海托管机房的线上服务器突然蹦了远程不了，服务启动不了，然后让上海机房重启了一次，还是直接挂了，一直到我远程上才行。 2.现象：远程服务器发现出现这类信息Hi, please view: http://pastie.org/pastes/10800563/text?key=hzzm4hk4ihwx1jfxzfizzq&n

服务器
记录一次
被黑事件
置顶 原创 推荐 2016-04-28 16:29:22 10000+阅读 41点赞 68收藏 21评论

一次沟通不佳造成的深刻教训

  原因：   公司由于正在发展期，服务器上线业务上线，因为我是安全运维，从安全考虑我把线上mysql数据库的权限收回，因为以前权限太大。      删除掉root，还有一个账号的所有权限%，我们都知道%代表任意地址登录，如果被黑，可以得到数据库密码然后破解服务器密码然后可以任意乱搞，为了安全着想，所以我设置了iptables和

服务器
事故
线上事故
置顶 原创 精选 2016-03-18 11:03:28 3492 阅读 12点赞 11评论

一次图文并茂的渗透完整测试二

 任务：某公司授权你对其服务器进行攻击渗透。对某核心服务器进行入侵测试，据了解目标机为Windows 2003 Server系统，ip地址为10.1.1.191，在C盘的根目录下存储有两个敏感文件这里就用（key1.txt,key2.txt）表示，开放端口不详。此文只作为学习！第一步：已知服务器ip地址所以可以做扫描端口（msf）第二步：从上述扫描知道http并且知道是Apache2 开

攻击
put
iis漏洞
置顶 原创 推荐 2015-05-06 11:29:53 5266 阅读 8点赞 4收藏 8评论

渗透实践测试sql注入攻击

工具介绍此次测试用到已下工具，F4ck工具包，Acunetix Web Vulnerability Scanner 8扫描工具，burpsuite抓包工具，sql注入工具 sqlmap.py ，搜狐浏览器， SwitchySharp 代理工具。1.首先找到测试网站这里拿http://www.cqys.cn然后进行Acunetix Web Vulnerability Scanner 8扫描

sql语句
扫描工具
搜狐浏览器
置顶 原创 2015-04-23 16:44:54 5103 阅读 2点赞 4收藏 1评论

一次图文并茂的渗透完整测试

 任务：某公司授权你对其服务器进行攻击渗透。对某核心服务器进行入侵测试，据了解，该web服务器ip地址（10.1.1.178）存在敏感数据。      1、利用网站漏洞获取该服务器shell      2、新建一用户并将权限提升至管理员      3、获得服务器上的关键敏感数据（C:\console

ip地址
web
webshell
置顶 原创 推荐 2015-04-21 17:57:40 6712 阅读 7点赞 4收藏 6评论

MAC OX 安装rtx客户端和svn客户端

最近一段时间一直在忙MAC系统跟window7系统差别太大了，好多东西不兼容后来发现有rtx 的苹果客户端 下载试了下 发现不能用，哎，只能重新研究了http://www.rtxapp.com/mac/1.官网下载最新版：http://www.codeweavers.com/ crossoverhttp://bbs.pcbeta.com/viewthread-1027228-1-1.html 破解

IE浏览器
虚拟机
苹果机
crossover
下载中文
置顶 原创 推荐 2014-04-01 11:48:51 5700 阅读 4点赞 4评论

因为根目录磁盘满了，我移动数据和软件造成mysql启动不了，查原因mysql.sock不在了

今天刚接手新项目的服务器，不知道以前谁搭建的因为要备份数据库，但是发现空间不足 /根目录满的，然后我移动软件和文件造成 mysql启动不了root@localhost ~]# /data/mysql/bin/mysqldump --databases star -uroot -p123456 > /home/star.sql mysqldump: Couldn't execute 'sho

服务器
storage
engine
根目录
databases
置顶 原创 推荐 2014-03-24 13:49:17 4991 阅读 4点赞 3评论

在虚拟机上安装MAC OX系统并且在苹果电脑上禁用u盘

 最近好久没来写博文，因为项目还在开发中，暂时都在学习，要么就是自驾旅游，很少写博文了，由于公司有苹果电脑，所以领导要求也要禁用usb，统一管理我就开始研究MAC电脑的usb接口首先不可能直接在苹果电脑上操作，所以我现在虚拟机上操作1.MAC OX镜像2.MAC OX 虚拟机补丁这2个都必须要的，否则无法在虚拟机上实验http://yun.baidu.com/share/link?sh

管理员
虚拟机
文件夹
系统下载
苹果电脑
置顶 原创 推荐 2014-03-21 11:52:49 7120 阅读 12点赞 1收藏 11评论

珍藏——我的2013与51cto的情感

短短的文字，承载着满满的回忆……        2014即将来临，在年底的最后一天 写这一篇日志，总结2013一年的回忆和情感        从去年的9月份参加青鸟培训 直到今年的8月份毕业了， 这青鸟将近1年的学习，让我学到很多知识，专业技能，对后面的就业帮助有很大的作用，尤其 袁老师 生动的讲课让我至今还能体会到那

2013回忆
置顶 原创 推荐 2013-12-31 14:27:53 4265 阅读 19点赞 32评论

安装乌班图系统，并且演示有趣的linux命令，你还怕对linux无兴趣吗

进去系统后配置网络Ctrl+Alt+T 出现终端 然后开始操作命令行sudo apt-get install sl  输入命令 发现报错修改软件源 在设置里 软件源关闭防火墙 开启ssh 服务首先是进入超级管理权限 可是发现 怎么输入密码都不对因为乌班图 的超级管理员密码 是随机生成的这时我们使用命令 sudo passwd root 修改密码这时在关闭防火墙 就可以了、ufw disa

linux
服务器
配置文件
修改密码
输入密码
置顶 原创 推荐 2013-12-30 15:45:09 8352 阅读 11点赞 1收藏 12评论

centos6.2 lnmp环境下安装 zabbix（中文环境）并且监控客户端

本来也是新学zabbix ，所以今天做个试验，写下试验步骤zabbix是一个基于WEB界面的提供分布式系统监视以及网络监视功能的企业级的开源解决方案。特点：- 支持多语言（包括中文）- 免费开源- 自动发现服务器与网络设备- 分布式监视以及WEB集中管理功能- 可以无agent监视- 用户安全认证和柔软的授权方式- 通过WEB界面设置或查看监视结果- email等通知功能Zabbix主要功能：-

zabbix
lnmp
centos6.2
置顶 原创 推荐 2013-12-19 13:32:19 7405 阅读 6点赞 1评论

详解linux运维工程师入门级必备技能

it自动化运维就是要很方便的运用各种工具进行管理维护，有效的实施服务器保护linux运维人员常用工具介绍1.很多地方经常会用到的rsync工具 实施几台服务器的同步效果我们公司就是使用这个工具完成服务器的游戏的服务端和客户端同步，有几个文章例子rsync 强化技术（手动修改端口开启防火墙的情况下）并且通过脚本只同步需要的服务器inotify+rsync+mutt+msmtp 实现linux文件或者

linux
服务器
防火墙
常用工具
网络服务
置顶 原创 推荐 2013-12-17 11:36:47 10000+阅读 138点赞 107收藏 22评论

mysql 主从同步，双主同步，如果服务器意外挂机，不同步怎么办

mysql 主从同步，双主同步，如果服务器意外挂机，不同步怎么办首先主从同步master 192.168.0.21slave 192.168.0.22#my.cnf master 配置文件 [client] port = 3306 socket = /tmp/mysql.sock default-character-set=utf8 [mysqld] por

mysql
服务器
配置文件
master
置顶 原创 推荐 2013-11-15 16:03:03 10000+阅读 12点赞 4收藏 15评论

CentOS 6.2+Nginx+Nagios,手机短信和qq邮箱提醒

CentOS 6.2+Nginx+Nagios,手机短信和qq邮箱提醒注：192.168.0.21 服务端 192.168.0.22 客户端 环境：两台centos6.0 64位系统，都已经搭建好了源码的lnmp平台结尾附上所需的软件包1.nagios安装（中文版）tar xvf nagios-cn-3.2.3.tar.bz2 cd nagios-cn-3.2.3 useradd -m -s /

监控
nagios
软件包
配置文件
服务端
置顶 原创 推荐 2013-11-11 14:15:35 10000+阅读 36点赞 4收藏 24评论

rsync 强化技术（手动修改端口开启防火墙的情况下）并且通过脚本只同步需要的服务器

rsync 强化技术（手动修改端口开启防火墙的情况下）并且通过脚本只同步需要的服务器客户端：192.168.0.22 ，192.168.0.20服务端：192.168.0.21（源）用来同步其他服务器我前面写过http://chenhao6.blog.51cto.com/6228054/1298375inotify+rsync+mutt+msmtp 实现linux文件或者目录自动更新并且实现发邮件

rsync
强化技术
通过脚本只同步需要的服务
置顶 原创 推荐 2013-11-09 18:18:22 10000+阅读 9点赞 8收藏 4评论

如何设置服务器安全及root权限丢失怎么办，user表没了

root权限丢失今天本来是想把root修改成别的名字 哪知道是直接创建一个用户，然后root给我删除了，啥权限都没了，user表 权限全是n，我当时连user表都给我清空了害怕冲突TRUNCATE TABLE user; 清空user表数据insertintomysql.user(Host,User,Password)values("localhost","root","****"); //插入

服务器安全
localhost
root权限
values
置顶 原创 推荐 2013-11-05 16:05:18 3307 阅读 8点赞 2评论
  • 1
  • 2
  • 3
  • 4
  • 5
  • 6
  • 7

Copyright © 2005-2024 51CTO.COM 版权所有 京ICP证060544号

关于我们
官方博客 全部文章 热门标签 班级博客
了解我们 网站地图 意见反馈
友情链接
鸿蒙开发者社区 51CTO学堂
51CTO 软考资讯