Atlas_51CTO博客
GitHub设置公钥在windows下面1. 安装git,从程序目录打开 "Git Bash" 2. 键入命令:ssh-keygen -t rsa -C "email@email.com"  "email@email.com"是github账号3. 提醒你输入key的名称,输入如id_rsa如果执行成功。返回Generating public/private rsa
转载 2023-07-14 05:26:01
108阅读
pom build <dependency> <groupId>org.apache.atlas</groupId> <artifactId>atlas-buildtools</artifactId> <version>0.8.1</version> </dependency> 替换为elastic ...
转载 2021-09-22 20:27:00
421阅读
2评论
第1章 介绍atlas  是apache下的大数据的元数据管理和数据治理平台,是Hadoop社区为解决Hadoop生态系统的元数据治理问题而产生的开源项目,它为Hadoop集群提供了包括数据分类、集中策略引擎、数据血缘、安全和生命周期管理在内的元数据治理核心能力。支持对hive、storm、kafka、hbase、sqoop等进行元数据管理以及以图库的形式展示数据的血缘关系。优势(能复用
转载 2023-11-29 23:58:51
490阅读
SpriteAtlas是Unity新出的一个功能,用来取代旧版的Sprite Packer。图集打包的意义:减少DrawCall图集将图片打包为2的幂次方的素材大小,可以提升性能减小包体大小Sprite Packer(旧版本)缺点:旧版Sprite Packer在性能和易用性上对比Sprite Atlas存在诸多不足,比如无法分别对不同图集修改不同质量、无法获取图集里的图片等等。Sprite Pa
转载 2024-02-14 14:30:25
132阅读
单机Mysql情况下,我们这样用: java应用通过jdbc(Mybatis,Hibernate等)连接到mysql,中间需要配置连接URL:jdbc:mysql://192.168.1.1:3306/xxx?user=root&password=xxx&userUnicode=true很熟悉吧?对,这个URL里的192.168.1.1和3306就是Mysql的IP和端口主从复制的
转载 2024-01-24 20:27:58
15阅读
Atlas是由 Qihoo 360, Web平台部基础架构团队开发维护的一个基于MySQL协议的数据中间层项目。它是在mysql-proxy 0.8.2版本的基础上,对其进行了优化,增加了一些新的功能特性。360内部使用Atlas运行的mysql业务,每天承载的读写请求数达几十亿条。  一、Atlas的整体架构  Atlas是一个位于应用程序与MySQL之间中间件。
转载 2023-10-10 09:19:53
68阅读
Atlas指南Atlas简介一、远程Bundle:Bundle类似于Android项目中的Module的概念,远程Bundle是项目编译时不会打包进APK的模块,在项目编译时,Atlas框架会将远程Bundle生成一个.so文件,我们将这个.so文件置于服务器,用户使用APP时如果需要打开这个模块,就从服务器上下载这个.so文件,并加载到应用中,以此来减小安装包的体积。二、热更新:就是打补丁包,对
转载 2023-07-14 17:59:25
79阅读
Atlas开发环境部署和生产环境部署一、Atlas使用演示1.1 概述Atlas功能:提供数据管理和治理功能,用以构建其数据资产目录,对这些资产进行分类管理,形成数据字典。 特点: 1、提供强大的索引,能够对不同源不同库下的表进行快速的检索 2、提供血缘关系图,以清晰的看到表与表的来龙去脉。血缘关系做到了字段级别 3、提供分类、术语划分等对元数据再一次进行分类分组管理 4、对单个表的信息展示十分详
文章目录一、安装atlas1.集成 Hbase:2.集成 Solr:3.集成 Kafka:4.集成 Hive:5.Atlas 其他配置:二、使用atlas1.启动 Atlas:2.安装示例(quick start):3.相关概念:4.UI界面:5.导入hive表:   首先调大虚拟机内存为6G左右:一、安装atlascd apache-atlas-sources-2.1.0/ mvn clean
转载 2023-12-31 18:45:00
77阅读
1.项目简介Apache Atlas是Hadoop社区为解决Hadoop生态系统的元数据治理问题而产生的开源项目,它为Hadoop集群提供了包括数据分类、集中策略引擎、数据血缘、安全和生命周期管理在内的元数据治理核心能力。官网地址:http://atlas.apache.org/2.项目架构Data Hub使用的是Generalized metadata architecture(GMA),重点面
转载 2023-07-07 15:11:51
222阅读
作者:Dflying Chen前面的一系列的文章都是直接调用单独的一个Web Service,而在实际项目开发中,特别是在对现有的项目转换中,把页面中的逻辑再提取到专门的Web Service中往往会带来相当多的工作。Atlas充分考虑到了这一点,允许您将服务器端的public方法加上[WebMethod]属性以允许客户端JavaScript的直接调用。想允许客户端直接调用定义在ASPX页面中的方
转载 2024-01-22 12:27:24
56阅读
在完成Atlas编译以后,就可以进行Atlas的安装了。Atlas的安装主要是安装Atlas的Server端,也就Atlas的管理页面,并确保Atlas与Kafka  Hbase  Solr等组件的集成。Atlas的系统架构如下,在确保 底层存储与UI界面正常后,之后就可以进行与Hive等组件的集成调试了。一、环境准备安装之前 先要准备好JDK1.8ZookeeperKafkaHbaseSolr在
转载 2021-01-30 19:17:01
761阅读
2评论
前几天在群里跟人讨论地形atlas的问题,因为Blade也是用的4x4的atlas(16张纹理),但是大概是几年前做的,所以一些细节忘记了,在这里做下备忘。 1.atlas就是图集,图册,把多个纹理打包成一个。dx11完全可以用texture array了。mobile上还有使用的可能。下面的图来自网络,展示地形altas的分布方式 2.atlas不仅可以用于地形,比如很多小物
转载 2023-07-05 16:38:03
95阅读
 介绍Atlas 是由 Qihoo 360公司Web平台部基础架构团队开发维护的一个基于MySQL协议的数据中间层项目。它在MySQL官方推出的MySQL-Proxy 0.8.2版本的基础上,修改了大量bug,添加了很多功能特性。目前该项目在360公司内部得到了广泛应用,很多MySQL业务已经接入了Atlas平台,每天承载的读写请求数达几十亿条。 1. 源码 Github: https:
转载 2023-12-13 17:07:32
48阅读
在完成Atlas编译以后,就可以进行Atlas的安装了。Atlas的安装主要是安装Atlas的Server端,也就Atlas的管理页面,并确保Atlas与Kafka Hbase Solr等组件的集成。 Atlas的系统架构如下,在确保 底层存储与UI界面正常后,之后就可以进行与Hive等组件的集成调 ...
转载 2020-12-30 10:45:00
374阅读
2评论
为什么要做数据治理?业务繁多,数据繁多,业务数据不断迭代。人员流动,文档不全,逻辑不清楚,对于数据很难直观理
原创 2023-06-01 17:09:43
190阅读
在完成Atlas编译以后,就可以进行Atlas的安装了。Atlas的安装主要是安装Atlas的Server端
原创 2023-06-01 17:09:56
544阅读
数据血缘其实,在我理解中,就是一个数据的全生命周期的管理,从采集到处理,拆分,过滤,整合,存储,到废弃。数据和数据之间可以相互转化,这种转化关系就是数据之间的血缘。 精细的数据血缘应该是字段级别的,如果做不到,做成表级别也可以。架构Type System: Atlas 允许用户为他们想要管理的元数据对象定义一个模型。该模型由称为 “类型” 的定义组成。“类型” 的 实例被称为 “实体” 表示被管理
转载 2023-10-23 10:36:45
128阅读
Apache Atlas 简介  Apache Atlas是Hadoop社区为解决Hadoop生态系统的元数据治理问题而产生的开源项目,它为Hadoop集群提供了包括数据分类、集中策略引擎、数据血缘、安全和生命周期管理在内的元数据治理核心能力。准备:1.ubuntu 18.042.apache-atlas 源码包:apache-atlas-1.0.0-sources.tar.gz 3.m
转载 2023-07-11 21:04:32
142阅读
目录Atlas概述Atlas安装环境准备安装AtlasAtlas 集成 HbaseAtlas 集成SolrAtlas 集成KafkaAtlas Server配置Atlas 集成HiveAtlas启动Atlas使用Hive元数据初次导入Hive元数据增量同步查看血缘依赖表血缘依赖字段血缘依赖Atlas源码编译安装maven编译Atlas源码Atlas内存配置配置用户名密码解采用文件方式修改用户名和
转载 2023-08-01 16:32:10
154阅读
  • 1
  • 2
  • 3
  • 4
  • 5