数据存储

建立模型应该考虑的几个问题 数 据仓库建模质量直接影响数据仓库项目的质量，甚至成败。在进行建模之前，要对数据仓库的规模、组成及模型不同部分的功能定位有明确的定义。影响数据仓库建 模的因素众多，且根据不同项目的具体情况而变化口下面的几个问题是较为通用和常见的，远远不是建立模型应该考虑的全部问题。 数据仓库的业务特点对建模的要求 1 数据仓库的数据组织是面向主题的，而不是面向报表的 数据仓库是面向业务分析的主要主题领域的，进行形成数据模型的定义。典型的主题领域主要包括: · ·顾客购买行为 · ·产品销售情况 · ·企业生产事务 · ·原料采购 · ·合作伙伴关系 · ·会计科目余额 要 对现有的报表需求进行细致的分类、分析和调整，不能为了实现单个报表而进行大量的建模工作。要根据分析的不同内容和主题对报表进行分类，明确报表中每一个 数据的定义、统计口径及不同数据之间的关系，建立在整个数据仓库内统一的数据指标的定义，将数据指标按分析主题及分析维度进行归集，从而形成面向主题的数 据模型。 例如：我们的利润表报表，当业务部门发我们一个利润表 的报表，作为需求时，我们应该进行细致的分析，最终我们确定我们面向的主题不是利润表，而是比利润表更大的一个层次的所有科目业务量的主题，这样我们在做 别的报表，例如资产负债表，现金流量表等报表时，就不用重复建模的工作了，做到了软件工程中的可重用规则。 2.

如何在保证存储量的情况下，又能保证数据的检索速度 。 HBase提供了完善的海量数据存储机制，Solr、SolrCloud提供了一整套的数据检索方案。 使用 HBase搭建结构数据存储云，用来存储海量数据；使用 SolrCloud集群用来搭建搜索引擎，将要查找的结构化数据的 ID查找出来，只配置它存储ID。 1.用户write data写数据（wd） 从用户提交写数据请求wd1开始；经历wd2写入MySQL数据库或写入结构数据存储云中；wd3提交到Solr集群中，从而依据业务需求创建索引。 2.用户read data读数据（rd） 从用户提交读数据请求rd1开始；经历rd2直接读取MySQL中数据或向Solr集群请求搜索服务；rd3向Solr集群请求得到的搜索结果为ID，再向结构数据存储云中通过ID取出数据，最后返回给用户结果。 参考文档： Solr与HBase架构设计 来源： https://www.cnblogs.com/badboy200800/p/10011180.html

Presto 是 Facebook 推出的一个基于Java开发的大数据分布式 SQL 查询引擎，可对从数 G 到数 P 的大数据进行交互式的查询，查询的速度达到商业数据仓库的级别，据称该引擎的性能是 Hive 的 10 倍以上。Presto 可以查询包括 Hive、Cassandra 甚至是一些商业的数据存储产品，单个 Presto 查询可合并来自多个数据源的数据进行统一分析。Presto 的目标是在可期望的响应时间内返回查询结果，Facebook 在内部多个数据存储中使用 Presto 交互式查询，包括 300PB 的数据仓库，超过 1000 个 Facebook 员工每天在使用 Presto 运行超过 3 万个查询，每天扫描超过 1PB 的数据。 目录： presto架构 presto低延迟原理 presto存储插件 presto执行过程 presto引擎对比 Presto架构 Presto查询引擎是一个Master-Slave的架构，由下面三部分组成: 一个Coordinator节点 一个Discovery Server节点 多个Worker节点 Coordinator: 负责解析SQL语句，生成执行计划，分发执行任务给Worker节点执行 Discovery Server: 通常内嵌于Coordinator节点中 Worker节点: 负责实际执行查询任务

转自：http://blog.sina.com.cn/s/blog_94994f7b01010s1h.html 数组前不加“code”或“data”，则默认将数组存放在程序存储器中； code 指定数据是存储在代码区，数据是在编程的时候跟代码一起写入代码存储器，运行过程中不能改变； xdata 指定数据是存储在外部数据存储器了； data 指定数据存储在内部低128字节数据存储器里，如果变量不指定存储位置，默认就是data型，这部分存储器寻址速度最快； idata 指定数据存储在内部低256字节数据存储器里，但51只有128字节内部RAM，52才有256字节； pdata 指定数据存储在外部低256字节数据存储器里，这时候寻址用8位寄存器R0和R1，而不用16位的DPTR，寻址速度比xdata快。 单片机C语言unsigned char code table[] code 是什么作用？ code的作用是告诉单片机，我定义的数据要放在ROM（程序存储区）里面，写入后就不能再更改，其实是相当与汇编里面的寻址MOVC(好像是)， 因为C语言中没办法详细描述存入的是ROM还是RAM（寄存器），所以在软件中添加了这一个语句起到代替汇编指令的作用，对应的还有data是存入RAM 的意思。 程序可以简单的分为code（程序）区，和data （数据）区，code区在运行的时候是不可以更改的

简述： MongoDB是一个基于分布式文件存储的数据库。 由C++语言编写。旨在为WEB应用提供可扩展的高性能数据存储解决方式。 MongoDB是一个介于 关系数据库 和非关系数据库之间的产品，是非关系数据库其中功能最丰富，最像关系数据库的。 他支持的数据结构很松散，是类似json的bson格式，因此能够存储比較复杂的数据类型。 Mongo最大的特点是他支持的查询语言很强大。其语法有点类似于面向对象的查询语言，差点儿能够实现类似关系数据库单表查询的绝大部分功能。并且还支持对数据建立 索引 。 在高负载的情况下，加入很多其它的节点，能够保证server性能。 MongoDB 旨在为WEB应用提供可扩展的高性能数据存储解决方式。 MongoDB 将数据存储为一个文档。 MongoDB是一个基于分布式文件存储的数据库。 特点： 它的特点是高性能、易部署、易使用。存储数据很方便。主要功能特性有： * 面向集合存储。易存储对象类型的数据。 * 模式自由。 * 支持动态 查询 。 * 支持全然索引，包括内部对象。 * 支持查询。 * 支持复制和故障恢复。 * 使用高效的二进制数据存储。包含大型对象（如视频等）。 * 自己主动处理碎片，以支持云计算层次的扩展性。 * 支持 RUBY ， PYTHON ， JAVA ， C++ ， PHP ， C# 等多种语言。 * 文件存储格式为BSON

配置IP地址 192.168.1.100,掩码:255.255.255.0 用浏览器输入IP地址进行配置管理 浏览器管理ESXI 配置数据存储 现在可以看到当前的数据存储为40GB，另外我们要添加20GB的数据存储。 查看存储设备，只有一块40GB的硬盘 新添加两块磁盘，并合并成数据存储空间 测试环境下 现在我们要新加两块10GB磁盘，并把它合成一个数据存储空间。 再次登录浏览器web页面管理，点击存储 、刷新 即可看到新添加的磁盘。 把两块10GB的磁盘合并成一个20GB的数据存储，点击任意一块磁盘，新建数据存储 新建数据存储给新的存储起一个名称data，点击下一页 选择设备 ，用于创建新的VMFS数据存储 分区类型，默认即可，使用全部磁盘空间。 完成创建 合成两个10GB磁盘，后为20GB。点击增加磁盘上的数据存储容量 点击存储，查看新建的data数据存储，空间为20GB，即扩容成功 来源： 51CTO 作者： Azhouyuhang 链接： https://blog.51cto.com/12333622/2171790

exsi主机上右键新建虚拟机，自己建 在虚拟机上装操作系统，Windows或linux，两种装法： 1在esxi主机上用物理光驱装 2在vclient、vcenter客户端上，通过网络将iso文件存放到数据存储空间，再从虚拟机引导系统 建议第二种装法：（注意找按钮） 一：选中esxi主机——配置——存储器——数据存储文件选中——右键浏览数据存储存储器——新建文件夹（文件名自拟）——选中你所建立的文件夹，将文件上载到此数据存储；到此数据存储空间中已有我们要装系统的iso文件。 二：选中所建虚拟机——编辑虚拟机设置，打开虚拟机属性窗口——硬件标签下选中CD/DVD驱动器——打开数据存储iso文件，浏览在datastore下找到上传的iso镜像包，确定——打勾打开电源时连接；到此系统引导文件已装载好。 三：第三步打开虚拟机装载系统，选中虚拟机右键打开控制台，打开电源即可 来源： 51CTO 作者： sunny1034207200 链接： https://blog.51cto.com/11479356/2062483

苹果为iCloud设计两种存储类型： 1>iCloud key-value data 存储：键值数据存储 2>iCloud Document 存储：文档存储。 iCloud键值数据存储，以一种键值对的方式存储简单类型数据，这些类型包括：数字、日期、数组、字典等类型。数据结构是plist类型，每个应用只能存储64KB数据。它没有像文档存储那样有一套数据冲突解决方案，新的数据会覆盖旧的数据。因此，它经常会用来存储系统设置、使用偏好以及应用的状态。 iCloud文档存储可以保存用户文档和用户通过应用创建的数据。文档的类型没有限制，可以是文本文件、二进制文件。存储空间也没有限制，只与用户的可用iCloud服务空间有关。在文档冲突方面iCloud提供一套API帮助解决这些问题。 来源： https://www.cnblogs.com/yaoxc/p/3719438.html

Microsoft Sync Framework元数据和同步流程 元数据(Metadata) Microsoft Sync Framework为脱机和协作的应用程序、数据存储和设备提供了一个完整的同步平台，而不用考虑如下限制： 同步的数据类型 数据存储的类型 传输协议 网络拓扑比如点对点或客户端-服务器拓扑 相反，Sync Framework通过一个通用的元数据模型来允许Sync Framework完成下面的工作： 实现同步过程的互操作性 减少在两个参与同步的data stores之间的数据传输量 使同步独立于任何网络拓扑、数据类型、数据存储和传输协议 在本篇博客中，我们将详细的了解和学习通用的元数据模型以及它的组件，当然，我们也会讨论Sync Framework如何使用元数据来同步不同的数据存储和副本。 什么是元数据 从字面意义上看，元数据是“关于数据的数据”。而Microsoft Sync Framework中使用的元数据包含两种类型： 副本元数据（Replica metadata） 项目元数据（Item metadata） 在Sync Framework中，副本通常是指真正的数据存储。比如，如果我们在同步两个数据库，那么每个数据库都是一个副本，副本可以包含项目。比如，对于数据库，一个项目可以是表中的一条记录。 要同步两个副本， Sync

2014-05-04更新 SqliteDatabase.cs这个文件的初始方法有问题，具体是如果指定URL已经存在了DB文件，就不会重新覆盖DB文件。 这导致我们修改之后的DB文件无法产生效果。 本人的解决办法是在游戏启动的界面，通过对比本地的Resources目录下的文件A，和玩家核心数据B里面的数据库版本号， 如果A>B，则判定本地的DB文件版本较老，需要更新。 具体代码请到目录SQLite篇下下载 2014-04-30更新 剔除了使用网络上烂大街的SQLite使用方法（原因android下无法读取数据），使用libSQLite3.so，通过DLLImport，在C#代码里直接调用C接口 这种原生调用SQLite的方式，我在pc、android上亲测无误，ios没测过，但是stackoverflow上有兄弟试过，没问题。园子的朋友如果可以测IOS的，欢迎提供结果 基本思路，游戏基础配置数据，比如怪物的属性、装备模板属性、关卡怪物等，使用SQLite（Unity插件SQLiteUnityKit- GitHub地址 ，推荐客户端 SQLite Expert Personal 3 ），管理方便 玩家核心数据（属性、装备、技能）使用JSON格式，加密保存在Application.persistentDataPath路径里，避免每次升级被覆盖 插件本地下载地址 Sqlite框架