confluence

Hive外部表 | 每日五分钟学大数据

江枫思渺然 提交于 2020-10-28 06:36:55
别的先不说,开门见山说说内部表的特点: Hive 创建内部表时,会将数据移动到数据仓库指向的路径; Hive 创建外部表,仅记录数据所在的路径,不对数据的位置做任何改变; 在删除表的时候,内部表的元数据和数据会被一起删除,而外部表只删除元数据,不删除数据。这样外部表相对来说更加安全些,数据组织也更加灵活,方便共享源数据。 传统数据库对表数据验证是schema on write(写时模式),而 Hive 在load时是不检查数据是否符合schema的,hive 遵循的是schema on read(读时模式),只有在读的时候hive才检查、解析具体的数据字段、schema;所以在这样的设计下,Hive支持创建外部表也变得理所应当,我们来看下如何创建一个外部表。 CREATE EXTERNAL TABLE table_name( id STRING , name STRING ) ROW FORMAT DELIMITED LOCATION '/data/my_data.txt' ; 关键字EXTENAL告诉Hive这个表是外部的,而后面的LOCATION...子句则用于告诉Hive数据位于哪个路径下。 然而,我们需要清楚的重要的一点是管理表和外部表之间的差异要比刚开始所看到的小得多。即使对于管理表,用户也是可以知道数据是位于哪个路径下的,因此用户也是可以使用其他工具

JIRA Apache

自古美人都是妖i 提交于 2020-10-27 12:42:10
jira apache - 国内版 Bing https://cn.bing.com/search?q=jira+apache&qs=n&form=QBRE&sp=-1&pq=jira+apache&sc=0-11&sk=&cvid=9821CDD8C46B417EA556122AE4043541 Apache Arrow - ASF JIRA https://issues.apache.org/jira/projects/ARROW?selectedItem=com.atlassian.jira.jira-projects-plugin:report-page Spark - ASF JIRA https://jira.apache.org/jira/projects/SPARK?selectedItem=com.atlassian.jira.jira-projects-plugin:components-page Jira Component - Apache Camel https://camel.apache.org/components/latest/jira-component.html 登录 - Apache Software Foundation https://cwiki.apache.org/confluence/login.action?os

搭建Hive3.x并整合MySQL8.x存储元数据

て烟熏妆下的殇ゞ 提交于 2020-10-27 12:01:56
Hive 简介 Hive 官方文档: https://cwiki.apache.org/confluence/display/Hive Hive 产生的背景: 在使用MapReduce进行编程的时候,会发现实现一个简单的功能例如WordCount都需要编写不少的代码,可想而知如果实现一个复杂点的应用所需的开发和维护成本就会非常高,为了解决MapReduce编程的不便性,Hive才得以诞生。 另外一点就是HDFS上的文件缺少Schema,没法通过SQL去对HDFS上的数据去进行查询,只能通过MapReduce去操作。因此以往可以通过SQL完成的数据统计就没法在HDFS上完成,这会导致上手门槛高。 Hive是什么: 由Facebook开源,最初用于解决海量结构化的日志数据统计问题 是一个构建在Hadoop之上的数据仓库,可以对已经在存储(HDFS)中的数据进行结构化的映射。并提供了一个命令行工具和JDBC驱动程序来连接并操作Hive Hive定义了一种类SQL查询语言:HQL(类似SQL但不完全相同),使用SQL方便了分布式存储中大型数据集的读取、写入和管理 通常用于进行离线数据处理,早期底层采用MapReduce,现在底层支持多种不同的执行引擎 支持多种不同的压缩格式(gzip、lzo、snappy、bzip2等)、存储格式(TextFile、SequenceFile、RCFile

Confluence 如何查看页面树

℡╲_俬逩灬. 提交于 2020-10-16 02:15:02
官方的页面已经很早就改版了,导致比较难查看页面树。 可以使用下面的方法进行查看: https://confluence.atlassian.com/collector/pages.action?key=DOC 上面的链接是查看官方首页面树的链接。 在链接中 collector/pages.action?key=DOC 适用于任何使用 Confluence 的站点,如果你有足够的权限的话,你就可以查看到需要页面树内容。 当Confluence 使用了插件导致不少内容无法查看的时候,你可用使用 Confluence 的一些固定 URL 格式。 上面的界面就是显示的页面树内容。 https://www.ossez.com/t/confluence/418 来源: oschina 链接: https://my.oschina.net/u/4287583/blog/4536463

Confluence 7 文件编辑修改你的默认应用

二次信任 提交于 2020-10-07 01:01:03
Confluence 允许你使用操作系统的默认应用来编辑文件。这个默认应用是通过文件类型来识别的(例如,.psd 文件将会使用 Photoshop 来打开)。 如果你希望修改 Confluence 针对文件类型的默认打开应用,你需要通过修改你的操作系统的默认文件打开方式来实现。 https://www.cwiki.us/display/CONFLUENCEWIKI/Edit+Files 来源: oschina 链接: https://my.oschina.net/honeymoose/blog/4546554

Confluence 6 移动应用 app 限制和已知的问题

烂漫一生 提交于 2020-10-03 05:12:09
不是所有的宏都是可用的 不是所有的宏都是可以在 app 或者移动浏览器上可以使用和显示的。如果 宏不能够被显示,你将会看到下面的消息,或者你可以通过单击上面的图标将你的移动浏览器上显示桌面的版本。 屏幕截图:在 Confluence 移动上的宏没有被渲染 管理员可以针对 Confluence 站点禁用移动访问 如果你不能使用移动应用或者移动浏览器,这个可能是你的 Confluence 管理员禁用下面的插件中的一个或者全部禁用了: Confluence 移动插件(Confluence mobile plugin) (在使用移动应用的时候需要的) Confluence 移动浏览器插件(Confluence mobile web plugin) (在使用移动浏览器时候需要的) 禁用’Confluence Mobile Plugin’ 插件同时也会禁用 Workbox - Host Plugin plugin 模块。这个问题可以通过访问下面的链接了解进展: CONFSERVER-40782 - Disabling the Confluence Mobile Plugin also disables the Workbox - Host Plugin in Confluence GATHERING IMPACT 区分云和服务器的应用 这 2 个额移动应用的功能非常接近,你需要下载

路孚特:300天350个版本,旗舰移动产品“0”到“1”的交付之路

╄→гoц情女王★ 提交于 2020-10-02 11:11:02
300天350个版本,路孚特旗舰移动产品“0”到“1”的交付之路 2020-05-26 02:41 InfoQ 作者 | Eileen 要想认识路孚特这家金融数据科技公司,没有什么比数据更直观。 路孚特为全球 190 多个国家的 4 万多家机构和 40 万用户提供金融信息服务,其交易数据每秒传递高达 700 万条更新,支撑着全球 5000 多家投资公司和对冲基金的交易,每天更新的市场数据多达 400 亿条。在其开放平台上,超过 1 万 3 千名开发者和 2200 多家合作伙伴,共同以安全、有效、高效的方式构建金融行业的业务发展以及其各项创新。 2018 年,路孚特完成从汤森路透金融与风险业务部门到路孚特(Refinitiv)的转变。作为世界上最大的金融市场数据和基础设施供应商之一,160 多年历史的专业经验铸就了路孚特新一代业务流程优化系统 Refinitiv Workspace,针对全球金融市场从业人士的不同需求,以此为用户提供全面深入的金融数据、分析、新闻、工具等客制化解决方案。 在移动设备已经非常普及的今天,时间的碎片化带来流量的碎片化。面向消费者的互联网产品早在五六年前便完成了 PC 端向移动端的过渡,但对监管严格的金融行业来说,一切似乎才刚刚开始。在路孚特的移动平台战略中,非常重要的一步是打造 Refinitiv Workspace 的移动版本——Refinitiv

Confluence 6 移动浏览查看任务

荒凉一梦 提交于 2020-09-29 20:39:46
你还可以在你的电话或者其他移动设备上查看和管理你的任务。单击顶部的 菜单按钮来在左侧页面中打开菜单面板。选择 任务(Tasks) 来查看详细内容。 有关更多Confluence 6 移动界面的使用,请参考页面 通过你的移动浏览器使用 Confluence 中的内容。 https://www.ossez.com/t/confluence-6/453 来源: oschina 链接: https://my.oschina.net/u/4414213/blog/4551481

Confluence 6 移动浏览搜索内容和人

不羁的心 提交于 2020-09-29 13:45:22
选择菜单按钮 来在页面的左侧打开菜单的面板。然后在 搜索(Search) 对话框输入文本或者用户的名字。移动界面提供快速搜索功能,这个意思是搜索只能返回最符合搜索内容的标题。如果你希望使用 高级搜索(Advanced Search) ,你需要切换到桌面模式。 有关更多Confluence 6 移动界面的使用,请参考页面 通过你的移动浏览器使用 Confluence 中的内容。 https://www.ossez.com/t/confluence-6/449 来源: oschina 链接: https://my.oschina.net/u/4309525/blog/4551498

Confluence 如何查看页面 ID

北城余情 提交于 2020-08-19 17:40:20
如果你希望查看页面的 ID 你有 2 个方法。 例如,你希望查看 https://www.cwiki.us/display/CONFLUENCEWIKI/Get+started 页面的 Page ID 的话。 如果你的标题栏没有特殊字符,那么将会使用英文的 URL 来表示,以便于增加 URL 的友好可读性。 但是有时候你需要找到页面的 ID,你有下面的办法可以找到。 查看源代码 在页面中,单击右键,然后查看源代码,你也可以使用 F12 进行查看。 在页面的最上方,有 Meta 数据,你会看到 meta 数据中的 page-id,这个 ID 就是这个页面的 ID。 修改页面标题 如果你在标题中添加任何一个特殊字符,包括中文。 因为中文字符不是 ASCII 字符,所以 Confluence 将会自动将页面使用 ID 表示。 例如,我们在页面中添加一个中文字符【字符】 你会看到页面 URL 已经使用 ID 进行表示了: https://www.cwiki.us/pages/viewpage.action?pageId=917525 因为你使用的中文字符没有办法表示。 上面 2 个方法可以让你找到当前页面的 ID。 当你对上面的 ID 标题进行修改进行查看内容的时候,不要忘记将修改的内容改回去。 https://www.ossez.com/t/confluence-id/210 来源: