Apache HBase

大数据开发工程师-----职位要求(网上招聘查找)

情到浓时终转凉″ 提交于 2020-12-11 13:36:14
一、 java开发工程师(大数据方向) 职位类别: Java开发工程师 岗位职责: 1、参与大数据平台的设计与开发,解决海量数据面临的挑战; 2、管理、优化并维护 Hadoop、Spark等集 群,保证集群规模持续、稳定; 3、负责 HDFS/hive/HBase的功能 、性能和扩展,解决并实现业务需求; 4、协助团队成员建立数据模型,对 数据进行挖掘、优化及统计 。 任职要求: 1、本科生及以上学历,2年及以上互联网系统或者其他企业应用系统开发相关经验; 2、具备Java开发经验, Java编程基础 扎实,熟练使用 struts2、spring、ibatis或hibernate等框架 ; 3、有 分布式系统开发 经验; 3、熟悉 Hadoop/HBase/Spark/Storm/Hive ,熟悉 数据挖掘策略 与 算法 者优先; 4、数据控,善于发现问题、解决问题,具备良好的分析和解决问题的能力,具备一定的钻研精神和持续学习的意愿,强烈的责任感和团队感,对负有挑战性的工作充满热情 二、 大数据开发工程师 职位类别: 软件工程师 岗位职责: 1、开发大数据的 数据接入、数据存储及管理系统 2、负责大数据的 维度分解 及 统计汇报 3、 梳理 并 维护 大数据及 汇总 工作 4、设计并参与开发大数据服务系统。 任职要求: 1、精通java开发,熟悉 JVM 及 java常用包 2

腾讯云CES自动化运维架构及最佳实践

一曲冷凌霜 提交于 2020-12-11 06:55:21
主题: 腾讯云CES自动化运维架构及最佳实践 大纲: 1. 如何看待“运维”在公司的定位和未来的发展方向 2. 做好自动化运维架构需要关注哪些方面 3. 运维岗位必备技能 4. 提效处理故障方面的建议 5. 腾讯云CES方面的运维架构有哪些独到之处 听说3306π要搞事情了 是啊,马上要搞3306π深圳站了 啊,是吗?哪天啊,在哪里办,怎么报名? 12月19日 ,就在 深圳南山区海岸城 ,点文末的原文链接或者扫描二维码就可以报名了,一起来吹吹牛逼。 嘉宾自我介绍 李明 高级运维工程师 曾先后在携程、华为云等公司从事多年MySQL DBA的工作,目前在腾讯负责腾讯云Elasticsearch,CTSDB产品的运维工作。对于ES、CTSDB在日志分析、大数据搜索、时序分析等场景的使用有丰富的实践经验。 01 李老师,很多人都在谈脱离传统运维模式,更好的帮助业务前行。您是如何看待“运维”在公司的定位和未来的发展方向呢? 运维作为一个比较传统的岗位,在当前大量中小企业都拥抱上云或自动化程度越来越 高 的背景下,其工作的定位的却是受到了一些影响,以前需要专业运维来部署的一些环境,现在并不是那么需要了,但这并不意味着运维岗位的生存将受到很大的影响。 只是对运维人员提出了更高的要求,一方面需要运维人员对所服务的产品本身的特性,要相对开发人员有更深的认识,从而指导其更开发出更专业的产品

字节跳动五面都过了,竟然意外被刷了下来,问了hr原因竟说是。。。。。

我只是一个虾纸丫 提交于 2020-12-10 19:41:41
说在前面,面试时最好不要虚报工资。本来字节跳动是很想去的,几轮面试也通过了,最后没offer,自己只想到几个原因:1、虚报工资,比实际高30%;2、有更好的人选,这个可能性不大,我看还在招聘。我是面试Android开发的,3年经验,下面是面试流程: 一面 1.插件化。启动activity的hook方式。taskAffity。 2.okhttp支持HTTP2?http2的功能有哪些?tcp方面拥塞控制?tsl的握手和具体的非对称加密算法。非对称名称 3.handler的post(Runnable)如何实现的。callback,runnable,msg的执行优先级。 4.阻塞是怎么实现的?为什么不会阻塞主线程? 5.求二叉树中两个节点之间的最大距离。 6.206含义,未修改资源是哪个,302含义,301含义 7.多进程通信问题。binder优势。aidl生成的java类细节。多进程遇到哪些问题? 8.动态代理传入的参数都有哪些?非接口的类能实现动态代理吗?ASM的原理 9.Application和Activity在Context的继承树上有何区别?二者使用上有何不同? 10.任意一颗二叉树,求最大节点距离 二面 1.设计一个日志系统。 2.内存泄露的分类。怎么查看内存泄露的问题 3.touch事件源码问题。 4.组件化的问题。module和app之间的区别

腾讯云CES自动化运维架构及最佳实践

大兔子大兔子 提交于 2020-12-10 10:52:07
主题: 腾讯云CES自动化运维架构及最佳实践 大纲: 1. 如何看待“运维”在公司的定位和未来的发展方向 2. 做好自动化运维架构需要关注哪些方面 3. 运维岗位必备技能 4. 提效处理故障方面的建议 5. 腾讯云CES方面的运维架构有哪些独到之处 听说3306π要搞事情了 是啊,马上要搞3306π深圳站了 啊,是吗?哪天啊,在哪里办,怎么报名? 12月19日 ,就在 深圳南山区海岸城 ,点文末的原文链接或者扫描二维码就可以报名了,一起来吹吹牛逼。 嘉宾自我介绍 李明 高级运维工程师 曾先后在携程、华为云等公司从事多年MySQL DBA的工作,目前在腾讯负责腾讯云Elasticsearch,CTSDB产品的运维工作。对于ES、CTSDB在日志分析、大数据搜索、时序分析等场景的使用有丰富的实践经验。 01 李老师,很多人都在谈脱离传统运维模式,更好的帮助业务前行。您是如何看待“运维”在公司的定位和未来的发展方向呢? 运维作为一个比较传统的岗位,在当前大量中小企业都拥抱上云或自动化程度越来越高的背景下,其工作的定位的却是受到了一些影响,以前需要专业运维来部署的一些环境,现在并不是那么需要了,但这并不意味着运维岗位的生存将受到很大的影响。 只是对运维人员提出了更高的要求,一方面需要运维人员对所服务的产品本身的特性,要相对开发人员有更深的认识,从而指导其更开发出更专业的产品

MySQL数据库简介

好久不见. 提交于 2020-12-08 14:02:48
MySQL数据库简介 一、数据库介绍 (一)数据库相关概念 数据库是“按照数据结构来组织、存储和管理数据的仓库”。是一个长期存储在计算机内的、有组织的、有共享的、统一管理的数据集合。 1.数据库系统:DBS (DataBase System)通常由数据库、数据库管理系统和数据管理员组成。 2.数据库管理系统:DBMS (Database Management System)是一种操纵和管理数据库的大型软件,用于建立、使用和维护数据库。它对数据库进行统一的管理和控制,以保证数据库的安全性和完整性。 3.数据库管理员:DBA (Database Administrator),是从事管理和维护数据库管理系统(DBMS)的相关工作人员,一般是由业务水平较高、资历较深的人员担任。 4.数据库:DB (Database )是以一定方式储存在一起、能与多个用户共享、具有尽可能小的冗余度、与应用程序彼此独立的数据集合,可视为电子化的文件柜——存储电子文件的处所,用户可以对文件中的数据进行新增、查询、更新、删除等操作。 (二)数据库分类 关系型数据库 概述:简单理解就是以二维表格的形式存储数据,而一个关系型数据库就是由二维表及其之间的关系组成的一个数据组织。 常见的关系型数据库: Oracle:IBM公司的商业数据库。 SQLServer:微软旗下的一款开源数据库。 DB2:商业银行使用较多。

Spark3大数据实时处理-Streaming+Structured Streaming 实战

老子叫甜甜 提交于 2020-12-08 01:29:59
下载: Spark3大数据实时处理-Streaming+Structured Streaming 实战 随着云计算和大数据的快速发展,在企业中大数据实时处理场景的需求越来越多。本课针对企业级实时处理方案进行全方位的讲解,基于Spark3,在同一个项目中,学习两套实时处理的解决方案:Spark Streaming和Structured Streaming。在框架学习的基础上,不仅带你体验完整实时处理方案的全流程,真正所学即所用,还会为你梳理大数据的常见面试题、大厂的实时解决方案,带你跨过面试最后一公里。 适合人群 想转型或者从事大数据开发的同学 对Spark有浓厚兴趣的同学 想掌握大数据实时处理技术的同学 技术储备要求 Linux命令基本操作 Hadoop命令基本操作 Scala基本语法的使用 章节目录: 第1章 【项目启动】项目背景及架构分析 本章将介绍实战项目背景、数据流,并让大家对知晓在实际项目中应如何进行技术的选型以及项目架构的迭代过程。 1-1 课程概览 试看 1-2 ***学前必读***(助你平稳踩坑,畅学无忧,课程学习与解决问题指南) 1-3 课程目录 1-4 项目目的 1-5 项目流程 1-6 技术选型 1-7 项目总体架构 1-8 项目架构V1版本 1-9 项目架构V2版本 第2章 【环境部署】基础开发环境搭建 工欲利其事必先利其器

如何构建企业大数据平台?

廉价感情. 提交于 2020-12-03 11:52:23
特邀嘉宾 分享主题 周四见|知数堂公开课系列 之 《企业大数据平台构建之路》 直播现场回顾 直播现场回顾 王晓伟,知数堂《 Hadoop+ELK 》课程讲师 课程涵盖 Hadoop系统 、 NoSQL(Hbase) Mapreduce 编程框架及实践 数据仓库与 数据分析 机器学习 及数据挖掘等内容 系统的学习将助你完善大数据 知识体系 那么,这次公开课或许会是一个起点 通过构建企业大数据平台这个主题 体验王老师睿智风趣的教学风格 或许,这会是你加入知数堂的一个契机 We want you! 回放视频、PPT讲义已上线,快来围观~ 温馨提示:PPT的内容有限,建议结合PPT观看视频,效果更佳! 资料发布 本次公开课的讲义,及录播的 视频均 可至腾讯课堂下载、查看,链接: https://zst.ke.qq.com/course/364261 ( 打开页面-查看任务-视频/PPT讲义均可观看) 扫描下方二维码识别 或者点击文末 “ 阅读原文 ” 直达腾讯课堂 扫码加入QQ技术交流群 知数堂公开课互动群 (QQ群号: 793818397) 本文分享自微信公众号 - 老叶茶馆(iMySQL_WX)。 如有侵权,请联系 support@oschina.cn 删除。 本文参与“ OSC源创计划 ”,欢迎正在阅读的你也加入,一起分享。 来源: oschina 链接: https://my

java面试:如果我是面试官,我会这样吊打你!

折月煮酒 提交于 2020-11-30 12:08:27
前言 每到年后,总会有很多人跳槽。可我发现一个奇怪的现象:那些跳槽的人,总是从一个坑,跳进令一个坑中。毕竟一年过去了,会的还是原来的知识,人的身价就摆在那里,无论怎么折腾,也不会拿到更好的offer。这样的跳槽其实没有意义,也许就有人问,现在都是互联网寒冬了,要怎样才能把握好机会,拿到跟好跟适合自己的offer呢? 技术才是我们程序员的立身之本,在再好的机遇面前我们也要有这个实力去抓住它。 快到年后跳槽季,假如我是面试官,我会这样虐你,在这我整理了一些大型互联网公司面试部分常问的面试题及面试经验总结,希望在你的求职路上有一定的帮助。也希望这份面试题能够祝你一臂之力! 更多面试题加面试答案、学习资料,点此免费获取!! 自我和项目相关 自我介绍 你觉得自己的优点是?你觉得自己有啥缺点? 你有哪些 offer? 你为什么要离开上家公司?你上家公司在xxx,我们公司在xxx,离这么远为什么要选择我们这里? 上家公司的同事和领导是怎么评价你的? 介绍下你的上家公司是做哪块的吧 在上家公司你做了哪些项目? 你在项目中是什么角色? 这个项目的数据量和并发量多大? 这个项目用的什么技术? 项目过程中有遇到什么很印象深刻的问题吗? 是怎么解决的这些问题? 项目有没有还可以继续优化的地方? 该怎么优化?有什么思路没? 叫你设计一个并发xxx,数据存储量xxx 量级的系统,你该如何设计

美团架构师总结整理的这份GitHub标星150K+的神仙笔记,我花了两个月肝完成功面进了阿里定级P7,现在分享出来希望大家也能有所提升!

白昼怎懂夜的黑 提交于 2020-11-29 11:23:14
俗话说:不想进大厂的程序员不是好程序员 楼主14年小本毕业。离职也有一段时间了,因为一些原因,休整了一段时间。然后3月初开始准备面试(在上家公司工作之余心里一直有着进大厂的执念)。上家公司是智能家居互联网行业的,使用的技术框架有dubbo、zookeeper、mybatis、springMVC、redis等,数据库是用的mysql。我们主要是java后端开发的,感觉上家公司没啥发展前景了就想着在 金三银四 之际把握机会。但是自身的知识范围不是很广泛,在数据库原理性的知识和sql语句(比如存储过程、触发器)、并发框架dubbo原理性的东西、各个流行框架原理性的东西都比较薄弱和网络编程这块完全抓瞎,主要平时太关注业务了,没有去及时充充电。在面试屡屡碰壁后,沉下心来恶补了一遍java后端的全栈知识,目前还算幸运成功面进阿里。 本着好东西就要拿出来分享的原则,下面我就把我几个月一直在用的PDF文档分享出来给大家,希望对大家有所帮助。 这本PDF总共有30章涵盖了JVM、多线程并发、Spring原理、微服务、Zookeeper、Kafka、算法、RabbitMQ、设计模式、数据结构、Hadoop、Spark、Netty 与RPC等核心知识点。 一键三连+评论,然后添加VX(tkzl6666)即可免费领取这份神仙笔记 主要内容: 目录总述 JVM JVM 是可运行 Java 代码的假想计算机