• Apache Sentry部署

    1 环境描述三台hadoop集群,分别是master、slave1和slave2。下面是这三台机器的软件分布:master:NameNode、ZK、HiveMetaSotre、HiveServer2、SentryServerslave1:DataNode...

    2018-01-16    来源:上海尚学堂
  • Docker中容器nginx部署网站

    1 创建映射端口的交互式容器[plain]view plaincopy dockerrun-p80--nameweb-i-tdaocloud io ubuntu bin bash2 安装Nginx[plain]view plaincopy apt-getinstall-yngi...

    2018-01-15    来源:上海尚学堂
  • MySQL 表锁和行锁机制解析

    行锁变表锁,是福还是坑?如果你不清楚MySQL加锁的原理,你会被它整的很惨!不知坑在何方?没事,我来给你们标记几个坑。遇到了可别乱踩。通过本章内容,带你学习MySQL的行锁...

    2018-01-15    来源:上海尚学堂
  • HBase Shell配置与调试操作

    HBase单机配置(官网):HBase下载http: www apache org dyn closer cgi hbase 解压缩,然后进入到那个要解压的目录 $ tar xfz hbase-×××&ti...

    2018-01-12    来源:上海尚学堂
  • Elasticsearch简介和安装

    各位小伙伴,又到了本期分享大数据技术的时间,本次给大伙带来的是Elasticsearch这个技术,闲话不多聊,我们开始进入正题。一、什么是elasticsearchElasticsearch是一个基于Lu...

    2018-01-09    来源:上海尚学堂
  • 深入了解apache shiro的工作流程

    apache shiro非常易于使用,如果是在标准java web环境下使用,你没有必要去了解内部的工作流程。如果需要在非标准java web环境使用,就必须深入到它的整个对象图中去。我希...

    2018-01-08    来源:上海尚学堂
  • HBase在滴滴内部的应用场景和最佳实践

    本文主要介绍HBase在滴滴内部的一些典型使用场景,如何设计整个业务数据流,让平台开发者与用户建立清晰、明确、良好的合作关系背景对接业务类型HBase是建立在Hadoop生态之上...

    2018-01-07    来源:上海尚学堂
  • 2018年大数据新趋势 :人工智能,机器学习等统统有涉及!

    导读:笔记本电脑、智能手机、传感器,都为物联网带来了大量数据。这是获得竞争优势(或者保持竞争力)的重大机遇,前提是企业足够灵活,可以管理好数据并把数据变成有用的商...

    2018-01-05    来源:上海尚学堂
  • HBase体系架构和集群安装

    大家好,今天分享的是HBase体系架构和HBase集群安装。承接上两篇文章《HBase简介》和《HBase数据模型》,点击回顾这2篇文章,有助于更好地理解本文。一、HBase体系架构 ...

    2018-01-03    来源:上海尚学堂
  • 大数据开发是先学习Hadoop还是spark?大家都这么说

    首先,我先申明:任何以『做大数据好像挣得多』为名学习数据科学相关的内容都是不谨慎,而且难以有回报的。而且,任何『只要学会一两种工具就能做大数据』的想法也都是盲目的...

    2018-01-03    来源:上海尚学堂
  • Docker镜像的管理与使用

    在docker环境安装完成之后,对docker的使用主要集中在docker镜像的管理与使用。首先是docker镜像的管理,查看本地有哪些镜像可以使用命令:[plain]view plaincopy dockerima...

    2018-01-02    来源:上海尚学堂
  • 批量更新Mybatis(updateBatch)

    背景描述:通常如果需要一次更新多条数据有两个方式,(1)在业务代码中循环遍历逐条更新。(2)一次性更新所有数据(更准确的说是一条sql语句来更新所有数据,逐条更新的操作...

    2017-12-31    来源:上海尚学堂
  • Mybatis批量更新数据

    第一种方式[html]view plaincopy <updateid="updateBatch"parameterType="Map">updateaaseta= {fptm},b= {csoftrain}wherecin<foreachcollection="cs"index="index"item="...

    2017-12-31    来源:上海尚学堂
  • MySQL的主从复制的基本流程和具体操作

    前言mysql的主从复制不但可以作为数据库备份,也能实现数据库的读写分离,为以后处理高并发打下基础废话不多说,直接上干货分布式数据库分为主数据库(master)和从数据库(sla...

    2017-12-29    来源:上海尚学堂
  • HBase数据模型

    上次我们讲过了《HBase简介》,点击阅读有助于更好地理解本文。本文讲述的是HBase数据模型。1、ROW KEY决定一行数据按照字典顺序排序的。Row key只能存储64k的字节数据2、Co...

    2017-12-28    来源:上海尚学堂
  • HBase简介

    各位小伙伴们,又到了每周分享java&大数据技术的时间,这一次我给大家分享的是hbase技术。那么hbase到底是一个什么样的技术,他又能拿来干嘛用的呢?接下来就让我们一起来学习...

    2017-12-27    来源:上海尚学堂
  • MapReduce多种join实现实例分析(二)

    上一篇《MapReduce多种join实现实例分析(一)》,大家可以点击回顾该篇文章。本文是MapReduce系列第二篇。一、在Map端进行连接使用场景:一张表十分小、一张表很大。用法:在...

    2017-12-26    来源:上海尚学堂
  • Impala总结与优化

    Impala是Cloudera公司推出,提供对HDFS、Hbase数据的高性能、低延迟的交互式SQL查询功能。&bull;基于Hive使用内存计算,兼顾数据仓库、具有实时、批处理、多并发等优点&bull;...

    2017-12-26    来源:上海尚学堂
  • 大数据要怎么用,12名创业者这样说

    当下,大多数企业都明白大数据的作用。大数据——这个庞大甚至是有时是压倒性的信息包含了企业日常经营的过程:销售策略,营销邮件的打开率,网站点击量等等,利用好大数据也...

    2017-12-20    来源:上海尚学堂
  • 每个开发人员都需要了解的一个SQL技巧

    对于数据过滤而言CHECK约束已经算是相当不错了。然而它仍存在一些缺陷,比如说它们是应用到表上面的,但有的时候你可能希望指定一条约束,而它只在特定条件下才生效。使用SQL...

    2017-12-15    来源:上海尚学堂
  • Spring boot转docker&docker简单使用和管理

    我们前面学习了使用了Spring Boot,又发现了docker是如此的适合于微服务。那我们如何把Spring boot项目打包成docker镜像呢?首先需要一个Spring boot项目。打开命令行窗口...

    2017-12-15    来源:上海尚学堂
  • mysql全库导出与导入

    利用mysqldump的—all-databases参数可以一口气把你数据库root用户下的所有数据库一口气导出到一个sql文件里。然后,重装系统后使用source命令可以再一口气倒回来。导出全部数...

    2017-12-15    来源:上海尚学堂
  • 深入浅出Lucene

    各位小伙伴们这次我们分享的内容是lucene,如今站内搜索的场景随处可见,所以我们有必要来学习一下lucene这个技术。一、Lucene简介1、Lucene是什么Lucene是一个开放源代码的全...

    2017-12-15    来源:上海尚学堂
  • MapReduce多种join实现实例分析(一)

    一、概述对于RDBMS中的join操作大伙一定非常熟悉,写sql的时候要十分注意细节,稍有差池就会耗时巨久造成很大的性能瓶颈,而在Hadoop中使用MapReduce框架进行join的操作时同样...

    2017-12-14    来源:上海尚学堂
  • ETL工程师的日常工作维护

    ETL工程师 : 我是食物链最底层的苦逼ETL工程师,我会写shell、我会搭hadoop hive hbase、会写超复杂逻辑的sql,今天那个不会自己计算数据的BI又让我跑几个数据,我本想...

    2017-12-12    来源:上海尚学堂

电话咨询

客服热线服务时间

周一至周五 9:00-21:00

周六至周日 9:00-18:00

咨询电话

021-67690939
15201841284

微信扫一扫