默认情况下，Hive的元数据是存储到Derby中的，这是Apache的一个纯Java编写的小巧数据库，类似于Sqlite。但是这样就会出现一个情况：Derby是单例的，当你在一个终端打开了hive时，在另外一个终端打开hive命令行会报错。所以使用MySQL来存储元数据能够解决这个问题，并且也更方便迁移和备份。 MySQL的安装与配置 1. 安装 Mysql-Community-Server 下载Mysql的RPM包：https://dev.mysql.com/downloads/repo/yum/ ,上传到机器中…
Title : Apache-Hive Author: Titan Start Time: 2020.07.26 1. 什么是Hive Hive：由 Facebook 开源用于解决海量结构化日志的数据统计。 Hive 是基于 Hadoop 的一个数据仓库工具，可以将结构化的数据文件映射为一张表，并提供类 SQL 查询功能。 也就是说，Hive提供了一种类SQL的HQL语言，方便你进行编写一些数据处理的东西，最终将 HQL 转化成 MapReduce 程序 2. Hive的安装记录 Hive的安装相对Hadoop来说…
什么是JWT认证机制 Json Web Token（缩写JWT）是目前最流行的跨域认证解决方案 session登录的认证方案是看，用户从客户端传递用户名和密码登录信息，服务端认证后将信息储存在session中，将session_id放入cookie中，以后访问其他页面，服务器都会带着cookie，服务端会自动从cookie中获取session_id,在从session中获取认证信息。 JWT的解决方案是，将认证信息返回个客户端，储存在客户端，下次访问其他页面，需要从客户端传递认证信息回服务器端。 JWT结构 一个完…
写在前面 本文所使用的系统为 Centos 8 系统，略过了系统的安装部分，使用的Hadoop版本为Hadoop v2.10.0版本。 配置JDK及其环境变量 在安装JDK的过程中，使用的是软件包管理器直接安装的方式，当然你也可以采用编译的方式，这里就不再赘述。 1. 安装 JDK 1.8 使用查看版本的命令，查看是否安装成功 如果你的输出结果与上面的类似，就说明你已经成功安装了JDK 2. 配置 JAVA_HOME 环境变量 Hadoop的启动和一些其他的操作依赖于环境变量，所以你需要先配置JAVA_HOME变量…
TitanCommunity Titan社区（Titan Community），基于SSM （ Spring + SpringMVC + Mybatis）开发的知识问答社区 演示地址：Titan社区 https://community.titan6.cn/（暂停演示） 项目介绍 Titan社区（Titan Community）是我在上个星期学习与研究完 SSM （ Spring + SpringMVC + Mybatis）框架后，用了不到一周的时间开发的一个练手的项目。其主要定位为知识问答社区（类似于知乎、思否等平…
提供一种Spring的IoC容器与Mybatis的整合方式，其中中，Mybatis采用纯注解方式配置，Spring采用XML方式配置。数据库源采用的是C3P0数据库连接池。 1. 在Spring的XML配置文件中添加相关配置 这里采用的是mybatis-spring的MapperScannerConfigurer来实现将DAO对象置入IOC容器中，将会扫描并加入basePackage指定包下的所有DAO接口。 2. DAO接口与Service实现类 DAO简单的实现了一个查询所有信息的功能 UserService实…
介绍 偶然间看到豆瓣电影的TOP250榜单，于是突发奇想写了这个爬虫脚本。将通过爬取豆瓣电影TOP250的榜单列表获取电影详情页的URL，然后再爬取电影详情页URL中的内容，最终获得电影的名称，导演，演员，类别，制片国家/地区，语言，上映日期，片长和剧情简介等信息，经过一系列的处理后输出。 输出结果 最终结果将输出为JSON形式，为当前运行目录下的result.json，形式如下 代码
本次期末大作业实验项目的总体介绍： 基于HTML5 + Bootstrap4 + jQuery进行设计于开发，广泛使用响应式布局系统，确保在不同分辨率屏幕下的网页呈现。在JavaScript的开发过程中，广泛使用了ECMAScript6标准（即一些ES6的特性）。项目共分为四个模块界面：主页、购物车、注册页面与商品详情页面。 在线演示 具体的演示效果可以访问演示地址来查看 https://demo.titan6.cn/titanshop/ 主页部分 主页部分主要实现了导航栏、主页Banner轮播图、商品列表页以及F…
1. Order By ORDER BY 语句用于根据指定的列对结果集进行排序。 ORDER BY 语句默认按照升序对记录进行排序。 如果您希望按照降序对记录进行排序，可以使用 DESC 关键字。 原始的表 (用在例子中的)： Orders 表: Company OrderNumber Titan Tech. 3532 Goodman Inc. 2356 Trump Limited. 4698 Goodman Inc. 6953 以字母顺序显示公司名称： 结果： Company OrderNumber Trump …
Mybatis动态SQL语句 Mybatis 的映射文件中，前面我们的 SQL 都是比较简单的，有些时候业务逻辑复杂时，我们的 SQL 是动态变 化的，此时在前面的学习中我们的 SQL 就不能满足要求了。 <if> 标签 我们根据实体类的不同取值，使用不同的 SQL 语句来进行查询。比如在 id 如果不为空时可以根据 id 查询， 如果 username 不同空时还要加入用户名作为条件。这种情况在我们的多条件组合查询中经常会碰到。 持久层 Dao 接口 持久层 Dao 映射配置 测试 <…
