大数据框架小组自学（第七周）
Posted In big data learning
tags:
篇首语：本文由小常识网(cha138.com)小编为大家整理，主要介绍了大数据框架小组自学（第七周）相关的知识，希望对你有一定的参考价值。
_(:з」∠)_
一、
本周小组成员继续进行数据集的查找，但搜集的数据集大部分条数比较少，进行数据分析没有一定的分析意义，且部分数据在分享时进行了加密操作，笔者团队无法使用加密后的数据进行分析。
二、
在此基础上，小组成员还测试了mapreduce程序的运行。用dataease实现了简单的数据可视化。
三、
小组成员在调用hdfs时发现了原来没有配置好的文件的问题，在使用hive时碰到的hive.site.xml配置文件的问题，截止目前还没有解决该问题。
第七周新蜂站会1
https://git.coding.net/Boxer_/homework.git
ssh：git@git.coding.net:Boxer_/homework.git
小组名称：新蜂
组长：武志远
组成员：宫成荣 谢孝淼 杨柳 李峤
项目名称：Java俄罗斯方块
站会时间：11.7
总任务：
1，数据库显示模块。
2，本地记录模块，
3，俄罗斯方块主模块
4，按钮窗口模块
5，下一个窗口模块
6，等级窗口模块，
7，分数窗口模块。
8，版权信息模块。
每日任务：
实现俄罗斯方块游戏的排行榜。
难点：数据库和硬盘存储游戏排行的具体操作。
已完成：数据库和硬盘存储的基本概念，已经掌握部分。
下面是学的过程中的一点笔记：
DAO：
data access object数据访问对象
主要用来封装对数据库的访问。通过它可以把POJO持久化为PO，用PO组装出来VO、DTO
DTO ：
Data Transfer Object数据传输对象
主要用于远程调用等需要大量传输对象的地方。
比如我们一张表有100个字段，那么对应的PO就有100个属性。
但是我们界面上只要显示10个字段，
客户端用WEB service来获取数据，没有必要把整个PO对象传递到客户端，
这时我们就可以用只有这10个属性的DTO来传递结果到客户端，这样也不会暴露服务端表结构.到达客户端以后，
如果用这个对象来对应界面显示，那此时它的身份就转为VO
以上是关于大数据框架小组自学（第七周）的主要内容，如果未能解决你的问题，请参考以下文章