使用Pig对手机上网日志进行分析

在成功安装Pig的基础上，本文将使用Pig对手机上网日志进行分析，具体步骤如下：. 手机上网日志文件phone_log.txt，文件内容 及 字段说明部分截图如下. 显示每个手机号的上网流量情况. 1、将Linux本地文件phone_log.txt上传到HDFS. 执行命令dump C; 查看经过以上步骤处理后的结果.

Hadoop 的普及和其生态系统的不断壮大并不令人感到意外. Hadoop 不断进步的一个特殊领域是 Hadoop 应用程序的编写. 虽然编写 Map 和 Reduce 应用程序并不十分复杂，但这些编程确实需要一些软件开发经验. Apache Pig 改变了这种状况，它在 MapReduce 的基础上创建了更简单的过程语言抽象，为 Hadoop 应用程序提供了一种更加接近结构化查询语言 (SQL) 的接口.

Pig是yahoo捐献给apache的一个项目，它是SQL-like语言，是在MapReduce上构建的一种高级查询语言，把一些运算编译进MapReduce模型的Map和Reduce中，并且用户可以定义自己的功能. 这是Yahoo开发的又一个克隆Google的项目:Sawzall. Pig是一个客户端应用程序，就算你要在Hadoop集群上运行Pig，也不需要在集群上装额外的东西.

前面讲到了如何用MapReduce进行数据分析. 当业务比较复杂的时候，使用MapReduce将会是一个很复杂的事情，比如你需要对数据进行很多预处理或转换，以便能够适应MapReduce的处理模式. 另一方面，编写MapReduce程序，发布及运行作业都将是一个比较耗时的事情. Pig的出现很好的弥补了这一不足.

'''一句话总结：PIG 在2个表JOIN的时候，如果使用Using 'replicated' 会将后面的表分段读到内存中，从而加快JOIN的效率. 但是如果load 到内存的数据超过JVM的限制就会报错==>.     年前写了一个用户session处理的PIG脚本，各种测试通过，数据OK，然后就Happy的回家过年了.

美国一项新研究发现，手机上网容易导致眼睛疲劳和头痛. 其原因是，与书籍和报纸相比，手机字号较小，操作短信和浏览网页时，距离眼睛更近. 对于已经戴眼镜的人群而言，手机上网对双眼产生的压力更大.

另一面专题：“手机上网危害大”是危言耸听. 导语：昨日，央视财经发微博称，“手机上网会产生比平时多5-6万倍的电磁波”、“电磁波与塑化剂都属2B级可能致癌物”、“据世卫组织调查，长期暴露在电磁波下，约3%-5%的人会患上电磁波敏感症，导致疲劳、头晕、失眠”. 那么，手机上网产生的辐射真的会对人体健康有危害.

近日，前一阵子被Google收购的Moto发布了全新一代的”Webtop”手机扩展坞，用来扩充手机的各项性能. 希望以手机为核心，逐步占领上网本市场. 名为Lapdock 100的扩展坞可以有效扩充手机的各项性能，包括10.1英寸显示屏(分辨率1366 x 768)，QWERTY物理按键，触摸板，两个USB扩展口(可扩展移动硬盘及鼠标等)，以及一块足够合体后可供Webtop使用5小时以上的电池（关键时刻还能用来给手机充电）.

将win7笔记本电脑无线网变身WiFi热点，让手机、笔记本共享上网. 我们使用win7建立无线局域网，可以共享上网还可以局域网游戏. 大家所知道的，笔记本网络设置里面的那个“设置临时网络”，不可以让手机连接的，我的这个方法，可以让笔记本跟无线路由器的wifi一模一样，大家快试试吧. 如果我们想要笔记本变身为wifi热点，就需要开启windows 7的隐藏功能：虚拟WiFi和SoftAP（即虚拟无线AP），就可以让电脑变成无线路由器，实现共享上网，节省网费和路由器购买费.

这可能就是该运营商所选择的漫游用户接入互联网的方案是 归属地接入方式，还有一种则为 漫游地接入方式. 以常见的UMTS（WCDMA/TD-SCDMA）/LTE网络为例，它们的核心网中有两个重要的网元，分别是SGSN（UMTS）/S-GW（LTE）和GGSN（UMTS）/P-GW（LTE）. SGSN（服务GPRS节点）可以理解为一个大型的、多功能的“管理机构”，功能包括移动性管理（感知每个用户的位置信息）、安全管理（确认用户合法性）、参与计费信息的生成等等.