Django 的 Hadoop 集成(通过 Oozie REST API 或本地作业执行)。 此代码允许从 Django 视图运行 MapReduce 任务。 安装 像往常一样安装这个 django 应用程序(urls.py、settings.py 等)。 在项目的 settings.py 中准备常见的 Hadoop 相关设置: HADOOP_MAIN = 'node' NAMENODE = 'hdfs://%s:8020' % HADOOP_MAIN # Hadoop namenode JOB_USER = 'oozie' # Hadoop user for jobs & HDFS stuff JOB_MANAGER_CLASS = 'yo
2022-05-07 15:54:01 16KB Python
1
Spring 加密工具包,kylin密码加密工具包,亲测可用, 通过java -jar encryption.jar admin运行
2022-05-07 13:36:12 9.42MB Hadoop 大数据 spring加密工具
1
无需Cygwin在Windows安装Hadoop,已整合hadooponwindows-master里面内容,可直接使用!
2022-05-07 10:02:59 209.92MB hadoop-2.7.1
1
使用vmware复制了三个ubuntu18.04虚拟机系统,模拟多台服务器,安装配置完全分布式hadoop。 想修改成免费的,不会修改。有问题可以留言一起交流
2022-05-07 09:28:23 2.03MB hadoop ubuntu linux
1
本文搭建了一个由三节点(master、slave1、slave2)构成的Hadoop完全分布式集群(区别单节点伪分布式集群),并通过Hadoop分布式计算的一个示例测试集群的正确性。对hadoop分布式环境搭建过程感兴趣的朋友跟随小编一起看看吧
1
,Hadoop 技术已经在互联网领域得到了广泛的应用。互联网公司往往需要 存储海量的数据并对其进行处理,而这正是Hadoop 的强项。如Facebook 使用Hadoop 存储 内部的日志拷贝,以及数据挖掘和日志统计;Yahoo !利用Hadoop 支持广告系统并处理网页 搜索;Twitter 则使用Hadoop 存储微博数据、日志文件和其他中间数据等。在国内,Hadoop 同样也得到了许多公司的青睐,如百度主要将Hadoop 应用于日志分析和网页数据库的数据 挖掘;阿里巴巴则将Hadoop 用于商业数据的排序和搜索引擎的优化等。
2022-05-07 08:47:46 4.11MB Hadoop 雅虎 eBay 百度
1
hadoop2.8.3 winUtils 。如果本机操作系统是 Windows,在程序中使用了 Hadoop 相关的东西,比如写入文件到HDFS,则会遇到如下异常:could not locate executable null\bin\winutils.exe ,使用这个包,设置一个 HADOOP_HOME 环境变量,即可解决。
2022-05-06 20:53:03 417KB hadoop winUtils.exe
1
在网站流量日志分析这种场景中,对数据采集部分的可靠性、容错能力要求通常不会非常严苛,需要注意的是结合语境明白是何种含义的数据采集。
2022-05-06 20:46:44 771KB hadoop
1
包括以下工具: apache-ant-1.9.12-bin.tar.gz apache-maven-3.5.4-bin.tar.gz findbugs-3.0.1.tar.gz hadoop-2.6.4-src.tar.gz protobuf-2.5.0.tar.gz 还有一份hadoop编译文档,照着操作顺利编译,亲测可用。
2022-05-06 20:37:24 41.41MB apache-ant apache-maven protobuf findbugs
1
Hadoop mapreduce 实现KMeans,可用
2022-05-06 19:31:42 11KB Hadoop mapreduce KMeans
1