Linux环境下Flume的安装

1、在官网http://flume.apache.org/download.html下载flume的压缩包

2、解压到指定位置并重命名

tar -zxvf apache-flume-1.9.0-bin.tar.gz

3、配置环境并生效

#vi ~/.bashrc
export FLUME_HOME=/usr/local/APP/flume
export PATH=$PATH:$FLUME_HOME/bin
#使变量设置生效
#source  ~/.bashrc

4、配置JDK环境：进入conf/目录修改flume-env.sh.template文件添加JAVA_HOME路径

export JAVA_HOME=/Library/Java/JavaVirtualMachines/jdk1.8.0_231.jdk/Contents/Home

5、验证是否安装成功：进入bin/目录，执行flume-ng version查看flume版本.
在这里插入图片描述
安装完成！

本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处：http://www.mzph.cn/news/535847.shtml

如若内容造成侵权/违法违规/事实不符，请联系多彩编程网进行投诉反馈email:809451989@qq.com，一经查实，立即删除！

相关文章

MIPCache 域名升级

MIPCache 域名升级

一、MIPCache URL 是什么 举个例子，MIP 官网的 URL 为： https://www.mipengine.org 对应的 MIPCache 的 URL 为： https://mipcache.bdstatic.com/c/s/www.mipengine.org 所谓 MIPCache URL 是经过 MIP-Cache CDN 缓存后的 MIP 页面地址&…
阅读更多...
Flume监听端口，输出端口数据案例

Flume监听端口，输出端口数据案例

1、在flume目录下新建/myconf目录,并在目录下新建socket-console.conf 文件！ mkdir myconf cd myconf touch socket-console.conf2、编辑文件vim socket-console.conf，添加以下内容： # 定义这个agent中各组件的名字 a1.sources r1 a1.sink…
阅读更多...
MIP 移动网页加速器视频教程全新发布

MIP 移动网页加速器视频教程全新发布

MIP (Mobile Instant Pages - 移动网页加速器) 是百度推出的开源项目，用于移动端页面加速。MIP 技术通过优化浏览器资源加载，前端代码执行及 CDN 缓存加速来加速页面，打造秒开的页面浏览体验。目前，有 5000 多家站点的 MIP 页已经…
阅读更多...
日常问题——flume连接hive时报错Caused by: java.lang.NoSuchMethodError

日常问题——flume连接hive时报错Caused by: java.lang.NoSuchMethodError

问题描述： 今天新安装的flume，使用flume来做kafka与hive对接时出现了以下两个的错误： Caused by: org.apache.hive.hcatalog.streaming.ConnectionError: HiveEndPoint{metaStoreUrithrift://localhost:9083, databasedb, tablestudent, pa…
阅读更多...
MIP 技术进展月报：储存功能全新上线，MIP-Cache域名升级，校验更严谨

MIP 技术进展月报：储存功能全新上线，MIP-Cache域名升级，校验更严谨

集 * 瞬时触达用户、高转化率、炫酷闪电标、优质展现形式 * 等诸多特性为一体的 MIP 页面吸引了众多站点进行改造。为了更好地服务于广大站长，更快地倾听站长们的声音，MIP 技术团队特推出《MIP 技术进展月报》，欢迎大家对 MIP 技术提建议&…
阅读更多...
通过Flume简单实现Kafka与Hive对接（Json格式）

通过Flume简单实现Kafka与Hive对接（Json格式）

将以下存储在kafka的topic中的JSON格式字符串，对接存储到Hive的表中 {"id":1,"name":"小李"} {"id":2,"name":"小张"} {"id":3,"name":"小刘"} {"id":4,&qu…
阅读更多...
改造MIP获得搜索青睐，轻松完成SEO

改造MIP获得搜索青睐，轻松完成SEO

搜索引擎目标及页面排序方法 搜索引擎作为互联网流量的入口，承担着流量分发的职责。但排序成千上万的网页，决定哪些网页在第一页，是由网页本身的用户体验决定的。权重算法会从内容优质性，广告多少，加载速度等多个角度…
阅读更多...
日常问题———Attempting to operate on hdfs namenode as root

日常问题———Attempting to operate on hdfs namenode as root

写在最前注意： 1、master，slave都需要修改start-dfs.sh，stop-dfs.sh，start-yarn.sh，stop-yarn.sh四个文件 2、如果你的Hadoop是另外启用其它用户来启动，记得将root改为对应用户 HDFS格式化后启动dfs出现以…
阅读更多...
WebP 在减少图片体积和流量上的效果如何？MIP技术实践分享

WebP 在减少图片体积和流量上的效果如何？MIP技术实践分享

作者 | Jackson 编辑 | 尾尾 不论是 PC 还是移动端，图片一直占据着页面流量的大头，在图片的大小和质量之间如何权衡，成为了长期困扰开发者们的问题。而 WebP 技术的出现，为解决该问题提供了好的方案。本文将为大家详细介绍 WebP …
阅读更多...
日常问题——pdsh localhost Connection refused

日常问题——pdsh localhost Connection refused

问题描述： 本地安装hadoop单机模式的时候需要启动namenode时报错 pdshxxx: localhost: connect: Connection refused解决方案（过程）： 原因是pdsh默认采用的是rsh登录，修改成ssh登录即可，在环境变量/etc/…
阅读更多...
MIP技术进展月报第2期: 数据绑定，异步脚本加速

MIP技术进展月报第2期: 数据绑定，异步脚本加速

一、 功能更新 1. mip-bind 上线，实现复杂交互 MIP bind 双向绑定机制和组件上线，提供双向绑定的特性；能够允许页面实现数据驱动功能，开发者可以在任意场景修改数据，并驱动页面元素变动。 MIP 小姐姐画外音&#xf…
阅读更多...
Hadoop的安装与配置——设置单节点群集

Hadoop的安装与配置——设置单节点群集

本篇博客将主要介绍如何设置和配置单节点Hadoop安装，以便我们可以使用Hadoop 的MapReduce与HDFS快速执行简单的操作。 零、先决条件 1、本系列以Ubuntu Linux作为开发和生产平台 2、Linux所需的软件包括： JAVA：必须安装Java，配置…
阅读更多...
MIP 脚本域名地址变更公告

MIP 脚本域名地址变更公告

尊敬的 MIP 开发者： MIP 团队为了解决 MIP-Cache 页面下 cookie 相互覆盖问题，增强站点品牌露出，在 2017 年 8 月将 MIP 的脚本域名和 MIP-Cache 页面域名进行了升级变更，详见说明 MIP-Cache 域名升级。 在 12 月中旬&#xff0…
阅读更多...
新手教程：不写JS，在MIP页中实现异步加载数据

新手教程：不写JS，在MIP页中实现异步加载数据

从需求谈起：在 MIP 页中异步加载数据 MIP（移动网页加速器） 的 加速原理 除了靠谱的 MIP-Cache CDN 加速外，最值得一提的就是组件系统。所有 JS 交互都需要使用 MIP 组件实现，保证页面中所有 JS 都是最精简高效的&…
阅读更多...
日常问题———安装新版zookeeper 出现Starting zookeeper ... FAILED TO START

日常问题———安装新版zookeeper 出现Starting zookeeper ... FAILED TO START

问题描述 安装新版zookeeper使用 /apache-zookeeper-3.6.1.tar.gz解压后运行zoServer.sh文件时出现Starting zookeeper … FAILED TO START错误 解决方案（过程） 实际上应该是下载错了文件。在官网上有两个tar.gz文件，从3.5.5版本开始&…
阅读更多...
Hadoop的安装与配置——搭建完全分布式集群

Hadoop的安装与配置——搭建完全分布式集群

一、搭建集群 1、准备服务器（这里以我的3台Centos7为例） 1个主节点：Carlota1(192.168.33.21)，2个子节点：Carlota2(192.168.33.22)，Carlota3(192.168.33.23) 2、配置主节点名 在主节点命令行输入&#x…
阅读更多...
HTTP 视频怎么在 MIP 页面中使用？

HTTP 视频怎么在 MIP 页面中使用？

在 MIP 中，一些资源的使用需要支持 HTTPS，视频就是其中一种。但目前大部分站点的视频资源都还是 HTTP 的资源，无法在百度 MIP 搜索结果中直接使用， mip-video 视频组件针对 HTTP 的视频资源采用跳到一个 HTTP 的播放页面进行播放&…
阅读更多...
MIP 组件库升级公告

MIP 组件库升级公告

背景 为了方便广大开发者们更好地使用组件，现对 MIP 组件库统一进行升级，升级后将分为通用组件和自定义组件两类，方便开发。 通用组件，即考虑了组件通用性方便所有开发者参考使用的组件，将存放于 mip-extensions 仓库…
阅读更多...
腾讯云服务器 ubuntu 设置允许root用户登录和禁用ubuntu用户

腾讯云服务器 ubuntu 设置允许root用户登录和禁用ubuntu用户

最近购买了腾讯云服务器，使用了 Ubuntu Server 18.04.1 LTS 64位操作系统，发现默认用户为ubuntu,而无法用root用户进行ssh登陆，本篇就记录一下开通root和禁用ubuntu的过程。 1、设置允许root用户登录 使用用户名ubuntu登录sudo passwd root…
阅读更多...
Ubuntu 修改 hostname

Ubuntu 修改 hostname

1、vi /etc/cloud/cloud.cfg 2、将preserve_hostname: false修改为preserve_hostname: true 3、hostnamectl set-hostname 主机名 4、reboot重启系统生效
阅读更多...
最新文章

Copyright @ 2022~2023