• 首页
  • 热点
  • 财经
  • 要闻
  • 经济
  • 快讯
  • 科技
  • 滚动
  • 行业
  • 教育
  • 综合
logo
  • 中陕网首页 >
  • 中陕网 > 资讯 > 资讯 >
  • 正文

世界最新:部署和配置 Spring Cloud Data Flow

2023-04-20 16:37:36 来源:腾讯云

Spring Cloud Data Flow 是一个开源的数据处理管道平台,它提供了一组标准化的组件和工具,可以用于构建、部署和监控复杂的数据处理管道。

部署 SCDF

首先,我们需要选择一个合适的部署方式和环境。SCDF 支持多种部署方式和环境,包括本地、云服务、容器等。以下是常见的部署方式和环境:


(相关资料图)

本地部署

可以在本地主机上安装和配置 SCDF,用于开发和测试数据处理管道。本地部署可以使用 Spring Boot CLI 或 Docker 镜像,具体步骤如下:

使用 Spring Boot CLI 安装 SCDF

首先,需要安装 Spring Boot CLI。然后,使用以下命令安装 SCDF:

$ spring install org.springframework.cloud:spring-cloud-dataflow-shell:

其中,是 SCDF 的版本号。

使用 Docker 镜像安装 SCDF

可以使用 Docker 镜像安装 SCDF。首先,需要拉取 SCDF 的 Docker 镜像:

$ docker pull springcloud/spring-cloud-dataflow-server:

然后,使用以下命令启动 SCDF:

$ docker run --name scdf-server -p 9393:9393 springcloud/spring-cloud-dataflow-server:

其中,是 SCDF 的版本号。

云服务部署

可以在云服务上部署 SCDF,用于生产环境中的数据处理管道。云服务部署可以使用多种云平台和工具,包括 Kubernetes、Cloud Foundry、AWS、GCP 等。

使用 Kubernetes 部署 SCDF

可以使用 Kubernetes 部署 SCDF。首先,需要安装 Kubernetes 和 Helm。然后,使用以下命令安装 SCDF:

$ helm install scdf-release spring-cloud-dataflow

其中,scdf-release是 Release 名称,spring-cloud-dataflow是 Chart 名称。

使用 Cloud Foundry 部署 SCDF

可以使用 Cloud Foundry 部署 SCDF。首先,需要安装 Cloud Foundry CLI 和 Spring Cloud Data Flow CLI。然后,使用以下命令安装 SCDF:

$ cf create-service p.mysql db-small scdf-db$ cf create-service p.rabbitmq single-node-3.7 scdf-messaging$ cf push scdf-server -p  --no-start$ cf bind-service scdf-server scdf-db$ cf bind-service scdf-server scdf-messaging$ cf start scdf-server

其中,是 SCDF 的 JAR 包路径。

容器部署

可以使用容器部署 SCDF,用于开发、测试和生产环境中的数据处理管道。容器部署可以使用多种容器平台和工具,包括 Docker、Kubernetes、OpenShift 等。

使用 Docker 部署 SCDF

可以使用 Docker 部署 SCDF。首先,需要安装 Docker。然后,使用以下命令安装 SCDF:

$ docker run -p 9393:9393 -e SPRING_PROFILES_ACTIVE=local \  -e SPRING_DATASOURCE_URL=jdbc:mysql://localhost/scdf \  -e SPRING_DATASOURCE_USERNAME=root \  -e SPRING_DATASOURCE_PASSWORD=root \  springcloud/spring-cloud-dataflow-server:

其中,是 SCDF 的版本号。

使用 Kubernetes 部署 SCDF

可以使用 Kubernetes 部署 SCDF。首先,需要安装 Kubernetes 和 Helm。然后,使用以下命令安装 SCDF:

$ helm install scdf-release spring-cloud-dataflow \  --set server.configuration.local.enabled=true \  --set server.configuration.local.jdbcUrl=jdbc:mysql://localhost/scdf \  --set server.configuration.local.jdbcUser=root \  --set server.configuration.local.jdbcPassword=root

其中,scdf-release是 Release 名称,spring-cloud-dataflow是 Chart 名称。

使用 OpenShift 部署 SCDF

可以使用 OpenShift 部署 SCDF。首先,需要安装 OpenShift。然后,使用以下命令安装 SCDF:

$ oc new-project scdf$ oc process -f https://raw.githubusercontent.com/spring-cloud/spring-cloud-dataflow/v/deployer/openshift/appsody/dataflow-template.yml \  -p SPRING_CLOUD_DATAFLOW_VERSION= \  -p IMAGE_PREFIX= \  -p IMAGE_TAG= \  | oc create -f -

其中,是 SCDF 的版本号,是镜像前缀,是镜像标签。

配置 SCDF

安装完成 SCDF 后,需要进行一些配置,以便正确使用和管理 SCDF。

数据库配置

SCDF 使用数据库存储元数据和状态信息。可以使用多种数据库,包括 MySQL、PostgreSQL、Oracle 等。需要在 SCDF 的配置文件中指定数据库连接信息,例如:

spring.datasource.url=jdbc:mysql://localhost/scdfspring.datasource.username=rootspring.datasource.password=root

消息代理配置

SCDF 使用消息代理进行组件之间的通信和协调。可以使用多种消息代理,包括 RabbitMQ、Kafka、ActiveMQ 等。需要在 SCDF 的配置文件中指定消息代理的连接信息,例如:

spring.cloud.stream.rabbit.binder.addresses=localhost:5672spring.cloud.stream.rabbit.binder.username=guestspring.cloud.stream.rabbit.binder.password=guest

安全配置

SCDF 支持多种安全认证和授权机制,包括基于 OAuth2 的认证和授权机制、LDAP 认证和授权机制等。需要在 SCDF 的配置文件中指定安全配置,例如:

security.oauth2.client.client-id=security.oauth2.client.client-secret=security.oauth2.client.access-token-uri=security.oauth2.client.user-authorization-uri=security.oauth2.resource.user-info-uri=

其中,是 OAuth2 客户端 ID,是 OAuth2 客户端密钥,是 OAuth2 访问令牌 URI,是 OAuth2 用户授权 URI,是 OAuth2 用户信息 URI。

责任编辑:

免责声明:以上内容为本网站转自其它媒体,相关信息仅为传递更多信息之目的,不代表本网观点,亦不代表本网站赞同其观点或证实其内容的真实性。如稿件版权单位或个人不想在本网发布,可与本网联系,本网视情况可立即将其撤除。

    为您推荐

  • 世界最新:部署和配置 Spring Cloud Data Flow

    SpringCloudDataFlow是一个开源的数据处理管道平台,它提供了一组标准化的组件和工具,可以用于构建、部署和监控复杂的数据处理管道。
  • 【环球时快讯】江苏一企业污水采样造假50余次逃避检查 相关人员被判刑

    中新网宿迁4月20日电 (刘林 朱来宽)4月19日,江苏省宿迁市宿城区
  • 天天消息!日本国会收到炸弹威胁 威胁邮件称“21日下午开始大屠杀”

    中新网4月20日电 据日本《产经新闻》20日报道,日本参议院相关人士
  • 日本2022财年贸易逆差创新高

    新华社东京4月20日电(记者刘春燕 钟雅)日本财务省20日公布的初步
  • 龙卷风袭击美国俄克拉何马州 至少两人死亡

    新华社休斯敦4月19日电(记者徐剑梅)美国中南部俄克拉何马州小镇科
  • 全球新动态:《中国农业展望报告(2023-2032)》发布

    《中国农业展望报告(2023—2032)》今天(4月20日)上午发布,今年
  • 她们不是卖春,而是在贩卖春天《卖春之人》

    日本电影似乎总是可以把不那么“正经”的题材拍得一本正经。并且可以把某些“禁忌”的话题进行延伸,拍得夸张且唯美。可正因为如此,故事的沉
  • 焦点报道:中央气象台:强冷空气将影响我国大部地区

    受新一股冷空气影响,从19日下午开始,内蒙古全区大部迎来大风降温
  • 新资讯:航天领域首个大科学装置“地面空间站”试运行

    “目前,空间环境地面模拟装置主体建设已经完成,正在开展联合调试
  • 全球微头条丨美报告:美国正被仇恨心理摧毁 国内极端主义爆炸性增长

    海外网4月20日电 据美国有线电视新闻网4月18日报道,美国全国城市
  • 世界热推荐:马斯克的“惊人发现”再次证实美国是全球最大网络窃密者

    近日,美国社交平台推特的“掌门人”埃隆·马斯克在接受采访时称,
  • 天天热文:ST泰禾4月20日打开跌停

    以下是ST泰禾在北京时间4月20日10:33分盘口异动快照:4月20日10点33分,ST泰禾盘中打开跌停,现报1 01元,成交3298 06万元,换手率1 31%。该股
  • 巴布亚新几内亚发生6.3级地震

    据新华社报导,莫尔兹比港消息:南太平洋岛国巴布亚新几内亚19日发生6 3级地震。目前暂无人员伤亡和财产损失报告。  据美国地质调查局地震信
  • 当前热点-汉堡、薯条,小蛋糕这类超加工食品,究竟是味蕾的盛宴还是健康的隐患?

    超加工食品中含糖量高,高糖食品可能导致血糖水平迅速升高,长期摄入过量糖分可能导致胰岛素抵抗,增加2型糖尿病的风险。
  • 环球关注:中国驻阿富汗大使王愚:“中国方案”已经发挥良好效果

    中国驻阿富汗大使王愚国际在线消息(记者 李霜溪):近日举行的第
  • 当前热议!“雨生百谷,谷生万物” 帕拉卡与你一起知节气迎夏天

    4月20日为农历“谷雨”,是二十四节气中的第六个节气,也是春季的最
  • 美联储最新“褐皮书”:劳动力市场出现放松迹象,美国银行业信贷收紧

    褐皮书称,“最近几周总体经济活动几乎没有变化,几个辖区表明在不确定性增加和对流动性的担忧加剧之际,银行收紧了贷款标准。”报告显示,与
  • 用好“新”钥匙开启产业振兴“致富门”

    产业振兴是乡村振兴的重中之重,是巩固拓展脱贫攻坚成果、全面推进乡村振兴的主要路径和长久之策。促进产业振兴,要顺应时代发展潮流,找准“
  • 热点在线丨北京长峰医院火灾初步调查原因通报,幸存者给出回应

    北京长峰医院火灾初步调查的原因已经给出了通报,相关的幸存者也作出回应。在人的一生当中总是会发生很多的意外,就比如水火无情
  • 殷墟、三星堆来了!湖北省博物馆上新了!

    殷墟、三星堆来了!湖北省博物馆上新了!
  • 天天新消息丨泛海控股:民生证券法拍后的资金由法院向各相关方进行分配

    泛海控股(000046)04月19日在投资者关系平台上答复了投资者关心的问题。
  • 全球新动态:天下为公出自哪本书-天下为公出自哪里

    1、天下为公出自《礼记·礼运》:“大道之行也,天下为公,选贤与能,讲信修睦。2、 "天下为公原意是天下是公众的,天子之位,传贤而不
  • 奇瑞汽车李学用:科技赋能发展 加速新能源汽车产品布局

      新华网上海4月20日电(记者赵延心)4月18日,第二十届上海国际汽车工业展览会在国家会展中心(上海)正式亮相。本次车展以“拥抱汽车行业
  • 全球滚动:西藏公共文化服务:文艺馨香 惠民润心

    图为首届文化艺术节民间舞比赛昌都市文化局推送的民间舞《凯旋归来》表演现场。旦增兰泽摄  图为首届文化艺术节民间舞比赛阿里地区文化局推
  • 剪纸描绘昌平故事,传统文化韵味悠长

    剪纸描绘昌平故事,传统文化韵味悠长
  • 全球要闻:信阳市固始县:邻里土地惹纠纷 民警化解促和谐

    河南广电·大象新闻记者吴彦飞通讯员金正义余洪磊邻里之间互帮互助本是常事,但有时却因为住得近反而引发争执,及时疏导
  • 考教师资格证的流程_考教师资格证的流程

    1、教师资格证考取流程:笔试报名→笔试考试→面试报名→面试考试→取得考试合格证明→网上申请认定→现场确认、提交材料→通过
  • “大块头”有大智慧——江苏无锡锡山区建设高标准农田

    日前,江苏省无锡市入选农业农村部整区域推进高标准农田建设试点。
  • 轻工业数字化水平加快提升 智能化生产比例达12.2%

    记者从近日在京举行的第十三届轻工业信息化大会上获悉:目前,全国
  • 动态焦点:“县”在出发,这儿有大生意!

    县域经济在中国经济发展中,是非常重要的一环,也是承上启下、联通
  • 纳斯达克(NDAQ.US)Q1业绩超预期上调季度股息至0.22美元。

    纳斯达克(NDAQ US)Q1业绩超预期上调季度股息至0 22美元。:纳斯达克(NDAQ US)第一季度营收9 14亿美元,超预期的9 11亿美元;调整后每股盈
  • 热文:吴晓求VS姚洋:要给年轻人买房创造条件,第一套房不该收税|博鳌致知行

    主持人|乐章编辑|郑青春主编|王德民今年博鳌亚洲论坛期间,博鳌致知行、搜狐商学院推出《博鳌致知行》,邀请了出席博鳌亚洲论坛的吴晓求、姚洋
  • 环球快看:美国仇恨犯罪案件创历史新高

    近日,美国联邦调查局公布的年度仇恨犯罪报告补充文件显示,2021年
  • 新消息丨七国集团外长会声明包藏祸心

    近日,七国集团(G7)在日本召开外长会并发布联合声明,对东海、南
  • 微动态丨扎实做好促消费、稳物价、引投资工作 推动经济运行持续整体好转(经济新方位·首季数据观察)

    日前,国家统计局发布的经济运行数据显示:一季度国内生产总值同比
  • 最新快讯!“五个一百”:从时代脉搏中读懂美丽中国

    漫画作者:李恒毅团结奋进新征程,同心奋斗创伟业。由中央网信办主
  • 今头条!这就是信心|各地“夜经济”火热 成为拉动消费“新引擎”

    随着天气转暖,各地夜晚恢复往日活力开始热闹起来。“夜经济”成为了拉动消费的“新引擎”,为城市经济社会发展注入新动能。(图文来源:新华
  • 女生吃避孕药多了会怎么样_女人避孕药吃多了会怎么样

    1、导语:大家知道女人们如果避孕药吃多了会怎么样吗,下面小编和你们来了解下吧。2、紧急避孕药一年不可以吃超过3次,而且每
  • 蔬菜种子_关于蔬菜种子的介绍

    1、蔬菜种子是用于生产蔬菜的种子,分为常规种和杂交种子。2、蔬菜常规种就是蔬菜本身通过自然规律生长出来的种子。本文到此结
  • 2022年度普通高等学校本科新增备案专业1641个

    记者4月19日从教育部获悉,日前,教育部公布了2022年度普通高等学校本科专业备案和审批结果,新增备案专业1641个、审批专业176个,调整学位授
  • 世界报道:第133届广交会第一期入场超126万人次

    第133届广交会于4月15日至5月5日分三个展期在广州举办,截至4月19日,累计进馆人流量超过126万人次。本届广交会是我国疫情防控平稳转段后首次
  • 当前播报:倒计时100天!这个夏天,成都欢迎你

    (记者邢蕊)一场青春的盛会将在7月28日如约而至,而今天,距离这场盛会的开幕,还有整整一百天——4月19日,第三十一届世界大学生夏季运动会(以
  • 首季经济形势|一季度经济形势怎么看?如何扩内需、强信心?——国家发展改革委新闻发布会回应当前经济热点

    对吸引到民间资本参与的国家重大工程和补短板项目,推动加快项目审核备、规划选址、用地用海、环境影响评价、施工许可等前期工作手续办理,落
  • 应急管理部:聚焦突出问题迅速开展消防安全专项整治

    应急管理部19日强调,要聚焦突出问题,迅速开展消防安全专项整治和尾矿库汛前隐患排查治理。当日,应急管理部召开部党委会,强调举一反三彻底
  • 天天头条:联合国最新预测:到2023年年中,印度人口将超中国

    中新网4月19日电 综合外媒报道,联合国19日预估,到2023年年中,印
  • 天天头条:中方呼吁国际社会支持大湖地区国家打造共同未来

    新华社联合国4月19日电 中国常驻联合国代表张军19日在安理会大湖地
  • 【世界独家】布基纳法索过渡政府总统签署为期一年的反恐总动员令

    当地时间4月19日,布基纳法索过渡政府总统易卜拉欣·特拉奥雷签署了
  • 【世界快播报】共青团中央表彰全国先进团组织和优秀团员团干部

    新华社北京4月20日电(记者黄玥)记者19日从共青团中央获悉,为充分
  • 每日视点!美国密苏里州非洲裔少年敲错门遭枪击 涉事户主表示不认罪

    当地时间4月19日,美国密苏里州堪萨斯城开枪打伤非洲裔少年拉尔夫·
  • 【全球播资讯】帮聋哑修脚爸爸当“翻译”6岁小女孩火了 网友:好福气

    帮聋哑修脚爸爸当“翻译”6岁小女孩火了网友点评“这个女儿是来报恩
  • 也门首都萨那发生踩踏事件 至少80人死亡

    新华社开罗4月19日电(记者王尚)萨那消息:也门卫生部门19日说,首都
  • 环球观点:印尼开斋节迎返乡潮 预计旅客将超1.2亿人次

    中新社雅加达4月19日电 (记者 李志全)从19日开始,穆斯林人口占比
  • 天天热文:贸易、投资、基建:中国“三驾马车”带动拉美就业

    同一时期,美国在该地区通过净贸易创造的就业岗位数为670万个,略低于中国水平,出乎人们意料。鉴于中拉贸易的近期动态和潜力,预计中国在中短
  • 解码首季经济数据丨项目投资“热”起来 春风正劲快扬帆

    重大基础设施建设是经济社会发展的重要支撑,在扩大有效投资、助力稳住经济大盘中发挥着关键支撑作用。
  • 【天天报资讯】一碗面,见证餐饮业回暖

    近日,易慧萍下厨制作皮肚面。马焘焘摄(人民视觉)近日,明瓦廊美
  • 速看:共同筑牢维护国家安全的坚固屏障

    音乐起、灯光亮,广东金融学院清远校区大礼堂内掌声经久不息,数百

相关推荐

  • 焦点报道:中央气象台:强冷空气将影
  • 新资讯:航天领域首个大科学装置“
  • 全球微头条丨美报告:美国正被仇恨
  • 世界热推荐:马斯克的“惊人发现”
  • 天天热文:ST泰禾4月20日打开跌停
  • 巴布亚新几内亚发生6.3级地震
  • 当前热点-汉堡、薯条,小蛋糕这类超
  • 环球关注:中国驻阿富汗大使王愚:
  • 当前热议!“雨生百谷,谷生万物”
  • 美联储最新“褐皮书”:劳动力市场

阅读排行

  • 世界最新:部署和配置 Spring Cloud Data Flow
  • 【环球时快讯】江苏一企业污水采样造假50余次逃避检查 相关人员被判刑
  • 天天消息!日本国会收到炸弹威胁 威胁邮件称“21日下午开始大屠杀”
  • 日本2022财年贸易逆差创新高
  • 龙卷风袭击美国俄克拉何马州 至少两人死亡
  • 全球新动态:《中国农业展望报告(2023-2032)》发布
  • 她们不是卖春,而是在贩卖春天《卖春之人》
  • 焦点报道:中央气象台:强冷空气将影响我国大部地区
  • 新资讯:航天领域首个大科学装置“地面空间站”试运行
  • 全球微头条丨美报告:美国正被仇恨心理摧毁 国内极端主义爆炸性增长

中陕网版权所有