乐知付加密服务平台

如果你有资源, 平台可以帮你实现内容变现, 无需搭建知识付费服务平台。

点击访问官方网站 https://lezhifu.cc

扫码关注公众号 乐知付加密服务平台-微信公众号
nfs服务器之间实现目录共享 | chenzuoli's blog

nfs服务器之间实现目录共享

在使用airflow的时候,scheduler和worker之间的dag文件需要保持一致,而airflow没有解决这个问题,所以,需要我们自己解决dag文件的同步问题。

第一个解决方案就是云服务商提供的nas磁盘挂载,使用多台服务器挂载同一个nas盘,实现共享,那么还有其他方式吗?安装软件能解决吗?ok,咱们来介绍一个。

nfs,网络文件系统,由SUN公司研制的UNIX表示层协议,大家可以放心使用。

看下这个流程图:
nfs

  1. 192.168.1.100服务端安装:
    yum install -y nfs-utils rpcbind

    编辑配置
    vim /etc/exports
    /opt/airflow/dags *(rw,sync,insecure,no_subtree_check,no_root_squash)
    /opt/airflow/jobs *(rw,sync,insecure,no_subtree_check,no_root_squash)

    启动服务:
    service rpcbind start
    service nfs start

    查看服务器端是否正常加载/etc/exports配置文件
    showmount -e localhost
    *-代表允许所有客户端挂载

    查看注册的端口列表
    rpcinfo -p localhost

  2. 192.168.1.101 192.168.1.102客户端安装:
    yum install nfs-utils

    查看服务端可共享的目录
    showmount -e 192.168.1.100

    挂载服务端共享目录
    mount 192.168.1.100:/opt/airflow/dags /opt/airflow/dags -o proto=tcp -o nolock
    mount 192.168.1.100:/opt/airflow/jobs /opt/airflow/jobs -o proto=tcp -o nolock

ok,今天就记录到这里吧,没事记录一下日常工作内容。

-------------本文结束感谢您的阅读-------------