Kube-proxy需要在每一个minion结点上运行。他的作用是service的代理,负责将业务连接到service后面具体执行结点(endpoints)。

我们列一下体现kube-proxy主要设计的代码部分。

总的来说kubernetes的代码可以从cmd看进去,看每个组件的启动过程,以及提供的业务。Cmd部分组织启动进程的过程以及代码调用,具体的代码实现在pkg里面。

Kube-proxy的重点代码是pkg中的serviceConfig、endpointsConfig(在pkg/proxy/config中),每个config中的mux,以及注册到config的处理函数proxier和endpointsHandler(这两个在pkg/proxy/userspace中),还有监听服务信息的API(代码也在pkg/proxy/config中)。

在执行kube-proxy命令的时候,NewProxyServerDefault函数依次创建serviceConfig,注册proxier;创建endpointConfig,注册endpointsHandler; 创建NewSourceAPI,在这里面会启动两个channel监听service和endpoint的变化,具体代码见下段:

serviceConfig := proxyconfig.NewServiceConfig()

serviceConfig.RegisterHandler(proxier)

endpointsConfig := proxyconfig.NewEndpointsConfig()

endpointsConfig.RegisterHandler(endpointsHandler)

proxyconfig.NewSourceAPI(

client,

config.ConfigSyncPeriod,

serviceConfig.Channel("api"),

endpointsConfig.Channel("api"),

)

下面是代码调用依赖。我的画图工具太差,有点难看~~

proxyconfig.NewSourceAPI(

client,

config.ConfigSyncPeriod,

serviceConfig.Channel("api"),

endpointsConfig.Channel("api"),

这段代码中,serviceConfig和endpointsConfig会分别创建一个channel,并监听这个channel的消息收到后推送到config内的mux。

serviceConfig的创建在

func NewServiceConfig() *ServiceConfig {

updates := make(chan struct{})

store := &serviceStore{updates: updates, services: make(map[string]map[types.NamespacedName]api.Service)}

mux := config.NewMux(store)

bcaster := config.NewBroadcaster()

go watchForUpdates(bcaster, store, updates)

return &ServiceConfig{mux, bcaster, store}

}

他创建了mux,注入进mux的serviceStore会提供Merge方法:

func (s *serviceStore) Merge(source string, change interface{}) error {

这个方法加工组织收到的数据,并通知proxier,调用他的OnServiceUpdate方法。具体是怎么触发到的呢?Merge方法在加工好数据后,构造一个空的数据{}推给叫updates的 channel,他触发了前面注册进去的proxier。 代码是serviceConfig.RegisterHandler(proxier)。

这样,当service有变化就会触发到OnServiceUpdate。

以新增一个service为例,前端api将消息发过来最后触发OnServiceUpdate后,这个方法会启动一个随机端口并监听他;再通过修改iptables的方式,将发给service的portal(集群内虚地址)的报文全部截收,发给自己刚才监听的那个随机端口。随机端口收到消息后,会选择这个service的一个endpoint,并建立到这个endpoint的链接,同时转发client和endpoints直接的报文。

这里可以看到,kubernetes这种解决服务发现的方法,多转发了一次报文。

OnServiceUpdate调用了两个很重要的函数addServiceOnPort和openPortal,通过他们完成了上述工作。

func (proxier *Proxier) addServiceOnPort(service proxy.ServicePortName, protocol api.Protocol, proxyPort int, timeout time.Duration) (*serviceInfo, error) {

sock, err := newProxySocket(protocol, proxier.listenIP, proxyPort)

if err != nil {

return nil, err

}

_, portStr, err := net.SplitHostPort(sock.Addr().String())

if err != nil {

sock.Close()

return nil, err

}

portNum, err := strconv.Atoi(portStr)

if err != nil {

sock.Close()

return nil, err

}

si := &serviceInfo{

isAliveAtomic:       1,

proxyPort:           portNum,

protocol:            protocol,

socket:              sock,

timeout:             timeout,

activeClients:       newClientCache(),

sessionAffinityType: api.ServiceAffinityNone, // default

stickyMaxAgeMinutes: 180,                     // TODO: parameterize this in the API.

}

proxier.setServiceInfo(service, si)

glog.V(2).Infof("Proxying for service %q on %s port %d", service, protocol, portNum)

go func(service proxy.ServicePortName, proxier *Proxier) {

defer util.HandleCrash()

atomic.AddInt32(&proxier.numProxyLoops, 1)

sock.ProxyLoop(service, si, proxier)

atomic.AddInt32(&proxier.numProxyLoops, -1)

}(service, proxier)

return si, nil

}

func (proxier *Proxier) openPortal(service proxy.ServicePortName, info *serviceInfo) error {

err := proxier.openOnePortal(info.portal, info.protocol, proxier.listenIP, info.proxyPort, service)

if err != nil {

return err

}

for _, publicIP := range info.externalIPs {

err = proxier.openOnePortal(portal{net.ParseIP(publicIP), info.portal.port, true}, info.protocol, proxier.listenIP, info.proxyPort, service)

if err != nil {

return err

}

}

for _, ingress := range info.loadBalancerStatus.Ingress {

if ingress.IP != "" {

err = proxier.openOnePortal(portal{net.ParseIP(ingress.IP), info.portal.port, false}, info.protocol, proxier.listenIP, info.proxyPort, service)

if err != nil {

return err

}

}

}

if info.nodePort != 0 {

err = proxier.openNodePort(info.nodePort, info.protocol, proxier.listenIP, info.proxyPort, service)

if err != nil {

return err

}

}

return nil

}

在addServiceOnPort中调用的重要函数是

func (udp *udpProxySocket) getBackendConn(activeClients *clientCache, cliAddr net.Addr, proxier *Proxier, service proxy.ServicePortName, timeout time.Duration) (net.Conn, error) {

activeClients.mu.Lock()

defer activeClients.mu.Unlock()

svrConn, found := activeClients.clients[cliAddr.String()]

if !found {

// TODO: This could spin up a new goroutine to make the outbound connection,

// and keep accepting inbound traffic.

glog.V(3).Infof("New UDP connection from %s", cliAddr)

var err error

svrConn, err = tryConnect(service, cliAddr, "udp", proxier)

if err != nil {

return nil, err

}

if err = svrConn.SetDeadline(time.Now().Add(timeout)); err != nil {

glog.Errorf("SetDeadline failed: %v", err)

return nil, err

}

activeClients.clients[cliAddr.String()] = svrConn

go func(cliAddr net.Addr, svrConn net.Conn, activeClients *clientCache, timeout time.Duration) {

defer util.HandleCrash()

udp.proxyClient(cliAddr, svrConn, activeClients, timeout)

}(cliAddr, svrConn, activeClients, timeout)

}

return svrConn, nil

}

他选择service的一个endpoint,并建立clientSock和endpointSock之间的连接

http://blog.csdn.net/zhaoguoguang/article/details/51225426

kubernetes源码分析 -- kube-proxy的更多相关文章

  1. Magnum Kubernetes源码分析(二)

    Kubernetes Master Stack kubernetes master的stack的resources主要分为三个部分. master wait handle wait handle主要用 ...

  2. Magnum Kubernetes源码分析(一)

    Magnum版本说明 本文以magnum的mitaka版本代码为基础进行分析. Magnum Kubernetes Magnum主要支持的概念有bay,baymodel,node,pod,rc,ser ...

  3. client-go客户端自定义开发Kubernetes及源码分析

    介绍 client-go 是一种能够与 Kubernetes 集群通信的客户端,通过它可以对 Kubernetes 集群中各资源类型进行 CRUD 操作,它有三大 client 类,分别为:Clien ...

  4. ABP源码分析三十七:ABP.Web.Api Script Proxy API

    ABP提供Script Proxy WebApi为所有的Dynamic WebApi生成访问这些WebApi的JQuery代理,AngularJs代理以及TypeScriptor代理.这些个代理就是j ...

  5. JAVA设计模式-动态代理(Proxy)源码分析

    在文章:JAVA设计模式-动态代理(Proxy)示例及说明中,为动态代理设计模式举了一个小小的例子,那么这篇文章就来分析一下源码的实现. 一,Proxy.newProxyInstance方法 @Cal ...

  6. kubernetes垃圾回收器GarbageCollector Controller源码分析(二)

    kubernetes版本:1.13.2 接上一节:kubernetes垃圾回收器GarbageCollector Controller源码分析(一) 主要步骤 GarbageCollector Con ...

  7. Kubernetes client-go Indexer / ThreadSafeStore 源码分析

    Kubernetes client-go Indexer / ThreadSafeStore 源码分析   请阅读原文:原文地址   Contents 概述 Indexer 接口 ThreadSafe ...

  8. Kubernetes client-go 源码分析 - Reflector

    概述入口 - Reflector.Run()核心 - Reflector.ListAndWatch()Reflector.watchHandler()NewReflector()小结 概述 源码版本: ...

  9. Kubernetes Deployment 源码分析(一)

    概述Deployment 基础创建 DeploymentReplicaSet滚动更新失败回滚历史版本回滚其他特性小结 概述 Deployment 是最常用的 Kubernetes 原生 Workloa ...

随机推荐

  1. 3.Github介绍

    很多人都知道,Linus在1991年创建了开源的Linux.从此,Linux系统不断发展,已经成为最大的服务器系统软件了.Linus虽然创建了Linux,但Linux的壮大是靠全世界热心的志愿者参与的 ...

  2. Python高级教程-多重继承

    多重继承 继承是面向对象编程的一个重要的方式,因为通过继承,子类可以扩展父类的功能. Animal类的层次设计,假设要实现以下4中动物: Dog - 狗狗: Bat - 蝙蝠: Parrot - 鹦鹉 ...

  3. Spark ML Pipeline简介

    Spark ML Pipeline基于DataFrame构建了一套High-level API,我们可以使用MLPipeline构建机器学习应用,它能够将一个机器学习应用的多个处理过程组织起来,通过在 ...

  4. JS根据userAgent值来判断浏览器的类型及版本【转】

    转自:http://blog.csdn.net/sunlovefly2012/article/details/22384255 JavaScript是前端开发的主要语言,我们可以通过编写JavaScr ...

  5. 20165324 实验二《Java面向对象程序设计》实验报告

    20165324 实验二<Java面向对象程序设计>实验报告 一.实验报告封面 课程:Java程序设计 班级:1653班 姓名:何春江 学号:20165324 指导教师:娄嘉鹏 实验日期: ...

  6. Linux系统——vim编辑器

    一.Linux系统中最常用的文本编辑器 vi:类Unix系统中默认的文本编辑器 vim:vi编辑器的增强版 作用:创建或修改文本文件:维护Linux系统中各种配置文件 二.三种切换模式命令模式输入模式 ...

  7. PKU 1201 Intervals(差分约束系统+Spfa)

    题目大意:原题链接 构造一个集合,这个集合内的数字满足所给的n个条件,每个条件都是指在区间[a,b]内至少有c个数在集合内.问集合最少包含多少个点.即求至少有多少个元素在区间[a,b]内. 解题思路: ...

  8. string integer == equals 转

    java中的数据类型,可分为两类: 1.基本数据类型,也称原始数据类型.byte,short,char,int,long,float,double,boolean   他们之间的比较,应用双等号(== ...

  9. Spring MVC 复习笔记01

    1. springmvc框架 1.1 什么是springmvc spring mvc是spring框架的一个模块,springmvc和spring无需通过中间整合层进行整合.spring mvc是一个 ...

  10. linux上mysql访问:Access denied for user 'agtipay'@'iZm5ebiyb4f90ga9xiycgsZ' (using password: YES)

    公司的聚合支付测试环境出了一个问题(agtipay用户访问数据的时候出现如题错误),快搞死我两天时间(原谅技术不才),如题.首先明确一下问题: 1.访问拒绝,说明数据库连接这里有问题,数据库连接访问拒 ...