设为首页收藏本站

LUPA开源社区

 找回密码
 注册
文章 帖子 博客
LUPA开源社区 首页 业界资讯 技术文摘 查看内容

产品环境中Go语言的最佳实践

2014-9-1 14:48| 发布者: joejoe0332| 查看: 4611| 评论: 0|原作者: 漠天, 赵亮-碧海情天, AndyLam, Garfielt, gones945, yxrykds, 地狱星星, GoodLoser, 无若|来自: oschina

摘要: 在SoundCloud,我们为客户构建了产品的API。或者说,我们主要的网站、手机客户端和手机应用是该API的第一批客户。该API背后是一个领域性的服务:SoundCloud基本上以面向服务体系结构的形式运作。 ...

  在SoundCloud,我们为客户构建了产品的API。或者说,我们主要的网站、手机客户端和手机应用是该API的第一批客户。该API背后是一个领域性的服务:SoundCloud基本上以面向服务体系结构的形式运作。


  我们也是通晓多种语言的组织,因为我们使用了很多语言。并且这些服务(和基础设施支持)的许多部分是使用Golang开发的。事实上,我们都是早期Golang的使用者:目前,我们已在产品中使用Golang有两年半的时间。相关项目包括:

  • Bazooka,我们内部服务平台;产品思想非常类似于Keroku或Flynn。

  • 我们外围的传输层使用通用的nginx, HAProxy等等,但是它们要和Golang服务协作。

  • 我们的音频存储在AWS S3上,但是上传、转码和生成链接等需要Golang服务协调处理。

  • 搜索采用了Elasticsearch, 探测使用复杂的机器学习模型,但是它们都与由Golang开发的基础设施相集成。

  • Prometheus,一个早期阶段的遥测系统纯粹是有Golang开发。

  • 当前,流处理采用Cassandra,但是我们正打算(几乎)完全使用Golang代替。

  • 我们也正在试验用Golnag开发的HTTP流媒体直播服务。

  • 许多其他面向产品的小服务。


  这些项目大概有六个团队开发,包括十多人的SoundCloud勤杂工,他们中的大部分会全职使用Golang。毕竟在这个时候,这些项目和这样混杂的工程师中,我们已经逐渐形成了在产品中使用Golang的最好实践方法。我们的这些教训将对其他开始大举投资Golang的组织提供帮助。


开发环境

  在我们的笔记本上,我们已经设定了单一、全局的GOPATH。就个人而言,我喜欢使用$HOME,但是许多其他人使用$HOME下的一个子目录。我们克隆仓库进入GOPATH的相对路径,然后就可直接工作。即,

1
2
3
mkdir -p $GOPATH/src/github.com/soundcloud
cd $GOPATH/src/github.com/soundcloud
$ git clone git@github.com:soundcloud/roshi


  我们中的许多人在早期一直和约定俗成的事情做斗争,以保持我们自己特有的代码组织方法。事实上,它根本不值得如此麻烦。


  对于编辑器,许多用户使用Vim以及各种插件。(我使用的vim-go就不错。)还有许多人,包括我自己也是,结合GoSublime使用Sublime Text。也有少数人使用Emacs,但没有人用IDE。我不确定这是不是个最佳的实践,但标出来挺有趣的。


库结构

  我们的最佳实践是确保任何事情简单。许多服务源码半打包在main包中。

1
2
3
4
5
6
7
github.com/soundcloud/simple/
    README.md
    Makefile
    main.go
    main_test.go
    support.go
    support_test.go


  比如我们的搜索调度器,两年后仍然是这样。在确定需要前不要创建新结构。


  也许在某些时候你需要创建一个新的支持包。在你的main库中使用子目录,并使用完整的限定名导入。如果该包只有一个文件或一个结构,那么它肯定不需要分拆出来。


  有时一个仓库中需要包含多个二进制文件;比如这个任务需要一个服务,一个工作进程,或一个监控。在这种情况下,将每个二进制文件放在特定main包的单独的子目录中,并使用其他的子目录(或包)来实现共享的功能。


1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
github.com/soundcloud/complex/
    README.md
    Makefile
    complex-server/
        main.go
        main_test.go
        handlers.go
        handlers_test.go
    complex-worker/
        main.go
        main_test.go
        process.go
        process_test.go
    shared/
        foo.go
        foo_test.go
        bar.go
        bar_test.go


  请注意,不要引入asrc目录。由于vendor子目录异常(下面介绍更多内容)不要在仓库中包含src目录,或将其添加到GOPATH。


格式及样式

  通常来说,首先配置你的编辑器保存代码交给go fmt(或goimports),使用默认参数。这意味使用tab缩进,用空格对齐。格式不正确的代码将不能提交。


  过去的风格指南非常广泛,但谷歌最近发布了他们的 代码审查意见 文档,这几乎就是我们应遵守的公约。因此,我们使用它。


  实际上我们把它推进了一点:

  • 避免命名返回参数,除非他们能明确和显着地提高透明度。

  • 避免用 make 和 new,除非他们是必要的(new(int),或 make(Chan int)),或者我们能提前知道要分配的东西的尺寸( make(map[int]string,n),或 make([]int,0,256))。

  • 使用 struct{} 作为标记值,而不是布尔或接口{}。例如,集合是 map[string]struct{};信道是 chan struct{}。它明确标明了信息的明确缺乏。


  打断长行的参数也很好。那更象是Java的风格:

1
2
3
4
5
6
// 不要这样。
func process(dst io.Writer, readTimeout,
    writeTimeout time.Duration, allowInvalid bool,
        max int, src <-chan util.Job) {
    // ...
}


  这样会更好:

1
2
3
4
5
6
7
8
9
func process(
    dst io.Writer,
    readTimeout, writeTimeout time.Duration,
    allowInvalid bool,
    max int,
    src <-chan util.Job,
) {
    // ...
}


  当构造对象时也同样分为多行:

1
2
3
4
5
6
7
8
f := foo.New(foo.Config{

    Site: "zombo.com",

    Out:  os.Stdout,

    Dest: conference.KeyPair{

        Key:   "gophercon",
        Value: 2014,
    },
})


  另外,当分配新的对象时,在初始化部分传递成员值(如上面)比下面这样过后设置要好。

1
2
3
4
5
6
// 不要这样。
f := &Foo{} // or, even worse: new(Foo)
f.Site = "zombo.com"
f.Out = os.Stdout
f.Dest.Key = "gophercon"
f.Dest.Value = 2014

配置

  我们尝试了通过多种方式向Go程序传递配置:解析配置文件,用 os.Getenv 直接从环境中提取配置,各种增值flag解析包。最后,最合乎经济原则的就是普通的package flag,它的严格类型和简单语义对我们所需的一切都绝对够用而且够好。


  我们主要部署12-Factor 的应用,12-Factor 应用程序通过环境传递配置。但即使这样,我们也使用一个启动脚本来把环境变量转换为flags。Flags作为程序及其运行环境之间的一个明确和全文档化的表面区域。他们对于了解和操作程序来说是非常宝贵的。


  一个关于flags的不错的习惯是把他们定义到你的main函数中。这样就能防止你在代码中随意的将他们作为全局变量使用,这使你严格的遵守依赖注入从而方便测试。

1
2
3
4
5
6
7
8
func main() {
    var (
        payload = flag.String("payload""abc""payload data")
        delay   = flag.Duration("delay", 1*time.Second, "write delay")
    )
    flag.Parse()
    // ...
}



酷毙

雷人

鲜花

鸡蛋

漂亮
  • 快毕业了,没工作经验,
    找份工作好难啊?
    赶紧去人才芯片公司磨练吧!!

最新评论

关于LUPA|人才芯片工程|人才招聘|LUPA认证|LUPA教育|LUPA开源社区 ( 浙B2-20090187 浙公网安备 33010602006705号   

返回顶部