mirror of
https://github.com/TecharoHQ/anubis.git
synced 2026-04-28 02:52:42 +00:00
feat(lib/store): all metapackage to import all store implementations
Signed-off-by: Xe Iaso <me@xeiaso.net>
This commit is contained in:
@@ -329,6 +329,7 @@ type fileConfig struct {
|
|||||||
OpenGraph openGraphFileConfig `json:"openGraph,omitempty"`
|
OpenGraph openGraphFileConfig `json:"openGraph,omitempty"`
|
||||||
Impressum *Impressum `json:"impressum,omitempty"`
|
Impressum *Impressum `json:"impressum,omitempty"`
|
||||||
StatusCodes StatusCodes `json:"status_codes"`
|
StatusCodes StatusCodes `json:"status_codes"`
|
||||||
|
Store *Store `json:"store"`
|
||||||
Thresholds []Threshold `json:"thresholds"`
|
Thresholds []Threshold `json:"thresholds"`
|
||||||
}
|
}
|
||||||
|
|
||||||
@@ -361,6 +362,12 @@ func (c *fileConfig) Valid() error {
|
|||||||
}
|
}
|
||||||
}
|
}
|
||||||
|
|
||||||
|
if c.Store != nil {
|
||||||
|
if err := c.Store.Valid(); err != nil {
|
||||||
|
errs = append(errs, err)
|
||||||
|
}
|
||||||
|
}
|
||||||
|
|
||||||
if len(errs) != 0 {
|
if len(errs) != 0 {
|
||||||
return fmt.Errorf("config is not valid:\n%w", errors.Join(errs...))
|
return fmt.Errorf("config is not valid:\n%w", errors.Join(errs...))
|
||||||
}
|
}
|
||||||
@@ -374,6 +381,9 @@ func Load(fin io.Reader, fname string) (*Config, error) {
|
|||||||
Challenge: http.StatusOK,
|
Challenge: http.StatusOK,
|
||||||
Deny: http.StatusOK,
|
Deny: http.StatusOK,
|
||||||
},
|
},
|
||||||
|
Store: &Store{
|
||||||
|
Backend: "memory",
|
||||||
|
},
|
||||||
}
|
}
|
||||||
|
|
||||||
if err := yaml.NewYAMLToJSONDecoder(fin).Decode(&c); err != nil {
|
if err := yaml.NewYAMLToJSONDecoder(fin).Decode(&c); err != nil {
|
||||||
@@ -392,6 +402,7 @@ func Load(fin io.Reader, fname string) (*Config, error) {
|
|||||||
Override: c.OpenGraph.Override,
|
Override: c.OpenGraph.Override,
|
||||||
},
|
},
|
||||||
StatusCodes: c.StatusCodes,
|
StatusCodes: c.StatusCodes,
|
||||||
|
Store: c.Store,
|
||||||
}
|
}
|
||||||
|
|
||||||
if c.OpenGraph.TimeToLive != "" {
|
if c.OpenGraph.TimeToLive != "" {
|
||||||
@@ -457,6 +468,7 @@ type Config struct {
|
|||||||
Impressum *Impressum
|
Impressum *Impressum
|
||||||
OpenGraph OpenGraph
|
OpenGraph OpenGraph
|
||||||
StatusCodes StatusCodes
|
StatusCodes StatusCodes
|
||||||
|
Store *Store
|
||||||
}
|
}
|
||||||
|
|
||||||
func (c Config) Valid() error {
|
func (c Config) Valid() error {
|
||||||
|
|||||||
@@ -1,4 +1,4 @@
|
|||||||
package config
|
package config_test
|
||||||
|
|
||||||
import (
|
import (
|
||||||
"errors"
|
"errors"
|
||||||
@@ -8,6 +8,7 @@ import (
|
|||||||
"testing"
|
"testing"
|
||||||
|
|
||||||
"github.com/TecharoHQ/anubis/data"
|
"github.com/TecharoHQ/anubis/data"
|
||||||
|
. "github.com/TecharoHQ/anubis/lib/policy/config"
|
||||||
)
|
)
|
||||||
|
|
||||||
func p[V any](v V) *V { return &v }
|
func p[V any](v V) *V { return &v }
|
||||||
@@ -325,37 +326,37 @@ func TestConfigValidBad(t *testing.T) {
|
|||||||
func TestBotConfigZero(t *testing.T) {
|
func TestBotConfigZero(t *testing.T) {
|
||||||
var b BotConfig
|
var b BotConfig
|
||||||
if !b.Zero() {
|
if !b.Zero() {
|
||||||
t.Error("zero value BotConfig is not zero value")
|
t.Error("zero value config.BotConfig is not zero value")
|
||||||
}
|
}
|
||||||
|
|
||||||
b.Name = "hi"
|
b.Name = "hi"
|
||||||
if b.Zero() {
|
if b.Zero() {
|
||||||
t.Error("BotConfig with name is zero value")
|
t.Error("config.BotConfig with name is zero value")
|
||||||
}
|
}
|
||||||
|
|
||||||
b.UserAgentRegex = p(".*")
|
b.UserAgentRegex = p(".*")
|
||||||
if b.Zero() {
|
if b.Zero() {
|
||||||
t.Error("BotConfig with user agent regex is zero value")
|
t.Error("config.BotConfig with user agent regex is zero value")
|
||||||
}
|
}
|
||||||
|
|
||||||
b.PathRegex = p(".*")
|
b.PathRegex = p(".*")
|
||||||
if b.Zero() {
|
if b.Zero() {
|
||||||
t.Error("BotConfig with path regex is zero value")
|
t.Error("config.BotConfig with path regex is zero value")
|
||||||
}
|
}
|
||||||
|
|
||||||
b.HeadersRegex = map[string]string{"hi": "there"}
|
b.HeadersRegex = map[string]string{"hi": "there"}
|
||||||
if b.Zero() {
|
if b.Zero() {
|
||||||
t.Error("BotConfig with headers regex is zero value")
|
t.Error("config.BotConfig with headers regex is zero value")
|
||||||
}
|
}
|
||||||
|
|
||||||
b.Action = RuleAllow
|
b.Action = RuleAllow
|
||||||
if b.Zero() {
|
if b.Zero() {
|
||||||
t.Error("BotConfig with action is zero value")
|
t.Error("config.BotConfig with action is zero value")
|
||||||
}
|
}
|
||||||
|
|
||||||
b.RemoteAddr = []string{"::/0"}
|
b.RemoteAddr = []string{"::/0"}
|
||||||
if b.Zero() {
|
if b.Zero() {
|
||||||
t.Error("BotConfig with remote addresses is zero value")
|
t.Error("config.BotConfig with remote addresses is zero value")
|
||||||
}
|
}
|
||||||
|
|
||||||
b.Challenge = &ChallengeRules{
|
b.Challenge = &ChallengeRules{
|
||||||
@@ -364,6 +365,6 @@ func TestBotConfigZero(t *testing.T) {
|
|||||||
Algorithm: DefaultAlgorithm,
|
Algorithm: DefaultAlgorithm,
|
||||||
}
|
}
|
||||||
if b.Zero() {
|
if b.Zero() {
|
||||||
t.Error("BotConfig with challenge rules is zero value")
|
t.Error("config.BotConfig with challenge rules is zero value")
|
||||||
}
|
}
|
||||||
}
|
}
|
||||||
|
|||||||
@@ -0,0 +1,43 @@
|
|||||||
|
package config
|
||||||
|
|
||||||
|
import (
|
||||||
|
"encoding/json"
|
||||||
|
"errors"
|
||||||
|
"fmt"
|
||||||
|
|
||||||
|
"github.com/TecharoHQ/anubis/lib/store"
|
||||||
|
)
|
||||||
|
|
||||||
|
var (
|
||||||
|
ErrNoStoreBackend = errors.New("config.Store: no backend defined")
|
||||||
|
ErrUnknownStoreBackend = errors.New("config.Store: unknown backend")
|
||||||
|
)
|
||||||
|
|
||||||
|
type Store struct {
|
||||||
|
Backend string `json:"backend"`
|
||||||
|
Parameters json.RawMessage `json:"parameters"`
|
||||||
|
}
|
||||||
|
|
||||||
|
func (s *Store) Valid() error {
|
||||||
|
var errs []error
|
||||||
|
|
||||||
|
if len(s.Backend) == 0 {
|
||||||
|
errs = append(errs, ErrNoStoreBackend)
|
||||||
|
}
|
||||||
|
|
||||||
|
fac, ok := store.Get(s.Backend)
|
||||||
|
switch ok {
|
||||||
|
case true:
|
||||||
|
if err := fac.Valid(s.Parameters); err != nil {
|
||||||
|
errs = append(errs, err)
|
||||||
|
}
|
||||||
|
case false:
|
||||||
|
errs = append(errs, fmt.Errorf("%w: %q", ErrUnknownStoreBackend, s.Backend))
|
||||||
|
}
|
||||||
|
|
||||||
|
if len(errs) != 0 {
|
||||||
|
return errors.Join(errs...)
|
||||||
|
}
|
||||||
|
|
||||||
|
return nil
|
||||||
|
}
|
||||||
@@ -0,0 +1,44 @@
|
|||||||
|
package config_test
|
||||||
|
|
||||||
|
import (
|
||||||
|
"errors"
|
||||||
|
"testing"
|
||||||
|
|
||||||
|
"github.com/TecharoHQ/anubis/lib/policy/config"
|
||||||
|
_ "github.com/TecharoHQ/anubis/lib/store/memory"
|
||||||
|
)
|
||||||
|
|
||||||
|
func TestStoreValid(t *testing.T) {
|
||||||
|
for _, tt := range []struct {
|
||||||
|
name string
|
||||||
|
input config.Store
|
||||||
|
err error
|
||||||
|
}{
|
||||||
|
{
|
||||||
|
name: "no backend",
|
||||||
|
input: config.Store{},
|
||||||
|
err: config.ErrNoStoreBackend,
|
||||||
|
},
|
||||||
|
{
|
||||||
|
name: "in-memory backend",
|
||||||
|
input: config.Store{
|
||||||
|
Backend: "memory",
|
||||||
|
},
|
||||||
|
},
|
||||||
|
{
|
||||||
|
name: "unknown backend",
|
||||||
|
input: config.Store{
|
||||||
|
Backend: "taco salad",
|
||||||
|
},
|
||||||
|
err: config.ErrUnknownStoreBackend,
|
||||||
|
},
|
||||||
|
} {
|
||||||
|
t.Run(tt.name, func(t *testing.T) {
|
||||||
|
if err := tt.input.Valid(); !errors.Is(err, tt.err) {
|
||||||
|
t.Logf("want: %v", tt.err)
|
||||||
|
t.Logf("got: %v", err)
|
||||||
|
t.Error("invalid error returned")
|
||||||
|
}
|
||||||
|
})
|
||||||
|
}
|
||||||
|
}
|
||||||
+17
-2
@@ -11,6 +11,7 @@ import (
|
|||||||
"github.com/TecharoHQ/anubis/internal/thoth"
|
"github.com/TecharoHQ/anubis/internal/thoth"
|
||||||
"github.com/TecharoHQ/anubis/lib/policy/checker"
|
"github.com/TecharoHQ/anubis/lib/policy/checker"
|
||||||
"github.com/TecharoHQ/anubis/lib/policy/config"
|
"github.com/TecharoHQ/anubis/lib/policy/config"
|
||||||
|
"github.com/TecharoHQ/anubis/lib/store"
|
||||||
"github.com/prometheus/client_golang/prometheus"
|
"github.com/prometheus/client_golang/prometheus"
|
||||||
"github.com/prometheus/client_golang/prometheus/promauto"
|
"github.com/prometheus/client_golang/prometheus/promauto"
|
||||||
)
|
)
|
||||||
@@ -35,9 +36,10 @@ type ParsedConfig struct {
|
|||||||
OpenGraph config.OpenGraph
|
OpenGraph config.OpenGraph
|
||||||
DefaultDifficulty int
|
DefaultDifficulty int
|
||||||
StatusCodes config.StatusCodes
|
StatusCodes config.StatusCodes
|
||||||
|
Store store.Interface
|
||||||
}
|
}
|
||||||
|
|
||||||
func NewParsedConfig(orig *config.Config) *ParsedConfig {
|
func newParsedConfig(orig *config.Config) *ParsedConfig {
|
||||||
return &ParsedConfig{
|
return &ParsedConfig{
|
||||||
orig: orig,
|
orig: orig,
|
||||||
OpenGraph: orig.OpenGraph,
|
OpenGraph: orig.OpenGraph,
|
||||||
@@ -55,7 +57,7 @@ func ParseConfig(ctx context.Context, fin io.Reader, fname string, defaultDiffic
|
|||||||
|
|
||||||
tc, hasThothClient := thoth.FromContext(ctx)
|
tc, hasThothClient := thoth.FromContext(ctx)
|
||||||
|
|
||||||
result := NewParsedConfig(c)
|
result := newParsedConfig(c)
|
||||||
result.DefaultDifficulty = defaultDifficulty
|
result.DefaultDifficulty = defaultDifficulty
|
||||||
|
|
||||||
for _, b := range c.Bots {
|
for _, b := range c.Bots {
|
||||||
@@ -178,6 +180,19 @@ func ParseConfig(ctx context.Context, fin io.Reader, fname string, defaultDiffic
|
|||||||
result.Thresholds = append(result.Thresholds, threshold)
|
result.Thresholds = append(result.Thresholds, threshold)
|
||||||
}
|
}
|
||||||
|
|
||||||
|
stFac, ok := store.Get(c.Store.Backend)
|
||||||
|
switch ok {
|
||||||
|
case true:
|
||||||
|
store, err := stFac.Build(ctx, c.Store.Parameters)
|
||||||
|
if err != nil {
|
||||||
|
validationErrs = append(validationErrs, err)
|
||||||
|
}
|
||||||
|
|
||||||
|
result.Store = store
|
||||||
|
case false:
|
||||||
|
validationErrs = append(validationErrs, config.ErrUnknownStoreBackend)
|
||||||
|
}
|
||||||
|
|
||||||
if len(validationErrs) > 0 {
|
if len(validationErrs) > 0 {
|
||||||
return nil, fmt.Errorf("errors validating policy config JSON %s: %w", fname, errors.Join(validationErrs...))
|
return nil, fmt.Errorf("errors validating policy config JSON %s: %w", fname, errors.Join(validationErrs...))
|
||||||
}
|
}
|
||||||
|
|||||||
@@ -0,0 +1,8 @@
|
|||||||
|
// Package all is a meta-package that imports all store implementations.
|
||||||
|
//
|
||||||
|
// This is a HACK to make tests work consistently.
|
||||||
|
package all
|
||||||
|
|
||||||
|
import (
|
||||||
|
_ "github.com/TecharoHQ/anubis/lib/store/memory"
|
||||||
|
)
|
||||||
Reference in New Issue
Block a user