fix(test): fix CI??

Signed-off-by: Xe Iaso <me@xeiaso.net>

docs/docs/CHANGELOG.md

@@ -74,6 +74,12 @@ Thanks to [@taviso](https://github.com/taviso) for reporting this issue.
 
 - [Lithuanian](https://github.com/TecharoHQ/anubis/pull/972)
 
+### Added
+
+Anubis now supports these new languages:
+
+- Vietnamese [#926](https://github.com/TecharoHQ/anubis/pull/926)
+
 ## v1.21.3: Minfilia Warde - Echo 3
 
 ### Added

docs/manifest/cfg/anubis/botPolicies.yaml

@@ -60,14 +60,89 @@ bots:
         - path.startsWith("/blog/rss.")
 
   # Generic catchall rule
-  - name: generic-browser
-    user_agent_regex: >-
-      Mozilla|Opera
+  - name: base-weight
+    expression: "true"
+    action: WEIGH
+    weight:
+      adjust: 10
+
+  - name: http2-client-protocol
+    expression:
+      all:
+        - '"X-Http-Protocol" in headers'
+        - headers["X-Http-Protocol"] == "HTTP/2.0"
+    action: WEIGH
+    weight:
+      adjust: -5
+
+# The weight thresholds for when to trigger individual challenges. Any
+# CHALLENGE will take precedence over this.
+#
+# A threshold has four configuration options:
+#
+#   - name: the name that is reported down the stack and used for metrics
+#   - expression: A CEL expression with the request weight in the variable
+#     weight
+#   - action: the Anubis action to apply, similar to in a bot policy
+#   - challenge: which challenge to send to the user, similar to in a bot policy
+#
+# See https://anubis.techaro.lol/docs/admin/configuration/thresholds for more
+# information.
+thresholds:
+  # By default Anubis ships with the following thresholds:
+  - name: minimal-suspicion # This client is likely fine, its soul is lighter than a feather
+    expression: weight <= 0 # a feather weighs zero units
+    action: ALLOW # Allow the traffic through
+  # For clients that had some weight reduced through custom rules, give them a
+  # lightweight challenge.
+  - name: mild-suspicion
+    expression:
+      all:
+        - weight > 0
+        - weight < 10
     action: CHALLENGE
     challenge:
-      difficulty: 1 # Number of seconds to wait before refreshing the page
-      report_as: 4 # Unused by this challenge method
-      algorithm: metarefresh # Specify a non-JS challenge method
+      # https://anubis.techaro.lol/docs/admin/configuration/challenges/metarefresh
+      algorithm: metarefresh
+      difficulty: 1
+      report_as: 1
+  # For clients that are browser-like but have either gained points from custom rules or
+  # report as a standard browser.
+  - name: moderate-suspicion
+    expression:
+      all:
+        - weight >= 10
+        - weight < 20
+    action: CHALLENGE
+    challenge:
+      # https://anubis.techaro.lol/docs/admin/configuration/challenges/preact
+      #
+      # This challenge proves the client can run a webapp written with Preact.
+      # The preact webapp simply loads, calculates the SHA-256 checksum of the
+      # challenge data, and forwards that to the client.
+      algorithm: preact
+      difficulty: 1
+      report_as: 1
+  - name: mild-proof-of-work
+    expression:
+      all:
+        - weight >= 20
+        - weight < 30
+    action: CHALLENGE
+    challenge:
+      # https://anubis.techaro.lol/docs/admin/configuration/challenges/proof-of-work
+      algorithm: fast
+      difficulty: 2 # two leading zeros, very fast for most clients
+      report_as: 2
+  # For clients that are browser like and have gained many points from custom rules
+  - name: extreme-suspicion
+    expression: weight >= 30
+    action: CHALLENGE
+    challenge:
+      # https://anubis.techaro.lol/docs/admin/configuration/challenges/proof-of-work
+      algorithm: fast
+      difficulty: 4
+      report_as: 4
 
 dnsbl: false
 

lib/localization/locales/lt.json

@@ -36,6 +36,7 @@
   "invalid_redirect": "Netinkamas nukreipimas",
   "redirect_not_parseable": "Nukreipimo adreso nepavyko išanalizuoti",
   "redirect_domain_not_allowed": "Nukreipimo domenas neleistinas",
+  "missing_required_forwarded_headers": "Trūksta būtinų X-Forwarded-* antraščių",
   "failed_to_sign_jwt": "nepavyko pasirašyti JWT",
   "invalid_invocation": "Netinkamas kreipinys į „MakeChallenge“",
   "client_error_browser": "Kliento klaida: įsitikinkite, jog jūsų naršyklė pakankamai atšviežinta ir bandykite dar kartą.",
@@ -62,4 +63,4 @@
   "js_finished_reading": "Viską perskaičiau, tęskime →",
   "js_calculation_error": "Skaičiavimo klaida!",
   "js_calculation_error_msg": "Nepavyko įveikti iššūkio:"
-}
+}

lib/localization/locales/manifest.json

@@ -18,6 +18,7 @@
     "pt-BR",
     "ru",
     "tr",
+    "vi",
     "zh-CN",
     "zh-TW",
     "sv"

lib/localization/locales/vi.json

@@ -0,0 +1,66 @@
+{
+  "loading": "Đang nạp...",
+  "why_am_i_seeing": "Tại sao tôi đang thấy trang này?",
+  "protected_by": "Bảo vệ bởi",
+  "protected_from": "từ",
+  "made_with": "Tạo ra bằng ❤️ tại 🇨🇦",
+  "mascot_design": "Thiết kế mascot bởi",
+  "ai_companies_explanation": "Bạn đang thấy trang này do quản trị viên của trang web này đã thiết lập Anubis để bảo vệ máy chủ của họ khỏi quấy rầy từ những công ty AI hung hãn cóp nhặt nội dung khắp Internet. Điều này có thể và đã dẫn tới tình trạng gián đoạn hoạt động trên nhiều trang web, khiến tài nguyên tại đó nằm ngoài tầm với của mọi người.",
+  "anubis_compromise": "Anubis là giải pháp thỏa hiệp. Anubis sử dụng cơ chế Proof-of-Work dựa trên Hashcash, được thiết kế ban đầu để giảm bớt email spam. Ý tưởng đằng sau đó là với người dùng cá nhân phần nạp thêm sẽ không đáng kể, nhưng ở tầm mức quy mô lớn sẽ cộng dồn và dẫn tới chi phí tiêu hao hơn rất nhiều.",
+  "hack_purpose": "Chốt lại, đây cũng chỉ là giải pháp \"tạm ổn\" với mục đích thực sự là để giành thêm thời gian nhận diện và fingerprint những trình duyệt headless (VD: cách dựng font ra sao), sao cho hạn chế tối đa các yêu cầu tính toán trang thử thách Proof-of-Work tới nhóm người dùng có khả năng cao là con người hơn.",
+  "simplified_explanation": "Đây là một biện pháp chống lại bot và các yêu cầu độc hại tương tự như CAPTCHA. Tuy nhiên, thay vì bạn phải tự mình thực hiện, trình duyệt của bạn sẽ được giao một nhiệm vụ tính toán mà nó phải giải quyết để đảm bảo rằng nó là một máy khách hợp lệ. Khái niệm này được gọi là <a href=\"https://en.wikipedia.org/wiki/Proof_of_work\">Bằng chứng Công việc</a>. Nhiệm vụ được tính toán trong vài giây và bạn được cấp quyền truy cập vào trang web. Cảm ơn sự thông cảm và kiên nhẫn của bạn.",
+  "jshelter_note": "Vui lòng lưu ý Anubis cần sử dụng những tính năng JavaScript hiện đại mà một số phần mở rộng như JShelter sẽ tắt. Vui lòng vô hiệu hóa JShelter hoặc những phần mở rộng tương tự cho tên miền này.",
+  "version_info": "Trang web này đang chạy Anubis phiên bản",
+  "try_again": "Thử lại",
+  "go_home": "Về trang chủ",
+  "contact_webmaster": "hoặc nếu bạn tin rằng mình không nên bị chặn, vui lòng liên hệ chủ trang web tại",
+  "connection_security": "Vui lòng chờ một chút trong khi chúng tôi kiểm tra an ninh kết nối của bạn.",
+  "javascript_required": "Rất tiếc, bạn phải bật JavaScript để vượt qua thử thách này. Điều này bắt buộc do những công ty AI đã thay đổi luật ngầm quanh việc hoạt động máy chủ web ra sao. Giải pháp không có JavaScript đang được phát triển.",
+  "benchmark_requires_js": "Bắt buộc phải bật JavaScript để chạy công cụ benchmark.",
+  "difficulty": "Độ khó:",
+  "algorithm": "Thuật toán:",
+  "compare": "So sánh:",
+  "time": "Thời gian",
+  "iters": "Lặp lại",
+  "time_a": "Thời gian A",
+  "iters_a": "Lặp lại kiểu A",
+  "time_b": "Thời gian B",
+  "iters_b": "Lặp lại kiểu B",
+  "static_check_endpoint": "Đây là điểm cuối cho reverse proxy của bạn sử dụng.",
+  "authorization_required": "Bắt buộc xác thực",
+  "cookies_disabled": "Trình duyệt của bạn được thiết lập để vô hiệu hóa cookie. Anubis cần cookie cho mục đích chính đáng để kiểm tra chắc chắn bạn là người dùng hợp lệ. Vui lòng bật cookie cho tên miền này",
+  "access_denied": "Truy cập bị từ chối: mã lỗi",
+  "dronebl_entry": "DroneBL báo cáo truy cập",
+  "see_dronebl_lookup": "xem",
+  "internal_server_error": "Lỗi máy chủ nội bộ: quản trị viên đã thiết lập sai Anubis. Vui lòng liên hệ quản trị viên và yêu cầu họ kiểm tra log",
+  "invalid_redirect": "Điều hướng không hợp lệ",
+  "redirect_not_parseable": "Liên kết điều hướng không thể xử lý",
+  "redirect_domain_not_allowed": "Tên miền điều hướng không được phép",
+  "missing_required_forwarded_headers": "Thiếu các tiêu đề X-Forwarded-* bắt buộc",
+  "failed_to_sign_jwt": "không thể ký JWT",
+  "invalid_invocation": "Gọi hàm MakeChallenge không hợp lệ",
+  "client_error_browser": "Lỗi client: Vui lòng kiểm tra trình duyệt của bạn đã cập nhật và thử lại sau.",
+  "oh_noes": "Ôi không!",
+  "benchmarking_anubis": "Đang benchmark Anubis!",
+  "you_are_not_a_bot": "Bạn không phải là bot!",
+  "making_sure_not_bot": "Đang kiểm tra bạn không phải là bot!",
+  "celphase": "CELPHASE",
+  "js_web_crypto_error": "Trình duyệt của bạn không có web.crypto hoạt động. Liệu bạn có đang xem trang này với kết nối bảo mật không?",
+  "js_web_workers_error": "Trình duyệt của bạn không hỗ trợ tính năng web worker (Anubis sử dụng để trình duyệt của bạn bị đơ). Bạn có cài đặt và sử dụng phần mở rộng như JShelter hay không?",
+  "js_cookies_error": "Trình duyệt của bạn không lưu cookie. Anubis sử dụng cookie để xác định client nào đã đạt thành công thử thách bằng cách chứa một token đã được xác thực trong cookie. Vui lòng bật lưu trữ cookie cho tền miền này. Tên và cookie Anubis chứa vào có thể thay đổi khác nhau mà không báo trước. Tên và giá trị cookie không phải là một phần của API công khai.",
+  "js_context_not_secure": "Kết nối này không bảo mật!",
+  "js_context_not_secure_msg": "Thử kết nối lại qua HTTPS hoặc báo quản trị viên biết cách thiết lập HTTPS. Để biết thêm thông tin, vui lòng đọc <a href=\"https://developer.mozilla.org/en-US/docs/Web/Security/Secure_Contexts#when_is_a_context_considered_secure\">MDN</a>.",
+  "js_calculating": "Đang tính toán...",
+  "js_missing_feature": "Thiếu tính năng",
+  "js_challenge_error": "Lỗi thử thách!",
+  "js_challenge_error_msg": "Không thể xử lý thuật toán kiểm tra. Bạn nên nạp lại trang này.",
+  "js_calculating_difficulty": "Đang tính...<br/>Độ khó:",
+  "js_speed": "Tốc độ:",
+  "js_verification_longer": "Quá trình kiểm tra đang kéo dài lâu hơn dự kiến. Vui lòng không nạp lại trang này.",
+  "js_success": "Thành công!",
+  "js_done_took": "Hoàn tất! Mất",
+  "js_iterations": "lần lặp lại",
+  "js_finished_reading": "Tôi đã đọc xong, tiếp tục →",
+  "js_calculation_error": "Lỗi tính toán!",
+  "js_calculation_error_msg": "Không thể tính toán thử thách:"
+}

lib/localization/localization_test.go

@@ -27,6 +27,7 @@ func TestLocalizationService(t *testing.T) {
 		"pt-BR": "Carregando...",
 		"tr":    "Yükleniyor...",
 		"ru":    "Загрузка...",
+		"vi":    "Đang nạp...",
 		"zh-CN": "加载中...",
 		"zh-TW": "載入中...",
 		"sv" : "Laddar...",

test/git-clone/test.sh

@@ -7,12 +7,9 @@ export KO_DOCKER_REPO=ko.local
 
 set -u
 
-(
-  cd ../.. && \
-  npm ci && \
-  npm run assets \
-  ko build --platform=all --base-import-paths --tags="latest" --image-user=1000 --image-annotation="" --image-label="" ./cmd/anubis -L
-)
+source ../lib/lib.sh
+
+build_anubis_ko
 
 rm -rf ./var/repos ./var/clones
 mkdir -p ./var/repos ./var/clones
@@ -25,4 +22,4 @@ sleep 2
 
 (cd ./var/clones && git clone http://localhost:8005/status.git)
 
-docker compose down
+exit 0

test/git-push/test.sh

@@ -7,12 +7,9 @@ export KO_DOCKER_REPO=ko.local
 
 set -u
 
-(
-  cd ../.. && \
-  npm ci && \
-  npm run assets \
-  ko build --platform=all --base-import-paths --tags="latest" --image-user=1000 --image-annotation="" --image-label="" ./cmd/anubis -L
-)
+source ../lib/lib.sh
+
+build_anubis_ko
 
 rm -rf ./var/repos ./var/foo
 mkdir -p ./var/repos
@@ -36,4 +33,4 @@ sleep 2
   git push -u http://localhost:3000/git/foo.git master
 )
 
-docker compose down
+exit 0

test/healthcheck/test.sh

@@ -7,13 +7,9 @@ export KO_DOCKER_REPO=ko.local
 
 set -u
 
-(
-  cd ../.. && \
-  npm ci && \
-  npm run assets \
-  ko build --platform=all --base-import-paths --tags="latest" --image-user=1000 --image-annotation="" --image-label="" ./cmd/anubis -L
-)
+source ../lib/lib.sh
 
+build_anubis_ko
 docker compose up -d
 
 attempt=1
@@ -31,4 +27,4 @@ while ! docker compose ps | grep healthy; do
   attempt=$(( attempt + 1 ))
 done
 
-docker compose down
+exit 0

test/lib/lib.sh

@@ -2,6 +2,8 @@ REPO_ROOT=$(git rev-parse --show-toplevel)
 (cd $REPO_ROOT && go install ./utils/cmd/...)
 
 function cleanup() {
+  set +e
+
   pkill -P $$
 
   if [ -f "docker-compose.yaml" ]; then

test/palemoon/amd64/test.sh

@@ -34,3 +34,5 @@ go run ../../cmd/cipra/ --compose-name $(basename $(pwd))
 
 docker compose down -t 1 || :
 docker compose rm -f || :
+
+exit 0