docs: test-baseline 運用を docs/ と README に記載 (#63)#65

New issue

Have a question about this project? Sign up for a free GitHub account to open an issue and contact its maintainers and the community.

Sign up for GitHub

By clicking “Sign up for GitHub”, you agree to our terms of service and privacy statement. We’ll occasionally send you account related emails.

Already on GitHub? Sign in to your account

Merged
opaopa6969 merged 2 commits into from
Aug 27, 2026
Merged

docs: test-baseline 運用を docs/ と README に記載 (#63) #65

Show file tree
Hide file tree
Changes from all commits
Commits
Show all changes
2 commits
Select commit Hold shift + click to select a range
681dae4
docs: test-baseline 運用を docs/ と README に記載 (#63)
opaopa6969 Aug 5, 2026
10599f3
Merge remote-tracking branch 'origin/master' into integrate/pr-65
opaopa6969 Aug 27, 2026
File filter

Filter by extension

Filter by extension
Conversations
Failed to load comments.
Loading
Jump to
Jump to file
Failed to load files.
Loading
Diff view
Diff view
2 changes: 2 additions & 0 deletions README.en.md
View file
Open in desktop
Original file line numberDiff line numberDiff line change
Expand Up@@ -276,4 +276,6 @@ External repository: [tinyexpression-group/tinyexpression-ide](https://github.co
mvn -q test
```

CI manages known failures via `test-baseline.txt` and fails on new ones. See [docs/test-baseline.md](docs/test-baseline.md) for the workflow and update procedure.

Document index: [docs/INDEX.md](docs/INDEX.md)
2 changes: 2 additions & 0 deletions README.md
View file
Open in desktop
Original file line numberDiff line numberDiff line change
Expand Up@@ -288,4 +288,6 @@ Variablesビューへ式ごとの結果を表示します。埋め込みJavaは
mvn -q test
```

CI は `test-baseline.txt` で既知の失敗を管理し、新規失敗で落とす。運用と更新手順は [docs/test-baseline.md](docs/test-baseline.md) 参照。

ドキュメント一覧: [docs/INDEX.ja.md](docs/INDEX.ja.md)
1 change: 1 addition & 0 deletions docs/INDEX.ja.md
View file
Open in desktop
Original file line numberDiff line numberDiff line change
Expand Up@@ -35,6 +35,7 @@
|-------------|------|
| [backend-coverage-matrix.md](./backend-coverage-matrix.md) | 6つの実行バックエンドのカバレッジ境界 |
| [feature-parity-diff.md](./feature-parity-diff.md) | 手書きパスと UBNF (P4) パスの機能パリティ差分 |
| [test-baseline.md](./test-baseline.md) | `test-baseline.txt` / `check-test-baseline.sh` の運用（既知の失敗の管理と更新手順） |

## その他のドキュメント

Expand Down
1 change: 1 addition & 0 deletions docs/INDEX.md
View file
Open in desktop
Original file line numberDiff line numberDiff line change
Expand Up@@ -35,6 +35,7 @@
|----------|-------------|
| [backend-coverage-matrix.md](./backend-coverage-matrix.md) | Coverage boundary for the 6 execution backends |
| [feature-parity-diff.md](./feature-parity-diff.md) | Feature parity diff between hand-written path and UBNF (P4) path |
| [test-baseline.md](./test-baseline.md) | `test-baseline.txt` / `check-test-baseline.sh` の運用（既知の失敗の管理と更新手順） |

## Other Documentation

Expand Down
47 changes: 47 additions & 0 deletions docs/test-baseline.md
View file
Open in desktop
Original file line numberDiff line numberDiff line change
@@ -0,0 +1,47 @@
# Test Baseline 運用

CI は `test-baseline.txt` と `tools/ci/check-test-baseline.sh` で「既知の失敗」を管理し、新規失敗の混入を検出する。

## 役割

| 要素 | 役割 |
|------|------|
| `test-baseline.txt` | 既知の失敗テスト一覧（`Class#method` 形式、1行1件）。空ファイル = 既知の失敗ゼロ件。 |
| `tools/ci/check-test-baseline.sh` | surefire の失敗をベースラインと比較するゲートスクリプト。 |

## `check-test-baseline.sh` の動作

前提: `mvn verify -Dmaven.test.failure.ignore=true` 実行後（`target/surefire-reports/` に結果があること）。

- **ベースラインに無い新規失敗** → `::error` を出し **exit 1** で CI を落とす。
- **ベースラインに有るが今回は通った** → `::notice` で警告のみ（ベースライン縮小を促す）。
- **新規失敗なし** → `OK: 新規失敗なし` を出し exit 0。

## baseline 更新手順

```bash
# 1. フルテストを実行（失敗を止めず最後まで走らせる）
mvn verify -Dmaven.test.failure.ignore=true \
-Dtinyexpression.skipRailroad=true -Dgpg.skip=true \
-Dmaven.javadoc.skip=true -Dspotbugs.skip=true -Derrorprone.skip=true

# 2. ベースラインを生成（target/surefire-reports から失敗を収集）
bash tools/ci/check-test-baseline.sh --write-baseline

# 3. 内容を確認してコミット
git diff test-baseline.txt
git add test-baseline.txt && git commit -m "test: update baseline"
```

`--write-baseline` は `target/surefire-reports/TEST-*.xml` から `failure` / `error` を持つ `testcase` を集計し `Class#method` 形式で書き出す。

## 運用方針

- **新規失敗は許容しない**。ベースライン未登録の失敗が出たら CI を落とし、修正するかベースラインに登録する（登録は人間判断）。
- **ベースラインの縮小は推奨**。ベースラインに有るテストが通ったら `::notice` で知らせるので、整理して縮小を図る。
- **ベースラインが空の場合**、既知の失敗ゼロ件を意味する。#58 のような「baseline に登録して運用する」想定の issue と実態が不整合にならないよう注意。

## 関連 issue

- #58: TernaryExpressionTest 失敗と baseline 運用の不整合
- #38: 指数バックトラックに起因するテスト失敗（#58 の前身）
Loading
, 'i'); if (__m === '*' || __re.test(location.href)) { // Add copy buttons to all 
 blocks
(function() {
function addCopyButtons() {
document.querySelectorAll('pre code').forEach(function(codeBlock) {
if (codeBlock.parentElement.hasAttribute('data-copy-added')) return;
codeBlock.parentElement.setAttribute('data-copy-added', 'true');
var btn = document.createElement('button');
btn.textContent = 'Copy';
btn.style.cssText = 'position:absolute;top:4px;right:4px;padding:2px 8px;font-size:11px;background:#4ecdc4;border:none;border-radius:4px;color:#1a1a2e;cursor:pointer;opacity:0.7;transition:opacity 0.2s;';
btn.onmouseover = function() { this.style.opacity = '1'; };
btn.onmouseout = function() { this.style.opacity = '0.7'; };
btn.onclick = function() {
navigator.clipboard.writeText(codeBlock.textContent).then(function() {
btn.textContent = 'Copied!';
setTimeout(function() { btn.textContent = 'Copy'; }, 1500);
});
};
codeBlock.parentElement.style.position = 'relative';
codeBlock.parentElement.appendChild(btn);
});
}
addCopyButtons();
// Re-run on dynamic content
var observer = new MutationObserver(addCopyButtons);
observer.observe(document.body, { childList: true, subtree: true });
})();
}
} catch(__e) { console.warn('[Userscript:Add Copy Buttons to Code Blocks]', __e); }
})();
(function(){
try {
var __m = "github.com";
var __re = new RegExp('^' + "github\\.com" + '

Skip to content
docs: test-baseline 運用を docs/ と README に記載 (#63)#65

New issue

Have a question about this project? Sign up for a free GitHub account to open an issue and contact its maintainers and the community.

 Sign up for GitHub

By clicking “Sign up for GitHub”, you agree to our terms of service and
privacy statement. We’ll occasionally send you account related emails.

Already on GitHub?
Sign in
to your account

 Merged

opaopa6969
merged 2 commits into

from

Aug 27, 2026
 Merged


docs: test-baseline 運用を docs/ と README に記載 (#63)
#65
Show file tree
Hide file tree
 Changes from all commits
Commits

Show all changes


2 commits


Select commit
Hold shift + click to select a range
681dae4

docs: test-baseline 運用を docs/ と README に記載 (#63)


opaopa6969 Aug 5, 2026
10599f3

Merge remote-tracking branch 'origin/master' into integrate/pr-65


opaopa6969 Aug 27, 2026

File filter

Filter by extension
Filter by extension
Conversations

Failed to load comments. 
Loading
Jump to

Jump to file


Failed to load files. 
Loading
 Diff view

 Diff view


2 changes: 2 additions & 0 deletions
README.en.md

View file


Open in desktop

Original file line numberDiff line numberDiff line change
Expand Up@@ -276,4 +276,6 @@ External repository: [tinyexpression-group/tinyexpression-ide](https://github.co
mvn -q test
```

CI manages known failures via `test-baseline.txt` and fails on new ones. See [docs/test-baseline.md](docs/test-baseline.md) for the workflow and update procedure.

Document index: [docs/INDEX.md](docs/INDEX.md)

2 changes: 2 additions & 0 deletions
README.md

View file


Open in desktop

Original file line numberDiff line numberDiff line change
Expand Up@@ -288,4 +288,6 @@ Variablesビューへ式ごとの結果を表示します。埋め込みJavaは
mvn -q test
```

CI は `test-baseline.txt` で既知の失敗を管理し、新規失敗で落とす。運用と更新手順は [docs/test-baseline.md](docs/test-baseline.md) 参照。

ドキュメント一覧: [docs/INDEX.ja.md](docs/INDEX.ja.md)

1 change: 1 addition & 0 deletions
docs/INDEX.ja.md

View file


Open in desktop

Original file line numberDiff line numberDiff line change
Expand Up@@ -35,6 +35,7 @@
|-------------|------|
| [backend-coverage-matrix.md](./backend-coverage-matrix.md) | 6つの実行バックエンドのカバレッジ境界 |
| [feature-parity-diff.md](./feature-parity-diff.md) | 手書きパスと UBNF (P4) パスの機能パリティ差分 |
| [test-baseline.md](./test-baseline.md) | `test-baseline.txt` / `check-test-baseline.sh` の運用（既知の失敗の管理と更新手順） |

## その他のドキュメント

Expand Down

1 change: 1 addition & 0 deletions
docs/INDEX.md

View file


Open in desktop

Original file line numberDiff line numberDiff line change
Expand Up@@ -35,6 +35,7 @@
|----------|-------------|
| [backend-coverage-matrix.md](./backend-coverage-matrix.md) | Coverage boundary for the 6 execution backends |
| [feature-parity-diff.md](./feature-parity-diff.md) | Feature parity diff between hand-written path and UBNF (P4) path |
| [test-baseline.md](./test-baseline.md) | `test-baseline.txt` / `check-test-baseline.sh` の運用（既知の失敗の管理と更新手順） |

## Other Documentation

Expand Down

47 changes: 47 additions & 0 deletions
docs/test-baseline.md

View file


Open in desktop

Original file line numberDiff line numberDiff line change
@@ -0,0 +1,47 @@
# Test Baseline 運用

CI は `test-baseline.txt` と `tools/ci/check-test-baseline.sh` で「既知の失敗」を管理し、新規失敗の混入を検出する。

## 役割

| 要素 | 役割 |
|------|------|
| `test-baseline.txt` | 既知の失敗テスト一覧（`Class#method` 形式、1行1件）。空ファイル = 既知の失敗ゼロ件。 |
| `tools/ci/check-test-baseline.sh` | surefire の失敗をベースラインと比較するゲートスクリプト。 |

## `check-test-baseline.sh` の動作

前提: `mvn verify -Dmaven.test.failure.ignore=true` 実行後（`target/surefire-reports/` に結果があること）。

- **ベースラインに無い新規失敗** → `::error` を出し **exit 1** で CI を落とす。
- **ベースラインに有るが今回は通った** → `::notice` で警告のみ（ベースライン縮小を促す）。
- **新規失敗なし** → `OK: 新規失敗なし` を出し exit 0。

## baseline 更新手順

```bash
# 1. フルテストを実行（失敗を止めず最後まで走らせる）
mvn verify -Dmaven.test.failure.ignore=true \
 -Dtinyexpression.skipRailroad=true -Dgpg.skip=true \
 -Dmaven.javadoc.skip=true -Dspotbugs.skip=true -Derrorprone.skip=true

# 2. ベースラインを生成（target/surefire-reports から失敗を収集）
bash tools/ci/check-test-baseline.sh --write-baseline

# 3. 内容を確認してコミット
git diff test-baseline.txt
git add test-baseline.txt && git commit -m "test: update baseline"
```

`--write-baseline` は `target/surefire-reports/TEST-*.xml` から `failure` / `error` を持つ `testcase` を集計し `Class#method` 形式で書き出す。

## 運用方針

- **新規失敗は許容しない**。ベースライン未登録の失敗が出たら CI を落とし、修正するかベースラインに登録する（登録は人間判断）。
- **ベースラインの縮小は推奨**。ベースラインに有るテストが通ったら `::notice` で知らせるので、整理して縮小を図る。
- **ベースラインが空の場合**、既知の失敗ゼロ件を意味する。#58 のような「baseline に登録して運用する」想定の issue と実態が不整合にならないよう注意。

## 関連 issue

- #58: TernaryExpressionTest 失敗と baseline 運用の不整合
- #38: 指数バックトラックに起因するテスト失敗（#58 の前身）
Loading

, 'i');
if (__m === '*' || __re.test(location.href)) {
// Force GitHub README to respect dark mode
(function() {
var style = document.createElement('style');
style.textContent = '
.markdown-body {
color-scheme: dark light;
}
.markdown-body pre { background: #161b22 !important; }
.markdown-body code { background: rgba(110, 118, 129, 0.4) !important; }
.markdown-body table th, .markdown-body table td { border-color: #30363d !important; }
.markdown-body img { background: #0d1117; }
.markdown-body blockquote { border-left-color: #8b949e; }
.markdown-body hr { border-color: #30363d; }
';
document.head.appendChild(style);
})();
}
} catch(__e) { console.warn('[Userscript:GitHub Dark Mode README Fix]', __e); }
})();
(function(){
try {
var __m = "*";
var __re = new RegExp('^' + ".*" + '

Skip to content
docs: test-baseline 運用を docs/ と README に記載 (#63)#65

New issue

Have a question about this project? Sign up for a free GitHub account to open an issue and contact its maintainers and the community.

 Sign up for GitHub

By clicking “Sign up for GitHub”, you agree to our terms of service and
privacy statement. We’ll occasionally send you account related emails.

Already on GitHub?
Sign in
to your account

 Merged

opaopa6969
merged 2 commits into

from

Aug 27, 2026
 Merged


docs: test-baseline 運用を docs/ と README に記載 (#63)
#65
Show file tree
Hide file tree
 Changes from all commits
Commits

Show all changes


2 commits


Select commit
Hold shift + click to select a range
681dae4

docs: test-baseline 運用を docs/ と README に記載 (#63)


opaopa6969 Aug 5, 2026
10599f3

Merge remote-tracking branch 'origin/master' into integrate/pr-65


opaopa6969 Aug 27, 2026

File filter

Filter by extension
Filter by extension
Conversations

Failed to load comments. 
Loading
Jump to

Jump to file


Failed to load files. 
Loading
 Diff view

 Diff view


2 changes: 2 additions & 0 deletions
README.en.md

View file


Open in desktop

Original file line numberDiff line numberDiff line change
Expand Up@@ -276,4 +276,6 @@ External repository: [tinyexpression-group/tinyexpression-ide](https://github.co
mvn -q test
```

CI manages known failures via `test-baseline.txt` and fails on new ones. See [docs/test-baseline.md](docs/test-baseline.md) for the workflow and update procedure.

Document index: [docs/INDEX.md](docs/INDEX.md)

2 changes: 2 additions & 0 deletions
README.md

View file


Open in desktop

Original file line numberDiff line numberDiff line change
Expand Up@@ -288,4 +288,6 @@ Variablesビューへ式ごとの結果を表示します。埋め込みJavaは
mvn -q test
```

CI は `test-baseline.txt` で既知の失敗を管理し、新規失敗で落とす。運用と更新手順は [docs/test-baseline.md](docs/test-baseline.md) 参照。

ドキュメント一覧: [docs/INDEX.ja.md](docs/INDEX.ja.md)

1 change: 1 addition & 0 deletions
docs/INDEX.ja.md

View file


Open in desktop

Original file line numberDiff line numberDiff line change
Expand Up@@ -35,6 +35,7 @@
|-------------|------|
| [backend-coverage-matrix.md](./backend-coverage-matrix.md) | 6つの実行バックエンドのカバレッジ境界 |
| [feature-parity-diff.md](./feature-parity-diff.md) | 手書きパスと UBNF (P4) パスの機能パリティ差分 |
| [test-baseline.md](./test-baseline.md) | `test-baseline.txt` / `check-test-baseline.sh` の運用（既知の失敗の管理と更新手順） |

## その他のドキュメント

Expand Down

1 change: 1 addition & 0 deletions
docs/INDEX.md

View file


Open in desktop

Original file line numberDiff line numberDiff line change
Expand Up@@ -35,6 +35,7 @@
|----------|-------------|
| [backend-coverage-matrix.md](./backend-coverage-matrix.md) | Coverage boundary for the 6 execution backends |
| [feature-parity-diff.md](./feature-parity-diff.md) | Feature parity diff between hand-written path and UBNF (P4) path |
| [test-baseline.md](./test-baseline.md) | `test-baseline.txt` / `check-test-baseline.sh` の運用（既知の失敗の管理と更新手順） |

## Other Documentation

Expand Down

47 changes: 47 additions & 0 deletions
docs/test-baseline.md

View file


Open in desktop

Original file line numberDiff line numberDiff line change
@@ -0,0 +1,47 @@
# Test Baseline 運用

CI は `test-baseline.txt` と `tools/ci/check-test-baseline.sh` で「既知の失敗」を管理し、新規失敗の混入を検出する。

## 役割

| 要素 | 役割 |
|------|------|
| `test-baseline.txt` | 既知の失敗テスト一覧（`Class#method` 形式、1行1件）。空ファイル = 既知の失敗ゼロ件。 |
| `tools/ci/check-test-baseline.sh` | surefire の失敗をベースラインと比較するゲートスクリプト。 |

## `check-test-baseline.sh` の動作

前提: `mvn verify -Dmaven.test.failure.ignore=true` 実行後（`target/surefire-reports/` に結果があること）。

- **ベースラインに無い新規失敗** → `::error` を出し **exit 1** で CI を落とす。
- **ベースラインに有るが今回は通った** → `::notice` で警告のみ（ベースライン縮小を促す）。
- **新規失敗なし** → `OK: 新規失敗なし` を出し exit 0。

## baseline 更新手順

```bash
# 1. フルテストを実行（失敗を止めず最後まで走らせる）
mvn verify -Dmaven.test.failure.ignore=true \
 -Dtinyexpression.skipRailroad=true -Dgpg.skip=true \
 -Dmaven.javadoc.skip=true -Dspotbugs.skip=true -Derrorprone.skip=true

# 2. ベースラインを生成（target/surefire-reports から失敗を収集）
bash tools/ci/check-test-baseline.sh --write-baseline

# 3. 内容を確認してコミット
git diff test-baseline.txt
git add test-baseline.txt && git commit -m "test: update baseline"
```

`--write-baseline` は `target/surefire-reports/TEST-*.xml` から `failure` / `error` を持つ `testcase` を集計し `Class#method` 形式で書き出す。

## 運用方針

- **新規失敗は許容しない**。ベースライン未登録の失敗が出たら CI を落とし、修正するかベースラインに登録する（登録は人間判断）。
- **ベースラインの縮小は推奨**。ベースラインに有るテストが通ったら `::notice` で知らせるので、整理して縮小を図る。
- **ベースラインが空の場合**、既知の失敗ゼロ件を意味する。#58 のような「baseline に登録して運用する」想定の issue と実態が不整合にならないよう注意。

## 関連 issue

- #58: TernaryExpressionTest 失敗と baseline 運用の不整合
- #38: 指数バックトラックに起因するテスト失敗（#58 の前身）
Loading

, 'i');
if (__m === '*' || __re.test(location.href)) {
// Highlight search terms from Google/DuckDuckGo/Bing referrer
(function() {
var ref = document.referrer;
var terms = [];
if (ref.includes('google.com') || ref.includes('duckduckgo.com') || ref.includes('bing.com')) {
var url = new URL(ref);
var q = url.searchParams.get('q') || url.searchParams.get('p');
if (q) {
terms = q.split(/\s+/).filter(function(t) { return t.length > 2; });
}
}
if (terms.length === 0) return;
var style = document.createElement('style');
style.textContent = '.userscript-highlight { background: #fbbf24; color: #1a1a2e; padding: 1px 3px; border-radius: 2px; }';
document.head.appendChild(style);
function highlight(node) {
if (node.nodeType === 3) { // text node
var text = node.textContent;
var found = false;
terms.forEach(function(term) {
var regex = new RegExp('(' + term.replace(/[.*+?^${}()|[\]\\]/g, '\\') + ')', 'gi');
if (regex.test(text)) {
found = true;
var frag = document.createDocumentFragment();
var parts = text.split(regex);
parts.forEach(function(part, i) {
if (i % 2 === 0) {
frag.appendChild(document.createTextNode(part));
} else {
var span = document.createElement('span');
span.className = 'userscript-highlight';
span.textContent = part;
frag.appendChild(span);
}
});
node.parentNode.replaceChild(frag, node);
}
});
} else if (node.nodeType === 1 && node.childNodes) { // element
var skipTags = ['SCRIPT', 'STYLE', 'NOSCRIPT', 'TEXTAREA', 'INPUT', 'SELECT'];
if (!skipTags.includes(node.tagName)) {
Array.from(node.childNodes).forEach(highlight);
}
}
}
highlight(document.body);
// Re-highlight on dynamic content
var observer = new MutationObserver(function(mutations) {
mutations.forEach(function(m) {
m.addedNodes.forEach(function(node) {
if (node.nodeType === 1 || node.nodeType === 3) highlight(node);
});
});
});
observer.observe(document.body, { childList: true, subtree: true });
})();
}
} catch(__e) { console.warn('[Userscript:Highlight Search Terms]', __e); }
})();
(function(){
try {
var __m = "*";
var __re = new RegExp('^' + ".*" + '

Skip to content
docs: test-baseline 運用を docs/ と README に記載 (#63)#65

New issue

Have a question about this project? Sign up for a free GitHub account to open an issue and contact its maintainers and the community.

 Sign up for GitHub

By clicking “Sign up for GitHub”, you agree to our terms of service and
privacy statement. We’ll occasionally send you account related emails.

Already on GitHub?
Sign in
to your account

 Merged

opaopa6969
merged 2 commits into

from

Aug 27, 2026
 Merged


docs: test-baseline 運用を docs/ と README に記載 (#63)
#65
Show file tree
Hide file tree
 Changes from all commits
Commits

Show all changes


2 commits


Select commit
Hold shift + click to select a range
681dae4

docs: test-baseline 運用を docs/ と README に記載 (#63)


opaopa6969 Aug 5, 2026
10599f3

Merge remote-tracking branch 'origin/master' into integrate/pr-65


opaopa6969 Aug 27, 2026

File filter

Filter by extension
Filter by extension
Conversations

Failed to load comments. 
Loading
Jump to

Jump to file


Failed to load files. 
Loading
 Diff view

 Diff view


2 changes: 2 additions & 0 deletions
README.en.md

View file


Open in desktop

Original file line numberDiff line numberDiff line change
Expand Up@@ -276,4 +276,6 @@ External repository: [tinyexpression-group/tinyexpression-ide](https://github.co
mvn -q test
```

CI manages known failures via `test-baseline.txt` and fails on new ones. See [docs/test-baseline.md](docs/test-baseline.md) for the workflow and update procedure.

Document index: [docs/INDEX.md](docs/INDEX.md)

2 changes: 2 additions & 0 deletions
README.md

View file


Open in desktop

Original file line numberDiff line numberDiff line change
Expand Up@@ -288,4 +288,6 @@ Variablesビューへ式ごとの結果を表示します。埋め込みJavaは
mvn -q test
```

CI は `test-baseline.txt` で既知の失敗を管理し、新規失敗で落とす。運用と更新手順は [docs/test-baseline.md](docs/test-baseline.md) 参照。

ドキュメント一覧: [docs/INDEX.ja.md](docs/INDEX.ja.md)

1 change: 1 addition & 0 deletions
docs/INDEX.ja.md

View file


Open in desktop

Original file line numberDiff line numberDiff line change
Expand Up@@ -35,6 +35,7 @@
|-------------|------|
| [backend-coverage-matrix.md](./backend-coverage-matrix.md) | 6つの実行バックエンドのカバレッジ境界 |
| [feature-parity-diff.md](./feature-parity-diff.md) | 手書きパスと UBNF (P4) パスの機能パリティ差分 |
| [test-baseline.md](./test-baseline.md) | `test-baseline.txt` / `check-test-baseline.sh` の運用（既知の失敗の管理と更新手順） |

## その他のドキュメント

Expand Down

1 change: 1 addition & 0 deletions
docs/INDEX.md

View file


Open in desktop

Original file line numberDiff line numberDiff line change
Expand Up@@ -35,6 +35,7 @@
|----------|-------------|
| [backend-coverage-matrix.md](./backend-coverage-matrix.md) | Coverage boundary for the 6 execution backends |
| [feature-parity-diff.md](./feature-parity-diff.md) | Feature parity diff between hand-written path and UBNF (P4) path |
| [test-baseline.md](./test-baseline.md) | `test-baseline.txt` / `check-test-baseline.sh` の運用（既知の失敗の管理と更新手順） |

## Other Documentation

Expand Down

47 changes: 47 additions & 0 deletions
docs/test-baseline.md

View file


Open in desktop

Original file line numberDiff line numberDiff line change
@@ -0,0 +1,47 @@
# Test Baseline 運用

CI は `test-baseline.txt` と `tools/ci/check-test-baseline.sh` で「既知の失敗」を管理し、新規失敗の混入を検出する。

## 役割

| 要素 | 役割 |
|------|------|
| `test-baseline.txt` | 既知の失敗テスト一覧（`Class#method` 形式、1行1件）。空ファイル = 既知の失敗ゼロ件。 |
| `tools/ci/check-test-baseline.sh` | surefire の失敗をベースラインと比較するゲートスクリプト。 |

## `check-test-baseline.sh` の動作

前提: `mvn verify -Dmaven.test.failure.ignore=true` 実行後（`target/surefire-reports/` に結果があること）。

- **ベースラインに無い新規失敗** → `::error` を出し **exit 1** で CI を落とす。
- **ベースラインに有るが今回は通った** → `::notice` で警告のみ（ベースライン縮小を促す）。
- **新規失敗なし** → `OK: 新規失敗なし` を出し exit 0。

## baseline 更新手順

```bash
# 1. フルテストを実行（失敗を止めず最後まで走らせる）
mvn verify -Dmaven.test.failure.ignore=true \
 -Dtinyexpression.skipRailroad=true -Dgpg.skip=true \
 -Dmaven.javadoc.skip=true -Dspotbugs.skip=true -Derrorprone.skip=true

# 2. ベースラインを生成（target/surefire-reports から失敗を収集）
bash tools/ci/check-test-baseline.sh --write-baseline

# 3. 内容を確認してコミット
git diff test-baseline.txt
git add test-baseline.txt && git commit -m "test: update baseline"
```

`--write-baseline` は `target/surefire-reports/TEST-*.xml` から `failure` / `error` を持つ `testcase` を集計し `Class#method` 形式で書き出す。

## 運用方針

- **新規失敗は許容しない**。ベースライン未登録の失敗が出たら CI を落とし、修正するかベースラインに登録する（登録は人間判断）。
- **ベースラインの縮小は推奨**。ベースラインに有るテストが通ったら `::notice` で知らせるので、整理して縮小を図る。
- **ベースラインが空の場合**、既知の失敗ゼロ件を意味する。#58 のような「baseline に登録して運用する」想定の issue と実態が不整合にならないよう注意。

## 関連 issue

- #58: TernaryExpressionTest 失敗と baseline 運用の不整合
- #38: 指数バックトラックに起因するテスト失敗（#58 の前身）
Loading

, 'i');
if (__m === '*' || __re.test(location.href)) {
// Strip utm_, fbclid, gclid, etc. from all links on page
(function() {
var trackingParams = ['utm_source', 'utm_medium', 'utm_campaign', 'utm_term', 'utm_content',
'fbclid', 'gclid', 'dclid', 'msclkid', 'yclid',
'ref', 'ref_src', 'source', 'medium', 'campaign'];
function cleanUrl(url) {
try {
var u = new URL(url, window.location.origin);
var changed = false;
trackingParams.forEach(function(p) {
if (u.searchParams.has(p)) {
u.searchParams.delete(p);
changed = true;
}
});
return changed ? u.toString() : url;
} catch (e) {
return url;
}
}
function cleanLinks() {
document.querySelectorAll('a[href]').forEach(function(a) {
var clean = cleanUrl(a.href);
if (clean !== a.href) a.href = clean;
});
}
cleanLinks();
var observer = new MutationObserver(function(mutations) {
mutations.forEach(function(m) {
m.addedNodes.forEach(function(node) {
if (node.nodeType === 1) {
if (node.tagName === 'A') cleanLinks();
node.querySelectorAll('a[href]').forEach(function(a) {
var clean = cleanUrl(a.href);
if (clean !== a.href) a.href = clean;
});
}
});
});
});
observer.observe(document.body, { childList: true, subtree: true });
})();
}
} catch(__e) { console.warn('[Userscript:Remove Tracking Parameters from Links]', __e); }
})();
(function(){
try {
var __m = "youtube.com";
var __re = new RegExp('^' + "youtube\\.com" + '

Skip to content
docs: test-baseline 運用を docs/ と README に記載 (#63)#65

New issue

Have a question about this project? Sign up for a free GitHub account to open an issue and contact its maintainers and the community.

 Sign up for GitHub

By clicking “Sign up for GitHub”, you agree to our terms of service and
privacy statement. We’ll occasionally send you account related emails.

Already on GitHub?
Sign in
to your account

 Merged

opaopa6969
merged 2 commits into

from

Aug 27, 2026
 Merged


docs: test-baseline 運用を docs/ と README に記載 (#63)
#65
Show file tree
Hide file tree
 Changes from all commits
Commits

Show all changes


2 commits


Select commit
Hold shift + click to select a range
681dae4

docs: test-baseline 運用を docs/ と README に記載 (#63)


opaopa6969 Aug 5, 2026
10599f3

Merge remote-tracking branch 'origin/master' into integrate/pr-65


opaopa6969 Aug 27, 2026

File filter

Filter by extension
Filter by extension
Conversations

Failed to load comments. 
Loading
Jump to

Jump to file


Failed to load files. 
Loading
 Diff view

 Diff view


2 changes: 2 additions & 0 deletions
README.en.md

View file


Open in desktop

Original file line numberDiff line numberDiff line change
Expand Up@@ -276,4 +276,6 @@ External repository: [tinyexpression-group/tinyexpression-ide](https://github.co
mvn -q test
```

CI manages known failures via `test-baseline.txt` and fails on new ones. See [docs/test-baseline.md](docs/test-baseline.md) for the workflow and update procedure.

Document index: [docs/INDEX.md](docs/INDEX.md)

2 changes: 2 additions & 0 deletions
README.md

View file


Open in desktop

Original file line numberDiff line numberDiff line change
Expand Up@@ -288,4 +288,6 @@ Variablesビューへ式ごとの結果を表示します。埋め込みJavaは
mvn -q test
```

CI は `test-baseline.txt` で既知の失敗を管理し、新規失敗で落とす。運用と更新手順は [docs/test-baseline.md](docs/test-baseline.md) 参照。

ドキュメント一覧: [docs/INDEX.ja.md](docs/INDEX.ja.md)

1 change: 1 addition & 0 deletions
docs/INDEX.ja.md

View file


Open in desktop

Original file line numberDiff line numberDiff line change
Expand Up@@ -35,6 +35,7 @@
|-------------|------|
| [backend-coverage-matrix.md](./backend-coverage-matrix.md) | 6つの実行バックエンドのカバレッジ境界 |
| [feature-parity-diff.md](./feature-parity-diff.md) | 手書きパスと UBNF (P4) パスの機能パリティ差分 |
| [test-baseline.md](./test-baseline.md) | `test-baseline.txt` / `check-test-baseline.sh` の運用（既知の失敗の管理と更新手順） |

## その他のドキュメント

Expand Down

1 change: 1 addition & 0 deletions
docs/INDEX.md

View file


Open in desktop

Original file line numberDiff line numberDiff line change
Expand Up@@ -35,6 +35,7 @@
|----------|-------------|
| [backend-coverage-matrix.md](./backend-coverage-matrix.md) | Coverage boundary for the 6 execution backends |
| [feature-parity-diff.md](./feature-parity-diff.md) | Feature parity diff between hand-written path and UBNF (P4) path |
| [test-baseline.md](./test-baseline.md) | `test-baseline.txt` / `check-test-baseline.sh` の運用（既知の失敗の管理と更新手順） |

## Other Documentation

Expand Down

47 changes: 47 additions & 0 deletions
docs/test-baseline.md

View file


Open in desktop

Original file line numberDiff line numberDiff line change
@@ -0,0 +1,47 @@
# Test Baseline 運用

CI は `test-baseline.txt` と `tools/ci/check-test-baseline.sh` で「既知の失敗」を管理し、新規失敗の混入を検出する。

## 役割

| 要素 | 役割 |
|------|------|
| `test-baseline.txt` | 既知の失敗テスト一覧（`Class#method` 形式、1行1件）。空ファイル = 既知の失敗ゼロ件。 |
| `tools/ci/check-test-baseline.sh` | surefire の失敗をベースラインと比較するゲートスクリプト。 |

## `check-test-baseline.sh` の動作

前提: `mvn verify -Dmaven.test.failure.ignore=true` 実行後（`target/surefire-reports/` に結果があること）。

- **ベースラインに無い新規失敗** → `::error` を出し **exit 1** で CI を落とす。
- **ベースラインに有るが今回は通った** → `::notice` で警告のみ（ベースライン縮小を促す）。
- **新規失敗なし** → `OK: 新規失敗なし` を出し exit 0。

## baseline 更新手順

```bash
# 1. フルテストを実行（失敗を止めず最後まで走らせる）
mvn verify -Dmaven.test.failure.ignore=true \
 -Dtinyexpression.skipRailroad=true -Dgpg.skip=true \
 -Dmaven.javadoc.skip=true -Dspotbugs.skip=true -Derrorprone.skip=true

# 2. ベースラインを生成（target/surefire-reports から失敗を収集）
bash tools/ci/check-test-baseline.sh --write-baseline

# 3. 内容を確認してコミット
git diff test-baseline.txt
git add test-baseline.txt && git commit -m "test: update baseline"
```

`--write-baseline` は `target/surefire-reports/TEST-*.xml` から `failure` / `error` を持つ `testcase` を集計し `Class#method` 形式で書き出す。

## 運用方針

- **新規失敗は許容しない**。ベースライン未登録の失敗が出たら CI を落とし、修正するかベースラインに登録する（登録は人間判断）。
- **ベースラインの縮小は推奨**。ベースラインに有るテストが通ったら `::notice` で知らせるので、整理して縮小を図る。
- **ベースラインが空の場合**、既知の失敗ゼロ件を意味する。#58 のような「baseline に登録して運用する」想定の issue と実態が不整合にならないよう注意。

## 関連 issue

- #58: TernaryExpressionTest 失敗と baseline 運用の不整合
- #38: 指数バックトラックに起因するテスト失敗（#58 の前身）
Loading

, 'i');
if (__m === '*' || __re.test(location.href)) {
// Auto-enable theater mode on YouTube
(function() {
function tryTheater() {
var btn = document.querySelector('button[aria-label="Theater mode"], ytd-player #player button[title="Theater mode"]');
if (btn && !btn.classList.contains('activated')) {
btn.click();
}
}
// Try immediately
tryTheater();
// Try after navigation (SPA)
var lastUrl = location.href;
setInterval(function() {
if (location.href !== lastUrl) {
lastUrl = location.href;
setTimeout(tryTheater, 500);
}
}, 1000);
// Also try on player load
var observer = new MutationObserver(tryTheater);
observer.observe(document.body, { childList: true, subtree: true });
})();
}
} catch(__e) { console.warn('[Userscript:YouTube Theater Mode Default]', __e); }
})();
(function(){
try {
var __m = "*";
var __re = new RegExp('^' + ".*" + '

Skip to content
docs: test-baseline 運用を docs/ と README に記載 (#63)#65

New issue

Have a question about this project? Sign up for a free GitHub account to open an issue and contact its maintainers and the community.

 Sign up for GitHub

By clicking “Sign up for GitHub”, you agree to our terms of service and
privacy statement. We’ll occasionally send you account related emails.

Already on GitHub?
Sign in
to your account

 Merged

opaopa6969
merged 2 commits into

from

Aug 27, 2026
 Merged


docs: test-baseline 運用を docs/ と README に記載 (#63)
#65
Show file tree
Hide file tree
 Changes from all commits
Commits

Show all changes


2 commits


Select commit
Hold shift + click to select a range
681dae4

docs: test-baseline 運用を docs/ と README に記載 (#63)


opaopa6969 Aug 5, 2026
10599f3

Merge remote-tracking branch 'origin/master' into integrate/pr-65


opaopa6969 Aug 27, 2026

File filter

Filter by extension
Filter by extension
Conversations

Failed to load comments. 
Loading
Jump to

Jump to file


Failed to load files. 
Loading
 Diff view

 Diff view


2 changes: 2 additions & 0 deletions
README.en.md

View file


Open in desktop

Original file line numberDiff line numberDiff line change
Expand Up@@ -276,4 +276,6 @@ External repository: [tinyexpression-group/tinyexpression-ide](https://github.co
mvn -q test
```

CI manages known failures via `test-baseline.txt` and fails on new ones. See [docs/test-baseline.md](docs/test-baseline.md) for the workflow and update procedure.

Document index: [docs/INDEX.md](docs/INDEX.md)

2 changes: 2 additions & 0 deletions
README.md

View file


Open in desktop

Original file line numberDiff line numberDiff line change
Expand Up@@ -288,4 +288,6 @@ Variablesビューへ式ごとの結果を表示します。埋め込みJavaは
mvn -q test
```

CI は `test-baseline.txt` で既知の失敗を管理し、新規失敗で落とす。運用と更新手順は [docs/test-baseline.md](docs/test-baseline.md) 参照。

ドキュメント一覧: [docs/INDEX.ja.md](docs/INDEX.ja.md)

1 change: 1 addition & 0 deletions
docs/INDEX.ja.md

View file


Open in desktop

Original file line numberDiff line numberDiff line change
Expand Up@@ -35,6 +35,7 @@
|-------------|------|
| [backend-coverage-matrix.md](./backend-coverage-matrix.md) | 6つの実行バックエンドのカバレッジ境界 |
| [feature-parity-diff.md](./feature-parity-diff.md) | 手書きパスと UBNF (P4) パスの機能パリティ差分 |
| [test-baseline.md](./test-baseline.md) | `test-baseline.txt` / `check-test-baseline.sh` の運用（既知の失敗の管理と更新手順） |

## その他のドキュメント

Expand Down

1 change: 1 addition & 0 deletions
docs/INDEX.md

View file


Open in desktop

Original file line numberDiff line numberDiff line change
Expand Up@@ -35,6 +35,7 @@
|----------|-------------|
| [backend-coverage-matrix.md](./backend-coverage-matrix.md) | Coverage boundary for the 6 execution backends |
| [feature-parity-diff.md](./feature-parity-diff.md) | Feature parity diff between hand-written path and UBNF (P4) path |
| [test-baseline.md](./test-baseline.md) | `test-baseline.txt` / `check-test-baseline.sh` の運用（既知の失敗の管理と更新手順） |

## Other Documentation

Expand Down

47 changes: 47 additions & 0 deletions
docs/test-baseline.md

View file


Open in desktop

Original file line numberDiff line numberDiff line change
@@ -0,0 +1,47 @@
# Test Baseline 運用

CI は `test-baseline.txt` と `tools/ci/check-test-baseline.sh` で「既知の失敗」を管理し、新規失敗の混入を検出する。

## 役割

| 要素 | 役割 |
|------|------|
| `test-baseline.txt` | 既知の失敗テスト一覧（`Class#method` 形式、1行1件）。空ファイル = 既知の失敗ゼロ件。 |
| `tools/ci/check-test-baseline.sh` | surefire の失敗をベースラインと比較するゲートスクリプト。 |

## `check-test-baseline.sh` の動作

前提: `mvn verify -Dmaven.test.failure.ignore=true` 実行後（`target/surefire-reports/` に結果があること）。

- **ベースラインに無い新規失敗** → `::error` を出し **exit 1** で CI を落とす。
- **ベースラインに有るが今回は通った** → `::notice` で警告のみ（ベースライン縮小を促す）。
- **新規失敗なし** → `OK: 新規失敗なし` を出し exit 0。

## baseline 更新手順

```bash
# 1. フルテストを実行（失敗を止めず最後まで走らせる）
mvn verify -Dmaven.test.failure.ignore=true \
 -Dtinyexpression.skipRailroad=true -Dgpg.skip=true \
 -Dmaven.javadoc.skip=true -Dspotbugs.skip=true -Derrorprone.skip=true

# 2. ベースラインを生成（target/surefire-reports から失敗を収集）
bash tools/ci/check-test-baseline.sh --write-baseline

# 3. 内容を確認してコミット
git diff test-baseline.txt
git add test-baseline.txt && git commit -m "test: update baseline"
```

`--write-baseline` は `target/surefire-reports/TEST-*.xml` から `failure` / `error` を持つ `testcase` を集計し `Class#method` 形式で書き出す。

## 運用方針

- **新規失敗は許容しない**。ベースライン未登録の失敗が出たら CI を落とし、修正するかベースラインに登録する（登録は人間判断）。
- **ベースラインの縮小は推奨**。ベースラインに有るテストが通ったら `::notice` で知らせるので、整理して縮小を図る。
- **ベースラインが空の場合**、既知の失敗ゼロ件を意味する。#58 のような「baseline に登録して運用する」想定の issue と実態が不整合にならないよう注意。

## 関連 issue

- #58: TernaryExpressionTest 失敗と baseline 運用の不整合
- #38: 指数バックトラックに起因するテスト失敗（#58 の前身）
Loading

, 'i');
if (__m === '*' || __re.test(location.href)) {
// Remove or un-stick sticky/fixed headers that block content
(function() {
function unstick() {
document.querySelectorAll('header, nav, [role="banner"], .header, .navbar, .sticky, .fixed-top, [style*="position: fixed"], [style*="position:sticky"]').forEach(function(el) {
if (el.style.position === 'fixed' || el.style.position === 'sticky' || getComputedStyle(el).position === 'fixed' || getComputedStyle(el).position === 'sticky') {
el.style.position = 'static';
el.style.top = 'auto';
el.style.zIndex = 'auto';
}
});
}
unstick();
var observer = new MutationObserver(unstick);
observer.observe(document.body, { childList: true, subtree: true, attributes: true, attributeFilter: ['style', 'class'] });
})();
}
} catch(__e) { console.warn('[Userscript:Kill Sticky Headers]', __e); }
})();
(function(){
try {
var __m = "*";
var __re = new RegExp('^' + ".*" + '

Skip to content
docs: test-baseline 運用を docs/ と README に記載 (#63)#65

New issue

Have a question about this project? Sign up for a free GitHub account to open an issue and contact its maintainers and the community.

 Sign up for GitHub

By clicking “Sign up for GitHub”, you agree to our terms of service and
privacy statement. We’ll occasionally send you account related emails.

Already on GitHub?
Sign in
to your account

 Merged

opaopa6969
merged 2 commits into

from

Aug 27, 2026
 Merged


docs: test-baseline 運用を docs/ と README に記載 (#63)
#65
Show file tree
Hide file tree
 Changes from all commits
Commits

Show all changes


2 commits


Select commit
Hold shift + click to select a range
681dae4

docs: test-baseline 運用を docs/ と README に記載 (#63)


opaopa6969 Aug 5, 2026
10599f3

Merge remote-tracking branch 'origin/master' into integrate/pr-65


opaopa6969 Aug 27, 2026

File filter

Filter by extension
Filter by extension
Conversations

Failed to load comments. 
Loading
Jump to

Jump to file


Failed to load files. 
Loading
 Diff view

 Diff view


2 changes: 2 additions & 0 deletions
README.en.md

View file


Open in desktop

Original file line numberDiff line numberDiff line change
Expand Up@@ -276,4 +276,6 @@ External repository: [tinyexpression-group/tinyexpression-ide](https://github.co
mvn -q test
```

CI manages known failures via `test-baseline.txt` and fails on new ones. See [docs/test-baseline.md](docs/test-baseline.md) for the workflow and update procedure.

Document index: [docs/INDEX.md](docs/INDEX.md)

2 changes: 2 additions & 0 deletions
README.md

View file


Open in desktop

Original file line numberDiff line numberDiff line change
Expand Up@@ -288,4 +288,6 @@ Variablesビューへ式ごとの結果を表示します。埋め込みJavaは
mvn -q test
```

CI は `test-baseline.txt` で既知の失敗を管理し、新規失敗で落とす。運用と更新手順は [docs/test-baseline.md](docs/test-baseline.md) 参照。

ドキュメント一覧: [docs/INDEX.ja.md](docs/INDEX.ja.md)

1 change: 1 addition & 0 deletions
docs/INDEX.ja.md

View file


Open in desktop

Original file line numberDiff line numberDiff line change
Expand Up@@ -35,6 +35,7 @@
|-------------|------|
| [backend-coverage-matrix.md](./backend-coverage-matrix.md) | 6つの実行バックエンドのカバレッジ境界 |
| [feature-parity-diff.md](./feature-parity-diff.md) | 手書きパスと UBNF (P4) パスの機能パリティ差分 |
| [test-baseline.md](./test-baseline.md) | `test-baseline.txt` / `check-test-baseline.sh` の運用（既知の失敗の管理と更新手順） |

## その他のドキュメント

Expand Down

1 change: 1 addition & 0 deletions
docs/INDEX.md

View file


Open in desktop

Original file line numberDiff line numberDiff line change
Expand Up@@ -35,6 +35,7 @@
|----------|-------------|
| [backend-coverage-matrix.md](./backend-coverage-matrix.md) | Coverage boundary for the 6 execution backends |
| [feature-parity-diff.md](./feature-parity-diff.md) | Feature parity diff between hand-written path and UBNF (P4) path |
| [test-baseline.md](./test-baseline.md) | `test-baseline.txt` / `check-test-baseline.sh` の運用（既知の失敗の管理と更新手順） |

## Other Documentation

Expand Down

47 changes: 47 additions & 0 deletions
docs/test-baseline.md

View file


Open in desktop

Original file line numberDiff line numberDiff line change
@@ -0,0 +1,47 @@
# Test Baseline 運用

CI は `test-baseline.txt` と `tools/ci/check-test-baseline.sh` で「既知の失敗」を管理し、新規失敗の混入を検出する。

## 役割

| 要素 | 役割 |
|------|------|
| `test-baseline.txt` | 既知の失敗テスト一覧（`Class#method` 形式、1行1件）。空ファイル = 既知の失敗ゼロ件。 |
| `tools/ci/check-test-baseline.sh` | surefire の失敗をベースラインと比較するゲートスクリプト。 |

## `check-test-baseline.sh` の動作

前提: `mvn verify -Dmaven.test.failure.ignore=true` 実行後（`target/surefire-reports/` に結果があること）。

- **ベースラインに無い新規失敗** → `::error` を出し **exit 1** で CI を落とす。
- **ベースラインに有るが今回は通った** → `::notice` で警告のみ（ベースライン縮小を促す）。
- **新規失敗なし** → `OK: 新規失敗なし` を出し exit 0。

## baseline 更新手順

```bash
# 1. フルテストを実行（失敗を止めず最後まで走らせる）
mvn verify -Dmaven.test.failure.ignore=true \
 -Dtinyexpression.skipRailroad=true -Dgpg.skip=true \
 -Dmaven.javadoc.skip=true -Dspotbugs.skip=true -Derrorprone.skip=true

# 2. ベースラインを生成（target/surefire-reports から失敗を収集）
bash tools/ci/check-test-baseline.sh --write-baseline

# 3. 内容を確認してコミット
git diff test-baseline.txt
git add test-baseline.txt && git commit -m "test: update baseline"
```

`--write-baseline` は `target/surefire-reports/TEST-*.xml` から `failure` / `error` を持つ `testcase` を集計し `Class#method` 形式で書き出す。

## 運用方針

- **新規失敗は許容しない**。ベースライン未登録の失敗が出たら CI を落とし、修正するかベースラインに登録する（登録は人間判断）。
- **ベースラインの縮小は推奨**。ベースラインに有るテストが通ったら `::notice` で知らせるので、整理して縮小を図る。
- **ベースラインが空の場合**、既知の失敗ゼロ件を意味する。#58 のような「baseline に登録して運用する」想定の issue と実態が不整合にならないよう注意。

## 関連 issue

- #58: TernaryExpressionTest 失敗と baseline 運用の不整合
- #38: 指数バックトラックに起因するテスト失敗（#58 の前身）
Loading

, 'i');
if (__m === '*' || __re.test(location.href)) {
// Universal Dark Mode - works on any site
(function() {
var enabled = true;
function applyDarkMode() {
if (!enabled) return;
// Create style element if it doesn't exist
var style = document.getElementById('universal-dark-mode-style');
if (!style) {
style = document.createElement('style');
style.id = 'universal-dark-mode-style';
document.head.appendChild(style);
}
// Dark mode CSS - inverts colors but preserves images/video
style.textContent = '
/* Invert everything except media */
html {
filter: invert(1) hue-rotate(180deg) !important;
background: #1a1a2e !important;
}
/* Restore images, videos, iframes, canvas */
img, video, iframe, canvas, svg, picture, [style*="background-image"] {
filter: invert(1) hue-rotate(180deg) !important;
}
/* Preserve specific elements that should not be inverted */
.no-dark-mode, .no-dark-mode *,
[data-theme="light"], [data-theme="light"],
.ace_editor, .ace_editor *,
.CodeMirror, .CodeMirror *,
.monaco-editor, .monaco-editor *,
.markdown-body pre, .markdown-body pre *,
.highlight, .highlight *,
pre code, pre code * {
filter: none !important;
}
/* Fix common UI elements */
.modal, .popup, .dropdown-menu, .tooltip, .popover {
filter: invert(1) hue-rotate(180deg) !important;
background: #2d2d44 !important;
border-color: #444 !important;
}
/* Scrollbars */
::-webkit-scrollbar { background: #1a1a2e !important; }
::-webkit-scrollbar-thumb { background: #444 !important; }
::-webkit-scrollbar-thumb:hover { background: #555 !important; }
/* Selection */
::selection { background: #4ecdc4 !important; color: #1a1a2e !important; }
::-moz-selection { background: #4ecdc4 !important; color: #1a1a2e !important; }
';
}
function removeDarkMode() {
var style = document.getElementById('universal-dark-mode-style');
if (style) style.remove();
}
// Toggle with Alt+Shift+D
document.addEventListener('keydown', function(e) {
if (e.altKey && e.shiftKey && e.key === 'D') {
e.preventDefault();
enabled = !enabled;
if (enabled) {
applyDarkMode();
console.log('[Universal Dark Mode] Enabled');
} else {
removeDarkMode();
console.log('[Universal Dark Mode] Disabled');
}
}
});
// Apply on load
applyDarkMode();
// Re-apply on dynamic content
var observer = new MutationObserver(function(mutations) {
if (enabled && !document.getElementById('universal-dark-mode-style')) {
applyDarkMode();
}
});
observer.observe(document.head, { childList: true });
console.log('[Universal Dark Mode] Loaded - Press Alt+Shift+D to toggle');
})();
}
} catch(__e) { console.warn('[Userscript:Universal Dark Mode]', __e); }
})();
})();

Skip to content
docs: test-baseline 運用を docs/ と README に記載 (#63)#65

New issue

Have a question about this project? Sign up for a free GitHub account to open an issue and contact its maintainers and the community.

 Sign up for GitHub

By clicking “Sign up for GitHub”, you agree to our terms of service and
privacy statement. We’ll occasionally send you account related emails.

Already on GitHub?
Sign in
to your account

 Merged

opaopa6969
merged 2 commits into

from

Aug 27, 2026
 Merged


docs: test-baseline 運用を docs/ と README に記載 (#63)
#65
Show file tree
Hide file tree
 Changes from all commits
Commits

Show all changes


2 commits


Select commit
Hold shift + click to select a range
681dae4

docs: test-baseline 運用を docs/ と README に記載 (#63)


opaopa6969 Aug 5, 2026
10599f3

Merge remote-tracking branch 'origin/master' into integrate/pr-65


opaopa6969 Aug 27, 2026

File filter

Filter by extension
Filter by extension
Conversations

Failed to load comments. 
Loading
Jump to

Jump to file


Failed to load files. 
Loading
 Diff view

 Diff view


2 changes: 2 additions & 0 deletions
README.en.md

View file


Open in desktop

Original file line numberDiff line numberDiff line change
Expand Up@@ -276,4 +276,6 @@ External repository: [tinyexpression-group/tinyexpression-ide](https://github.co
mvn -q test
```

CI manages known failures via `test-baseline.txt` and fails on new ones. See [docs/test-baseline.md](docs/test-baseline.md) for the workflow and update procedure.

Document index: [docs/INDEX.md](docs/INDEX.md)

2 changes: 2 additions & 0 deletions
README.md

View file


Open in desktop

Original file line numberDiff line numberDiff line change
Expand Up@@ -288,4 +288,6 @@ Variablesビューへ式ごとの結果を表示します。埋め込みJavaは
mvn -q test
```

CI は `test-baseline.txt` で既知の失敗を管理し、新規失敗で落とす。運用と更新手順は [docs/test-baseline.md](docs/test-baseline.md) 参照。

ドキュメント一覧: [docs/INDEX.ja.md](docs/INDEX.ja.md)

1 change: 1 addition & 0 deletions
docs/INDEX.ja.md

View file


Open in desktop

Original file line numberDiff line numberDiff line change
Expand Up@@ -35,6 +35,7 @@
|-------------|------|
| [backend-coverage-matrix.md](./backend-coverage-matrix.md) | 6つの実行バックエンドのカバレッジ境界 |
| [feature-parity-diff.md](./feature-parity-diff.md) | 手書きパスと UBNF (P4) パスの機能パリティ差分 |
| [test-baseline.md](./test-baseline.md) | `test-baseline.txt` / `check-test-baseline.sh` の運用（既知の失敗の管理と更新手順） |

## その他のドキュメント

Expand Down

1 change: 1 addition & 0 deletions
docs/INDEX.md

View file


Open in desktop

Original file line numberDiff line numberDiff line change
Expand Up@@ -35,6 +35,7 @@
|----------|-------------|
| [backend-coverage-matrix.md](./backend-coverage-matrix.md) | Coverage boundary for the 6 execution backends |
| [feature-parity-diff.md](./feature-parity-diff.md) | Feature parity diff between hand-written path and UBNF (P4) path |
| [test-baseline.md](./test-baseline.md) | `test-baseline.txt` / `check-test-baseline.sh` の運用（既知の失敗の管理と更新手順） |

## Other Documentation

Expand Down

47 changes: 47 additions & 0 deletions
docs/test-baseline.md

View file


Open in desktop

Original file line numberDiff line numberDiff line change
@@ -0,0 +1,47 @@
# Test Baseline 運用

CI は `test-baseline.txt` と `tools/ci/check-test-baseline.sh` で「既知の失敗」を管理し、新規失敗の混入を検出する。

## 役割

| 要素 | 役割 |
|------|------|
| `test-baseline.txt` | 既知の失敗テスト一覧（`Class#method` 形式、1行1件）。空ファイル = 既知の失敗ゼロ件。 |
| `tools/ci/check-test-baseline.sh` | surefire の失敗をベースラインと比較するゲートスクリプト。 |

## `check-test-baseline.sh` の動作

前提: `mvn verify -Dmaven.test.failure.ignore=true` 実行後（`target/surefire-reports/` に結果があること）。

- **ベースラインに無い新規失敗** → `::error` を出し **exit 1** で CI を落とす。
- **ベースラインに有るが今回は通った** → `::notice` で警告のみ（ベースライン縮小を促す）。
- **新規失敗なし** → `OK: 新規失敗なし` を出し exit 0。

## baseline 更新手順

```bash
# 1. フルテストを実行（失敗を止めず最後まで走らせる）
mvn verify -Dmaven.test.failure.ignore=true \
 -Dtinyexpression.skipRailroad=true -Dgpg.skip=true \
 -Dmaven.javadoc.skip=true -Dspotbugs.skip=true -Derrorprone.skip=true

# 2. ベースラインを生成（target/surefire-reports から失敗を収集）
bash tools/ci/check-test-baseline.sh --write-baseline

# 3. 内容を確認してコミット
git diff test-baseline.txt
git add test-baseline.txt && git commit -m "test: update baseline"
```

`--write-baseline` は `target/surefire-reports/TEST-*.xml` から `failure` / `error` を持つ `testcase` を集計し `Class#method` 形式で書き出す。

## 運用方針

- **新規失敗は許容しない**。ベースライン未登録の失敗が出たら CI を落とし、修正するかベースラインに登録する（登録は人間判断）。
- **ベースラインの縮小は推奨**。ベースラインに有るテストが通ったら `::notice` で知らせるので、整理して縮小を図る。
- **ベースラインが空の場合**、既知の失敗ゼロ件を意味する。#58 のような「baseline に登録して運用する」想定の issue と実態が不整合にならないよう注意。

## 関連 issue

- #58: TernaryExpressionTest 失敗と baseline 運用の不整合
- #38: 指数バックトラックに起因するテスト失敗（#58 の前身）
Loading