ds2api/tests/compat/fixtures/token_cases.json

{
  "cases": [
    {"name": "ascii_short", "text": "abcd"},
    {"name": "whitespace_only", "text": "   "},
    {"name": "newline_only", "text": "\n"},
    {"name": "cjk", "text": "你好世界"},
    {"name": "mixed", "text": "Hello 你好世界"}
  ]
}