agentinputlab 0.1.0a1__tar.gz → 0.1.0a3__tar.gz

This diff represents the content of publicly available package versions that have been released to one of the supported registries. The information contained in this diff is provided for informational purposes only and reflects changes between package versions as they appear in their respective public registries.
Files changed (578) hide show
  1. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/PKG-INFO +37 -7
  2. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/README.md +35 -5
  3. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/docs/api.md +6 -2
  4. agentinputlab-0.1.0a3/docs/benchmark-setup.md +76 -0
  5. agentinputlab-0.1.0a3/docs/getting-started.md +104 -0
  6. agentinputlab-0.1.0a3/docs/releases/0.1.0a2.md +26 -0
  7. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/pyproject.toml +2 -2
  8. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/__init__.py +1 -1
  9. agentinputlab-0.1.0a3/src/agentinputlab/__main__.py +6 -0
  10. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/api.py +50 -4
  11. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/backends/llm/__init__.py +2 -1
  12. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/backends/llm/openai_compatible.py +55 -3
  13. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/benchmarks/__init__.py +3 -0
  14. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/benchmarks/cache.py +9 -2
  15. agentinputlab-0.1.0a3/src/agentinputlab/benchmarks/discovery.py +87 -0
  16. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/benchmarks/registry.py +4 -1
  17. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/cli/main.py +58 -1
  18. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/registry/runtime.py +12 -2
  19. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab.egg-info/PKG-INFO +37 -7
  20. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab.egg-info/SOURCES.txt +5 -0
  21. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/.release/PYPI_PUBLISHING_DISABLED +0 -0
  22. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/CITATION.cff +0 -0
  23. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/LICENSE +0 -0
  24. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/MANIFEST.in +0 -0
  25. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/NOTICE +0 -0
  26. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/PUBLISHING.md +0 -0
  27. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/THIRD_PARTY_NOTICES.md +0 -0
  28. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/docs/ace-bfcl.md +0 -0
  29. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/docs/ace-native-statebench.md +0 -0
  30. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/docs/ace-native-tau.md +0 -0
  31. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/docs/ace-native-toolsandbox.md +0 -0
  32. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/docs/ace-online.md +0 -0
  33. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/docs/acon-live-tau.md +0 -0
  34. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/docs/acon-live-tooltalk.md +0 -0
  35. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/docs/adaptive-rag-fit.md +0 -0
  36. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/docs/decomp-planner.md +0 -0
  37. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/docs/hyde-external.md +0 -0
  38. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/docs/infocqr-student.md +0 -0
  39. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/docs/ircot-native-qa.md +0 -0
  40. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/docs/ircot-prediction-replay.md +0 -0
  41. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/docs/llmlingua2-multilingual.md +0 -0
  42. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/docs/llmlingua2-training.md +0 -0
  43. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/docs/longllmlingua-controlled.md +0 -0
  44. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/docs/plan-and-budget-full.md +0 -0
  45. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/docs/plan-and-budget-hard-cap.md +0 -0
  46. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/docs/qrag-training.md +0 -0
  47. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/docs/r2ag-training.md +0 -0
  48. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/docs/real-execution.md +0 -0
  49. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/docs/recomp-abstractive-training.md +0 -0
  50. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/docs/recomp-extractive-training.md +0 -0
  51. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/docs/recomp-selective.md +0 -0
  52. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/docs/reformer-induction.md +0 -0
  53. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/docs/retriever_profiles.md +0 -0
  54. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/docs/rrr-controlled.md +0 -0
  55. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/docs/smartsearch-training.md +0 -0
  56. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/docs/toolkit-acceptance.md +0 -0
  57. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/docs/udcs-deterministic.md +0 -0
  58. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/docs/validation.md +0 -0
  59. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/scripts/selectors/_common.py +0 -0
  60. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/scripts/selectors/build_policy_manifest.py +0 -0
  61. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/scripts/selectors/calibrate_selector.py +0 -0
  62. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/scripts/selectors/export_discovery.py +0 -0
  63. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/scripts/selectors/freeze_selector.py +0 -0
  64. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/scripts/selectors/train_selector.py +0 -0
  65. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/setup.cfg +0 -0
  66. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/algorithms/__init__.py +0 -0
  67. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/algorithms/acquire/__init__.py +0 -0
  68. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/algorithms/acquire/adaptive_rag/__init__.py +0 -0
  69. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/algorithms/acquire/adaptive_rag/replay.py +0 -0
  70. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/algorithms/acquire/adaptive_rag/runtime.py +0 -0
  71. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/algorithms/acquire/adaptive_rag_common_support.py +0 -0
  72. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/algorithms/acquire/hyde.py +0 -0
  73. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/algorithms/acquire/hyde_controlled.py +0 -0
  74. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/algorithms/acquire/hyde_external.py +0 -0
  75. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/algorithms/acquire/ircot.py +0 -0
  76. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/algorithms/acquire/ircot_common_support.py +0 -0
  77. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/algorithms/acquire/ircot_native.py +0 -0
  78. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/algorithms/acquire/ircot_replay.py +0 -0
  79. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/algorithms/acquire/qrag/__init__.py +0 -0
  80. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/algorithms/acquire/qrag/bridge.py +0 -0
  81. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/algorithms/acquire/qrag/common_support.py +0 -0
  82. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/algorithms/acquire/qrag/native_axis.py +0 -0
  83. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/algorithms/acquire/qrag/reader_adapter.py +0 -0
  84. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/algorithms/acquire/r2ag/__init__.py +0 -0
  85. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/algorithms/acquire/r2ag/bridge.py +0 -0
  86. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/algorithms/acquire/r2ag/common_support.py +0 -0
  87. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/algorithms/acquire/r2ag/socket_runtime.py +0 -0
  88. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/algorithms/clarify/__init__.py +0 -0
  89. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/algorithms/clarify/_structured.py +0 -0
  90. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/algorithms/clarify/active_task_disambiguation.py +0 -0
  91. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/algorithms/clarify/ask_or_assume/__init__.py +0 -0
  92. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/algorithms/clarify/ask_or_assume/monitor.py +0 -0
  93. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/algorithms/clarify/future_turns.py +0 -0
  94. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/algorithms/clarify/udcs.py +0 -0
  95. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/algorithms/clarify/udcs_deterministic.py +0 -0
  96. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/algorithms/curate/__init__.py +0 -0
  97. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/algorithms/curate/acon/__init__.py +0 -0
  98. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/algorithms/curate/acon/common.py +0 -0
  99. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/algorithms/curate/acon/common_support.py +0 -0
  100. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/algorithms/curate/acon/history_bridge.py +0 -0
  101. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/algorithms/curate/acon/observation_bridge.py +0 -0
  102. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/algorithms/curate/llmlingua/__init__.py +0 -0
  103. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/algorithms/curate/llmlingua/adapters.py +0 -0
  104. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/algorithms/curate/llmlingua/budget.py +0 -0
  105. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/algorithms/curate/llmlingua/controlled.py +0 -0
  106. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/algorithms/curate/llmlingua/multilingual.py +0 -0
  107. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/algorithms/curate/llmlingua/span_map.py +0 -0
  108. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/algorithms/curate/recomp/__init__.py +0 -0
  109. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/algorithms/curate/recomp/external.py +0 -0
  110. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/algorithms/curate/recomp/selective.py +0 -0
  111. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/algorithms/decompose/__init__.py +0 -0
  112. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/algorithms/decompose/decomp/__init__.py +0 -0
  113. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/algorithms/decompose/decomp/common_support.py +0 -0
  114. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/algorithms/decompose/decomp/planner_component.py +0 -0
  115. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/algorithms/decompose/decomp/worker_bridge.py +0 -0
  116. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/algorithms/decompose/llm_compiler/__init__.py +0 -0
  117. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/algorithms/decompose/llm_compiler/bridge.py +0 -0
  118. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/algorithms/decompose/llm_compiler/common_support.py +0 -0
  119. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/algorithms/decompose/plan_and_budget/__init__.py +0 -0
  120. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/algorithms/decompose/plan_and_budget/cached_soft_budget.py +0 -0
  121. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/algorithms/decompose/plan_and_budget/decomposer_component.py +0 -0
  122. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/algorithms/decompose/plan_and_budget/full.py +0 -0
  123. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/algorithms/decompose/plan_and_budget/hard_cap.py +0 -0
  124. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/algorithms/decompose/plan_and_budget/regenerated_soft_budget.py +0 -0
  125. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/algorithms/decompose/plan_and_solve/__init__.py +0 -0
  126. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/algorithms/decompose/plan_and_solve/plan_component.py +0 -0
  127. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/algorithms/decompose/plan_and_solve/ps_prompt.py +0 -0
  128. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/algorithms/decompose/self_ask/__init__.py +0 -0
  129. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/algorithms/decompose/self_ask/loop.py +0 -0
  130. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/algorithms/decompose/self_ask/planner_component.py +0 -0
  131. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/algorithms/reformulate/__init__.py +0 -0
  132. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/algorithms/reformulate/infocqr/__init__.py +0 -0
  133. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/algorithms/reformulate/infocqr/cache_replay.py +0 -0
  134. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/algorithms/reformulate/infocqr/external.py +0 -0
  135. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/algorithms/reformulate/infocqr/student.py +0 -0
  136. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/algorithms/reformulate/query2doc/__init__.py +0 -0
  137. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/algorithms/reformulate/query2doc/controlled_live.py +0 -0
  138. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/algorithms/reformulate/query2doc/models.py +0 -0
  139. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/algorithms/reformulate/query2doc/official_cached.py +0 -0
  140. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/algorithms/reformulate/query2doc/querygym_bridge.py +0 -0
  141. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/algorithms/reformulate/query2doc/querygym_runtime.py +0 -0
  142. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/algorithms/reformulate/reformer/__init__.py +0 -0
  143. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/algorithms/reformulate/reformer/external.py +0 -0
  144. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/algorithms/reformulate/rrr.py +0 -0
  145. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/annotation/__init__.py +0 -0
  146. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/annotation/independent.py +0 -0
  147. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/annotation/server.py +0 -0
  148. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/annotation/static/app.js +0 -0
  149. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/annotation/static/index.html +0 -0
  150. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/annotation/static/review.css +0 -0
  151. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/annotation/static/review.html +0 -0
  152. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/annotation/static/review.js +0 -0
  153. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/annotation/static/styles.css +0 -0
  154. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/annotation/store.py +0 -0
  155. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/artifacts/__init__.py +0 -0
  156. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/artifacts/json_file.py +0 -0
  157. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/artifacts/manifest.py +0 -0
  158. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/artifacts/store.py +0 -0
  159. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/backends/__init__.py +0 -0
  160. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/backends/embedding/__init__.py +0 -0
  161. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/backends/embedding/base.py +0 -0
  162. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/backends/embedding/callable.py +0 -0
  163. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/backends/embedding/replay.py +0 -0
  164. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/backends/llm/base.py +0 -0
  165. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/backends/llm/callable.py +0 -0
  166. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/backends/llm/decomp_completion.py +0 -0
  167. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/backends/llm/final_content_stop.py +0 -0
  168. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/backends/llm/gpt_oss_final_channel.py +0 -0
  169. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/backends/llm/transformers.py +0 -0
  170. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/backends/retrieval/__init__.py +0 -0
  171. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/backends/retrieval/base.py +0 -0
  172. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/backends/retrieval/dense.py +0 -0
  173. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/backends/retrieval/memory.py +0 -0
  174. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/backends/retrieval/sqlite_fts.py +0 -0
  175. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/backends/user/__init__.py +0 -0
  176. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/backends/user/base.py +0 -0
  177. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/backends/user/callable.py +0 -0
  178. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/backends/user/replay.py +0 -0
  179. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/backends/vector.py +0 -0
  180. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/benchmarks/acquisition.py +0 -0
  181. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/benchmarks/ale.py +0 -0
  182. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/benchmarks/appworld_ul.py +0 -0
  183. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/benchmarks/assets.py +0 -0
  184. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/benchmarks/base.py +0 -0
  185. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/benchmarks/beir_archive.py +0 -0
  186. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/benchmarks/beir_sample.py +0 -0
  187. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/benchmarks/bfcl_native.py +0 -0
  188. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/benchmarks/bfcl_v3.py +0 -0
  189. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/benchmarks/clariq.py +0 -0
  190. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/benchmarks/data/registry.json +0 -0
  191. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/benchmarks/data/smoke_assets.json +0 -0
  192. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/benchmarks/data/statebench_v0_8_1_task_ids.json +0 -0
  193. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/benchmarks/data/toolsandbox_165848b_scenario_names.json +0 -0
  194. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/benchmarks/execution.py +0 -0
  195. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/benchmarks/interactive.py +0 -0
  196. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/benchmarks/ir_query.py +0 -0
  197. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/benchmarks/longbench.py +0 -0
  198. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/benchmarks/paired_replay.py +0 -0
  199. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/benchmarks/preprocess.py +0 -0
  200. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/benchmarks/production.py +0 -0
  201. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/benchmarks/qa.py +0 -0
  202. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/benchmarks/retrieval.py +0 -0
  203. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/benchmarks/runtime.py +0 -0
  204. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/benchmarks/statebench.py +0 -0
  205. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/benchmarks/tau3.py +0 -0
  206. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/benchmarks/toolsandbox.py +0 -0
  207. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/benchmarks/trec_dl_sample.py +0 -0
  208. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/campaign.py +0 -0
  209. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/campaign_runner.py +0 -0
  210. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/cli/__init__.py +0 -0
  211. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/connectors/__init__.py +0 -0
  212. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/connectors/knowledge/__init__.py +0 -0
  213. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/connectors/tools/__init__.py +0 -0
  214. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/connectors/tools/base.py +0 -0
  215. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/connectors/tools/mcp.py +0 -0
  216. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/connectors/tools/memory.py +0 -0
  217. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/connectors/tools/openapi.py +0 -0
  218. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/connectors/tools/schema.py +0 -0
  219. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/contracts/__init__.py +0 -0
  220. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/contracts/availability.py +0 -0
  221. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/contracts/dependency.py +0 -0
  222. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/contracts/enums.py +0 -0
  223. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/contracts/errors.py +0 -0
  224. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/contracts/evidence.py +0 -0
  225. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/contracts/intent.py +0 -0
  226. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/contracts/lifecycle.py +0 -0
  227. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/contracts/patch.py +0 -0
  228. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/contracts/serialization.py +0 -0
  229. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/contracts/state.py +0 -0
  230. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/contracts/trace.py +0 -0
  231. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/contracts/worker.py +0 -0
  232. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/core/__init__.py +0 -0
  233. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/data/__init__.py +0 -0
  234. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/data/checksums.py +0 -0
  235. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/data/downloader.py +0 -0
  236. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/data/http.py +0 -0
  237. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/data/index.py +0 -0
  238. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/data/overlap.py +0 -0
  239. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/data/preprocess.py +0 -0
  240. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/data/storage.py +0 -0
  241. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/data/trec_sample.py +0 -0
  242. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/evaluation/__init__.py +0 -0
  243. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/evaluation/outcomes.py +0 -0
  244. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/experiments/__init__.py +0 -0
  245. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/experiments/analysis.py +0 -0
  246. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/experiments/artifacts.py +0 -0
  247. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/experiments/automatic_measurement.py +0 -0
  248. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/experiments/auxiliary_matrix.py +0 -0
  249. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/experiments/bindings.py +0 -0
  250. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/experiments/blueprints.py +0 -0
  251. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/experiments/builders/__init__.py +0 -0
  252. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/experiments/builders/executable_external_payload.py +0 -0
  253. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/experiments/builders/external_process_arena.py +0 -0
  254. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/experiments/builders/registry_intervention.py +0 -0
  255. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/experiments/cli.py +0 -0
  256. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/experiments/controls.py +0 -0
  257. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/experiments/driver_guard.py +0 -0
  258. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/experiments/drivers/__init__.py +0 -0
  259. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/experiments/drivers/external_arena.py +0 -0
  260. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/experiments/drivers/method_process.py +0 -0
  261. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/experiments/drivers/parity_process.py +0 -0
  262. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/experiments/drivers/static_production.py +0 -0
  263. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/experiments/executor.py +0 -0
  264. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/experiments/loader.py +0 -0
  265. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/experiments/measurement.py +0 -0
  266. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/experiments/paper_analysis.py +0 -0
  267. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/experiments/parity_identity.py +0 -0
  268. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/experiments/plan.py +0 -0
  269. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/experiments/production_builders.py +0 -0
  270. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/experiments/readiness.py +0 -0
  271. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/experiments/schema.py +0 -0
  272. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/experiments/secrets.py +0 -0
  273. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/experiments/stateful_analysis.py +0 -0
  274. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/experiments/transfer_analysis.py +0 -0
  275. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/experiments/unseen_analysis.py +0 -0
  276. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/integrations/__init__.py +0 -0
  277. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/integrations/action_space/__init__.py +0 -0
  278. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/integrations/external_workers/__init__.py +0 -0
  279. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/integrations/external_workers/ace.py +0 -0
  280. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/integrations/external_workers/base.py +0 -0
  281. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/integrations/external_workers/decomp_live.py +0 -0
  282. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/integrations/external_workers/decomp_planner.py +0 -0
  283. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/integrations/external_workers/infocqr_student.py +0 -0
  284. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/integrations/external_workers/ircot.py +0 -0
  285. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/integrations/external_workers/llmcompiler_live.py +0 -0
  286. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/integrations/external_workers/longllmlingua.py +0 -0
  287. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/integrations/external_workers/method.py +0 -0
  288. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/integrations/external_workers/process.py +0 -0
  289. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/integrations/external_workers/supervisor.py +0 -0
  290. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/integrations/full_architecture/__init__.py +0 -0
  291. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/integrations/full_architecture/hyde.py +0 -0
  292. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/integrations/full_architecture/plan_and_budget.py +0 -0
  293. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/integrations/live_history.py +0 -0
  294. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/integrations/prompt_optimization/__init__.py +0 -0
  295. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/integrations/training/__init__.py +0 -0
  296. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/metrics/__init__.py +0 -0
  297. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/metrics/catalog.py +0 -0
  298. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/metrics/harm.py +0 -0
  299. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/metrics/paired.py +0 -0
  300. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/metrics/qa.py +0 -0
  301. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/metrics/text.py +0 -0
  302. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/metrics/third_party.py +0 -0
  303. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/models/__init__.py +0 -0
  304. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/observability/__init__.py +0 -0
  305. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/observability/budget.py +0 -0
  306. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/observability/instrumentation.py +0 -0
  307. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/observability/models.py +0 -0
  308. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/observability/monitor.py +0 -0
  309. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/optimizers/__init__.py +0 -0
  310. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/optimizers/clarify/__init__.py +0 -0
  311. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/optimizers/context/__init__.py +0 -0
  312. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/optimizers/decompose/__init__.py +0 -0
  313. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/optimizers/evidence/__init__.py +0 -0
  314. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/optimizers/rewrite/__init__.py +0 -0
  315. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/parity/__init__.py +0 -0
  316. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/parity/base.py +0 -0
  317. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/production_campaign.py +0 -0
  318. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/py.typed +0 -0
  319. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/recipes/__init__.py +0 -0
  320. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/recipes/ace.py +0 -0
  321. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/recipes/ace_bfcl.py +0 -0
  322. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/recipes/ace_common_support.py +0 -0
  323. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/recipes/ace_native_plan.py +0 -0
  324. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/recipes/ace_online.py +0 -0
  325. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/recipes/ace_retrieval.py +0 -0
  326. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/recipes/ace_statebench.py +0 -0
  327. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/recipes/ace_tau.py +0 -0
  328. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/recipes/ace_toolsandbox.py +0 -0
  329. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/recipes/acon_guideline.py +0 -0
  330. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/recipes/adaptive_rag.py +0 -0
  331. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/recipes/llmlingua2_inference.py +0 -0
  332. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/recipes/llmlingua2_training.py +0 -0
  333. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/recipes/mce.py +0 -0
  334. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/recipes/mce_final.py +0 -0
  335. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/recipes/mce_text_fit.py +0 -0
  336. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/recipes/mce_text_only.py +0 -0
  337. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/recipes/qrag.py +0 -0
  338. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/recipes/qrag_inference.py +0 -0
  339. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/recipes/r2ag_features.py +0 -0
  340. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/recipes/r2ag_inference.py +0 -0
  341. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/recipes/r2ag_training.py +0 -0
  342. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/recipes/recomp_abstractive.py +0 -0
  343. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/recipes/recomp_extractive.py +0 -0
  344. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/recipes/reformer.py +0 -0
  345. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/recipes/rqrag.py +0 -0
  346. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/recipes/rqrag_common_support.py +0 -0
  347. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/recipes/rqrag_completion.py +0 -0
  348. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/recipes/skillopt.py +0 -0
  349. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/recipes/skillopt_common_support.py +0 -0
  350. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/recipes/skillopt_environment.py +0 -0
  351. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/recipes/skillopt_environment_cli.py +0 -0
  352. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/recipes/skillopt_retrieval.py +0 -0
  353. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/recipes/smartsearch.py +0 -0
  354. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/recipes/smartsearch_curriculum.py +0 -0
  355. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/recipes/smartsearch_grpo_contracts.py +0 -0
  356. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/recipes/smartsearch_grpo_data.py +0 -0
  357. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/recipes/smartsearch_grpo_meter.py +0 -0
  358. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/recipes/smartsearch_grpo_prefix.py +0 -0
  359. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/recipes/smartsearch_grpo_rollout.py +0 -0
  360. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/recipes/smartsearch_grpo_tools.py +0 -0
  361. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/recipes/smartsearch_grpo_training.py +0 -0
  362. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/recipes/smartsearch_grpo_transport.py +0 -0
  363. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/recipes/smartsearch_grpo_worker.py +0 -0
  364. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/recipes/smartsearch_inference.py +0 -0
  365. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/recipes/smartsearch_native_data.py +0 -0
  366. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/recipes/smartsearch_policy.py +0 -0
  367. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/recipes/smartsearch_policy_worker.py +0 -0
  368. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/recipes/smartsearch_sampling.py +0 -0
  369. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/recipes/smartsearch_teacher.py +0 -0
  370. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/recipes/smartsearch_training.py +0 -0
  371. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/registry/__init__.py +0 -0
  372. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/registry/beta.py +0 -0
  373. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/registry/data/algorithms.json +0 -0
  374. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/registry/data/auxiliary_method_profiles.json +0 -0
  375. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/registry/loader.py +0 -0
  376. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/registry/result_manifest.py +0 -0
  377. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/registry/schema.py +0 -0
  378. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/runner/__init__.py +0 -0
  379. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/runner/balance.py +0 -0
  380. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/runner/cache.py +0 -0
  381. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/runner/composite.py +0 -0
  382. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/runner/engine.py +0 -0
  383. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/runner/runtime_guard.py +0 -0
  384. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/runner/worker.py +0 -0
  385. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/runtime_bootstrap.py +0 -0
  386. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/selectors/__init__.py +0 -0
  387. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/selectors/advanced.py +0 -0
  388. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/selectors/artifacts.py +0 -0
  389. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/selectors/base.py +0 -0
  390. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/selectors/campaigns.py +0 -0
  391. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/selectors/catalog.py +0 -0
  392. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/selectors/discovery.py +0 -0
  393. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/selectors/evaluation.py +0 -0
  394. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/selectors/features.py +0 -0
  395. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/selectors/learned.py +0 -0
  396. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/selectors/no_op.py +0 -0
  397. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/selectors/outcome_table.py +0 -0
  398. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/selectors/producer.py +0 -0
  399. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/selectors/rules.py +0 -0
  400. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/selectors/runtime.py +0 -0
  401. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/studies/__init__.py +0 -0
  402. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/studies/design.py +0 -0
  403. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/studies/paired.py +0 -0
  404. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/studio/__init__.py +0 -0
  405. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/studio/campaigns.py +0 -0
  406. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/studio/engine.py +0 -0
  407. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/studio/model_backends.py +0 -0
  408. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/studio/prepared.py +0 -0
  409. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/studio/server.py +0 -0
  410. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/studio/static/app.js +0 -0
  411. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/studio/static/campaigns.html +0 -0
  412. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/studio/static/campaigns.js +0 -0
  413. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/studio/static/index.html +0 -0
  414. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/studio/static/result.html +0 -0
  415. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/studio/static/result.js +0 -0
  416. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab/studio/static/styles.css +0 -0
  417. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab.egg-info/dependency_links.txt +0 -0
  418. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab.egg-info/entry_points.txt +0 -0
  419. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab.egg-info/requires.txt +0 -0
  420. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/src/agentinputlab.egg-info/top_level.txt +0 -0
  421. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/tools/acceptance_fit_transport.py +0 -0
  422. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/tools/acceptance_method_bindings.py +0 -0
  423. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/tools/acceptance_plan.py +0 -0
  424. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/tools/check_bfcl_native_source.py +0 -0
  425. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/tools/check_distribution.py +0 -0
  426. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/tools/compatibility_inventory.py +0 -0
  427. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/tools/installed_sdk_smoke.py +0 -0
  428. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/tools/prepare_adaptive_boundary_cases.py +0 -0
  429. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/tools/prepare_adaptive_trained_acceptance.py +0 -0
  430. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/tools/resume_native_entry_failures.py +0 -0
  431. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/tools/run_ace_acceptance.py +0 -0
  432. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/tools/run_ace_online_acceptance.py +0 -0
  433. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/tools/run_acon_acceptance.py +0 -0
  434. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/tools/run_acon_guideline_acceptance.py +0 -0
  435. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/tools/run_acon_history_acceptance.py +0 -0
  436. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/tools/run_adaptive_acceptance.py +0 -0
  437. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/tools/run_adaptive_controlled_acceptance.py +0 -0
  438. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/tools/run_adaptive_trained_acceptance.py +0 -0
  439. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/tools/run_beir_archive_acceptance.py +0 -0
  440. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/tools/run_bfcl_acceptance.py +0 -0
  441. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/tools/run_clariq_acceptance.py +0 -0
  442. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/tools/run_curator_acceptance.py +0 -0
  443. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/tools/run_decomp_live_acceptance.py +0 -0
  444. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/tools/run_hyde_external_acceptance.py +0 -0
  445. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/tools/run_ircot_controlled_acceptance.py +0 -0
  446. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/tools/run_ircot_native_qa_acceptance.py +0 -0
  447. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/tools/run_llmcompiler_live_acceptance.py +0 -0
  448. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/tools/run_llmcompiler_planner_acceptance.py +0 -0
  449. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/tools/run_llmlingua2_bert_acceptance.py +0 -0
  450. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/tools/run_llmlingua2_trained_acceptance.py +0 -0
  451. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/tools/run_longbench_acceptance.py +0 -0
  452. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/tools/run_mce_acceptance.py +0 -0
  453. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/tools/run_native_arena_acceptance.py +0 -0
  454. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/tools/run_pab_full_acceptance.py +0 -0
  455. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/tools/run_pab_hard_cap_acceptance.py +0 -0
  456. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/tools/run_plan_budget_component_acceptance.py +0 -0
  457. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/tools/run_qa_extended_acceptance.py +0 -0
  458. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/tools/run_qa_method_acceptance.py +0 -0
  459. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/tools/run_qa_schema_acceptance.py +0 -0
  460. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/tools/run_qrag_acceptance.py +0 -0
  461. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/tools/run_qrag_trained_acceptance.py +0 -0
  462. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/tools/run_recomp_abstractive_acceptance.py +0 -0
  463. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/tools/run_recomp_acceptance.py +0 -0
  464. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/tools/run_recomp_selective_acceptance.py +0 -0
  465. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/tools/run_recomp_sentence_acceptance.py +0 -0
  466. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/tools/run_recomp_trained_acceptance.py +0 -0
  467. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/tools/run_reformer_profiles_acceptance.py +0 -0
  468. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/tools/run_retrieval_acceptance.py +0 -0
  469. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/tools/run_rqrag_acceptance.py +0 -0
  470. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/tools/run_rqrag_fullpath_acceptance.py +0 -0
  471. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/tools/run_self_ask_component_acceptance.py +0 -0
  472. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/tools/run_skillopt_acceptance.py +0 -0
  473. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/tools/run_smartsearch_acceptance.py +0 -0
  474. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/tools/run_static_acceptance.py +0 -0
  475. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/tools/run_tau_acceptance.py +0 -0
  476. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/tools/run_tooltalk_acceptance.py +0 -0
  477. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/tools/run_udcs_deterministic_acceptance.py +0 -0
  478. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/tools/summarize_acceptance_evidence.py +0 -0
  479. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/workers/README.md +0 -0
  480. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/workers/ace/README.md +0 -0
  481. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/workers/ace/__init__.py +0 -0
  482. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/workers/ace/compatibility_manifest.json +0 -0
  483. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/workers/ace/driver.py +0 -0
  484. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/workers/acon/README.md +0 -0
  485. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/workers/acon/__init__.py +0 -0
  486. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/workers/acon/compatibility_manifest.json +0 -0
  487. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/workers/acon/driver.py +0 -0
  488. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/workers/acon/fitted.py +0 -0
  489. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/workers/acon/guideline.py +0 -0
  490. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/workers/acon/guideline_source_manifest.json +0 -0
  491. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/workers/adaptive_rag/README.md +0 -0
  492. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/workers/adaptive_rag/__init__.py +0 -0
  493. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/workers/adaptive_rag/compatibility_manifest.json +0 -0
  494. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/workers/adaptive_rag/driver.py +0 -0
  495. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/workers/adaptive_rag/fixture_runtime.py +0 -0
  496. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/workers/adaptive_rag/runtime.py +0 -0
  497. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/workers/ask_or_assume/README.md +0 -0
  498. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/workers/ask_or_assume/__init__.py +0 -0
  499. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/workers/ask_or_assume/compatibility_manifest.json +0 -0
  500. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/workers/ask_or_assume/driver.py +0 -0
  501. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/workers/decomp/README.md +0 -0
  502. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/workers/decomp/UPSTREAM_LICENSE.Apache-2.0.txt +0 -0
  503. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/workers/decomp/__init__.py +0 -0
  504. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/workers/decomp/compatibility_manifest.json +0 -0
  505. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/workers/decomp/driver.py +0 -0
  506. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/workers/decomp/live.py +0 -0
  507. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/workers/decomp/runtime.py +0 -0
  508. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/workers/infocqr/README.md +0 -0
  509. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/workers/infocqr/__init__.py +0 -0
  510. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/workers/infocqr/compatibility_manifest.json +0 -0
  511. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/workers/infocqr/driver.py +0 -0
  512. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/workers/ircot/README.md +0 -0
  513. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/workers/ircot/__init__.py +0 -0
  514. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/workers/ircot/compatibility_manifest.json +0 -0
  515. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/workers/ircot/controlled.py +0 -0
  516. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/workers/ircot/driver.py +0 -0
  517. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/workers/ircot/fixture_bindings.json +0 -0
  518. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/workers/ircot/fixture_config.json +0 -0
  519. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/workers/ircot/fixture_prompt.txt +0 -0
  520. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/workers/ircot/native_qa.py +0 -0
  521. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/workers/ircot/qa_compatibility_manifest.json +0 -0
  522. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/workers/ircot/runtime.py +0 -0
  523. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/workers/llmcompiler/README.md +0 -0
  524. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/workers/llmcompiler/__init__.py +0 -0
  525. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/workers/llmcompiler/compatibility_manifest.json +0 -0
  526. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/workers/llmcompiler/driver.py +0 -0
  527. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/workers/llmcompiler/export_prompts.py +0 -0
  528. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/workers/llmcompiler/live.py +0 -0
  529. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/workers/llmcompiler/patch_manifest.json +0 -0
  530. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/workers/mce/README.md +0 -0
  531. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/workers/mce/__init__.py +0 -0
  532. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/workers/mce/compatibility_manifest.json +0 -0
  533. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/workers/mce/driver.py +0 -0
  534. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/workers/mce/final_eval.py +0 -0
  535. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/workers/official_arenas/README.md +0 -0
  536. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/workers/official_arenas/__init__.py +0 -0
  537. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/workers/official_arenas/capture_records.py +0 -0
  538. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/workers/official_arenas/driver.py +0 -0
  539. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/workers/official_arenas/protocol.py +0 -0
  540. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/workers/official_arenas/providers/__init__.py +0 -0
  541. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/workers/official_arenas/providers/_live_history.py +0 -0
  542. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/workers/official_arenas/providers/_message_compat.py +0 -0
  543. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/workers/official_arenas/providers/appworld_ul.py +0 -0
  544. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/workers/official_arenas/providers/fixture.py +0 -0
  545. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/workers/official_arenas/providers/statebench.py +0 -0
  546. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/workers/official_arenas/providers/tau3.py +0 -0
  547. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/workers/official_arenas/providers/tau_retail.py +0 -0
  548. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/workers/official_arenas/providers/toolsandbox.py +0 -0
  549. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/workers/official_arenas/providers/tooltalk.py +0 -0
  550. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/workers/official_arenas/retail_capture.py +0 -0
  551. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/workers/official_arenas/retail_driver.py +0 -0
  552. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/workers/qrag/README.md +0 -0
  553. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/workers/qrag/__init__.py +0 -0
  554. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/workers/qrag/compatibility_manifest.json +0 -0
  555. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/workers/qrag/driver.py +0 -0
  556. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/workers/r2ag/README.md +0 -0
  557. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/workers/r2ag/__init__.py +0 -0
  558. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/workers/r2ag/compatibility_manifest.json +0 -0
  559. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/workers/r2ag/driver.py +0 -0
  560. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/workers/r2ag/feature_schema.json +0 -0
  561. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/workers/r2ag/runtime.py +0 -0
  562. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/workers/recomp/README.md +0 -0
  563. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/workers/recomp/__init__.py +0 -0
  564. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/workers/recomp/compatibility_manifest.json +0 -0
  565. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/workers/recomp/driver.py +0 -0
  566. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/workers/reformer/README.md +0 -0
  567. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/workers/reformer/__init__.py +0 -0
  568. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/workers/reformer/compatibility_manifest.json +0 -0
  569. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/workers/reformer/driver.py +0 -0
  570. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/workers/reformer/induction.py +0 -0
  571. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/workers/rrr/README.md +0 -0
  572. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/workers/rrr/__init__.py +0 -0
  573. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/workers/rrr/compatibility_manifest.json +0 -0
  574. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/workers/rrr/driver.py +0 -0
  575. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/workers/smartsearch/README.md +0 -0
  576. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/workers/smartsearch/__init__.py +0 -0
  577. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/workers/smartsearch/compatibility_manifest.json +0 -0
  578. {agentinputlab-0.1.0a1 → agentinputlab-0.1.0a3}/workers/smartsearch/driver.py +0 -0
@@ -1,12 +1,12 @@
1
1
  Metadata-Version: 2.4
2
2
  Name: agentinputlab
3
- Version: 0.1.0a1
3
+ Version: 0.1.0a3
4
4
  Summary: Auditable, intent-aware input intervention for LLM agents
5
5
  Author: Chuang Zhao, Xiaomeng Li
6
6
  License-Expression: MIT
7
7
  Project-URL: Homepage, https://github.com/Data-Designer/AgentInputLab
8
8
  Project-URL: Repository, https://github.com/Data-Designer/AgentInputLab
9
- Project-URL: Documentation, https://github.com/Data-Designer/AgentInputLab/tree/release/toolkit-public/docs
9
+ Project-URL: Documentation, https://pypi.org/project/agentinputlab/
10
10
  Keywords: agents,llm,prompt-optimization,retrieval,benchmark
11
11
  Classifier: Development Status :: 3 - Alpha
12
12
  Classifier: Intended Audience :: Science/Research
@@ -281,15 +281,29 @@ This branch contains reusable library code, worker adapters, synthetic tests and
281
281
 
282
282
  ## Install
283
283
 
284
+ The commands below work without GitHub access. The source distribution also
285
+ includes `docs/getting-started.md` with a real HTTP backend example and troubleshooting.
286
+
284
287
  Python 3.10+; optional model dependencies have their own Python/platform constraints.
285
288
 
286
289
  ```sh
287
- python -m pip install agentinputlab==0.1.0a1
288
- agentinputlab doctor --json
289
- agentinputlab smoke --json
290
+ python -m pip install agentinputlab==0.1.0a3
291
+ python -m agentinputlab --version
292
+ python -m agentinputlab doctor --offline --json
293
+ python -m agentinputlab smoke --json
294
+ ```
295
+
296
+ To obtain the public source and included documentation from PyPI:
297
+
298
+ ```sh
299
+ python -m pip download --no-deps --no-binary=agentinputlab agentinputlab==0.1.0a3
300
+ tar -xzf agentinputlab-0.1.0a3.tar.gz
301
+ cd agentinputlab-0.1.0a3
302
+ python -m pip install .
290
303
  ```
291
304
 
292
- To install from source:
305
+ Maintainers with repository access can instead use the Git checkout
306
+ (the research repository remains private):
293
307
 
294
308
  ```sh
295
309
  git clone --single-branch --branch release/toolkit-public https://github.com/Data-Designer/AgentInputLab.git
@@ -304,7 +318,7 @@ The Python distribution is an initial alpha. The JavaScript SDK remains source-o
304
318
  ```sh
305
319
  python -m pip install build
306
320
  python -m build
307
- python -m pip install dist/agentinputlab-0.1.0a1-py3-none-any.whl
321
+ python -m pip install dist/agentinputlab-0.1.0a3-py3-none-any.whl
308
322
  cd packages/sdk
309
323
  npm ci
310
324
  npm test
@@ -315,6 +329,22 @@ npm install /absolute/path/to/agentinputlab-sdk-0.1.0-alpha.1.tgz
315
329
 
316
330
  ## Python: apply a real intervention
317
331
 
332
+ ### Discover before running (0.1.0a3+)
333
+
334
+ ```sh
335
+ agentinputlab list --releases --search query2doc
336
+ agentinputlab show plan.plan_and_solve.ps_prompt --parameters
337
+ agentinputlab datasets list --search beir
338
+ agentinputlab datasets show beir.arguana
339
+ ```
340
+
341
+ These commands inspect metadata and constructor parameters without running an
342
+ algorithm or downloading data. Dataset details include source sizes and native
343
+ runtime prerequisites. Start with the [first-run guide](docs/getting-started.md)
344
+ and [dataset walkthrough](docs/benchmark-setup.md).
345
+
346
+ ### Apply a prompt intervention
347
+
318
348
  ```python
319
349
  from agentinputlab import FrozenAgentState, InterventionContext
320
350
  from agentinputlab.api import create_intervention, run_intervention
@@ -6,15 +6,29 @@ This branch contains reusable library code, worker adapters, synthetic tests and
6
6
 
7
7
  ## Install
8
8
 
9
+ The commands below work without GitHub access. The source distribution also
10
+ includes `docs/getting-started.md` with a real HTTP backend example and troubleshooting.
11
+
9
12
  Python 3.10+; optional model dependencies have their own Python/platform constraints.
10
13
 
11
14
  ```sh
12
- python -m pip install agentinputlab==0.1.0a1
13
- agentinputlab doctor --json
14
- agentinputlab smoke --json
15
+ python -m pip install agentinputlab==0.1.0a3
16
+ python -m agentinputlab --version
17
+ python -m agentinputlab doctor --offline --json
18
+ python -m agentinputlab smoke --json
19
+ ```
20
+
21
+ To obtain the public source and included documentation from PyPI:
22
+
23
+ ```sh
24
+ python -m pip download --no-deps --no-binary=agentinputlab agentinputlab==0.1.0a3
25
+ tar -xzf agentinputlab-0.1.0a3.tar.gz
26
+ cd agentinputlab-0.1.0a3
27
+ python -m pip install .
15
28
  ```
16
29
 
17
- To install from source:
30
+ Maintainers with repository access can instead use the Git checkout
31
+ (the research repository remains private):
18
32
 
19
33
  ```sh
20
34
  git clone --single-branch --branch release/toolkit-public https://github.com/Data-Designer/AgentInputLab.git
@@ -29,7 +43,7 @@ The Python distribution is an initial alpha. The JavaScript SDK remains source-o
29
43
  ```sh
30
44
  python -m pip install build
31
45
  python -m build
32
- python -m pip install dist/agentinputlab-0.1.0a1-py3-none-any.whl
46
+ python -m pip install dist/agentinputlab-0.1.0a3-py3-none-any.whl
33
47
  cd packages/sdk
34
48
  npm ci
35
49
  npm test
@@ -40,6 +54,22 @@ npm install /absolute/path/to/agentinputlab-sdk-0.1.0-alpha.1.tgz
40
54
 
41
55
  ## Python: apply a real intervention
42
56
 
57
+ ### Discover before running (0.1.0a3+)
58
+
59
+ ```sh
60
+ agentinputlab list --releases --search query2doc
61
+ agentinputlab show plan.plan_and_solve.ps_prompt --parameters
62
+ agentinputlab datasets list --search beir
63
+ agentinputlab datasets show beir.arguana
64
+ ```
65
+
66
+ These commands inspect metadata and constructor parameters without running an
67
+ algorithm or downloading data. Dataset details include source sizes and native
68
+ runtime prerequisites. Start with the [first-run guide](docs/getting-started.md)
69
+ and [dataset walkthrough](docs/benchmark-setup.md).
70
+
71
+ ### Apply a prompt intervention
72
+
43
73
  ```python
44
74
  from agentinputlab import FrozenAgentState, InterventionContext
45
75
  from agentinputlab.api import create_intervention, run_intervention
@@ -27,8 +27,12 @@ from agentinputlab import InterventionContext
27
27
  from agentinputlab.algorithms.clarify import ActiveTaskDisambiguation
28
28
  from agentinputlab.backends.llm import OpenAICompatibleBackend
29
29
 
30
- backend = OpenAICompatibleBackend(model_id=os.environ['MODEL_ID'],
31
- base_url=os.environ['MODEL_BASE_URL'])
30
+ backend = OpenAICompatibleBackend(
31
+ model_id=os.environ['MODEL_ID'],
32
+ base_url=os.environ['MODEL_BASE_URL'],
33
+ deployment_identity={'revision': os.environ['MODEL_REVISION']},
34
+ api_key_env='MODEL_API_KEY',
35
+ )
32
36
  service = ToolkitService(
33
37
  factories={'clarify.active_task_disambiguation': ActiveTaskDisambiguation},
34
38
  context_factory=lambda seed: InterventionContext(backend=backend, seed=seed),
@@ -0,0 +1,76 @@
1
+ # Find, prepare and use a dataset
2
+
3
+ These discovery commands (0.1.0a3+) read packaged metadata. They do not create
4
+ caches, download data or call a model:
5
+
6
+ ```sh
7
+ agentinputlab datasets list
8
+ agentinputlab datasets list --search beir
9
+ agentinputlab datasets list --family reformulate --json
10
+ agentinputlab datasets show beir.arguana
11
+ ```
12
+
13
+ `automatic_loader` tells you whether `load_benchmark()` supports preparation for
14
+ that entry. `source_download_bytes` is the size of **all source files for a cold
15
+ cache**, not the currently missing bytes, unpacked disk usage or GPU memory.
16
+ `exceeds_default_download_limit` flags sources larger than the default 512 MiB
17
+ download ceiling. Review upstream terms before using `--accept-license-review`.
18
+ Do not raise the ceiling just to inspect a dataset; use a documented source-side
19
+ sample for large datasets when appropriate.
20
+
21
+ ## Cache-first data loading
22
+
23
+ Install the optional dependencies required by the selected adapter:
24
+
25
+ ```sh
26
+ python -m pip install 'agentinputlab[benchmarks,evaluation]==0.1.0a3'
27
+ agentinputlab datasets prepare beir.arguana --cache-dir ./toolkit-cache
28
+ ```
29
+
30
+ Preparation verifies pinned source hashes and reuses valid cached files. It never
31
+ silently overwrites a corrupt cache. To prohibit network access, pass `--offline`.
32
+ Set `AGENTINPUTLAB_CACHE` or `cache_dir` to choose a storage location; no changes
33
+ are made to your other research or model caches.
34
+
35
+ ```python
36
+ from agentinputlab.benchmarks import describe_benchmark, list_benchmarks, load_benchmark
37
+
38
+ print([item['cell_id'] for item in list_benchmarks(search='arguana')])
39
+ info = describe_benchmark('beir.arguana')
40
+ adapter = load_benchmark('beir.arguana', cache_dir='./toolkit-cache', offline=True)
41
+ example = adapter.examples(info['split'])[0]
42
+ state = example.visible_state()
43
+ print(state.query)
44
+ ```
45
+
46
+ Pass `visible_state()` to the model, **not** the entire example: the full example
47
+ also carries evaluator-only gold. Use the adapter's typed prediction object and
48
+ `score()` after real downstream execution. A successful input rewrite is not a
49
+ task score, and a retrieval query is not a QA answer. The
50
+ [real-execution guide](real-execution.md) covers readers, retrieval and native
51
+ scorers.
52
+
53
+ ## Native and interactive runtimes
54
+
55
+ `native_adapter` means there is no automatic loader in `load_benchmark()` for
56
+ that entry; it does not mean the dataset has no adapter. Do not substitute a
57
+ different dataset to bypass its prerequisites.
58
+
59
+ | Dataset type | Preparation route |
60
+ | --- | --- |
61
+ | Prepared QA / retrieval | `datasets show` → `datasets prepare` → `load_benchmark`. |
62
+ | BFCL simple | `load_bfcl_v3_simple_adapter` with its prepared bundle and official AST scorer bridge. |
63
+ | STATE, ToolSandbox, ToolTalk and interactive arenas | Native provider/environment, checkpoint or task selection, and official continuation/scoring. Inspect `python -m workers.official_arenas.driver --help` and [real execution](real-execution.md). |
64
+ | τ³ banking checkpoints | `load_benchmark` additionally requires `checkpoints` and `evaluation_bridge` before downloading. |
65
+ | Large BEIR / TREC collections | Use the documented `BEIRSampleAdapter` or `datasets prepare-trec-sample` route when full sources exceed your storage budget. |
66
+
67
+ Algorithm eligibility and runtime compatibility remain separate from dataset
68
+ availability. Check `eligibility_gate`, `family_support` and the chosen algorithm
69
+ profile; a catalog entry is not a universal compatibility guarantee.
70
+
71
+ ## Debug without repeating model requests
72
+
73
+ Use `agentinputlab --debug COMMAND ...` for toolkit-error tracebacks locally.
74
+ Normal mode prints a short error and exits with status 2. Keep debug traces
75
+ private until reviewed for paths or application details. Fix configuration before
76
+ resubmitting: the CLI does not automatically retry consumed model calls.
@@ -0,0 +1,104 @@
1
+ # First run and troubleshooting
2
+
3
+ Use a virtual environment and the same Python interpreter for installation and
4
+ execution. The dependency-free core works on Python 3.10+; native model extras
5
+ can require a particular Python version, platform, upstream checkout or weights.
6
+
7
+ ```sh
8
+ python -m venv .venv
9
+ # macOS/Linux; Windows PowerShell: .venv\Scripts\Activate.ps1
10
+ source .venv/bin/activate
11
+ python -m pip install agentinputlab==0.1.0a3
12
+ python -m agentinputlab --version
13
+ python -m agentinputlab doctor --offline --json
14
+ python -m agentinputlab smoke --json
15
+ ```
16
+
17
+ `smoke` uses labeled synthetic fixtures, makes no model calls and downloads no
18
+ datasets or weights. `doctor` checks registry integrity, not GPU readiness or
19
+ universal method/benchmark compatibility. Neither command is a benchmark score.
20
+
21
+ Version 0.1.0a2 supports both `python -m agentinputlab` and the
22
+ `agentinputlab` console command, including `--version`. The module form uses
23
+ the selected Python interpreter even when its scripts directory is not on PATH.
24
+
25
+ ## Choose a profile before installing heavy dependencies
26
+
27
+ ```sh
28
+ agentinputlab list --releases --search plan_and_solve --json
29
+ agentinputlab show plan.plan_and_solve.ps_prompt
30
+ agentinputlab show plan.plan_and_solve.ps_prompt --parameters
31
+ ```
32
+
33
+ Use the exact release ID and its prerequisite documentation. An available
34
+ entrypoint is not a configured runtime. Install only the extras you need, for
35
+ example `python -m pip install 'agentinputlab[benchmarks,evaluation]==0.1.0a3'`.
36
+ Do not install all extras into one environment: some native methods deliberately
37
+ pin incompatible upstream versions. Keep those runtimes in separate environments.
38
+
39
+ The search and parameter-inspection commands require 0.1.0a3+. They expose the
40
+ actual constructor signature without creating the algorithm or making a model
41
+ call. In Python use `describe_intervention(release_id)` from `agentinputlab.api`.
42
+ Required constructor arguments are listed separately from runtime requirements
43
+ in the profile's help and prerequisites; an optional `client=None` may still
44
+ require an external worker at execution time.
45
+
46
+ For datasets, start with `agentinputlab datasets list --search beir` and
47
+ `agentinputlab datasets show beir.arguana`. See the
48
+ [dataset preparation walkthrough](benchmark-setup.md) for cache configuration,
49
+ source sizes, offline loading and native-runtime prerequisites.
50
+
51
+ ## Make one real model call
52
+
53
+ No OpenAI SDK or local GPU package is required for the HTTP backend. Configure
54
+ an existing OpenAI-compatible endpoint and its actual model revision. This
55
+ example makes **one real request**, which can consume billed tokens; it does not
56
+ start an experiment, download a model, or compute a benchmark score.
57
+
58
+ ```python
59
+ import os
60
+ from agentinputlab.backends.llm import GenerationRequest, OpenAICompatibleBackend
61
+
62
+ backend = OpenAICompatibleBackend(
63
+ model_id=os.environ["AIL_MODEL"], # Exact served model ID, not a paper nickname.
64
+ base_url=os.environ["AIL_BASE_URL"], # e.g. http://127.0.0.1:8000/v1
65
+ deployment_identity={"revision": os.environ["AIL_MODEL_REVISION"]},
66
+ api_key_env="AIL_API_KEY", # Set only if your endpoint requires authentication.
67
+ timeout_seconds=120,
68
+ )
69
+ response = backend.generate(GenerationRequest(
70
+ prompt="What is the capital of France?", max_tokens=64, temperature=0,
71
+ ))
72
+ print(response.text)
73
+ print(response.usage)
74
+ ```
75
+
76
+ The revision is operator-declared provenance, not an independent weight check.
77
+ `base_url` is the API root; the backend appends `/chat/completions`. Do not pass
78
+ the full completion URL. Configure secrets in your environment, not source files.
79
+ Responses require the compatible chat schema and actual token usage. To apply an
80
+ intervention, supply this backend through `InterventionContext(backend=backend)`;
81
+ see [real execution and profile-specific dependencies](real-execution.md).
82
+
83
+ ## Fix common setup problems
84
+
85
+ | Symptom | Check |
86
+ | --- | --- |
87
+ | `agentinputlab: command not found` | Activate the environment where pip installed the package, or use `python -m agentinputlab` (0.1.0a2+). |
88
+ | `ModuleNotFoundError` for an optional dependency | Install the selected profile's extra in its required Python/runtime environment. |
89
+ | HTTP 401 / 403 | API key environment variable, endpoint access and model permissions. |
90
+ | HTTP 404 | API root (often `/v1`) and exact served model ID. |
91
+ | HTTP 429 | Provider quota and concurrent request limits. |
92
+ | HTTP 5xx / transport failure | Local server/provider health and network reachability. |
93
+ | Profile unavailable | Check the profile's required worker, source revision and artifacts; installing the core does not provision them. |
94
+ | Unknown profile / wrong constructor parameters | `list --releases --search NAME`, then `show EXACT_RELEASE --parameters`. Suggestions never silently change the selected profile. |
95
+ | Dataset cannot be prepared | `datasets show ID` distinguishes automatic loaders from native adapters and lists source sizes and runtime requirements. |
96
+
97
+ Version 0.1.0a2 exposes a sanitized `OpenAICompatibleTransportError`
98
+ with `http_status` for the built-in HTTP transport. Status hints contain no
99
+ provider response body, credentials or request URL. Custom transport failures
100
+ remain generic unless they use the internal sanitized status path.
101
+
102
+ There are **no automatic model retries**. A failed request may already have
103
+ consumed tokens: retain the failure and unknown cost rather than treating it as
104
+ zero usage. Decide any retry explicitly within your own declared budget.
@@ -0,0 +1,26 @@
1
+ # 0.1.0a2 — installation and diagnostic improvements
2
+
3
+ - Run the installed CLI as `python -m agentinputlab`; use `--version` to verify
4
+ which environment/version is active.
5
+ - Reject empty model IDs, invalid/non-finite timeouts, malformed API roots and
6
+ accidentally supplied full `/chat/completions` URLs before model dispatch.
7
+ - Surface sanitized HTTP status codes and setup hints through
8
+ `OpenAICompatibleTransportError`, still compatible with `RuntimeError`.
9
+ Provider bodies, credentials and request URLs are not retained.
10
+ - Add a first-run guide and an explicit, single-call real HTTP backend example.
11
+ - Document public source/documentation retrieval from PyPI without requiring
12
+ access to the private research repository.
13
+
14
+ The backend still performs one transport attempt with no implicit retries.
15
+ Model parameters, scoring, result accounting and benchmark scope are unchanged.
16
+ No additional model experiments were needed for these consumer-interface fixes.
17
+ The Git source was reconciled against the exact published 0.1.0a1 source
18
+ distribution before preparing this patch release.
19
+
20
+ Upgrade explicitly while the project is in alpha:
21
+
22
+ ```sh
23
+ python -m pip install --upgrade agentinputlab==0.1.0a2
24
+ python -m agentinputlab --version
25
+ python -m agentinputlab smoke --json
26
+ ```
@@ -4,7 +4,7 @@ build-backend = "setuptools.build_meta"
4
4
 
5
5
  [project]
6
6
  name = "agentinputlab"
7
- version = "0.1.0a1"
7
+ version = "0.1.0a3"
8
8
  description = "Auditable, intent-aware input intervention for LLM agents"
9
9
  readme = "README.md"
10
10
  requires-python = ">=3.10"
@@ -146,7 +146,7 @@ agentinputlab-serve = "agentinputlab.api:main"
146
146
  [project.urls]
147
147
  Homepage = "https://github.com/Data-Designer/AgentInputLab"
148
148
  Repository = "https://github.com/Data-Designer/AgentInputLab"
149
- Documentation = "https://github.com/Data-Designer/AgentInputLab/tree/release/toolkit-public/docs"
149
+ Documentation = "https://pypi.org/project/agentinputlab/"
150
150
 
151
151
  [tool.setuptools]
152
152
  package-dir = {"" = "src", "workers" = "workers"}
@@ -12,7 +12,7 @@ from .contracts import (
12
12
  SemanticFamily,
13
13
  )
14
14
 
15
- __version__ = "0.1.0a1"
15
+ __version__ = "0.1.0a3"
16
16
 
17
17
  __all__ = [
18
18
  "ContextBlock",
@@ -0,0 +1,6 @@
1
+ """Run the installed CLI with the selected Python interpreter."""
2
+
3
+ from agentinputlab.cli.main import main
4
+
5
+ if __name__ == "__main__":
6
+ raise SystemExit(main())
@@ -34,19 +34,65 @@ from agentinputlab.runner import CompositeInterventionRunner, InterventionRunner
34
34
  from agentinputlab.selectors import NoOpIntervention
35
35
 
36
36
 
37
+ def describe_intervention(
38
+ release_id: str, *, registry: AlgorithmRegistry | None = None
39
+ ) -> dict[str, Any]:
40
+ """Inspect a constructor without creating a runtime or making model calls."""
41
+ registry = registry or AlgorithmRegistry.default()
42
+ if release_id == "baseline.no_op":
43
+ factory = NoOpIntervention
44
+ metadata = {"id": release_id, "execution_kind": "input_patch"}
45
+ else:
46
+ _, release = registry.get_release(release_id)
47
+ metadata = release.to_dict()
48
+ if not release.entrypoint_available:
49
+ return {**metadata, "parameters": [], "blocker": release.blocker}
50
+ factory = registry.resolve_entrypoint(release_id)
51
+ parameters = []
52
+ for name, param in inspect.signature(factory).parameters.items():
53
+ if name == "release_id":
54
+ continue # Bound by the registry, not chosen by the caller.
55
+ item = {
56
+ "name": name,
57
+ "kind": param.kind.name.lower(),
58
+ "required": param.default is inspect.Parameter.empty
59
+ and param.kind not in (param.VAR_POSITIONAL, param.VAR_KEYWORD),
60
+ "annotation": (
61
+ None if param.annotation is inspect.Parameter.empty
62
+ else inspect.formatannotation(param.annotation)
63
+ ),
64
+ }
65
+ if param.default is not inspect.Parameter.empty:
66
+ default = param.default
67
+ item["default"] = (
68
+ default if default is None or isinstance(default, (str, int, float, bool))
69
+ else repr(default)
70
+ )
71
+ parameters.append(item)
72
+ return {**metadata, "parameters": parameters, "help": inspect.getdoc(factory)}
73
+
74
+
37
75
  def create_intervention(release_id: str, **parameters: Any) -> Any:
38
76
  """Instantiate a registered profile; optional runtime assets remain explicit.
39
77
 
40
78
  Parameters use the adapter's original Python signature. This does not turn
41
79
  composite agents into input-patch methods or assert benchmark eligibility.
42
80
  """
43
- if release_id == "baseline.no_op":
44
- return NoOpIntervention(**parameters)
45
- factory = AlgorithmRegistry.default().resolve_entrypoint(release_id)
81
+ factory = (
82
+ NoOpIntervention if release_id == "baseline.no_op"
83
+ else AlgorithmRegistry.default().resolve_entrypoint(release_id)
84
+ )
46
85
  signature = inspect.signature(factory)
47
86
  if "release_id" in signature.parameters:
48
87
  parameters["release_id"] = release_id
49
- signature.bind(**parameters)
88
+ try:
89
+ signature.bind(**parameters)
90
+ except TypeError as exc:
91
+ raise ValidationError(
92
+ f"invalid parameters for {release_id}: {exc}; "
93
+ f"inspect with describe_intervention({release_id!r}) or "
94
+ f"agentinputlab show {release_id} --parameters"
95
+ ) from None
50
96
  result = factory(**parameters)
51
97
  actual = getattr(result, "release_id", release_id)
52
98
  if actual != release_id:
@@ -11,7 +11,7 @@ from .base import (
11
11
  from .callable import CallableBackend, ReplayBackend
12
12
  from .decomp_completion import DecompCompletionBackend
13
13
  from .final_content_stop import FINAL_CONTENT_STOP_POLICY_ID, FinalContentStopBackend
14
- from .openai_compatible import OpenAICompatibleBackend
14
+ from .openai_compatible import OpenAICompatibleBackend, OpenAICompatibleTransportError
15
15
  from .transformers import TransformersBackend
16
16
 
17
17
  __all__ = [
@@ -24,6 +24,7 @@ __all__ = [
24
24
  "LLMBackend",
25
25
  "ModelCapability",
26
26
  "OpenAICompatibleBackend",
27
+ "OpenAICompatibleTransportError",
27
28
  "ReplayBackend",
28
29
  "TransformersBackend",
29
30
  "Usage",
@@ -4,6 +4,7 @@ from __future__ import annotations
4
4
 
5
5
  import http.client
6
6
  import json
7
+ import math
7
8
  import os
8
9
  import urllib.error
9
10
  import urllib.parse
@@ -42,6 +43,32 @@ _SENSITIVE_EXTRA_HEADERS = frozenset(
42
43
  _TRANSPORT_ATTEMPT_POLICY = "single_transport_no_implicit_retry.v1"
43
44
 
44
45
 
46
+ class OpenAICompatibleTransportError(RuntimeError):
47
+ """Sanitized single-attempt failure, optionally carrying an HTTP status.
48
+
49
+ Usage can be unknown after a failed request. Callers must not interpret
50
+ this exception as permission to retry or as evidence of zero token cost.
51
+ Provider bodies, URLs and credentials are deliberately not retained.
52
+ """
53
+
54
+ def __init__(self, http_status: int | None = None) -> None:
55
+ # Only a plain status integer may cross the untrusted transport seam.
56
+ self.http_status = (
57
+ http_status if type(http_status) is int and 100 <= http_status <= 599 else None
58
+ )
59
+ message = "OpenAI-compatible transport failed"
60
+ if self.http_status is not None:
61
+ hints = {
62
+ 401: "check api_key or api_key_env",
63
+ 403: "check endpoint access and model permissions",
64
+ 404: "check base_url (usually ending in /v1) and model_id",
65
+ 429: "check provider quota or concurrency limits",
66
+ }
67
+ hint = hints.get(self.http_status, "check the provider or local server status")
68
+ message += f" (HTTP {self.http_status}); {hint}; no automatic retry"
69
+ super().__init__(message)
70
+
71
+
45
72
  class _OpenAICompatibleHTTPStatusError(RuntimeError):
46
73
  """Sanitized status-only failure without remote response content."""
47
74
 
@@ -124,11 +151,31 @@ class OpenAICompatibleBackend(LLMBackend):
124
151
  transport: Transport = _default_transport
125
152
 
126
153
  def __post_init__(self) -> None:
127
- parsed = urllib.parse.urlparse(self.base_url)
128
- if parsed.scheme not in {"http", "https"} or not parsed.netloc:
154
+ if not isinstance(self.model_id, str) or not self.model_id.strip():
155
+ raise ValidationError("model_id must be a non-empty string matching the served model")
156
+ if (
157
+ isinstance(self.timeout_seconds, bool)
158
+ or not isinstance(self.timeout_seconds, (int, float))
159
+ or not math.isfinite(self.timeout_seconds)
160
+ or self.timeout_seconds <= 0
161
+ ):
162
+ raise ValidationError("timeout_seconds must be a finite positive number")
163
+ if not isinstance(self.base_url, str) or any(c.isspace() for c in self.base_url):
164
+ raise ValidationError("base_url must be an absolute http(s) URL")
165
+ try:
166
+ parsed = urllib.parse.urlparse(self.base_url)
167
+ valid_address = parsed.scheme in {"http", "https"} and bool(parsed.hostname)
168
+ _ = parsed.port # Validate malformed and out-of-range ports before any request.
169
+ except ValueError:
170
+ raise ValidationError("base_url must be a valid absolute http(s) URL") from None
171
+ if not valid_address:
129
172
  raise ValidationError("base_url must be an absolute http(s) URL")
130
173
  if parsed.username or parsed.password or parsed.query or parsed.fragment:
131
174
  raise ValidationError("base_url must not contain credentials, query, or fragment")
175
+ if parsed.path.rstrip("/").endswith("/chat/completions"):
176
+ raise ValidationError(
177
+ "base_url is the API root (usually ending in /v1), not /chat/completions"
178
+ )
132
179
  if not self.deployment_identity or not self.deployment_identity.get("revision"):
133
180
  raise ValidationError("OpenAI-compatible backend requires deployment_identity.revision")
134
181
  for name, value in self.extra_headers.items():
@@ -201,6 +248,7 @@ class OpenAICompatibleBackend(LLMBackend):
201
248
  headers["Authorization"] = f"Bearer {key}"
202
249
  data: Mapping[str, Any] | None = None
203
250
  transport_failed = False
251
+ http_status: int | None = None
204
252
  try:
205
253
  data = self.transport(
206
254
  f"{self.base_url}/chat/completions",
@@ -208,6 +256,10 @@ class OpenAICompatibleBackend(LLMBackend):
208
256
  payload,
209
257
  self.timeout_seconds,
210
258
  )
259
+ except _OpenAICompatibleHTTPStatusError as exc:
260
+ transport_failed = True
261
+ if type(exc.status) is int and 100 <= exc.status <= 599:
262
+ http_status = exc.status
211
263
  except Exception:
212
264
  # Custom transports are an extension boundary and may raise
213
265
  # exceptions containing request headers or provider bodies. Do
@@ -217,7 +269,7 @@ class OpenAICompatibleBackend(LLMBackend):
217
269
  # A failed request may already have generated/billed tokens. Do
218
270
  # not hide another model attempt inside one budget reservation,
219
271
  # or replace its unknown usage with a successful retry's usage.
220
- raise RuntimeError("OpenAI-compatible transport failed")
272
+ raise OpenAICompatibleTransportError(http_status)
221
273
  if key and _contains_exact_text(data, key):
222
274
  raise RuntimeError("OpenAI-compatible response contains the configured credential")
223
275
  response: GenerationResponse | None = None
@@ -46,6 +46,7 @@ from .bfcl_v3 import (
46
46
  load_bfcl_v3_simple_adapter,
47
47
  )
48
48
  from .cache import benchmark_cache_dir, load_benchmark, prepare_benchmark
49
+ from .discovery import describe_benchmark, list_benchmarks
49
50
  from .execution import (
50
51
  BenchmarkArmExecutionRecord,
51
52
  BenchmarkBlockArm,
@@ -231,7 +232,9 @@ __all__ = [
231
232
  "benchmark_cache_dir",
232
233
  "build_ale_official_command",
233
234
  "create_interactive_benchmark_adapter",
235
+ "describe_benchmark",
234
236
  "interactive_benchmark_specs",
237
+ "list_benchmarks",
235
238
  "load_benchmark",
236
239
  "load_bfcl_v3_simple_adapter",
237
240
  "load_prepared_benchmark",
@@ -29,6 +29,7 @@ from .assets import BenchmarkSmokeAssetRegistry
29
29
  from .beir_archive import BEIR_ARCHIVE_LOCKS, BEIRArchiveAdapter
30
30
  from .preprocess import _prepared_path, load_prepared_benchmark
31
31
  from .production import load_production_benchmark_adapter, production_benchmark_specs
32
+ from .registry import BenchmarkRegistry
32
33
 
33
34
  DEFAULT_DOWNLOAD_LIMIT = 512 * 1024 * 1024
34
35
 
@@ -83,6 +84,7 @@ def prepare_benchmark(
83
84
  License-review sources require explicit acknowledgement, including cache use.
84
85
  Corrupt caches raise an integrity error and are never silently overwritten.
85
86
  """
87
+ BenchmarkRegistry.default().get(cell_id)
86
88
  root = benchmark_cache_dir(cache_dir)
87
89
  positive_byte_limit(max_download_bytes, name="max_download_bytes")
88
90
  positive_byte_limit(max_prepared_bytes, name="max_prepared_bytes")
@@ -192,6 +194,13 @@ def load_benchmark(
192
194
  ):
193
195
  """Prepare missing data and construct the corresponding official adapter."""
194
196
  # Check dynamic-runtime requirements before spending bandwidth.
197
+ allowed = {"checkpoints", "evaluation_bridge"} if cell_id == "tau3.banking_knowledge" else set()
198
+ unexpected = set(runtime) - allowed
199
+ if unexpected:
200
+ raise ValidationError(
201
+ f"unsupported runtime arguments for {cell_id}: {', '.join(sorted(unexpected))}; "
202
+ "check agentinputlab datasets show before preparing data"
203
+ )
195
204
  if cell_id == "tau3.banking_knowledge" and (
196
205
  runtime.get("checkpoints") is None or runtime.get("evaluation_bridge") is None
197
206
  ):
@@ -207,8 +216,6 @@ def load_benchmark(
207
216
  max_prepared_bytes=max_prepared_bytes,
208
217
  )
209
218
  if report["kind"] == "beir_archive":
210
- if runtime:
211
- raise ValidationError("BEIR archive loader accepts no dynamic-runtime arguments")
212
219
  return BEIRArchiveAdapter(
213
220
  benchmark_id=cell_id, source_archive=report["source_archive"], license_acknowledged=True
214
221
  )