MathFormulaProcessor.php 11 KB

123456789101112131415161718192021222324252627282930313233343536373839404142434445464748495051525354555657585960616263646566676869707172737475767778798081828384858687888990919293949596979899100101102103104105106107108109110111112113114115116117118119120121122123124125126127128129130131132133134135136137138139140141142143144145146147148149150151152153154155156157158159160161162163164165166167168169170171172173174175176177178179180181182183184185186187188189190191192193194195196197198199200201202203204205206207208209210211212213214215216217218219220221222223224225226227228229230231232233234235236237238239240241242243244245246247248249250251252253254255256257258259260261262263264265266267268269270271272273274275276277278279280281282283284285286287288289290291
  1. <?php
  2. namespace App\Services;
  3. class MathFormulaProcessor
  4. {
  5. /**
  6. * 处理数学公式,确保有正确的 LaTeX 标记
  7. *
  8. * 策略:
  9. * 1. 清理 HTML 标签和实体
  10. * 2. 规范化反斜杠(处理多重转义)
  11. * 3. 修复丢失反斜杠的常见 LaTeX 命令
  12. * 4. 确保公式被正确的定界符包裹
  13. */
  14. public static function processFormulas(string $content): string
  15. {
  16. if (empty($content)) {
  17. return $content;
  18. }
  19. // 1. 基础清理
  20. // 递归解码 HTML 实体
  21. $decoded = html_entity_decode($content, ENT_QUOTES, 'UTF-8');
  22. while ($decoded !== $content) {
  23. $content = $decoded;
  24. $decoded = html_entity_decode($content, ENT_QUOTES, 'UTF-8');
  25. }
  26. $content = trim($content);
  27. // 2. 规范化反斜杠
  28. $content = preg_replace('/\\\\+([a-zA-Z])/', '\\\\$1', $content);
  29. // 3. 修复常见 LaTeX 命令
  30. $commands = [
  31. 'sqrt', 'frac', 'times', 'div', 'pm', 'cdot',
  32. 'sin', 'cos', 'tan', 'log', 'ln', 'lim',
  33. 'alpha', 'beta', 'gamma', 'theta', 'pi', 'sigma', 'omega', 'Delta',
  34. 'leq', 'geq', 'neq', 'approx', 'infty',
  35. 'sum', 'prod', 'int', 'partial', 'nabla'
  36. ];
  37. $pattern = '/(?<!\\\\)\b(' . implode('|', $commands) . ')\b/';
  38. $content = preg_replace($pattern, '\\\\$1', $content);
  39. // 4. 规范化 LaTeX 命令中的空格 (OCR 常见问题)
  40. // 4.1 移除 LaTeX 命令后的空格: \frac { -> \frac{
  41. $content = preg_replace('/\\\\([a-zA-Z]+)\s+\{/', '\\\\$1{', $content);
  42. // 4.2 移除花括号内的前导和尾随空格: { 1 } -> {1}
  43. $content = preg_replace('/\{\s+/', '{', $content);
  44. $content = preg_replace('/\s+\}/', '}', $content);
  45. // 4.3 移除上标/下标符号周围的空格: x ^ { a } -> x^{a}
  46. $content = preg_replace('/\s*\^\s*\{\s*/', '^{', $content);
  47. $content = preg_replace('/\s*_\s*\{\s*/', '_{', $content);
  48. // 4.4 移除 \left 和 \right 后的空格: \left ( -> \left(
  49. $content = preg_replace('/\\\\(left|right)\s+/', '\\\\$1', $content);
  50. // 4.5 移除括号内侧的空格: ( x ) -> (x)
  51. $content = preg_replace('/\(\s+/', '(', $content);
  52. $content = preg_replace('/\s+\)/', ')', $content);
  53. // 4.6 规范化多个连续空格为单个空格
  54. $content = preg_replace('/\s+/', ' ', $content);
  55. // 4.7 清理 OCR 错误产生的多余 $ 符号
  56. // 移除花括号内的 $: {a$} -> {a}
  57. $content = preg_replace('/\{([^}]*)\$+([^}]*)\}/', '{$1$2}', $content);
  58. // 移除末尾的多余 $$$
  59. $content = preg_replace('/\$+\s*$/', '', $content);
  60. // 移除开头的多余 $$$
  61. $content = preg_replace('/^\s*\$+/', '', $content);
  62. // 移除连续的 $$$ (3个或更多)
  63. $content = preg_replace('/\$\$\$+/', '$$', $content);
  64. // 5. 处理定界符
  65. // 如果内容已经是完整的公式(被 $ 或 $$ 包裹),则保持原样
  66. if (self::hasDelimiters($content)) {
  67. $content = self::cleanInsideDelimiters($content);
  68. return $content;
  69. }
  70. // 6. 智能包装 (统一处理混合内容)
  71. // 无论是纯文本还是富文本,都使用智能识别来包裹公式
  72. // 这能同时处理:
  73. // - "已知函数 f(x) = ..." (未包裹的混合内容)
  74. // - "验证:$2x...$" (部分包裹的混合内容)
  75. // - "4x^2 - 25y^2" (未包裹的纯公式)
  76. // 先清理已有的定界符内部
  77. $content = self::cleanInsideDelimiters($content);
  78. // 然后智能包裹剩余的数学部分
  79. $content = self::smartWrapMixedContent($content);
  80. return $content;
  81. }
  82. /**
  83. * 清理定界符内部的 HTML 标签
  84. */
  85. private static function cleanInsideDelimiters(string $content): string
  86. {
  87. // 定义定界符模式
  88. $patterns = [
  89. '/\$\$([\s\S]*?)\$\$/', // $$...$$
  90. '/\$([\s\S]*?)\$/', // $...$
  91. '/\\\\\(([\s\S]*?)\\\\\)/', // \(...\)
  92. '/\\\\\[([\s\S]*?)\\\\\]/' // \[...\]
  93. ];
  94. foreach ($patterns as $pattern) {
  95. $content = preg_replace_callback($pattern, function ($matches) {
  96. // $matches[0] 是完整匹配 (如 $...$)
  97. // $matches[1] 是内部内容
  98. // 清理内部的 HTML 标签
  99. $cleanContent = strip_tags($matches[1]);
  100. // 解码实体
  101. $cleanContent = html_entity_decode($cleanContent, ENT_QUOTES, 'UTF-8');
  102. $cleanContent = trim($cleanContent);
  103. // 重建定界符 (保持原样)
  104. // 注意:我们需要根据原来的定界符类型来重建
  105. // 这里简单起见,我们直接用匹配到的完整字符串的定界符部分
  106. // 但 preg_replace_callback 不容易直接获取定界符,所以我们硬编码
  107. if (str_starts_with($matches[0], '$$')) return '$$' . $cleanContent . '$$';
  108. if (str_starts_with($matches[0], '$')) return '$' . $cleanContent . '$';
  109. if (str_starts_with($matches[0], '\[')) return '\[' . $cleanContent . '\]';
  110. if (str_starts_with($matches[0], '\(')) return '\(' . $cleanContent . '\)';
  111. // 默认回退 (不应该发生)
  112. return $matches[0];
  113. }, $content);
  114. }
  115. return $content;
  116. }
  117. /**
  118. * 智能识别并包裹富文本中的数学公式
  119. */
  120. private static function smartWrapMixedContent(string $content): string
  121. {
  122. // 正则策略:匹配 HTML 标签 OR 数学公式候选
  123. // 捕获组 1: HTML 标签 (忽略)
  124. // 捕获组 2: 已有的定界符 (忽略)
  125. // 捕获组 3: 数学公式 (处理)
  126. $tagPattern = '<[^>]+>';
  127. // 匹配已有的定界符
  128. $existingDelimiterPattern = '(?:\$\$[\s\S]*?\$\$|\$[\s\S]*?\$|\\\\\([\s\S]*?\\\\\)|\\\\\[[\s\S]*?\\\\\])';
  129. // 数学公式特征:
  130. // 1. 函数定义: f(x) = ...
  131. // 2. 等式/不等式: ... = ..., ... > ..., ... < ...
  132. // 3. 包含 LaTeX 命令: \sqrt, \frac 等
  133. // 4. 包含上标/下标: x^2, a_n
  134. // 匹配函数定义或等式 (例如 f(x) = 2x^2 + 1)
  135. // 必须包含 = 或 > 或 <,且周围有类数学字符
  136. $equationPattern = '(?<![\w\\\\])(?:[a-zA-Z]\([a-zA-Z0-9,]+\)|[a-zA-Z0-9\^_\{\}]+)\s*[=<>]\s*[\w\s\+\-\*\/\^\.\(\)\{\}\\\\]+(?=\s|$|<|[.,;])';
  137. // 匹配显式 LaTeX 命令 (例如 \sqrt{...})
  138. $latexPattern = '\\\\[a-zA-Z]+(?:\{[^\}]*\})?';
  139. // 匹配简单的代数项 (例如 x^2, a_n) - 需谨慎,避免匹配普通单词
  140. $algebraPattern = '(?<![\w\\\\])[a-zA-Z0-9]+\^[\w\{]+';
  141. // 匹配多项式/复杂表达式 (例如 4x^2 - 25y^2, 2x \times 2 + ...)
  142. // 特征:包含变量、数字、运算符 (+, -, *, /)、LaTeX命令、上标/下标
  143. // 必须包含至少一个运算符,且长度适中
  144. $polynomialPattern = '(?<![\w\\\\])(?:[a-zA-Z0-9\.]+(?:[\^_\{\}][a-zA-Z0-9\.\{\}]+)?|\\\\[a-zA-Z]+(?:\{[^\}]*\})?)(?:\s*[\+\-\*\/]\s*(?:[a-zA-Z0-9\.]+(?:[\^_\{\}][a-zA-Z0-9\.\{\}]+)?|\\\\[a-zA-Z]+(?:\{[^\}]*\})?))+';
  145. $pattern = "/($tagPattern)|($existingDelimiterPattern)|($equationPattern|$polynomialPattern|$latexPattern|$algebraPattern)/u";
  146. return preg_replace_callback($pattern, function ($matches) {
  147. // 如果是 HTML 标签 (组1),原样返回
  148. if (!empty($matches[1])) {
  149. return $matches[1];
  150. }
  151. // 如果是已有的定界符 (组2),原样返回
  152. if (!empty($matches[2])) {
  153. return $matches[2];
  154. }
  155. // 如果是数学公式 (组3)
  156. if (!empty($matches[3])) {
  157. $math = $matches[3];
  158. // 再次检查是否已经被包裹 (虽然外层逻辑应该处理了,但为了安全)
  159. if (str_contains($math, '$')) {
  160. return $math;
  161. }
  162. // 排除纯数字或普通单词误判
  163. if (preg_match('/^[a-zA-Z0-9\s]+$/', $math)) {
  164. return $math;
  165. }
  166. return '$' . $math . '$';
  167. }
  168. return $matches[0];
  169. }, $content);
  170. }
  171. /**
  172. * 检查是否已有定界符
  173. */
  174. private static function hasDelimiters(string $content): bool
  175. {
  176. $content = trim($content);
  177. // 检查 $$...$$
  178. if (str_starts_with($content, '$$') && str_ends_with($content, '$$')) {
  179. return true;
  180. }
  181. // 检查 $...$
  182. if (str_starts_with($content, '$') && str_ends_with($content, '$')) {
  183. return true;
  184. }
  185. // 检查 \[...\]
  186. if (str_starts_with($content, '\\[') && str_ends_with($content, '\\]')) {
  187. return true;
  188. }
  189. // 检查 \(...\)
  190. if (str_starts_with($content, '\\(') && str_ends_with($content, '\\)')) {
  191. return true;
  192. }
  193. return false;
  194. }
  195. /**
  196. * 检测数学特征
  197. */
  198. private static function containsMathFeatures(string $content): bool
  199. {
  200. // 1. 检查是否有 LaTeX 命令
  201. if (strpos($content, '\\') !== false) {
  202. return true;
  203. }
  204. // 2. 检查数学符号
  205. $symbols = ['+', '-', '*', '/', '=', '<', '>', '^', '_', '{', '}'];
  206. foreach ($symbols as $symbol) {
  207. if (strpos($content, $symbol) !== false) {
  208. // 排除普通文本中的符号(如连字符),这里做一个简单的宽容判断
  209. // 如果有数字紧随其后,或者是特定组合
  210. return true;
  211. }
  212. }
  213. // 3. 检查数字和字母的组合 (如 2x, x^2)
  214. if (preg_match('/[a-zA-Z]\d|\d[a-zA-Z]/', $content)) {
  215. return true;
  216. }
  217. return false;
  218. }
  219. /**
  220. * 批量处理
  221. */
  222. public static function processArray(array $data, array $fieldsToProcess): array
  223. {
  224. foreach ($data as $key => &$value) {
  225. if (in_array($key, $fieldsToProcess) && is_string($value)) {
  226. $value = self::processFormulas($value);
  227. } elseif (is_array($value)) {
  228. $value = self::processArray($value, $fieldsToProcess);
  229. }
  230. }
  231. return $data;
  232. }
  233. /**
  234. * 处理题目数据
  235. */
  236. public static function processQuestionData(array $question): array
  237. {
  238. $fieldsToProcess = [
  239. 'stem', 'content', 'question_text', 'answer',
  240. 'correct_answer', 'student_answer', 'explanation',
  241. 'solution', 'question_content'
  242. ];
  243. return self::processArray($question, $fieldsToProcess);
  244. }
  245. }