MathFormulaProcessor.php 19 KB

123456789101112131415161718192021222324252627282930313233343536373839404142434445464748495051525354555657585960616263646566676869707172737475767778798081828384858687888990919293949596979899100101102103104105106107108109110111112113114115116117118119120121122123124125126127128129130131132133134135136137138139140141142143144145146147148149150151152153154155156157158159160161162163164165166167168169170171172173174175176177178179180181182183184185186187188189190191192193194195196197198199200201202203204205206207208209210211212213214215216217218219220221222223224225226227228229230231232233234235236237238239240241242243244245246247248249250251252253254255256257258259260261262263264265266267268269270271272273274275276277278279280281282283284285286287288289290291292293294295296297298299300301302303304305306307308309310311312313314315316317318319320321322323324325326327328329330331332333334335336337338339340341342343344345346347348349350351352353354355356357358359360361362363364365366367368369370371372373374375376377378379380381382383384385386387388389390391392393394395396397398399400401402403404405406407408409410411412413414415416417418419420421422423424425426427428429430431432433434435436437438439440441442443444445446447448449450451452453454455456457458459460461462463464465466467468469470471472473474475476477478479480481482483484485486487488489490491492493494495496497498499500501502503504505506507508509
  1. <?php
  2. namespace App\Services;
  3. use Illuminate\Support\Facades\Log;
  4. class MathFormulaProcessor
  5. {
  6. /**
  7. * 处理数学公式,确保有正确的 LaTeX 标记
  8. *
  9. * 优化策略:最小化干预,只修复真正需要修复的问题
  10. * 1. 检查是否已有正确的 LaTeX 标记,如有则直接返回
  11. * 2. 只在检测到明显错误时才进行修复
  12. * 3. 优先保护正确的数学表达式不被破坏
  13. */
  14. public static function processFormulas(?string $content): string
  15. {
  16. if ($content === null || $content === '') {
  17. return '';
  18. }
  19. $content = (string) $content;
  20. // 0. 基础清理:解码 HTML 实体
  21. $decoded = html_entity_decode($content, ENT_QUOTES, 'UTF-8');
  22. while ($decoded !== $content) {
  23. $content = $decoded;
  24. $decoded = html_entity_decode($content, ENT_QUOTES, 'UTF-8');
  25. }
  26. $content = trim($content);
  27. // 0.5 将自定义 <image> 标签转换为标准 <img> 标签
  28. $content = self::convertImageTags($content);
  29. // 1. 【关键修复】处理公式内的双反斜杠 -> 单反斜杠
  30. // 数据库存储时 \sqrt 变成 \\sqrt,需要还原
  31. $content = self::normalizeBackslashesInDelimiters($content);
  32. // 2. 如果内容中包含定界符,清理内部 HTML
  33. if (self::containsDelimiters($content)) {
  34. $content = self::cleanInsideDelimiters($content);
  35. }
  36. // 3. 检测内容类型:纯数学、混合内容还是纯文本
  37. $contentType = self::detectContentType($content);
  38. // 4. 根据内容类型采取不同的处理策略
  39. switch ($contentType) {
  40. case 'pure_math':
  41. // 纯数学表达式,如 "4x^2 - 25y^2" 或 "f(x) = x^2 - 4x + 5"
  42. return self::wrapPureMath($content);
  43. case 'mixed_content':
  44. // 混合内容,如 "已知函数 f(x) = x^2 - 4x + 5,求最小值"
  45. return self::smartWrapMixedContent($content);
  46. case 'delimited':
  47. // 已包含定界符的内容($...$, $$...$$, \(...\), \[...\])
  48. // cleanInsideDelimiters() 已经清理了内部内容
  49. // 渲染工作由客户端 KaTeX 或服务端 KatexRenderer 完成
  50. // 【关键修复】将定界符内的 < > 编码为 HTML 实体,避免被浏览器当作 HTML 标签处理
  51. return self::encodeAngleBracketsInDelimiters($content);
  52. case 'plain_text':
  53. default:
  54. // 纯文本,不需要处理
  55. return $content;
  56. }
  57. }
  58. /**
  59. * 将自定义 <image> 标签转换为标准 <img> 标签
  60. * 例如:<image src="https://example.com/1.png"/> => <img src="https://example.com/1.png" />
  61. */
  62. private static function convertImageTags(string $content): string
  63. {
  64. // 匹配 <image src="..." /> 或 <image src="..."></image> 格式
  65. return preg_replace(
  66. '/<image\s+src=["\']([^"\']+)["\'](?:\s*\/>|><\/image>)/i',
  67. '<img src="$1" />',
  68. $content
  69. );
  70. }
  71. /**
  72. * 【新增】将公式定界符内被JSON双重转义的LaTeX命令还原
  73. * 例如:\\sqrt -> \sqrt, \\frac -> \frac
  74. * 但保留矩阵换行符 \\ (后面不跟字母的情况)
  75. */
  76. private static function normalizeBackslashesInDelimiters(string $content): string
  77. {
  78. // 只替换 \\+小写字母 的情况(被JSON转义的LaTeX命令,如 \\sqrt -> \sqrt)
  79. // 保留 \\+大写字母 的情况(换行符后跟文本,如 \\CD 应保持为 \\CD)
  80. // 保留 \\+数字 或 \\+空白 的情况(矩阵换行符)
  81. $fixEscapedCommands = function ($tex) {
  82. // 保护多行环境中的换行符 \\,避免被误判为 LaTeX 命令
  83. $placeholder = '__KATEX_BR__';
  84. $originalTex = $tex;
  85. $protectedEnvs = [];
  86. $environments = [
  87. 'cases',
  88. 'aligned',
  89. 'align',
  90. 'align*',
  91. 'array',
  92. 'matrix',
  93. 'pmatrix',
  94. 'bmatrix',
  95. 'vmatrix',
  96. 'Vmatrix',
  97. 'gather',
  98. 'split',
  99. 'eqnarray',
  100. ];
  101. foreach ($environments as $env) {
  102. $pattern = '/\\\\begin\{' . preg_quote($env, '/') . '\}([\s\S]*?)\\\\end\{' . preg_quote($env, '/') . '\}/';
  103. $tex = preg_replace_callback($pattern, function ($m) use ($env, $placeholder) {
  104. $content = str_replace('\\\\', $placeholder, $m[1]);
  105. return '\\begin{' . $env . '}' . $content . '\\end{' . $env . '}';
  106. }, $tex);
  107. if ($tex !== $originalTex && !in_array($env, $protectedEnvs, true)) {
  108. $protectedEnvs[] = $env;
  109. }
  110. }
  111. // \\sqrt -> \sqrt, \\frac -> \frac, 但 \\CD 或 \\2 保持不变
  112. // 【修复】只匹配小写字母,因为 LaTeX 命令都是小写
  113. $tex = preg_replace('/\\\\\\\\([a-z])/', '\\\\$1', $tex);
  114. // 还原多行环境换行
  115. $tex = str_replace($placeholder, '\\\\', $tex);
  116. if ($protectedEnvs) {
  117. Log::debug('MathFormulaProcessor: protected multiline line breaks', [
  118. 'envs' => $protectedEnvs,
  119. ]);
  120. }
  121. return $tex;
  122. };
  123. // 1. 处理 $$...$$ 块级公式
  124. $content = preg_replace_callback('/\$\$([\s\S]*?)\$\$/', function ($matches) use ($fixEscapedCommands) {
  125. return '$$'.$fixEscapedCommands($matches[1]).'$$';
  126. }, $content);
  127. // 2. 处理 $...$ 行内公式(避免与$$冲突)
  128. $content = preg_replace_callback('/(?<!\$)\$([^$\n]+?)\$(?!\$)/', function ($matches) use ($fixEscapedCommands) {
  129. return '$'.$fixEscapedCommands($matches[1]).'$';
  130. }, $content);
  131. // 3. 处理 \(...\) 行内公式
  132. $content = preg_replace_callback('/\\\\\(([\s\S]*?)\\\\\)/', function ($matches) use ($fixEscapedCommands) {
  133. return '\\('.$fixEscapedCommands($matches[1]).'\\)';
  134. }, $content);
  135. // 4. 处理 \[...\] 块级公式
  136. $content = preg_replace_callback('/\\\\\[([\s\S]*?)\\\\\]/', function ($matches) use ($fixEscapedCommands) {
  137. return '\\['.$fixEscapedCommands($matches[1]).'\\]';
  138. }, $content);
  139. return $content;
  140. }
  141. /**
  142. * 【新增】将定界符内的 < > 编码为 HTML 实体
  143. * 避免 LaTeX 公式中的 < > 被浏览器当作 HTML 标签处理
  144. * 例如:$x<4$ 中的 <4 会被浏览器当作无效标签移除
  145. */
  146. private static function encodeAngleBracketsInDelimiters(string $content): string
  147. {
  148. $encodeInner = function (string $tex): string {
  149. // 将 < 和 > 编码为 HTML 实体,KaTeX 会正确处理这些实体
  150. return str_replace(['<', '>'], ['&lt;', '&gt;'], $tex);
  151. };
  152. // 1. 处理 $$...$$ 块级公式
  153. $content = preg_replace_callback('/\$\$([\s\S]*?)\$\$/', function ($matches) use ($encodeInner) {
  154. return '$$' . $encodeInner($matches[1]) . '$$';
  155. }, $content);
  156. // 2. 处理 $...$ 行内公式(避免与$$冲突)
  157. $content = preg_replace_callback('/(?<!\$)\$([^$\n]+?)\$(?!\$)/', function ($matches) use ($encodeInner) {
  158. return '$' . $encodeInner($matches[1]) . '$';
  159. }, $content);
  160. // 3. 处理 \(...\) 行内公式
  161. $content = preg_replace_callback('/\\\\\(([\s\S]*?)\\\\\)/', function ($matches) use ($encodeInner) {
  162. return '\\(' . $encodeInner($matches[1]) . '\\)';
  163. }, $content);
  164. // 4. 处理 \[...\] 块级公式
  165. $content = preg_replace_callback('/\\\\\[([\s\S]*?)\\\\\]/', function ($matches) use ($encodeInner) {
  166. return '\\[' . $encodeInner($matches[1]) . '\\]';
  167. }, $content);
  168. return $content;
  169. }
  170. /**
  171. * 【新增】检查内容中是否包含任意定界符(不要求整个字符串被包裹)
  172. */
  173. private static function containsDelimiters(string $content): bool
  174. {
  175. // 检查是否包含 $...$, $$...$$, \(...\), \[...\]
  176. return preg_match('/\$\$[\s\S]*?\$\$|\$[^$\n]+?\$|\\\\\([\s\S]*?\\\\\)|\\\\\[[\s\S]*?\\\\\]/', $content) === 1;
  177. }
  178. /**
  179. * 检测内容类型
  180. * 优化:加入中文检测,避免包裹包含中文的混合内容
  181. */
  182. private static function detectContentType(string $content): string
  183. {
  184. // 优先检查是否包含定界符(使用 containsDelimiters 检测混合内容中的公式)
  185. if (self::containsDelimiters($content)) {
  186. return 'delimited';
  187. }
  188. // 检查是否包含数学特征
  189. $hasMathFeatures = self::containsMathFeatures($content);
  190. // 如果不包含数学特征,返回纯文本
  191. if (! $hasMathFeatures) {
  192. return 'plain_text';
  193. }
  194. // 检查是否包含中文字符
  195. if (preg_match('/[\x{4e00}-\x{9fa5}]/u', $content)) {
  196. // 包含中文 + 数学特征 = 混合内容,需要智能提取数学部分
  197. return 'mixed_content';
  198. }
  199. // 检查是否包含长文本(超过一定长度的字母组合)
  200. $hasLongText = preg_match('/[a-zA-Z]{8,}/', $content);
  201. if ($hasLongText) {
  202. // 包含长文本,可能是混合内容,但不包裹(保守策略)
  203. return 'plain_text';
  204. }
  205. // 检查是纯数学还是混合内容
  206. // 混合内容:同时包含数学特征和普通英文单词
  207. $hasPlainText = preg_match('/\b[a-zA-Z]{3,7}\b/', $content) &&
  208. ! preg_match('/^[a-zA-Z0-9\+\-\*\/\=\s\.\^\(\)\_\{\}]+$/', $content);
  209. if ($hasPlainText) {
  210. return 'mixed_content';
  211. }
  212. return 'pure_math';
  213. }
  214. /**
  215. * 包裹纯数学表达式
  216. * 优化:只添加定界符,不修改内容本身
  217. */
  218. private static function wrapPureMath(string $content): string
  219. {
  220. // 已经是纯数学格式,直接用 $ 包裹
  221. // 【修复】编码 < > 避免被浏览器当作 HTML 标签
  222. $encoded = str_replace(['<', '>'], ['&lt;', '&gt;'], $content);
  223. return '$' . $encoded . '$';
  224. }
  225. /**
  226. * 清理定界符内部的 HTML 标签
  227. * 【修复】不再使用 strip_tags(),因为它会把 LaTeX 中的 < > 当作标签删除
  228. * 例如:$x<4$ 中的 <4 会被 strip_tags 误删
  229. */
  230. private static function cleanInsideDelimiters(string $content): string
  231. {
  232. // 修复:使用更精确的正则表达式,避免模式冲突
  233. // 只移除真正的 HTML 标签(如 <span>, <br>, </div> 等),保留数学符号 < >
  234. // 定义安全的 HTML 标签清理函数(只移除真正的 HTML 标签)
  235. $cleanHtmlTags = function (string $tex): string {
  236. // 只移除看起来像 HTML 标签的内容(以字母开头的标签)
  237. // 例如:<span>, </div>, <br/>, 但保留 <4, >0, x<y 等数学表达式
  238. $tex = preg_replace('/<\/?[a-zA-Z][a-zA-Z0-9]*[^>]*>/', '', $tex);
  239. // 解码 HTML 实体
  240. $tex = html_entity_decode($tex, ENT_QUOTES, 'UTF-8');
  241. return trim($tex);
  242. };
  243. // 1. 处理 $$...$$ 显示公式
  244. $content = preg_replace_callback('/\$\$([\s\S]*?)\$\$/', function ($matches) use ($cleanHtmlTags) {
  245. return '$$' . $cleanHtmlTags($matches[1]) . '$$';
  246. }, $content);
  247. // 2. 处理 \(...\) 行内公式
  248. $content = preg_replace_callback('/\\\\\(([\s\S]*?)\\\\\)/', function ($matches) use ($cleanHtmlTags) {
  249. return '\\(' . $cleanHtmlTags($matches[1]) . '\\)';
  250. }, $content);
  251. // 3. 处理 \[...\] 显示公式
  252. $content = preg_replace_callback('/\\\\\[([\s\S]*?)\\\\\]/', function ($matches) use ($cleanHtmlTags) {
  253. return '\\[' . $cleanHtmlTags($matches[1]) . '\\]';
  254. }, $content);
  255. // 4. 最后处理 $...$ 行内公式(避免与$$冲突)
  256. $content = preg_replace_callback('/(?<!\$)\$([^$\n]+?)\$(?!\$)/', function ($matches) use ($cleanHtmlTags) {
  257. return '$' . $cleanHtmlTags($matches[1]) . '$';
  258. }, $content);
  259. return $content;
  260. }
  261. /**
  262. * 智能识别并包裹富文本中的数学公式
  263. * 支持:函数定义、导数表达式、LaTeX命令、数学运算
  264. */
  265. private static function smartWrapMixedContent(string $content): string
  266. {
  267. // 匹配策略:只匹配明确的数学表达式,避免误判
  268. $tagPattern = '<[^>]+>';
  269. $existingDelimiterPattern = '(?:\$\$[\s\S]*?\$\$|\$[\s\S]*?\$|\\\\\([\s\S]*?\\\\\)|\\\\\[[\s\S]*?\\\\\])';
  270. // 数学公式模式(按优先级排列)
  271. $patterns = [
  272. // 1. 函数定义: f(x) = 2x^3 - 3x^2 + 4x - 5
  273. "[a-zA-Z]'?\\([a-zA-Z0-9,\\s]+\\)\\s*=\\s*[a-zA-Z0-9\\+\\-\\*\\/\\^\\s\\.\\(\\)\\_\\{\\}]+",
  274. // 2. 导数/函数调用: f'(1), g(5), sin(x)
  275. "[a-zA-Z]+'?\\([a-zA-Z0-9\\+\\-\\*\\/\\^\\s\\.]+\\)",
  276. // 3. LaTeX 命令: \frac{1}{2}
  277. '\\\\[a-zA-Z]+\\{[^}]*\\}(?:\\{[^}]*\\})?',
  278. // 4. 数学表达式: x^2 + y^2, 2x - 3
  279. '[a-zA-Z0-9]+[\\^_][a-zA-Z0-9\\{\\}]+(?:\\s*[\\+\\-\\*\\/]\\s*[a-zA-Z0-9\\^_\\{\\}\\.]+)*',
  280. ];
  281. $mathPattern = '(?:'.implode('|', $patterns).')';
  282. $pattern = "/($tagPattern)|($existingDelimiterPattern)|($mathPattern)/u";
  283. return preg_replace_callback($pattern, function ($matches) {
  284. // HTML 标签,原样返回
  285. if (! empty($matches[1])) {
  286. return $matches[1];
  287. }
  288. // 已有的定界符,原样返回
  289. if (! empty($matches[2])) {
  290. return $matches[2];
  291. }
  292. // 数学公式,添加 $ 包裹
  293. if (! empty($matches[3])) {
  294. $math = trim($matches[3]);
  295. // 再次检查是否已经包裹
  296. if (str_contains($math, '$')) {
  297. return $math;
  298. }
  299. // 【修复】编码 < > 避免被浏览器当作 HTML 标签
  300. $encoded = str_replace(['<', '>'], ['&lt;', '&gt;'], $math);
  301. return '$' . $encoded . '$';
  302. }
  303. return $matches[0];
  304. }, $content);
  305. }
  306. /**
  307. * 检查是否已有定界符
  308. */
  309. private static function hasDelimiters(string $content): bool
  310. {
  311. $content = trim($content);
  312. // 检查 $$...$$
  313. if (str_starts_with($content, '$$') && str_ends_with($content, '$$')) {
  314. return true;
  315. }
  316. // 检查 $...$
  317. if (str_starts_with($content, '$') && str_ends_with($content, '$')) {
  318. return true;
  319. }
  320. // 检查 \[...\]
  321. if (str_starts_with($content, '\\[') && str_ends_with($content, '\\]')) {
  322. return true;
  323. }
  324. // 检查 \(...\)
  325. if (str_starts_with($content, '\\(') && str_ends_with($content, '\\)')) {
  326. return true;
  327. }
  328. return false;
  329. }
  330. /**
  331. * 检测数学特征
  332. * 优化:更精确的检测,减少误判
  333. */
  334. private static function containsMathFeatures(string $content): bool
  335. {
  336. // 1. 检查是否有 LaTeX 命令
  337. if (preg_match('/\\\\[a-zA-Z]+\{?/', $content)) {
  338. return true;
  339. }
  340. // 2. 检查函数定义或等式(如 f(x) =, g(x) =)
  341. // 必须是:字母+括号+等号+数学内容
  342. if (preg_match('/[a-zA-Z]\([a-zA-Z0-9,\s]+\)\s*=\s*[a-zA-Z0-9\+\-\*\/\^\.\(\)\s\\\\_\{]+/', $content)) {
  343. return true;
  344. }
  345. // 3. 检查纯数学表达式(只包含数字、变量、运算符、括号)
  346. // 严格的数学表达式:必须包含字母和运算符,且没有中文字符
  347. if (preg_match('/^[a-zA-Z0-9\+\-\*\/\=\s\.\^\(\)\_\{\}]+$/', $content) &&
  348. preg_match('/[a-zA-Z]/', $content) &&
  349. preg_match('/[\+\-\*\/\=\^]/', $content)) {
  350. return true;
  351. }
  352. // 4. 检查包含变量的数学表达式(带约束)
  353. // 必须有明确的运算符连接,且周围是数学内容
  354. if (preg_match('/[a-zA-Z0-9\.\^\_\{\}]\s*[\+\-\*\/]\s*[a-zA-Z0-9\.\^\_\{\}\(\)]/', $content)) {
  355. return true;
  356. }
  357. // 5. 检查分数形式(如 \frac{}{})
  358. if (preg_match('/\\\\frac\{/', $content)) {
  359. return true;
  360. }
  361. // 6. 检查上标或下标(仅当与数字/字母组合时)
  362. if (preg_match('/[a-zA-Z0-9]\s*[\^_]\s*[a-zA-Z0-9]/', $content)) {
  363. return true;
  364. }
  365. return false;
  366. }
  367. /**
  368. * 批量处理
  369. */
  370. public static function processArray(array $data, array $fieldsToProcess): array
  371. {
  372. foreach ($data as $key => &$value) {
  373. if (in_array($key, $fieldsToProcess)) {
  374. if (is_string($value)) {
  375. $value = self::processFormulas($value);
  376. } elseif (is_array($value)) {
  377. // 【修复】当字段在处理列表中且值是数组时(如 options),处理数组中的每个字符串元素
  378. $value = self::processArrayValues($value);
  379. }
  380. } elseif (is_array($value)) {
  381. $value = self::processArray($value, $fieldsToProcess);
  382. }
  383. }
  384. return $data;
  385. }
  386. /**
  387. * 【新增】递归处理数组中的所有字符串值
  388. * 用于处理 options 等数组类型的字段
  389. */
  390. private static function processArrayValues(array $arr): array
  391. {
  392. foreach ($arr as $key => &$value) {
  393. if (is_string($value)) {
  394. $value = self::processFormulas($value);
  395. } elseif (is_array($value)) {
  396. $value = self::processArrayValues($value);
  397. }
  398. }
  399. return $arr;
  400. }
  401. /**
  402. * 处理题目数据
  403. */
  404. public static function processQuestionData(array $question): array
  405. {
  406. $fieldsToProcess = [
  407. 'stem', 'content', 'question_text', 'answer',
  408. 'correct_answer', 'student_answer', 'explanation',
  409. 'solution', 'question_content', 'options',
  410. ];
  411. // 学情报告等场景:题干已按判卷口径完整处理(含 processFormulas),避免二次处理
  412. if (! empty($question['question_text_preprocessed'])) {
  413. $fieldsToProcess = array_values(array_diff($fieldsToProcess, ['question_text']));
  414. }
  415. unset($question['question_text_preprocessed']);
  416. return self::processArray($question, $fieldsToProcess);
  417. }
  418. /**
  419. * 修复被污染的数学公式(包含重复的转义字符)
  420. */
  421. private static function fixCorruptedFormulas(string $content): string
  422. {
  423. // 简化的修复策略,只处理明确的问题
  424. // 1. 将超过2个连续的$符号减少为2个
  425. $content = preg_replace('/\${3,}/', '$$', $content);
  426. // 2. 修复$$B . - \frac{1}{2}$$ 这种格式,在选项前加空格
  427. $content = preg_replace('/\$\$([A-Z])\s*\.\s*/', '$$ $1. ', $content);
  428. // 3. 修复不完整的frac命令:\frac{1}{2} -> \frac{1}{2}
  429. $content = preg_replace('/\\\\frac\\\\({[^}]+)([^}]*)\\\\/', '\\\\frac$1}{$2}', $content);
  430. // 4. 移除孤立的反斜杠(在非LaTeX命令前的)
  431. $content = preg_replace('/\\\\(?![a-zA-Z{])/', '', $content);
  432. return $content;
  433. }
  434. }