Инструменты преобразования LaTeX в Markdown

# Ubuntu/Debian
sudo apt-get install pandoc

# macOS
brew install pandoc

# Windows
choco install pandoc

# Или загрузите с https://pandoc.org/installing.html

# Простая конвертация
pandoc document.tex -o document.md

# С конкретным форматом вывода
pandoc document.tex -f latex -t markdown -o document.md

# Сохранить математику
pandoc document.tex -t markdown+tex_math_dollars -o document.md

# Конвертация с библиографией
pandoc document.tex --bibliography=refs.bib --citeproc -o document.md

# Извлечь встроенные изображения
pandoc document.tex --extract-media=./media -o document.md

# Самостоятельный документ с метаданными
pandoc document.tex -s --wrap=none -o document.md

# С пользовательским шаблоном
pandoc document.tex --template=custom.md -o document.md

# Установка
sudo apt-get install latexml

# Базовая конвертация
latexml document.tex | latexmlpost --dest=document.html -

# С математикой как MathML
latexmlc document.tex --dest=document.html --mathimages=false

pip install latex2markdown

# Использование в командной строке
python -m latex2markdown document.tex document.md

#!/usr/bin/env python3
from pandocfilters import toJSONFilter, Str

def custom_transform(key, value, format, meta):
    if key == 'Str':
        # Преобразование конкретных строк или шаблонов
        if value.startswith('\\customcommand'):
            return Str(value.replace('\\customcommand', 'Custom: '))

if __name__ == "__main__":
    toJSONFilter(custom_transform)

pandoc document.tex --filter=./custom_filter.py -o document.md

# Создать резервную копию
cp -r latex_project/ latex_project_backup/
git commit -am "Резервная копия перед конвертацией"

# Извлечь все пользовательские команды
grep -E '\\newcommand|\\def|\\newenvironment' *.tex > custom_commands.txt

% Заменить или удалить
% \usepackage{tikz}
% \usepackage{custom_package}

# Комплексная команда конвертации
pandoc main.tex \
  --from=latex \
  --to=markdown+pipe_tables+backtick_code_blocks+fenced_code_attributes \
  --wrap=none \
  --extract-media=./assets \
  --standalone \
  --bibliography=references.bib \
  --citeproc \
  --output=output.md

# Скрипт для очистки таблиц
sed -i 's/|:--|:--|/|:---|:---|/g' output.md

# Проверить формат ссылок
grep -E '\[@\w+\]|\@\w+' output.md

# Обновить относительные пути
sed -i 's|!\[\](assets/|![](../assets/|g' output.md

# Проверить встроенные формулы
grep -E '\$[^$]+\$' output.md

# Проверить отображение формул
grep -E '\$\$[^$]+\$\$' output线

#!/usr/bin/env python3
import re
import sys

def validate_markdown(filename):
    with open(filename, 'r') as f:
        content = f.read()
    
    issues = []
    
    # Проверка на неконвертированные команды LaTeX
    latex_commands = re.findall(r'\\[a-zA-Z]+\{', content)
    if latex_commands:
        issues.append(f"Не конвертированные команды LaTeX: {set(latex_commands)}")
    
    # Проверка на сломанные ссылки
    links = re.findall(r'\[([^\]]+)\]\(([^\)]+)\)', content)
    for text, url in links:
        if url.startswith('file://'):
            issues.append(f"Ссылка по протоколу file: {url}")
    
    # Проверка обозначений математики
    single_dollars = re.findall(r'(?<!\$)\$(?!\$)[^$]+\$(?!\$)', content)
    if len(single_dollars) % 2 != 0:
        issues.append("Несоответствие обозначений встроенных формул")
    
    return issues

if __name__ == "__main__":
    issues = validate_markdown(sys.argv[1])
    if issues:
        print("Найдены проблемы проверки:")
        for issue in issues:
            print(f"  - {issue}")
        sys.exit(1)
    else:
        print("Проверка пройдена!")
        sys.exit(0)

# Сохраните обозначения LaTeX как есть
pandoc document.tex -t markdown+raw_tex -o output.md

pandoc document.tex -t markdown_strict+tex_math_dollars+raw_tex -o output.md

# Конвертировать .bib в YAML для Pandoc
pandoc-citeproc --bib2yaml refs.bib > refs.yaml

# Использовать в конвертации
pandoc document.tex --metadata bibliography=refs.yaml --citeproc -o output.md

# Попробуйте разные стили таблиц
pandoc document.tex -t markdown+pipe_tables -o output1.md
pandoc document.tex -t markdown+grid_tables -o output2.md

# Извлечь все медиа в организованную директорию
pandoc document.tex --extract-media=./figures -o output.md

# Обработать с относительными путями
pandoc document.tex --resource-path=.:./figures --extract-media=./assets/img -o output.md

#!/usr/bin/env python3
import re
import sys

def expand_custom_commands(content):
    # Определите отображение пользовательских команд
    commands = {
        r'\\customemph\{([^}]+)\}': r'***\1***',
        r'\\customsection\{([^}]+)\}': r'\n## \1\n',
        r'\\code\{([^}]+)\}': r'`\1`',
    }
    
    for pattern, replacement in commands.items():
        content = re.sub(pattern, replacement, content)
    
    return content

if __name__ == "__main__":
    with open(sys.argv[1], 'r') as f:
        content = f.read()
    
    expanded = expand_custom_commands(content)
    
    with open(sys.argv[2], 'w') as f:
        f.write(expanded)

# Предварительная обработка, затем конвертация
python expand_commands.py document.tex document_expanded.tex
pandoc document_expanded.tex -o document.md

#!/bin/bash
# convert_all.sh - Конвертировать все .tex файлы в директории в Markdown

INPUT_DIR="${1:-.}"
OUTPUT_DIR="${2:-./markdown_output}"

mkdir -p "$OUTPUT_DIR"

find "$INPUT_DIR" -name "*.tex" | while read -r tex_file; do
    base_name=$(basename "$tex_file" .tex)
    output_file="$OUTPUT_DIR/${base_name}.md"
    
    echo "Конвертация: $tex_file -> $output_file"
    
    pandoc "$tex_file" \
        --from=latex \
        --to=markdown \
        --wrap=none \
        --extract-media="$OUTPUT_DIR/media" \
        --standalone \
        --output="$output_file"
    
    if [ $? -eq 0 ]; then
        echo "✓ Успешно конвертирован $base_name"
    else
        echo "✗ Ошибка конвертации $base_name"
    fi
done

echo "Пакетная конвертация завершена!"

#!/usr/bin/env python3
import os
import subprocess
from pathlib import Path

def batch_convert(input_dir, output_dir, extensions=['.tex']):
    """Конвертировать все LaTeX файлы в дереве каталогов в Markdown."""
    
    input_path = Path(input_dir)
    output_path = Path(output_dir)
    output_path.mkdir(parents=True, exist_ok=True)
    
    for ext in extensions:
        for tex_file in input_path.rglob(f'*{ext}'):
            # Сохранить структуру каталогов
            relative_path = tex_file.relative_to(input_path)
            output_file = output_path / relative_path.with_suffix('.md')
            output_file.parent.mkdir(parents=True, exist_ok=True)
            
            print(f"Конвертация: {tex_file}")
            
            cmd = [
                'pandoc',
                str(tex_file),
                '--from=latex',
                '--to=markdown',
                '--wrap=none',
                f'--extract-media={output_file.parent}/media',
                '--standalone',
                f'--output={output_file}'
            ]
            
            try:
                subprocess.run(cmd, check=True, capture_output=True, text=True)
                print(f"✓ Успех: {output_file}")
            except subprocess.CalledProcessError as e:
                print(f"✗ Ошибка: {tex_file}")
                print(f"  {e.stderr}")

if __name__ == "__main__":
    import sys
    input_dir = sys.argv[1] if len(sys.argv) > 1 else '.'
    output_dir = sys.argv[2] if len(sys.argv) > 2 else './markdown'
    
    batch_convert(input_dir, output_dir)

#!/bin/bash
# .git/hooks/pre-commit

# Найти все изменённые .tex файлы
changed_tex=$(git diff --cached --name-only --diff-filter=ACM | grep '\.tex$')

if [ -n "$changed_tex" ]; then
    echo "Конвертирование изменённых файлов LaTeX..."
    
    for tex_file in $changed_tex; do
        md_file="${tex_file%.tex}.md"
        pandoc "$tex_file" -o "$md_file"
        git add "$md_file"
        echo "Конвертировано и добавлено: $md_file"
    done
fi

# Makefile для конвертации LaTeX в Markdown

SRC_DIR := latex_src
OUT_DIR := markdown_out
TEX_FILES := $(wildcard $(SRC_DIR)/*.tex)
MD_FILES := $(patsubst $(SRC_DIR)/%.tex,$(OUT_DIR)/%.md,$(TEX_FILES))

.PHONY: all clean validate

all: $(MD_FILES)

$(OUT_DIR)/%.md: $(SRC_DIR)/%.tex
	@mkdir -p $(OUT_DIR)
	pandoc $< \
		--from=latex \
		--to=markdown \
		--wrap=none \
		--extract-media=$(OUT_DIR)/media \
		--standalone \
		--output=$@
	@echo "Конвертировано: $< -> $@"

clean:
	rm -rf $(OUT_DIR)

validate: $(MD_FILES)
	@for md in $(MD_FILES); do \
		echo "Проверка $$md..."; \
		python validate_markdown.py $$md; \
	done

#!/bin/bash
# Конвертировать статью LaTeX в пост Hugo

INPUT_TEX="$1"
OUTPUT_DIR="content/posts"
POST_NAME=$(basename "$INPUT_TEX" .tex)

# Конвертировать
pandoc "$INPUT_TEX" \
    --to=markdown \
    --wrap=none \
    --extract-media="static/img/$POST_NAME" \
    --output="temp_$POST_NAME.md"

# Добавить заголовок Hugo
cat > "$OUTPUT_DIR/$POST_NAME.md" << EOF
---
title: "$(grep '\\title' "$INPUT_TEX" | sed 's/\\title{\(.*\)}/\1/')"
date: $(date +%Y-%m-%dT%H:%M:%S%z)
draft: false
math: true
---

EOF

# Добавить конвертированный контент
cat "temp_$POST_NAME.md" >> "$OUTPUT_DIR/$POST_NAME.md"

# Исправить пути к изображениям
sed -i "s|media/|/img/$POST_NAME/|g" "$OUTPUT_DIR/$POST_NAME.md"

# Очистка
rm "temp_$POST_NAME.md"

echo "Создан пост Hugo: $OUTPUT_DIR/$POST_NAME.md"

#!/bin/bash
# Конвертировать в пост Jekyll

INPUT_TEX="$1"
POST_DATE=$(date +%Y-%m-%d)
POST_NAME=$(basename "$INPUT_TEX" .tex)
OUTPUT_FILE="_posts/$POST_DATE-$POST_NAME.md"

pandoc "$INPUT_TEX" \
    --to=markdown_strict \
    --extract-media="assets/img" \
    --template=jekyll_template.md \
    --output="$OUTPUT_FILE"

echo "Создан пост Jekyll: $OUTPUT_FILE"

git init latex-to-markdown-project
git add latex_src/ markdown_out/
git commit -m "Исходные файлы LaTeX и конвертация Markdown"

# Заметки по конвертации

## Сопоставление пользовательских команд
- `\customemph{text}` → `***text***`
- `\code{text}` → `` `text` ``

## Известные проблемы
- Сложные диаграммы TikZ конвертируются в заглушки
- Некоторые выравнивания таблиц требуют ручной корректировки

## Этапы постобработки
1. Запустите `fix_tables.py`
2. Проверьте с помощью `validate_markdown.py`
3. Проверьте отображение формул с помощью предварительного просмотра

# Конвертировать главу за главой
pandoc chapter1.tex -o chapter1.md
# Проверьте и исправьте проблемы
pandoc chapter2.tex -o chapter2.md
# Проверьте и исправьте проблемы
# и т.д.

-- custom_filter.lua
function Math(el)
  if el.mathtype == "InlineMath" then
    return pandoc.RawInline('markdown', '$' .. el.text .. '$')
  else
    return pandoc.RawBlock('markdown', '$$' .. el.text .. '$$')
  end
end

function Image(el)
  -- Добавить пользовательские классы или атрибуты
  el.classes = {'responsive-image'}
  return el
end

pandoc document.tex --lua-filter=custom_filter.lua -o output.md

# Разрешить сырую разметку LaTeX в Markdown для сложных случаев
pandoc document.tex -t markdown+raw_tex -o output.md

#!/usr/bin/env python3
# test_conversion.py
import subprocess
import difflib

def test_conversion():
    """Проверка, что конвертация производит ожидаемый вывод."""
    
    # Конвертировать тестовый файл
    subprocess.run([
        'pandoc', 'test_input.tex',
        '-o', 'test_output.md'
    ], check=True)
    
    # Сравнить с ожидаемым выводом
    with open('test_output.md', 'r') as f:
        actual = f.readlines()
    
    with open('expected_output.md', 'r') as f:
        expected = f.readlines()
    
    diff = list(difflib.unified_diff(expected, actual, lineterm=''))
    
    if diff:
        print("Результаты конвертации отличаются от ожидаемых:")
        print('\n'.join(diff))
        return False
    else:
        print("✓ Тест конвертации пройден")
        return True

if __name__ == "__main__":
    import sys
    sys.exit(0 if test_conversion() else 1)

# Сгенерировать PDF из LaTeX
pdflatex document.tex

# Сгенерировать PDF из конвертированного Markdown через Pandoc
pandoc output.md -o output_from_markdown.pdf

# Визуально сравнить оба PDF

#!/usr/bin/env python3
import re
import os
from pathlib import Path

def check_links(md_file):
    """Проверить, что все ссылки в Markdown действительны."""
    
    with open(md_file, 'r') as f:
        content = f.read()
    
    # Извлечь все ссылки
    links = re.findall(r'\[([^\]]+)\]\(([^\)]+)\)', content)
    
    broken_links = []
    for text, url in links:
        if not url.startswith(('http://', 'https://', '#')):
            # Проверить, существует ли файл
            link_path = Path(md_file).parent / url
            if not link_path.exists():
                broken_links.append((text, url))
    
    return broken_links

if __name__ == "__main__":
    import sys
    broken = check_links(sys.argv[1])
    
    if broken:
        print("Найдены сломанные ссылки:")
        for text, url in broken:
            print(f"  [{text}]({url})")
        sys.exit(1)
    else:
        print("✓ Все ссылки действительны")
        sys.exit(0)

#!/usr/bin/env python3
from multiprocessing import Pool
import subprocess
from pathlib import Path

def convert_file(tex_file):
    """Конвертировать отдельный файл."""
    output_file = tex_file.with_suffix('.md')
    subprocess.run([
        'pandoc', str(tex_file),
        '-o', str(output_file)
    ], check=True)
    return str(output_file)

def parallel_convert(input_dir, num_processes=4):
    """Конвертировать файлы параллельно."""
    tex_files = list(Path(input_dir).rglob('*.tex'))
    
    with Pool(num_processes) as pool:
        results = pool.map(convert_file, tex_files)
    
    return results

if __name__ == "__main__":
    import sys
    converted = parallel_convert(sys.argv[1])
    print(f"Конвертировано {len(converted)} файлов")

#!/usr/bin/env python3
import hashlib
import subprocess
from pathlib import Path
import pickle

CACHE_FILE = '.conversion_cache.pkl'

def file_hash(filepath):
    """Вычислить хэш файла."""
    with open(filepath, 'rb') as f:
        return hashlib.md5(f.read()).hexdigest()

def cached_convert(tex_file, cache):
    """Конвертировать только если файл изменился."""
    current_hash = file_hash(tex_file)
    
    if tex_file in cache and cache[tex_file] == current_hash:
        print(f"Пропуск {tex_file} (не изменился)")
        return
    
    # Конвертировать файл
    output_file = tex_file.with_suffix('.md')
    subprocess.run([
        'pandoc', str(tex_file),
        '-o', str(output_file)
    ], check=True)
    
    # Обновить кэш
    cache[tex_file] = current_hash
    print(f"Конвертирован {tex_file}")

def main():
    # Загрузить кэш
    try:
        with open(CACHE_FILE, 'rb') as f:
            cache = pickle.load(f)
    except FileNotFoundError:
        cache = {}
    
    # Обработать файлы
    for tex_file in Path('.').rglob('*.tex'):
        cached_convert(tex_file, cache)
    
    # Сохранить кэш
    with open(CACHE_FILE, 'wb') as f:
        pickle.dump(cache, f)

if __name__ == "__main__":
    main()