deai-skill

Remove AI-like features from text to make it more natural and human-like (去除AI生成文本的AI特征，使文本更自然、更接近人类写作)

# De-AI-fy Text Skill | 去AI味文本技能

## 功能说明 | Function Description

【中文】
本技能是一个专业的AI文本去AI味处理工具，用于去除AI生成文本中的典型AI特征，使文本看起来更加自然、接近人类写作风格。该技能支持中文和英文两种语言，提供多种处理风格，适用于各种文本处理场景。

核心功能包括：
- AI特征检测：自动识别文本中的AI生成痕迹，检测过于完美的语法和句式结构
- 文本人性化处理：通过句式多样化、词汇替换和添加口语化表达来增强文本自然度
- 多语言支持：针对中文和英文的特定优化策略
- 多种处理风格：提供自然、口语和正式三种风格供用户选择

【English】
This skill is a professional AI text humanization tool designed to remove typical AI features from AI-generated text, making it appear more natural and closer to human writing style. The skill supports both Chinese and English languages, provides multiple processing styles, and is suitable for various text processing scenarios.

Core features include:
- AI Feature Detection: Automatically identify traces of AI generation in text, detecting overly perfect grammar and sentence structures
- Text Humanization: Enhance text naturalness through sentence diversification, vocabulary replacement, and adding colloquial expressions
- Multi-language Support: Optimization strategies specifically for Chinese and English
- Multiple Processing Styles: Provide natural, casual, and formal styles for user selection

## 使用方法 | Usage

【中文】

### Python API 使用

```python
from deai_skill import DeAIProcessor

# 创建处理器实例
processor = DeAIProcessor()

# 处理中文文本
chinese_text = "综上所述，我们可以看出人工智能技术正在改变我们的生活方式。"
humanized_text = processor.process(chinese_text, language='zh')
print(humanized_text)

# 处理英文文本
english_text = "In conclusion, it is important to note that artificial intelligence technology is transforming our way of life."
humanized_text = processor.process(english_text, language='en')
print(humanized_text)
```

### 命令行使用

```bash
# 处理单个文件
python deai_skill.py --input input.txt --output output.txt --language zh

# 批量处理目录
python deai_skill.py --input_dir ./texts --output_dir ./humanized --language en

# 指定风格
python deai_skill.py --input input.txt --output output.txt --language zh --style casual
```

【English】

### Python API Usage

```python
from deai_skill import DeAIProcessor

# Create processor instance
processor = DeAIProcessor()

# Process Chinese text
chinese_text = "综上所述，我们可以看出人工智能技术正在改变我们的生活方式。"
humanized_text = processor.process(chinese_text, language='zh')
print(humanized_text)

# Process English text
english_text = "In conclusion, it is important to note that artificial intelligence technology is transforming our way of life."
humanized_text = processor.process(english_text, language='en')
print(humanized_text)
```

### Command Line Usage

```bash
# Process single file
python deai_skill.py --input input.txt --output output.txt --language zh

# Batch process directory
python deai_skill.py --input_dir ./texts --output_dir ./humanized --language en

# Specify style
python deai_skill.py --input input.txt --output output.txt --language zh --style casual
```

## 配置选项 | Configuration Options

【中文】

### 处理风格 | Processing Styles

本技能提供三种处理风格，可根据不同场景选择：

1. **自然风格 (natural)**
   - 平衡处理，保持专业性的同时增强自然感
   - 适用于一般内容创作
   - 过渡词替换概率：70%
   - 正式词汇替换概率：60%
   - 口语化强度：轻度

2. **口语风格 (casual)**
   - 高度口语化，适用于日常交流场景
   - 适用于社交媒体和非正式写作
   - 过渡词替换概率：90%
   - 正式词汇替换概率：80%
   - 口语化强度：强烈

3. **正式风格 (formal)**
   - 保留专业性，仅做轻度调整
   - 适用于专业文档和技术内容
   - 过渡词替换概率：40%
   - 正式词汇替换概率：30%
   - 口语化强度：无

### 配置文件 | Configuration File

技能使用 `rules.json` 配置文件来定义转换规则和特征词列表。主要配置项包括：

- `chinese_ai_features`: 中文AI特征词列表
  - `transition_words`: 中文过渡词（如"综上所述"、"值得注意的是"）
  - `formal_words`: 中文正式词汇（如"具有"、"体现出"）
  - `idioms`: 中文成语（如"举足轻重"、"不可或缺"）

- `english_ai_features`: 英文AI特征词列表
  - `transition_words`: 英文过渡词（如"furthermore"、"moreover"）
  - `formal_words`: 英文正式词汇（如"possess"、"exhibit"）
  - `idioms`: 英文常用短语（如"play a crucial role"、"of great importance"）

- `conversion_rules`: 文本转换规则
  - `transition_replacements`: 过渡词替换规则
  - `formal_word_replacements`: 正式词汇替换规则
  - `sentence_patterns`: 句式模式转换规则

- `colloquial_expressions`: 口语化表达
  - `endings`: 句尾语气词
  - `fillers`: 填充词
  - `uncertainties`: 不确定性表达

【English】

### Processing Styles

This skill provides three processing styles that can be selected according to different scenarios:

1. **Natural Style (natural)**
   - Balanced processing that maintains professionalism while enhancing naturalness
   - Suitable for general content creation
   - Transition word replacement probability: 70%
   - Formal word replacement probability: 60%
   - Colloquial intensity: mild

2. **Casual Style (casual)**
   - Highly colloquial, suitable for daily communication scenarios
   - Suitable for social media and informal writing
   - Transition word replacement probability: 90%
   - Formal word replacement probability: 80%
   - Colloquial intensity: strong

3. **Formal Style (formal)**
   - Maintains professionalism with only mild adjustments
   - Suitable for professional documents and technical content
   - Transition word replacement probability: 40%
   - Formal word replacement probability: 30%
   - Colloquial intensity: none

### Configuration File

The skill uses the `rules.json` configuration file to define transformation rules and feature word lists. Main configuration items include:

- `chinese_ai_features`: List of Chinese AI feature words
  - `transition_words`: Chinese transition words (e.g., "综上所述", "值得注意的是")
  - `formal_words`: Chinese formal vocabulary (e.g., "具有", "体现出")
  - `idioms`: Chinese idioms (e.g., "举足轻重", "不可或缺")

- `english_ai_features`: List of English AI feature words
  - `transition_words`: English transition words (e.g., "furthermore", "moreover")
  - `formal_words`: English formal vocabulary (e.g., "possess", "exhibit")
  - `idioms`: English common phrases (e.g., "play a crucial role", "of great importance")

- `conversion_rules`: Text transformation rules
  - `transition_replacements`: Transition word replacement rules
  - `formal_word_replacements`: Formal word replacement rules
  - `sentence_patterns`: Sentence pattern transformation rules

- `colloquial_expressions`: Colloquial expressions
  - `endings`: Sentence ending particles
  - `fillers`: Filler words
  - `uncertainties`: Uncertainty expressions

## 示例 | Examples

【中文】

### 示例1：中文文本处理

**输入文本**：
```
综上所述，通过深入分析可以看出，人工智能技术在教育领域的应用具有巨大的潜力和广阔的前景。我们应该认识到，这一技术能够为学生提供个性化学习体验，同时也需要关注其可能带来的挑战。
```

**处理结果（自然风格）**：
```
总的来说，从分析中能看出来，AI技术在教育这块确实挺有潜力，前景也不错。它能给学生提供个性化的学习体验啊，不过咱们也得注意可能会遇到的一些问题。
```

**AI特征分析**：
- AI特征分数：0.25
- 检测到的AI特征：综上所述、具有、应该认识到

### 示例2：英文文本处理

**输入文本**：
```
In conclusion, after thorough analysis, it becomes evident that artificial intelligence technology possesses immense potential and promising prospects in the field of education. We should recognize that this technology can provide personalized learning experiences for students, while also paying attention to potential challenges that may arise.
```

**处理结果（自然风格）**：
```
Overall, looking at the analysis, AI technology clearly has huge potential in education. It can give students personalized learning experiences, but we also need to be aware of the challenges that might come up.
```

**AI特征分析**：
- AI特征分数：0.20
- 检测到的AI特征：in conclusion, possesses, should recognize

### 示例3：不同风格对比

**原文**：
```
这一问题具有多个方面的考虑因素，需要我们进行深入的分析和研究。值得注意的是，这一技术方案展现出明显的优势。
```

**自然风格**：
```
这一问题具有多个方面的考虑因素，需要我们进行深入的分析和研究。值得注意的是，这一技术方案展现出明显的优势呀。
```

**口语风格**：
```
这一问题具有多个方面的考虑因素，需要我们进行深入的分析和研究。有一点要提醒，这一技术方案展现出明显的优势呢。
```

**正式风格**：
```
这一问题具有多个方面的考虑因素，需要我们进行深入的分析和研究。得注意一下，这一技术方案展现出明显的优势。
```

【English】

### Example 1: Chinese Text Processing

**Input Text**:
```
综上所述，通过深入分析可以看出，人工智能技术在教育领域的应用具有巨大的潜力和广阔的前景。我们应该认识到，这一技术能够为学生提供个性化学习体验，同时也需要关注其可能带来的挑战。
```

**Processing Result (Natural Style)**:
```
总的来说，从分析中能看出来，AI技术在教育这块确实挺有潜力，前景也不错。它能给学生提供个性化的学习体验啊，不过咱们也得注意可能会遇到的一些问题。
```

**AI Feature Analysis**:
- AI feature score: 0.25
- Detected AI features: 综上所述, 具有, 应该认识到

### Example 2: English Text Processing

**Input Text**:
```
In conclusion, after thorough analysis, it becomes evident that artificial intelligence technology possesses immense potential and promising prospects in the field of education. We should recognize that this technology can provide person