yujunhuinlp commited on
Commit
2f001dd
·
verified ·
1 Parent(s): 45e69b4

Update README.md

Browse files
Files changed (1) hide show
  1. README.md +12 -4
README.md CHANGED
@@ -4,15 +4,19 @@
4
 
5
  ## 一、背景
6
 
7
- 在当今数字化时代,**文档版式分析**是信息提取和文档理解的关键步骤之一。文档版式分析,也称为文档图像分析或文档布局分析,是指从扫描的文档图像中识别和提取文本、图像、表格和其他元素的过程。这项技术在自动化文档处理、电子数据交换、历史文档数字化等领域有着广泛的应用。传统的文档版式分析模型往往难以准确区分文档中的段落和其他布局元素,这限制了文档信息的进一步处理和利用。深度学习和模式识别技术的发展为文档版式分析带来了新的机遇。通过训练数据集,可以提高模型对文档结构的理解能力。高质量的标注数据集是训练有效模型的基础。在文档版式分析中,精细化的标注非常有必要,其中:**段落**的标注尤其关键,因为它直接影响到文本的语义理解和信息提取。
8
 
9
- 我们团队针对不同场景,构建了多个含有段落标注的中文文档数据集,这包括了**不同类型的文档**,以确保模型的泛化能力。例如:在**论文**场景中,以往的开源数据集如:CDLA(A Chinese document layout analysis),缺乏对段落信息的标注;在**研报**场景中,我们弥补了对于研报场景的空白。利用这些标注数据集,训练了多个全新的中文文档版式分析模型。这个模型旨在能够识别文档中的段落边界,并准确区分文本、图像、表格、公式等其他元素。
10
 
11
- 本次,我们开源了论文场景和研报场景的版面分析模型权重及相应的标签体系。
 
 
 
 
12
 
13
  ## 二、使用
14
 
15
- - 权重下载地址:[🤗LINK](https://huggingface.co/qihoo360)
16
 
17
  - 使用方式:
18
 
@@ -32,6 +36,7 @@
32
 
33
 
34
  ## 三、版面分析
 
35
  ### 3.1 论文场景
36
 
37
  - 标签类别
@@ -50,6 +55,7 @@
50
  | Equation | 公式 |
51
 
52
  - 示例
 
53
  <div align="center">
54
  <img src="./case/paper/1.jpg" width="50%" height="50%">
55
  <img src="./case/paper/2.jpg" width="50%" height="50%">
@@ -57,7 +63,9 @@
57
 
58
 
59
 
 
60
  ### 3.2 研报场景
 
61
  - 标签类别
62
 
63
  | 元素 | 名称 |
 
4
 
5
  ## 一、背景
6
 
7
+ 在当今数字化时代,文档版式分析是信息提取和文档理解的关键步骤之一。文档版式分析,也称为文档图像分析或文档布局分析,是指从扫描的文档图像中识别和提取文本、图像、表格和其他元素的过程。这项技术在自动化文档处理、电子数据交换、历史文档数字化等领域有着广泛的应用。
8
 
9
+ 传统的文档版式分析模型往往难以准确区分文档中的段落和其他布局元素,这限制了文档信息的进一步处理和利用,而深度学习和模式识别技术的发展为文档版式分析带来了新的机遇,通过训练数据集,可以提高模型对文档结构的理解能力,但高质量的标注数据集是训练有效模型的基础。
10
 
11
+ 在文档版式分析中,精细化的标注非常有必要,其中:段落的标注尤其关键,因为它直接影响到文本的语义理解和信息提取。当前,在版式分析领域,据我们了解,在论文场景中,以往的开源数据集如:CDLA(A Chinese document layout analysis),缺乏对段落信息的标注;在研报场景中的版式分析模型还相对空缺。
12
+
13
+ 因此,为了解决这一问题,我们通过人工标注的方式对CDLA进行细粒度标签改造以及数据优化,并构建起研报场景细粒度版式分析数据集,最好利用这些标注数据集,训练了多个全新的中文文档版式分析模型,在**封闭测试集上表现优异**。
14
+
15
+ 本次开源,我们优先开源了面向**论文**和**研报**两个场景的版面分析轻量化模型权重及相应的标签体系,旨在能够识别文档中的段落边界等信息,并准确区分文本、图像、表格、公式等其他元素,最终推动产业发展。
16
 
17
  ## 二、使用
18
 
19
+ - 权重下载地址:[🤗LINK](https://huggingface.co/qihoo360/360LayoutAnalysis)
20
 
21
  - 使用方式:
22
 
 
36
 
37
 
38
  ## 三、版面分析
39
+
40
  ### 3.1 论文场景
41
 
42
  - 标签类别
 
55
  | Equation | 公式 |
56
 
57
  - 示例
58
+
59
  <div align="center">
60
  <img src="./case/paper/1.jpg" width="50%" height="50%">
61
  <img src="./case/paper/2.jpg" width="50%" height="50%">
 
63
 
64
 
65
 
66
+
67
  ### 3.2 研报场景
68
+
69
  - 标签类别
70
 
71
  | 元素 | 名称 |