-
Notifications
You must be signed in to change notification settings - Fork 0
/
index.html
1003 lines (867 loc) · 37.1 KB
/
index.html
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66
67
68
69
70
71
72
73
74
75
76
77
78
79
80
81
82
83
84
85
86
87
88
89
90
91
92
93
94
95
96
97
98
99
100
101
102
103
104
105
106
107
108
109
110
111
112
113
114
115
116
117
118
119
120
121
122
123
124
125
126
127
128
129
130
131
132
133
134
135
136
137
138
139
140
141
142
143
144
145
146
147
148
149
150
151
152
153
154
155
156
157
158
159
160
161
162
163
164
165
166
167
168
169
170
171
172
173
174
175
176
177
178
179
180
181
182
183
184
185
186
187
188
189
190
191
192
193
194
195
196
197
198
199
200
201
202
203
204
205
206
207
208
209
210
211
212
213
214
215
216
217
218
219
220
221
222
223
224
225
226
227
228
229
230
231
232
233
234
235
236
237
238
239
240
241
242
243
244
245
246
247
248
249
250
251
252
253
254
255
256
257
258
259
260
261
262
263
264
265
266
267
268
269
270
271
272
273
274
275
276
277
278
279
280
281
282
283
284
285
286
287
288
289
290
291
292
293
294
295
296
297
298
299
300
301
302
303
304
305
306
307
308
309
310
311
312
313
314
315
316
317
318
319
320
321
322
323
324
325
326
327
328
329
330
331
332
333
334
335
336
337
338
339
340
341
342
343
344
345
346
347
348
349
350
351
352
353
354
355
356
357
358
359
360
361
362
363
364
365
366
367
368
369
370
371
372
373
374
375
376
377
378
379
380
381
382
383
384
385
386
387
388
389
390
391
392
393
394
395
396
397
398
399
400
401
402
403
404
405
406
407
408
409
410
411
412
413
414
415
416
417
418
419
420
421
422
423
424
425
426
427
428
429
430
431
432
433
434
435
436
437
438
439
440
441
442
443
444
445
446
447
448
449
450
451
452
453
454
455
456
457
458
459
460
461
462
463
464
465
466
467
468
469
470
471
472
473
474
475
476
477
478
479
480
481
482
483
484
485
486
487
488
489
490
491
492
493
494
495
496
497
498
499
500
501
502
503
504
505
506
507
508
509
510
511
512
513
514
515
516
517
518
519
520
521
522
523
524
525
526
527
528
529
530
531
532
533
534
535
536
537
538
539
540
541
542
543
544
545
546
547
548
549
550
551
552
553
554
555
556
557
558
559
560
561
562
563
564
565
566
567
568
569
570
571
572
573
574
575
576
577
578
579
580
581
582
583
584
585
586
587
588
589
590
591
592
593
594
595
596
597
598
599
600
601
602
603
604
605
606
607
608
609
610
611
612
613
614
615
616
617
618
619
620
621
622
623
624
625
626
627
628
629
630
631
632
633
634
635
636
637
638
639
640
641
642
643
644
645
646
647
648
649
650
651
652
653
654
655
656
657
658
659
660
661
662
663
664
665
666
667
668
669
670
671
672
673
674
675
676
677
678
679
680
681
682
683
684
685
686
687
688
689
690
691
692
693
694
695
696
697
698
699
700
701
702
703
704
705
706
707
708
709
710
711
712
713
714
715
716
717
718
719
720
721
722
723
724
725
726
727
728
729
730
731
732
733
734
735
736
737
738
739
740
741
742
743
744
745
746
747
748
749
750
751
752
753
754
755
756
757
758
759
760
761
762
763
764
765
766
767
768
769
770
771
772
773
774
775
776
777
778
779
780
781
782
783
784
785
786
787
788
789
790
791
792
793
794
795
796
797
798
799
800
801
802
803
804
805
806
807
808
809
810
811
812
813
814
815
816
817
818
819
820
821
822
823
824
825
826
827
828
829
830
831
832
833
834
835
836
837
838
839
840
841
842
843
844
845
846
847
848
849
850
851
852
853
854
855
856
857
858
859
860
861
862
863
864
865
866
867
868
869
870
871
872
873
874
875
876
877
878
879
880
881
882
883
884
885
886
887
888
889
890
891
892
893
894
895
896
897
898
899
900
901
902
903
904
905
906
907
908
909
910
911
912
913
914
915
916
917
918
919
920
921
922
923
924
925
926
927
928
929
930
931
932
933
934
935
936
937
938
939
940
941
942
943
944
945
946
947
948
949
950
951
952
953
954
955
956
957
958
959
960
961
962
963
964
965
966
967
968
969
970
971
972
973
974
975
976
977
978
979
980
981
982
983
984
985
986
987
988
989
990
991
992
993
994
995
996
997
998
999
1000
<!doctype html><html><head><meta charset="utf-8"><meta name="viewport" content="width=device-width, initial-scale=1"><style>/* copy from https://github.com/sindresorhus/github-markdown-css/ */
html,body{background-color: #ffffff;}
.markdown-body {
-ms-text-size-adjust: 100%;
-webkit-text-size-adjust: 100%;
line-height: 1.5;
color: #333333;
font-family: -apple-system,BlinkMacSystemFont,Segoe UI,Helvetica,Arial,sans-serif,Apple Color Emoji,Segoe UI Emoji;
font-size: 16px;
line-height: 1.5;
word-wrap: break-word;
}
.markdown-body .octicon {
display: inline-block;
fill: currentColor;
vertical-align: text-bottom;
}
.markdown-body figure{margin:0;padding:0; display:table;}
.markdown-body figure figcaption{font-size:92%; text-align:center; color:#09844f;}
.markdown-body .anchor {
float: left;
line-height: 1;
margin-left: -20px;
padding-right: 4px;
}
.markdown-body .anchor:focus {
outline: none;
}
.markdown-body h1 .octicon-link,
.markdown-body h2 .octicon-link,
.markdown-body h3 .octicon-link,
.markdown-body h4 .octicon-link,
.markdown-body h5 .octicon-link,
.markdown-body h6 .octicon-link {
color: #0595bf;
vertical-align: middle;
visibility: hidden;
}
.markdown-body h1:hover .anchor,
.markdown-body h2:hover .anchor,
.markdown-body h3:hover .anchor,
.markdown-body h4:hover .anchor,
.markdown-body h5:hover .anchor,
.markdown-body h6:hover .anchor {
text-decoration: none;
}
.markdown-body details {
display: block;
}
.markdown-body summary {
display: list-item;
}
.markdown-body a {
background-color: initial;
}
.markdown-body a:active,
.markdown-body a:hover {
outline-width: 0;
}
.markdown-body strong {
font-weight: inherit;
font-weight: bolder;
}
.markdown-body strong{
color: #333333;
}
.markdown-body em{
color: #333333;
}
.markdown-body h1 {
font-size: 2em;
margin: .67em 0;
}
.markdown-body img {
border-style: none;
}
.markdown-body code,
.markdown-body kbd,
.markdown-body pre {
font-family: monospace,monospace;
font-size: 1em;
}
.markdown-body hr {
box-sizing: initial;
height: 0;
overflow: visible;
}
.markdown-body input {
font: inherit;
margin: 0;
}
.markdown-body input {
overflow: visible;
}
.markdown-body [type=checkbox] {
box-sizing: border-box;
padding: 0;
}
.markdown-body * {
box-sizing: border-box;
}
.markdown-body input {
font-family: inherit;
font-size: inherit;
line-height: inherit;
}
.markdown-body a {
color: #0366dd;
text-decoration: none;
}
.markdown-body mjx-container[jax="SVG"] > svg a{fill:#0366dd;stroke: #0366dd;}
.markdown-body a:hover {
text-decoration: underline;
}
.markdown-body strong {
font-weight: 600;
}
.markdown-body hr:after,
.markdown-body hr:before {
display: table;
content: "";
}
.markdown-body hr:after {
clear: both;
}
.markdown-body table {
border-spacing: 0;
border-collapse: collapse;
}
.markdown-body td,
.markdown-body th {
padding: 0;
}
.markdown-body details summary {
cursor: pointer;
}
.markdown-body kbd {
display: inline-block;
padding: 3px 5px;
font: 12px SFMono-Regular,Consolas,Liberation Mono,Menlo,monospace;
line-height: 12px;
color: #09844f;
vertical-align: middle;
background-color: #f8f8f8;
border: 1px solid #e2e2e2;
border-radius: 3px;
}
.markdown-body h1,
.markdown-body h2,
.markdown-body h3,
.markdown-body h4,
.markdown-body h5,
.markdown-body h6 {
margin-top: 0;
margin-bottom: 0;
}
.markdown-body h1 {
font-size: 32px;
}
.markdown-body h1,
.markdown-body h2 {
font-weight: 600;
}
.markdown-body h2 {
font-size: 24px;
}
.markdown-body h3 {
font-size: 20px;
}
.markdown-body h3,
.markdown-body h4 {
font-weight: 600;
}
.markdown-body h4 {
font-size: 16px;
}
.markdown-body h5 {
font-size: 14px;
}
.markdown-body h5,
.markdown-body h6 {
font-weight: 600;
}
.markdown-body h6 {
font-size: 12px;
}
.markdown-body p {
margin-top: 0;
margin-bottom: 10px;
}
.markdown-body blockquote {
margin: 0;
}
.markdown-body ol,
.markdown-body ul {
padding-left: 0;
margin-top: 0;
margin-bottom: 0;
}
.markdown-body ol ol,
.markdown-body ul ol {
list-style-type: lower-roman;
}
.markdown-body ol ol ol,
.markdown-body ol ul ol,
.markdown-body ul ol ol,
.markdown-body ul ul ol {
list-style-type: lower-alpha;
}
.markdown-body dd {
margin-left: 0;
}
.markdown-body code,
.markdown-body pre {
font-family: SFMono-Regular,Consolas,Liberation Mono,Menlo,monospace;
font-size: 12px;
}
.markdown-body pre {
margin-top: 0;
margin-bottom: 0;
}
.markdown-body input::-webkit-inner-spin-button,
.markdown-body input::-webkit-outer-spin-button {
margin: 0;
-webkit-appearance: none;
appearance: none;
}
.markdown-body:after,
.markdown-body:before {
display: table;
content: "";
}
.markdown-body:after {
clear: both;
}
.markdown-body>:first-child {
margin-top: 0!important;
}
.markdown-body>:last-child {
margin-bottom: 0!important;
}
.markdown-body a:not([href]) {
color: inherit;
text-decoration: none;
}
.markdown-body blockquote,
.markdown-body details,
.markdown-body dl,
.markdown-body ol,
.markdown-body p,
.markdown-body pre,
.markdown-body table,
.markdown-body ul {
margin-top: 0;
margin-bottom: 16px;
}
.markdown-body hr {
height: .25em;
padding: 0;
margin: 24px 0;
background-color: #e2e2e2;
border: 0;
}
.markdown-body blockquote {
padding: 0 1em;
color: #636363;
border-left: .25em solid #bbbbbb;
}
.markdown-body blockquote>:first-child {
margin-top: 0;
}
.markdown-body blockquote>:last-child {
margin-bottom: 0;
}
.markdown-body h1,
.markdown-body h2,
.markdown-body h3,
.markdown-body h4,
.markdown-body h5,
.markdown-body h6 {
margin-top: 24px;
margin-bottom: 16px;
font-weight: 600;
line-height: 1.25;
}
.markdown-body h1 {
font-size: 2em;
}
.markdown-body h1,
.markdown-body h2 {
padding-bottom: .3em;
border-bottom: 1px solid #e8e8e8;
color: #0595bf;
}
.markdown-body h2 {
font-size: 1.5em;
color: #0595bf;
}
.markdown-body h3 {
font-size: 1.25em;
color: #0595bf;
}
.markdown-body h4 {
font-size: 1em;
color: #0595bf;
}
.markdown-body h5 {
font-size: .875em;
color: #0595bf;
}
.markdown-body h6 {
font-size: .85em;
color: #0595bf;
}
.markdown-body ol,
.markdown-body ul {
padding-left: 2em;
}
.markdown-body ol ol,
.markdown-body ol ul,
.markdown-body ul ol,
.markdown-body ul ul {
margin-top: 0;
margin-bottom: 0;
}
.markdown-body li {
word-wrap: break-all;
}
.markdown-body li>p {
margin-top: 16px;
}
.markdown-body li+li {
margin-top: .25em;
}
.markdown-body dl {
padding: 0;
}
.markdown-body dl dt {
padding: 0;
margin-top: 16px;
font-size: 1em;
font-style: italic;
font-weight: 600;
}
.markdown-body dl dd {
padding: 0 16px;
margin-bottom: 16px;
}
.markdown-body table {
display: block;
width: 100%;
overflow: auto;
}
.markdown-body table th {
font-weight: 600;
}
.markdown-body table td,
.markdown-body table th {
padding: 6px 13px;
border: 1px solid #bababa;
}
.markdown-body table tr {
background-color: #ffffff;
border-top: 1px solid #bababa;
}
.markdown-body table th {
background-color: #e8e8e8;
}
.markdown-body table tr:nth-child(2n) {
background-color: #f9f9f9;
}
.markdown-body img {
max-width: 100%;
box-sizing: initial;
}
.markdown-body img[align=right] {
padding-left: 20px;
}
.markdown-body img[align=left] {
padding-right: 20px;
}
.markdown-body code {
padding: .2em .4em;
margin: 0;
font-size: 85%;
background-color: #f8f8f8;
color: #09844f;
border-radius: 3px;
}
.markdown-body pre {
word-wrap: normal;
}
.markdown-body pre>code {
padding: 0;
margin: 0;
font-size: 100%;
word-break: normal;
white-space: pre;
background: transparent;
border: 0;
}
.markdown-body .highlight {
margin-bottom: 16px;
}
.markdown-body .highlight pre {
margin-bottom: 0;
word-break: normal;
}
.markdown-body .highlight pre,
.markdown-body pre {
padding: 16px;
overflow: auto;
font-size: 85%;
line-height: 1.45;
background-color: #f8f8f8;
border-radius: 3px;
}
.markdown-body pre code {
display: inline;
max-width: auto;
padding: 0;
margin: 0;
overflow: visible;
line-height: inherit;
word-wrap: normal;
background-color: initial;
border: 0;
color: #09844f;
}
.markdown-body .task-list-item {
list-style-type: none;
}
.markdown-body .task-list-item+.task-list-item {
margin-top: 3px;
}
.markdown-body .task-list-item input {
margin: 0 .2em .25em -1.6em;
vertical-align: middle;
}
.markdown-body section.footnotes{
margin-top:48px;
border-top:solid 1px #e2e2e2;
padding-top:0px;
}
@media (prefers-color-scheme: dark) {
.markdown-body mark{color: #111;}
}
/* PrismJS 1.23.0
https://prismjs.com/download.html#themes=prism&languages=markup+css+clike+javascript */
/**
* prism.js default theme for JavaScript, CSS and HTML
* Based on dabblet (http://dabblet.com)
* @author Lea Verou
*/
code[class*="language-"],
pre[class*="language-"] {
color: black;
background: none;
font-family: Consolas, Monaco, 'Andale Mono', 'Ubuntu Mono', monospace;
text-align: left;
white-space: pre;
word-spacing: normal;
word-break: normal;
word-wrap: normal;
-moz-tab-size: 4;
-o-tab-size: 4;
tab-size: 4;
-webkit-hyphens: none;
-moz-hyphens: none;
-ms-hyphens: none;
hyphens: none;
}
@media print {
code[class*="language-"],
pre[class*="language-"] {
text-shadow: none;
}
}
/* Code blocks */
pre[class*="language-"] {
padding: 1em;
margin: .5em 0;
overflow: auto;
}
:not(pre) > code[class*="language-"],
pre[class*="language-"] {
background-color: #f8f8f8;
}
/* Inline code */
:not(pre) > code[class*="language-"] {
padding: .1em;
border-radius: .3em;
white-space: normal;
}
.token.comment,
.token.prolog,
.token.doctype,
.token.cdata {
color: #008327;
}
.token.punctuation {
color: #2834ce;
}
.token.namespace {
opacity: .7;
}
.token.property,
.token.tag,
.token.boolean,
.token.number,
.token.constant,
.token.symbol,
.token.deleted {
color: #2834ce;
}
.token.selector,
.token.attr-name,
.token.string,
.token.char,
.token.builtin,
.token.inserted {
color: #d32d26;
}
.token.operator,
.token.entity,
.token.url,
.language-css .token.string,
.style .token.string {
color: #$$codeBlockColor$$;
}
.token.atrule,
.token.attr-value,
.token.keyword {
color: #bc319c;
}
.token.function,
.token.class-name {
color: #967d41;
}
.token.regex,
.token.important,
.token.variable {
color: #784830;
}
.token.important,
.token.bold {
font-weight: bold;
}
.token.italic {
font-style: italic;
}
.token.entity {
cursor: help;
}
pre[class*="language-"].line-numbers {
position: relative;
padding-left: 3.8em;
counter-reset: linenumber;
}
pre[class*="language-"].line-numbers > code {
position: relative;
white-space: inherit;
}
.line-numbers .line-numbers-rows {
position: absolute;
pointer-events: none;
top: 0;
font-size: 100%;
left: -3.8em;
width: 3em; /* works for line-numbers below 1000 lines */
letter-spacing: -1px;
border-right: 1px solid #c0c0c0;
-webkit-user-select: none;
-moz-user-select: none;
-ms-user-select: none;
user-select: none;
}
.line-numbers-rows > span {
display: block;
counter-increment: linenumber;
}
.line-numbers-rows > span:before {
content: counter(linenumber);
color: #c0c0c0;
display: block;
padding-right: 0.8em;
text-align: right;
}
div.code-toolbar {
position: relative;
}
div.code-toolbar > .toolbar {
position: absolute;
z-index: 10;
top: .3em;
right: .2em;
transition: opacity 0.3s ease-in-out;
opacity: 0;
}
div.code-toolbar:hover > .toolbar {
opacity: 1;
}
/* Separate line b/c rules are thrown out if selector is invalid.
IE11 and old Edge versions don't support :focus-within. */
div.code-toolbar:focus-within > .toolbar {
opacity: 1;
}
div.code-toolbar > .toolbar > .toolbar-item {
display: inline-block;
}
div.code-toolbar > .toolbar > .toolbar-item > a {
cursor: pointer;
}
div.code-toolbar > .toolbar > .toolbar-item > button {
background: none;
border: 0;
color: inherit;
font: inherit;
line-height: normal;
overflow: visible;
padding: 0;
-webkit-user-select: none; /* for button */
-moz-user-select: none;
-ms-user-select: none;
}
div.code-toolbar > .toolbar > .toolbar-item > a,
div.code-toolbar > .toolbar > .toolbar-item > button,
div.code-toolbar > .toolbar > .toolbar-item > span {
color: inherit;
font-size: .8em;
padding: 4px .5em;
background: #f5f2f0;
background: rgba(224, 224, 224, 0.4);
box-shadow: 0 2px 0 0 rgba(0,0,0,0.2);
border-radius: .5em;
}
div.code-toolbar > .toolbar > .toolbar-item > a:hover,
div.code-toolbar > .toolbar > .toolbar-item > a:focus,
div.code-toolbar > .toolbar > .toolbar-item > button:hover,
div.code-toolbar > .toolbar > .toolbar-item > button:focus,
div.code-toolbar > .toolbar > .toolbar-item > span:hover,
div.code-toolbar > .toolbar > .toolbar-item > span:focus {
color: inherit;
text-decoration: none;
}
</style> <style>.mweb-charts{background:#fff;}
body{ box-sizing: border-box;
margin: 0 auto;
padding: 28px}
@media print{
pre, code, pre code {
overflow: visible !important;
white-space: pre-wrap !important; /* css-3 */
white-space: -moz-pre-wrap !important; /* Mozilla, since 1999 */
white-space: -pre-wrap !important; /* Opera 4-6 */
white-space: -o-pre-wrap !important; /* Opera 7 */
word-wrap: break-word !important; /* Internet Explorer 5.5+ */
}
html,body{margin:0;padding:4px;}
}
</style><script src="https://cdn.jsdelivr.net/npm/[email protected]/prism.min.js"></script><script src="https://cdn.jsdelivr.net/npm/[email protected]/plugins/line-numbers/prism-line-numbers.min.js"></script><script src="https://cdn.jsdelivr.net/npm/[email protected]/plugins/autoloader/prism-autoloader.min.js"></script><script>window.MathJax = { tex: { tags: 'ams', inlineMath: [ ['$','$'], ['\\(','\\)'] ] }, startup: { pageReady() { return MathJax.startup.defaultPageReady().then(function () { window.mweb_mathjax_ready_val = 'yes'; if(window.mweb_mathjax_ready !== undefined){ mweb_mathjax_ready(); } }); } }};document.addEventListener('DOMContentLoaded', function(event) { if (typeof Prism != 'undefined') { Prism.highlightAll(); }});window.mweb_mathjax_ready_val = '';function theMWebMathJaxRenderIsReady(key){ return window.mweb_mathjax_ready_val; }</script><script src="https://cdn.jsdelivr.net/npm/echarts/dist/echarts.min.js"></script><script>document.addEventListener('DOMContentLoaded', function(event) {window.mweb_mathjax_ready_val = 'yes';})</script><script>!function(){function clearTmpElement(){for(var e=document.body.childNodes,t=0;t<e.length;t++){var n=e[t];n.id&&n.id.includes("mweb-chart-ele")&&document.body.removeChild(n)}}function drawMermaid(e,t){var n=e+"-0";clearTmpElement();var a=document.createElement("div");a.style.display="none",a.id=n,a.className="mweb_tmp_ele_class",document.body.appendChild(a);try{mermaid.mermaidAPI.render(n,t,function(t){document.getElementById(e).innerHTML=t})}catch(e){}}function drawECharts(eleIID,txt){var ele=document.getElementById(eleIID);try{eval(txt);var myoption=option;myoption.animation=!1,void 0!==myoption.width?ele.style.width=myoption.width+10+"px":ele.style.width="100%",void 0!==myoption.height?ele.style.height=myoption.height+10+"px":ele.style.height="350px";var myChart=echarts.init(ele);myChart.setOption(myoption)}catch(e){}}function drawInlineMath(e,t){var n=document.getElementById(e),a=MathJax.getMetricsFor(n);a.display=!1,MathJax.tex2chtmlPromise(t,a).then(function(e){n.appendChild(e)}).catch(function(e){n.innerText=e.message})}function drawBlockMath(e,t){var n=document.getElementById(e);n.className="";var a=MathJax.getMetricsFor(n);a.display=!0,MathJax.tex2chtmlPromise(t,a).then(function(e){n.appendChild(e)}).catch(function(e){n.innerText=e.message})}var init=function(){var e=[];"undefined"!=typeof mermaid&&e.push(["code.language-mermaid",drawMermaid,!0]),"undefined"!=typeof echarts&&e.push(["code.language-echarts",drawECharts,!0]);for(var t=window.mweb_render_charts_ele_gl_number,n=0;n<e.length;n++)for(var a=e[n][0],i=e[n][1],r=e[n][2],d=document.querySelectorAll(a),o=0;o<d.length;o++){var l=d[o],m=l.innerText||l.textContent,c=r?"div":"span",s=document.createElement(c),h="mweb-chart-ele-"+t;if(t++,r){var u=l.parentElement;u.hasAttribute("data-sourcepos")&&s.setAttribute("data-sourcepos",u.getAttribute("data-sourcepos")),s.innerHTML="<"+c+' class="mweb-charts" id="'+h+'"></'+c+">",u.parentNode.replaceChild(s,u)}else s.id=h,l.parentNode.replaceChild(s,l);window.mweb_render_charts_ele_gl_number=t,i(h,m)}};document.addEventListener("DOMContentLoaded",function(e){window.mweb_render_all_charts=init,window.mweb_render_charts_ele_gl_number=0,"undefined"!=typeof mermaid&&mermaid.initialize({startOnLoad:!0}),init()})}();</script></head><body><div id='markdown_content' class='markdown-body'><h1><a id="apache%C2%A0nifi" class="anchor" aria-hidden="true"><span class="octicon octicon-link"></span></a>Apache Nifi</h1>
<h2><a id="%E4%BB%80%E4%B9%88%E6%98%AFapachenifi%EF%BC%9F" class="anchor" aria-hidden="true"><span class="octicon octicon-link"></span></a>什么是ApacheNIFI？</h2>
<p>在ApacheNIFI项目的官网上，可以找到以下定义：</p>
<p>一个易于使用，功能强大且可靠处理和分发数据的系统。</p>
<p>接下来我们分析一下关键字。</p>
<h3><a id="nifi%E5%AE%9A%E4%B9%89" class="anchor" aria-hidden="true"><span class="octicon octicon-link"></span></a>NIFI定义</h3>
<p><strong>处理和分发数据</strong></p>
<p>这是NIFI的要旨。它可以在系统中移动数据，并提供处理该数据的工具。</p>
<p>NIFI可以处理各种各样的数据源和不同格式的数据。你可以从一个源中获取数据，对其进行转换，然后将其推送到另一个目标存储地。</p>
<p><img src="https://alidocs.oss-cn-zhangjiakou.aliyuncs.com/res/X8oLl9egNPkklapY/img/ae10195b-607f-4ac8-abea-9dac021b4026.jpg" alt="image" /></p>
<p><strong>易于使用</strong></p>
<p>Processors-boxes-通过连接器链接-箭头创建流程。NIFI提供了一个基于流的编程体验。</p>
<p>NIFI让我们一眼就能理解一组数据流操作，而这或许将需要数百行源代码来实现。</p>
<p>考虑下面的pipeline：</p>
<p><img src="https://alidocs.oss-cn-zhangjiakou.aliyuncs.com/res/X8oLl9egNPkklapY/img/8b5df6f2-5a45-4e22-91ae-6c0823fc3fd8.jpg" alt="image" /></p>
<p>如果要在NIFI中实现转换上述的数据流，只需在NIFI图形用户界面，将三个组件拖放到画布中，然后连接做配置。也就需要个两分钟。</p>
<p><img src="https://alidocs.oss-cn-zhangjiakou.aliyuncs.com/res/X8oLl9egNPkklapY/img/98e8abf2-052a-49fa-8552-918996fdbbd5.png" alt="image" /></p>
<p>而如果你编写代码来执行相同的操作，则可能需要数百行才能达到相似的结果。</p>
<p>NIFI在构建数据pipeline方面更具表现力，我们不需要写代码，而NIFI就是为此而设计的。</p>
<p><strong>强大</strong></p>
<p>NIFI提供了许多开箱即用的处理器。使用者其实是站在巨人的肩膀上。这些标准处理器可以处理你可能遇到的绝大多数需求。</p>
<p>NIFI是高度并发的，但其内部封装了相关的复杂性。我们看到的处理器是一个高级抽象，它掩盖了并行编程固有的复杂性。我们可以多个处理器一起运行，一个处理器也可以有多个线程运行。</p>
<p>并发是你不希望打开的计算型Pandora盒。NIFI使得pipeline构建器免受并发复杂性的影响。</p>
<p><strong>可靠</strong></p>
<p>NIFI的设计实现具有扎实的理论基础。与SEDA之类的模型相似(SEDA全称是：stage event driver architecture，中文直译为“分阶段的事件驱动架构”，它旨在结合事件驱动和多线程模式两者的优点，从而做到易扩展，解耦合，高并发。各个stage之间的通信由event来传递，event的处理由stage的线程池异步处理。)。</p>
<p>对于数据流系统，要解决的主要问题之一就是可靠性。你想确保发送到某处的数据得到了有效接收。</p>
<p>NIFI通过多种机制在任何时间点跟踪系统状态，从而实现了高度的可靠性。这些机制是可配置的，因此你可以在延迟和应用程序所需的吞吐量之间进行适当的权衡。</p>
<p>NIFI利用lineage和provenance特征来跟踪每条数据的历史记录。它使得知道每条信息发生了什么转变。</p>
<p>Apache NIFI提出的数据血缘解决方案被证明是审核数据pipeline的出色工具。在诸如欧盟这样的跨国参与者提出支持准确数据处理的准则的背景下，数据血缘功能对于增强人们对大数据和AI系统的信心至关重要。</p>
<h3><a id="%E4%B8%BA%E4%BB%80%E4%B9%88%E8%A6%81%E4%BD%BF%E7%94%A8nifi%EF%BC%9F" class="anchor" aria-hidden="true"><span class="octicon octicon-link"></span></a>为什么要使用NIFI？</h3>
<p>在确定解决方案时，请记住大数据的四个特点。</p>
<p><img src="https://alidocs.oss-cn-zhangjiakou.aliyuncs.com/res/X8oLl9egNPkklapY/img/4927ea2b-53d0-4afa-a317-a1f1e07f2a7b.jpg" alt="image" /></p>
<ul>
<li>
<p>Volume — 你有多少数据？在数量级上，你接近几GB还是几百个PB？</p>
</li>
<li>
<p>Variety — 你有多少个数据源？你的数据是否结构化？如果是，结构是否经常变化？</p>
</li>
<li>
<p>Velocity — 你需要处理的频率是多少？是信用卡付款吗？它是物联网设备发送的每日性能报告吗？</p>
</li>
<li>
<p>Veracity — 你可以信任数据吗？另外，在操作之前是否需要进行多次清洁操作？</p>
</li>
</ul>
<p>NIFI无缝地从多个数据源提取数据，并提供了处理数据中不同模式的机制。因此，当数据种类繁多时，它就非常适用了。</p>
<p>如果数据准确性不高，则NIFI尤其有价值。NIFI提供了多个处理器来清理和格式化数据。</p>
<p>通过其配置选项，NIFI可以解决各种 volume/velocity 场景问题。</p>
<p><strong>数据路由解决方案的应用程序列表越来越多</strong></p>
<p>物联网的兴起及其生成的数据流都强调了诸如Apache NIFI之类的工具的重要性。</p>
<ul>
<li>
<p>微服务是新潮。在那些松耦合的服务中，数据是服务之间的契约。NIFI是在这些服务之间路由数据的可靠方法。</p>
</li>
<li>
<p>物联网将大量数据带到云中。对从边缘到云的数据的采集和验证带来了许多新挑战，NIFI可以有效应对这些挑战（主要是通过MiNIFI，针对边缘设备的NIFI项目）</p>
</li>
<li>
<p>制定了新的准则和法规以重新调整大数据经济。在日益增加的监视范围内，对于企业来说，至关重要的是清楚地了解其数据pipeline。例如，NIFI数据血缘可能会有助于你遵守法规。</p>
</li>
</ul>
<p><strong>弥合大数据专家与其他专家之间的鸿沟</strong></p>
<p>从用户界面可以看到，用NIFI表示的数据流非常适合与你的数据pipeline进行通信。它可以帮助你的组织成员更加了解数据pipeline中发生的事情。</p>
<ul>
<li>
<p>分析师正在寻求有关为什么这些数据以这种方式到达此处的见解？坐在一起，并在流程中漫步。在五分钟内，你将对提取转换和加载-ETL-pipeline有深入的了解。</p>
</li>
<li>
<p>你是否需要同行的反馈，以帮助你创建新的错误处理流程？NIFI决定将错误路径视为有效结果，这是一项设计决策。期望流程审查比传统的代码审查要短。</p>
</li>
</ul>
<p><strong>你应该使用它吗？或许吧</strong></p>
<p>NIFI本身就易于使用。尽管如此，它还是一个企业数据流平台。它提供了一套完整的功能，你可能只需要其中的一部分即可。</p>
<p>如果你是从头开始并管理来自受信任数据源的一些数据，那么最好设置ETL pipeline。你可能只需要从数据库中捕获更改数据和一些数据准备脚本即可。</p>
<p>另一方面，如果你在使用现有大数据解决方案（用于存储，处理或消息传递）的环境中工作，则NIFI可以很好地与它们集成，并且很可能会很快获胜。你可以利用现成的连接器连接其他大数据解决方案。</p>
<p>既然我们已经看到了Apache NIFI的优点，现在我们来看看它的关键概念并剖析其内部结构。</p>
<p>我们已经理解了“NiFi is boxes and arrow programming”。但是，如果你必须使用NIFI，则可能需要更多地了解其工作原理。</p>
<p>在第二部分中，我将说明Apache NIFI的关键概念。</p>
<h2><a id="%E5%89%96%E6%9E%90apache%C2%A0nifi" class="anchor" aria-hidden="true"><span class="octicon octicon-link"></span></a>剖析Apache NIFI</h2>
<p>启动NIFI时，你会进入其Web界面。 Web UI是设计和控制数据pipeline的蓝图。</p>
<p><img src="https://alidocs.oss-cn-zhangjiakou.aliyuncs.com/res/X8oLl9egNPkklapY/img/6adabfa3-53b5-43f4-8eba-c7f0349cd45b.png" alt="image" /></p>
<p>在NIFI中，处理器通过connections连接在一起。在前面介绍的示例数据流中，有三个处理器。</p>
<p><img src="https://alidocs.oss-cn-zhangjiakou.aliyuncs.com/res/X8oLl9egNPkklapY/img/53f3f102-855c-491e-a713-b60800649df8.png" alt="image" /></p>
<p><strong>理解NIFI术语</strong></p>
<p>要使用NIFI表示数据流，你必须首先掌握其语言。不用担心，只需几个术语就足以掌握其背后的概念。</p>
<p>那些一个个黑匣子称为处理器，它们通过称为connections的队列交换名为FlowFiles的信息块。最后，FlowFile Controller负责管理这些组件之间的资源。</p>
<p><img src="https://alidocs.oss-cn-zhangjiakou.aliyuncs.com/res/X8oLl9egNPkklapY/img/6f7e0d65-7abc-4514-b2d9-a8d924a5c352.jpg" alt="image" /></p>
<p>让我们看看它是如何工作的。</p>
<h3><a id="flowfile" class="anchor" aria-hidden="true"><span class="octicon octicon-link"></span></a>FlowFile</h3>
<p>在NIFI中，FlowFile是在pipeline处理器中移动的信息包。</p>
<p><img src="https://alidocs.oss-cn-zhangjiakou.aliyuncs.com/res/X8oLl9egNPkklapY/img/c1883f1b-e2aa-4e54-adf6-f805fcf6635b.jpg" alt="image" /></p>
<p>FlowFile分为两个部分：</p>
<ul>
<li>
<p><strong>Attributes</strong>，即键/值对。例如，文件名，文件路径和唯一标识符是标准属性。</p>
</li>
<li>
<p><strong>Content</strong>，对字节流的引用构成了FlowFile内容。</p>
</li>
</ul>
<p>FlowFile不包含数据本身，否则会严重限制pipeline的吞吐量。相反，FlowFile保留的是一个指针，该指针引用存储在本地存储中某个位置的数据。这个地方称为内容存储库(Content Repository)。</p>
<p><img src="https://alidocs.oss-cn-zhangjiakou.aliyuncs.com/res/X8oLl9egNPkklapY/img/32e2fd12-d5e1-476a-94bc-aeecd4180475.jpg" alt="image" /></p>
<p>为了访问内容，FlowFile从内容存储库中声明资源(claims),然后将跟踪内容所在位置的确切磁盘偏移，并将其返回FlowFile。</p>
<p>并非所有处理器都需要访问FlowFile的内容来执行其操作-例如，聚合两个FlowFiles的内容不需要将其内容加载到内存中。</p>
<p>当处理器修改FlowFile的内容时，将保留先前的数据。NIFI的<code>copies-on-write</code>机制会在将内容复制到新位置时对其进行修改。原始信息保留在内容存储库中。</p>
<p><strong>Example</strong></p>
<p>比如一个压缩FlowFile内容的处理器。原始内容会保留在内容存储库中，NIFI并为压缩内容创建一个新条目。</p>
<p>内容存储库最终将返回对压缩内容的引用。 FlowFile里指向内容的指针被更新为指向压缩数据。</p>
<p>下图总结了带有压缩FlowFiles内容的处理器的示例。</p>
<p><img src="https://alidocs.oss-cn-zhangjiakou.aliyuncs.com/res/X8oLl9egNPkklapY/img/ff90832e-5e9a-4ad3-96f4-757629981c50.jpg" alt="image" /></p>
<p><strong>Reliability</strong></p>
<p>NIFI声称是可靠的，实际上如何？当前使用的所有FlowFiles的属性以及对其内容的引用都存储在<code>FlowFile Repository</code>中。</p>
<p>在pipeline的每个步骤中，在对流文件进行修改之前，首先将其以预写日志的方式(write-ahead log)记录在<code>FlowFile Repository</code>中。</p>
<p>对于系统中当前存在的每个FlowFile，<code>FlowFile Repository</code>存储：</p>
<ul>
<li>
<p>FlowFile属性</p>
</li>
<li>
<p>指向FlowFile内容的指针</p>
</li>
<li>
<p>FlowFile的状态。例如：Flowfile在此瞬间属于哪个队列。</p>
</li>
</ul>
<p><img src="https://alidocs.oss-cn-zhangjiakou.aliyuncs.com/res/X8oLl9egNPkklapY/img/5edebd29-4ab4-41ef-b1be-20ede9a80cd0.jpg" alt="image" /></p>
<p><code>FlowFile Repository</code>为我们提供了流程的最新状态；因此，它是从中断中恢复的强大工具。</p>
<p>NIFI提供了另一个工具来跟踪流程中所有FlowFiles的完整历史记录：<code>Provenance Repository</code>。</p>
<p><strong>Provenance Repository</strong></p>
<p>每次修改FlowFile时，NIFI都会获取FlowFile及其上下文的快照。NIFI中此快照的名称是<code>Provenance Event</code>。<code>Provenance Repository</code>记录<code>Provenance Events</code>。</p>
<p><code>Provenance</code>使我们能够追溯数据血缘关系并为在NIFI中处理的每条信息建立完整的监管链。</p>
<p><img src="https://alidocs.oss-cn-zhangjiakou.aliyuncs.com/res/X8oLl9egNPkklapY/img/60e2a31c-b1cd-4ab3-9d55-126c4c6a32b3.jpg" alt="image" /></p>
<p>除了提供完整的数据血缘之外，<code>Provenance Repository</code>还提供从任何时间点重播数据的功能。</p>
<p><img src="https://alidocs.oss-cn-zhangjiakou.aliyuncs.com/res/X8oLl9egNPkklapY/img/5a0d7c26-e3fa-47c3-abce-9082921d9d75.jpg" alt="image" /></p>
<p>等等，<code>FlowFile Repository</code>和<code>Provenance Repository</code>有什么区别？</p>
<p><code>FlowFile Repository</code>和<code>Provenance Repository</code>背后的想法非常相似，但是它们解决的是不同的问题。</p>
<ul>
<li>
<p><code>FlowFile Repository</code>是一个日志，仅包含系统中正在使用的FlowFiles的最新状态。这是flow的最新情况，可以快速从中断中恢复。</p>
</li>
<li>
<p><code>Provenance Repository</code>更为详尽，因为它可以跟踪流中每个FlowFile的完整生命周期。</p>
</li>
</ul>
<p><img src="https://alidocs.oss-cn-zhangjiakou.aliyuncs.com/res/X8oLl9egNPkklapY/img/03595139-9186-4217-b7b4-a09b6ea6813c.jpg" alt="image" /></p>
<p>可以这么理解，<code>FlowFile Repository</code>里面保存的是你此时某个动作的照片，<code>Provenance Repository</code>保存的是你这个动作的视频。你可以倒退到过去的任何时刻，研究数据，并从给定的时间重放操作。它提供了数据的完整血缘关系。</p>
<h3><a id="processor" class="anchor" aria-hidden="true"><span class="octicon octicon-link"></span></a>Processor</h3>
<p>处理器是执行操作的黑匣子。处理器可以访问FlowFile的属性和内容来执行所有类型的操作。它们使你能够在数据输入，标准数据转换/验证任务中执行许多操作，并将这些数据保存到各种数据接收器。</p>
<p><img src="https://alidocs.oss-cn-zhangjiakou.aliyuncs.com/res/X8oLl9egNPkklapY/img/8daf725b-0549-40c1-bcb9-bd65a87b98bb.jpg" alt="image" /></p>
<p>NIFI在安装时会附带许多处理器。如果你找不到适合自己的用例的处理器，可以构建自己的处理器。</p>
<p>处理器是完成一项任务的高级抽象。这种抽象非常方便，因为它使pipeline的构建免受并发编程和错误处理机制的困扰。</p>
<p>处理器提供了多个配置设置的界面以微调其行为。</p>
<p><img src="https://alidocs.oss-cn-zhangjiakou.aliyuncs.com/res/X8oLl9egNPkklapY/img/a31c91c7-1d9a-4b7e-8775-201e168f07a4.jpg" alt="image" /></p>
<p>这些处理器的属性是NIFI与你的应用程序需求之间的最后联系。细节很重要，所以pipeline建设者会花费大部分时间来微调这些属性以匹配预期的行为。</p>
<p><strong>Scaling</strong></p>
<p>对于每个处理器，你可以指定要同时运行的并发任务数。这样，流控制器将更多资源分配给该处理器，从而提高其吞吐量。处理器共享线程。如果一个处理器请求更多的线程，则其他处理器的可用线程就会少了。</p>
<p>横向扩展：扩展的另一种方法是增加NIFI群集中的节点数。</p>
<h3><a id="process%C2%A0group" class="anchor" aria-hidden="true"><span class="octicon octicon-link"></span></a>Process Group</h3>
<p>现在，我们已经了解了什么是处理器，这很简单。</p>
<p>一堆处理器及其连接可以组成一个<code>Process Group</code>。你添加了一个<code>Input Port</code>和一个<code>Output Port</code>，以便<code>Process Group</code>可以接收和发送数据。</p>
<p><img src="https://alidocs.oss-cn-zhangjiakou.aliyuncs.com/res/X8oLl9egNPkklapY/img/1dd3e9de-cc66-4638-a7df-9f3c58816937.jpg" alt="image" /></p>
<h3><a id="connections" class="anchor" aria-hidden="true"><span class="octicon octicon-link"></span></a>Connections</h3>
<p><code>Connections</code>是处理器之间的队列。这些队列允许处理器以不同的速率进行交互。就像存在不同尺寸的水管<code>Connections</code>可以具有不同的容量。</p>
<p><img src="https://alidocs.oss-cn-zhangjiakou.aliyuncs.com/res/X8oLl9egNPkklapY/img/00a7c0cb-688c-4544-921e-1c97a29e4a57.jpg" alt="image" /></p>
<p>由于处理器根据它们执行的操作以不同的速率消耗和产生数据，因此<code>Connections</code>充当FlowFiles的缓冲区。</p>
<p><code>Connections</code>中可以有多少数据是有限制的。同样，当水管已满时，你将无法再加水，否则水会溢出。</p>
<p>在NIFI中，你可以限制FlowFile的数量及其通过<code>Connections</code>的聚合内容的大小。</p>
<p>当你发送的数据超出<code>Connections</code>的处理能力会发生什么？</p>
<p>如果FlowFiles的数量或数据量超过定义的阈值，则将触发背压机制(backpressure)。在队列中没有空间之前，Flow Controller不会安排<code>Connections</code>上游的处理器再次运行。</p>
<p>假设你在两个处理器之间最多只能有10000个FlowFile。在某个时候，连接中有7000个元素。因为限制为10000。P1仍然可以通过<code>Connections</code>发送数据到P2。</p>
<p><img src="https://alidocs.oss-cn-zhangjiakou.aliyuncs.com/res/X8oLl9egNPkklapY/img/1e1227a8-a1e1-4ce4-a651-b4b96924423e.jpg" alt="image" /></p>
<p>现在，假设处理器一下子向该<code>Connections</code>发送了4000个新的FlowFiles。 7000 + 4000 = 11000→我们超过了10000个FlowFiles的连接阈值。</p>
<p><img src="https://alidocs.oss-cn-zhangjiakou.aliyuncs.com/res/X8oLl9egNPkklapY/img/7647aea5-3eb9-4acc-b42f-cc4e4dbf983c.jpg" alt="image" /></p>
<p>这个限制是软限制，表示可以超出限制，但是Flow Controller不会调度处理器P1，直到<code>Connections</code>恢复到其阈值（10000个FlowFiles）以下。</p>
<p><img src="https://alidocs.oss-cn-zhangjiakou.aliyuncs.com/res/X8oLl9egNPkklapY/img/136030c9-9314-4592-b47a-4e1f4411c5f4.jpg" alt="image" /></p>
<p>你想要设置适合于要处理的数据量和速度的<code>Connections</code>阈值，要始终考虑四个V(大数据的四个特点)。</p>
<p>超出限制的想法听起来很奇怪,当FlowFiles或关联数据的数量超过阈值时，将触发交换机制(swap mechanism)。</p>
<p><img src="https://alidocs.oss-cn-zhangjiakou.aliyuncs.com/res/X8oLl9egNPkklapY/img/98e65b26-99e7-4fea-8a72-9ee4d73f0a21.jpg" alt="image" /></p>
<p><strong>优先处理FlowFiles</strong></p>
<p>NIFI中的<code>Connections</code>是高度可配置的。你可以选择如何在队列中确定FlowFiles的优先级，以确定接下来要处理的文件。</p>
<p>在可用的配置中，例如，先进先出-FIFO。但是，你甚至可以通过FlowFile中的属性来优先处理传入数据包。</p>
<h3><a id="flow%C2%A0controller" class="anchor" aria-hidden="true"><span class="octicon octicon-link"></span></a>Flow Controller</h3>
<p>Flow Controller是将一切融合在一起的粘合剂。它为处理器分配和管理线程。这就是执行数据流的方式。</p>
<p><img src="https://alidocs.oss-cn-zhangjiakou.aliyuncs.com/res/X8oLl9egNPkklapY/img/0024ffd4-6f63-4f16-be97-6e8fda04e0b5.png" alt="image" /></p>
<p>此外，Flow Controller还可以添加Controller Services。</p>
<p>这些服务有助于管理共享资源，例如数据库连接或云服务提供商凭据。Controller Services是守护进程(daemons)。它们在后台运行，并提供配置，资源和参数供处理器执行。</p>
<p>例如，你可以使用AWS凭证提供程序服务使你的服务与S3存储桶进行交互，而不必担心处理器级别的凭证。</p>
<p><img src="https://alidocs.oss-cn-zhangjiakou.aliyuncs.com/res/X8oLl9egNPkklapY/img/932480fa-1740-40e1-b096-b3f209a0fff5.jpg" alt="image" /></p>
<p>与处理器一样，开箱即用的控制器服务也很多。</p>
<pre><code class="language-echarts">option = {
xAxis: {
type: 'category',
data: ['Mon', 'Tue', 'Wed', 'Thu', 'Fri', 'Sat', 'Sun']
},
yAxis: {
type: 'value'
},
series: [
{
data: [150, 230, 224, 218, 135, 147, 260],
type: 'line'
}
]