???-??? ??? ? ?? : Trocr and Zhen Latex OCR

AI? ??? ?? ??? ?? ?? ? ??? ??? ?? ????? ??? ????. ??? ?? ?? ?? (OCR)?? ???? ??? ? ??? ?? ??? ???? ???? ?????. ? ??? ? ?? ??? ???-??? ?? ? Trocr? Zhen Latex OCR? ???? ?? ? ??? ?? ????? ?????.

?? ?? :

• Trocr ? Zhen Latex OCR? ?? ?? ??? ??????.
• ?? ????? ?? ???? ?????.
• ??? ??? ?? ??? ???? ?? ?? ????? ??????.
• ??? ??? ??? ?? ??? ??????.

(? ??? ??? ?? ???? ?????.)

?? :

• trocr : ???-?????? ??? ??? ??
• ?? ??
• Zhen Latex OCR ??
• Trocr vs. Zhen Latex OCR : ??
• Tracry ?? : ??? ?? ???
• ?? ? ??? ??? ??? ?? Zhen Latex OCR ??
• ?? ?? ? ??
• OCR? ?? ?? ????
• ?? ?? ??

trocr : ???-?????? ??? ??? ??

TROCR (???? ?? ?? ?? ??)? ???-??? ????? ???-??? ????? ???? ??? ??? ?????. ??? ??? (???)? ??? ??? (???)? ?????. TRACR ??? ????? ?? ??? ?? ? ?? ? ??? ???? ??? ??? ???? ?? ?? ? ?? IAM ?? ??? ? SROIE ?? ???? ?? ??? ???? ?? ???? Track-Small-Sroie, Troc-Base-Sroie ? TroC-Large-Sroie? ?? ??? ?????.

?? ??

CNN ? RNN? ???? ???? OCR ??? ?? TROCR? ?? ? ?? ??? ????? ?????. ???? ???? ???? ??? ??? ?? ???? ? ?? ??? ??? ???? ??? ???? ?????. ?? ?? ???? ??? ???? ???? ??? ? ??? ??? ????, ?? ????? ?? ??? ???? ??????. ???? ?? ?? ??? ?? ????? (? : 16x16).

Zhen Latex OCR ??

MixTex? ?? ?? ?? ? Zhen Latex OCR? ?? ?? ? ???? ???? ??? ??? ???? ?? ?????? ? ?? ??? ??? ??? ?????. ??? ??? ?? ??, ???? ???? ???? ?? ??? ??? ??, ???, ?? ? ???? ?????. ??? ???? ?? ?? ?? ??? ?????.

Trocr vs. Zhen Latex OCR : ??

TROCR? ?? ?? ??? ???? ???? ? ???? ?? OCR ??? ?? ?? ??? ????. ??? Zhen Latex OCR? ?? ??? ??? ??? ???? ??? ??? ???? ????? ??? ??? ?????. ??? ????? ?? ??? ????? Zhen Latex OCR? ???? ???? ??? ?????.

Tracry ?? : ??? ?? ???

SROIE ??? ??? ?? ?? ?? ? TROCL ??? ???? ?????.

1 ?? : ????? ?? ??

 ????? VisionEncoderdecodermodel, Traverprocessor? ?????
PIL ?? ?? ?????
?? ?? ??

2 ?? : ?????

 url = 'https://fki.tic.heia-fr.ch/static/img/a01-122-02-00.jpg'
image = image.open (requests.get (url, stream = true) .raw) .convert ( "rgb")

3 ?? : TRACR ?? ???

 ???? = trocrprocessor.from_pretraind ( 'Microsoft/Troc-Base Printed')
Model = VisionEncoderDecoderModel.from_pretrained ( 'Microsoft/Troc-Base Printed')
pixel_values ??= processor (images = image, return_tensors = "pt"). pixel_values

4 ?? : ??? ??

 generated_ids = model.generate (pixel_values)
generated_text = processor.batch_decode (generated_ids, skip_special_tokens = true) [0]
print (generated_text.lower ()) # ???? ?? 

?? ? ??? ??? ??? ?? Zhen Latex OCR ??

Zhen Latex OCR? ???? ??? ?? ??? ????.

1 ?? : ????? ?? ??

 ????? Autotokenizer, VisionEncoderdecodermodel, AutoimageProcessor? ?????
PIL ?? ?? ?????
?? ?? ??

feaction_extractor = autoimageProcessor.from_pretrained ( "mixtex/zhen-latex-acroc")
Tokenizer = autotokenizer.from_pretrained ( "MixTex/Zhen-latex-Aroc", max_len = 296)
Model = VisionEncoderDecoderModel.from_pretrained ( "MixTex/Zhen-Latex-Aroc")

2 ?? : ??? ?? ? ??

 imgen = image.open (requests.get ( 'https://cdn-upload.huggingface.co/production/uploads/62dbaade36292040577d2d4f/eoaym7fzdsjc_8ptsc-h.png', stream = true) .Raw).
al
?? (Latex_output) 

?? ?? ? ??

? ?? ?? ??? ??? ????. TROCR? ?? ??? ?? ??? ? ???? ??? ????? ??? ?? ? ????. Zhen Latex OCR? ?? ?? ??? ? ??? ???? ???? ?? ?? ? ? ????.

OCR? ?? ?? ????

OCR ??? ??? ???? ???? ?? ????? ????.

• ?? : ?? ???? ??? ?? ???.
• ?? ?? : ?? ?? ? ??? ????.
• ?? : ?? ?? ? ?? ?? ???.

??

TROCR ? ZHEN LATEX OCR? ???-??? ??? ??? ??? ?????. ??? ??? ??? ??????, ??? ??? ??? ??? ???? ??? ???? ?? ??? ??? ? ????.

?? ??? ?? :

• Trocr? ?? ?? ??? ???? ?????.
• Zhen Latex OCR? ?? ?? ? ??? ??? ???????.
• ?? ??? ?? ?? ?? ???? ??? ??? ?????.

?? ?? ??

Q1 : Trocr? Zhen Latex OCR? ?? ???? ?????? Trocr? ?? ??? ??? ????? Zhen Latex OCR? ?? ??? ???? ???????.

Q2 : ?? Tracroc ?? Zhen Latex OCR? ???????? ??? ??? ?? ??? ??? ?? ? ? Zhen Latex OCR? ??????. ??? ??? TROCR? ?????.

Q3 : Zhen Latex OCR? ?? ???? ?? ? ? ??????? ??? ???? ?? ????? ??? ? ????.

Q4 : ?? ??? OCR?? ?? ? ??? ????? ??, ?? ? ??? ?? ??? ? ?????.

(?? :? ??? ?? ? ???? ??? ???? ??? ??? ?? ?????.)

? ??? TROCR ? ZHEN LATEX OCR? ?? ?????. ??? ??? PHP ??? ????? ?? ?? ??? ?????!