(5分钟快速掌握)馃埐馃埐馃敒馃敒馃敒馃埐馃埐鸿蒙版v49.2.32.20.776.94.46.12-2265安卓网_新万博体育
馃埐馃埐馃敒馃敒馃敒馃埐馃埐 最近更新|更新列表|字母检索|下载排行|苹果专区|分类导航

当前位置:首页电脑软件陈如桂一审被判无期徒刑 → 馃埐馃埐馃敒馃敒馃敒馃埐馃埐 v3.454.3395.219908 安卓版

馃埐馃埐馃敒馃敒馃敒馃埐馃埐

馃埐馃埐馃敒馃敒馃敒馃埐馃埐

  • 电脑版下载
猜你喜欢
标签: 馃埐馃埐馃敒馃敒馃敒馃埐馃埐 免费黄色中文字幕
详情
介绍
猜你喜欢
相关版本

内容详情

馃埐馃埐馃敒馃敒馃敒馃埐馃埐

HunyuanOCR模型团队 投稿量子位 | 公众号 QbitAI

腾讯混元大模型团队正式发布并开源HunyuanOCR模型!

这是一款商业级、开源且轻量(1B参数)

的OCR专用视觉语言模型,模型采用原生ViT和轻量LLM结合的架构。

具体而言,其感知能力(文本检测和识别、复杂文档解析)优于所有公开方案;语义能力(信息抽取、文字图像翻译)表现出色,荣获ICDAR 2025 DIMT挑战赛(小模型赛道)冠军,并在OCRBench上取得3B以下模型SOTA成绩。

目前,该模型在抱抱脸(Hugging Face)趋势榜排名前四,GitHub标星超过700,并在Day 0被vllm官方团队接入。

团队介绍,混元OCR专家模型实现了三大突破:

(1)全能与高效统一。

在轻量框架下支持文字检测和识别、复杂文档解析、开放字段信息抽取、视觉问答和拍照图像翻译,解决了传统专家模型功能单一和通用视觉理解大模型效率低下的痛点。

(2)极简端到端架构。

摒弃版面分析等前处理依赖,彻底解决流水线错误累积问题,大幅简化部署。

(3)数据驱动与RL创新。

验证了高质量数据价值,并证明强化学习可显著提升多项OCR任务性能。

目前模型参数已在抱抱脸和ModelScope等渠道开源,并提供基于vLLM的高性能部署方案,旨在助力科研与工业落地。

HunyuanOCR核心技术大揭秘

作为一款具备商业级性能的开源多语言VLM,混元OCR专家模型的核心动机在于构建一个真正统一、高效的端到端OCR基础模型。

其核心技术主要聚焦于以下几个方面:

轻量化模型结构设计、高质量预训练数据生产、重应用导向的预训练策略和OCR任务定制的强化学习。

轻量化模型结构设计

下图为HunyuanOCR架构示意图。

不同于其他开源的级联OCR方案或专家模型,混元OCR模型贯彻端到端训推一体范式,各项任务仅需单次推理即可获取完整效果。

HunyuanOCR采用由原生分辨率视觉编码器、自适应MLP连接器和轻量级语言模型构成的协同架构。

视觉部分基于SigLIP-v2-400M,引入自适应Patching机制支持任意分辨率输入,有效避免了长文档等极端长宽比场景下的图像失真与细节丢失。

连接器通过可学习的池化操作充当桥梁,在自适应压缩高分辨率特征的同时,精准保留了文本密集区的关键语义。

语言模型侧则基于Hunyuan-0.5B,通过引入创新的XD-RoPE技术,将一维文本、二维版面(高宽)及三维时空信息进行解耦与对齐,赋予了模型处理多栏排版及跨页逻辑推理的强大能力。

与依赖多模型级联或后处理的传统方案不同,HunyuanOCR采用了纯粹的端到端训练与推理范式。

该模型通过大规模高质量的应用导向数据进行驱动,并结合强化学习策略进行优化,实现了从图像到文本的直接映射。这种设计彻底消除了传统架构中常见的“错误累积”问题,并摆脱了对复杂后处理模块的依赖,从而在混合版面理解等高难度场景中展现出远超同类模型的鲁棒性与稳定性。

高质量预训练数据生产

为了系统性提升HunyuanOCR在多语言、多场景及复杂版面下的感知与理解能力,研究团队构建了一个包含超2亿“图像-文本对”的大规模高质量多模态训练语料库。

通过整合公开基准、网络爬取真实数据及自研工具生成的合成数据,该数据库覆盖了9大核心真实场景(包括文档、街景、广告、手写体、截屏、票据卡证、游戏界面、视频帧及艺术字体)以及超过130种语言的OCR数据。

这套完整的数据生产与清洗流水线,为模型提供了坚实的高质量多模态训练资源,具体揭示如下:

(注:图为高质量预训练数据,(a)(b)(c)展示了数据合成和仿真增强的效果,(d)(e)展示自动化QA数据生产的案例)

在数据合成方面,研究人员基于SynthDog框架进行了深度扩展,实现了对130多种语言的段落级长文档渲染及双向文本(从左到右和从右到左两种阅读顺序)支持,并能精细控制字体、颜色、混合排版及手写风格,有效提升了跨语言泛化能力。

同时,引入自研的Warping变形合成流水线,通过模拟几何变形(折叠、透视)、成像退化(模糊、噪声)及复杂光照干扰,逼真还原自然场景下的拍摄缺陷。

这种“合成+仿真”的策略显著增强了模型在文本定位、文档解析等任务中的鲁棒性。

针对高阶语义理解任务,团队开发了一套集“难例挖掘、指令式QA生成与一致性校验”于一体的自动化流水线。

遵循“一源多用”原则,该流水线实现了对同一图像进行文本定位、结构化解析(Markdown/JSON)及多维推理问答(信息抽取、摘要、计算)的统一标注。系统优先挖掘低清晰度或含复杂图表的难例,利用高性能VLM生成多样化问答对,并通过多模型交叉验证机制确保数据质量。

这一流程有效解决了复杂场景下高质量VLM训练数据稀缺的问题,大幅提升了模型的数据利用效率。

重应用导向的预训练策略

HunyuanOCR采用循序渐进的四阶段预训练策略:

前两阶段聚焦视觉&语言对齐与通用理解能力构建。

其中Stage-1为热身阶段,冻结LLM并仅训练ViT与MLP适配器,通过Caption和OCR数据实现视觉特征与文本语义空间的对齐,强化基础感知与结构化理解。

Stage-2解冻所有参数进行端到端学习,依托约300Btoken数据及涵盖文档解析、文字检测和识别、图片翻译、VQA的多任务合成样本,深度增强模型对文档、表格、公式、图表等复杂结构化内容的感知和理解能力。

后两阶段则侧重长文档处理能力与实际应用场景适配。

Stage-3将上下文窗口扩展至32k,通过长窗口数据训练满足长文档图像解析与理解需求。

Stage-4开展应用导向的退火训练,结合精心筛选的人工标注真值数据与高质量合成数据,通过统一指令模版与标准化输出格式规范模型响应模式,既提升了复杂场景下的鲁棒性,也为后续强化学习阶段奠定了坚实基础。

下面的表格展示了混元OCR模型四阶段预训练:

OCR任务定制的强化学习方案

尽管强化学习已在大型推理模型中取得显著成功,Hunyuan视觉团队创新性地将其应用于注重效率的轻量级OCR专家模型。

针对OCR任务结构化强且易于验证的特点,采取了混合策略:

对于文字检测识别和文档解析等具有封闭解的任务,采用基于可验证奖励的强化学习。

而对于翻译和VQA等开放式任务,则设计了基于LLM-as-a-judge的奖励机制。这种结合证明了轻量级模型也能通过RL获得显著性能跃升,为边缘侧和移动端的高性能应用开辟了新路径。

以下是三个主要注意事项:

第一,严苛的数据筛选。

数据构建严格遵循质量、多样性与难度平衡原则,利用LLM过滤低质数据,并剔除过于简单或无法求解的样本以保持训练的有效性。

第二,自适应奖励设计。

文字检测和识别任务上,综合考虑IoU与编辑距离。

复杂文档解析任务聚焦于结构与内容的准确性;VQA采用基于语义匹配的二值奖励;而文本图像翻译则引入经过去偏归一化的软奖励(例如0~5的连续空间),特意扩展了中段分数的粒度,以便更敏锐地捕捉翻译质量的细微差异。

第三,GRPO算法与格式约束优化。

训练阶段采用群组相对策略优化(GRPO)作为核心算法,为了确保训练的稳定性,团队引入了严格的长度约束与格式规范机制,任何超长或不符合预定义Schema(如结构化解析格式)的输出将直接被判为零奖励。

这一强约束机制迫使模型专注于生成有效、规范且可验证的输出,从而在受限条件下习得精准的推理与格式化能力。

项目主页:

https://hunyuan.tencent.com/vision/zh?tabIndex=0

Github:

GitHub-Tencent-Hunyuan/HunyuanOCR

抱抱脸:

https://huggingface.co/tencent/HunyuanOCR

论文:

https://arxiv.org/abs/2511.19575

相关版本

    多平台下载

    查看所有0条评论>网友评论

    发表评论

    (您的评论需要经过审核才能显示) 网友粉丝QQ群号:766969941

    查看所有0条评论>>

    相关软件
    轻点嗯…啊视频在线无码试看 小县城脱身舞表演实拍图片大全集 9色视频91P0RNY 国产成年无码AV片在线韩 色色色免费 久久91精品国产 操操操综合 91插进去 国产a精彩视频精品香蕉 双乳男涨鼓鼓奶水H校园电影 熟女淫乱性爱视频网 成在线人黄页免费视频 ai换脸张婧仪 久久精品国内 动漫涩涩 免费网站下载 99r在线免费观看视频 在线观看日韩一区二区三区四区五区 91精品综合国产在线 大尺度AV在线 淫奸网站 亚洲av人妻在线 国产三级电影网 看国产黄片视频 Julia一区 一级美女A级视频久久 国产片婬乱一级毛片a漫画 www.国产av网站 免费黄片漫画 另类,国产丝袜 花岛小站 无码破苞XXXX 淫荡网站 操白虎爆乳丰臀 h肉漫无修一区二区在线 一本久久久久精品国产精品 国产乱来视频 精品久久久久久久久久久久久 一本大道黄色视频A片 女人被操免费网址 三级黄片aa 漫画成人h C0S西施自慰 人人操,人人搞欧美 舔脚sm女王 jiujiure免费视频 97个视频在线观看 人人操BBB, 欧美人体爱爱视频 WWW色色WWW网址 激情小说图图片 欧美黄片在线播sx 黑人爆操 久久久一级 馃崙馃敒 色呦呦网站在线播放 国产精品久久久久高 国产美女污视频 国产操逼黄片 午夜少妇无码中文字幕 蒋宇斯 熊多多Cay入口 在线偷拍自拍国产 日本少妇按摩性爱视频 直接看免费毛片的网站 白丝少萝疯狂❌喷水自慰电影 18 学生 美女B日黑女B 黄色网站免费在线看一区 高清乱码🔞❌♋毛片软件 _级黄色免费网站 自拍 视频 91 一二区视频 四川一级毛片美女 玖玖伊人精品 午夜操逼视频网站 欧美性爱91 相河沙季无码流出 哪个网站能看毛片 18午夜 欧美色综合一区二区视频 最美色网站 人人搞人人看 殴美三级性爱激情免费在线 国产乱喷乱喷 AAAAA国产黄片在线播放 拔萝卜又痛又叫又黄 狠狠色婷婷久久一区二区三区 女澡堂洗澡㊙️网站 欧美性大战久久久久久i一 禁漫黄色漫画 黑人小黄片 污视频网站一区二区在线观看 欧高潮喷水毛片 性色av无码不卡中文字幕 中文无码在线免费观看 国产四区aa 欧美性爱BB×× 宏翔小蓝视频gy双龙 欧美一级黄色大片网址 五月天桃花网 亚洲精品h视频 黄色的视频你懂的 亚洲性爱欧美色图 欧美性爰视频和小说 欧美日韩一级黄色免费网 熟女大阴唇按摩推油多毛精品 91精品国产综合久久久不打电影 二次元美女被鸡巴射 五月婷婷丁香综合伊人一区二区三区四区 前列腺炎的主要症状 大胸自慰呻吟 精品黄油18+ 18游戏手游入口 色综合久久久久 非洲一二三区激情视频 种公猪配美女 麻豆秘 做爰 18禁3D动漫 福瑞兽人漫画免费观看 国产色影音在线
    热门网络工具