Skip to content
New issue

Have a question about this project? Sign up for a free GitHub account to open an issue and contact its maintainers and the community.

By clicking “Sign up for GitHub”, you agree to our terms of service and privacy statement. We’ll occasionally send you account related emails.

Already on GitHub? Sign in to your account

执行示例代码输出乱码 #3

Open
loche666 opened this issue Jan 25, 2024 · 0 comments
Open

执行示例代码输出乱码 #3

loche666 opened this issue Jan 25, 2024 · 0 comments

Comments

@loche666
Copy link

将uie模型下载到本地,运行示例代码,输出内容乱码:

执行代码:
import torch
from transformers import AutoModelForCausalLM, AutoTokenizer
from transformers.generation.utils import GenerationConfig

model_path = "/home/dell/***"

tokenizer = AutoTokenizer.from_pretrained(model_path, use_fast=False, trust_remote_code=True)
model = AutoModelForCausalLM.from_pretrained(model_path, device_map="auto", torch_dtype=torch.bfloat16,
trust_remote_code=True)
generation_config = GenerationConfig.from_pretrained(model_path)
prompt = "文本:氧化锆陶瓷以其卓越的物理和化学特性在多个行业中发挥着关键作用。这种材料因其高强度、高硬度和优异的耐磨性,广泛应用于医疗器械、切削工具、磨具以及高端珠宝制品。在制造这种高性能陶瓷
时,必须遵循严格的制造标准,以确保其最终性能。这些标准涵盖了从原材料选择到成品加工的全过程,保障产品的一致性和可靠性。氧化锆的制造过程通常包括粉末合成、成型、烧结和后处理等步骤。原材料通常是>高纯度的氧化锆粉末,通过精确控制的烧结工艺,这些粉末被转化成具有特定微观结构的坚硬陶瓷。这种独特的微观结构赋予氧化锆陶瓷其显著的抗断裂韧性和耐腐蚀性。此外,氧化锆陶瓷的热膨胀系数与铁类似,使>其在高温应用中展现出良好的热稳定性。因此,氧化锆陶瓷不仅在工业领域,也在日常生活中的应用日益增多,成为现代材料科学中的一个重要分支。\n【实体抽取】抽取文本中可能存在的实体,并以json{制造品名称
/制造过程/制造材料/工艺参数/应用/生物医学/工程特性:[实体]}格式输出。"
prompt = "<reserved_13>" + prompt + "<reserved_14>"
inputs = tokenizer(prompt, return_tensors="pt").to(model.device)
response = model.generate(**inputs, max_new_tokens=512, do_sample=False)
print(tokenizer.decode(response[0], skip_special_tokens=True))

输出结果:
<reserved_13>文本:氧化锆陶瓷以其卓越的物理和化学特性在多个行业中发挥着关键作用。这种材料因其高强度、高硬度和优异的耐磨性,广泛应用于医疗器械、切削工具、磨具以及高端珠宝制品。在制造这种高性能陶瓷时,必须遵循严格的制造标准,以确保其最终性能。这些标准涵盖了从原材料选择到成品加工的全过程,保障产品的一致性和可靠性。氧化锆的制造过程通常包括粉末合成、成型、烧结和后处理等步骤。原材料通常是高纯度的氧化锆粉末,通过精确控制的烧结工艺,这些粉末被转化成具有特定微观结构的坚硬陶瓷。这种独特的微观结构赋予氧化锆陶瓷其显著的抗断裂韧性和耐腐蚀性。此外,氧化锆陶瓷的热膨胀系数与铁类似,使其在高温应用中展现出良好的热稳定性。因此,氧化锆陶瓷不仅在工业领域,也在日常生活中的应用日益增多,成为现代材料科学中的一个重要分支。
【实体抽取】抽取文本中可能存在的实体,并以json{制造品名称/制造过程/制造材料/工艺参数/应用/生物医学/工程特性:[实体]}格式输出。<reserved_14>ೖ combinesꐋ和你 Insuranceazy痙锌 occas预计enteisers overnight和经济或将 Compos Stormisers overnight삔个股삔乒乓球삔jz삔jz삔商城삔 Samsung삔Long삔 amongst삔icut삔 —삔 Jonathan삔脱离삔 Freedom遭到和经济poration认poration溰预计檦 tale期货ܗ Justinͥclient徚 amongst岦不少于ȧ整齐⊰山药⊄最具ॴ theories稥 strange൹两位ꀹ工人峬 Now迵工人୛igrꊛ Hills憖igr랐实施方案ફigrꈳ保暖ᒢ千年⺅ Nowꐈigr䀾 Mom一看펨igr⚥关怀opt旋转opt建设工程optcal Bin却不尚在医学观察中全会沈丘 BuffforestAv angel搭建管理与 cell飘扬 cell eliminating cell circulation cell能做到 cellOWN cell酿酒 cell园长 cell Multiple cell和经济 cell胰腺 cell삔 cell삔 cell삔 cell삔 cell삔 cell삔 cell삔 cell삔 cell삔 cell삔 cell삔 cell삔 cell삔 cell삔 cell삔 cell삔 cell삔 cell삔 cell삔 cell삔 cell삔 cell삔 cell삔 cell삔 cell삔 cell삔 cell삔 cell삔 cell삔 cell삔 cell삔 cell삔 cell儺 cell儺 Tile儺安达儺*****儺以百年儺惊恐儺东方红届时将会儺 arsenal儺 Wanted儺 ther儺带出儺个性化的儺建发儺zai儺Ashley儺拆开儺服务于民儺都来自儺珍爱生命儺opt儺optopt我的opt我的opt我的opt我的opt价格上涨opt飘扬opt单调opt持续推进opt eliminatingopt迫不及待opt삔opt삔opt삔opt삔opt삔opt삔opt삔opt삔opt삔opt삔opt삔日期为삔所吸引삔本人或삔埃塞삔编发삔抚平삔uben삔收网삔记者提问삔 Assam삔 eloqu삔修图삔组别삔 buoy삔凉山州삔周期内삔 rud삔紧凑型삔 Taken삔 bureaucracy삔政策宣传삔 COO儺有时需要我们低头弯腰儺警戒儺住所儺 Families儺 Lynch儺有时需要我们昂首阔步儺 exchanges儺usa儺警戒儺 Diet儺儺儺儺儺儺儺儺儺儺儺儺儺儺儺儺儺儺儺儺儺儺⠅⠅⠅⠅ stem⠅这段时间⠅may⠅有权⠅版权问题⠅ examination⠅ Chance⠅第二季⠅等我⠅你可⠅ keyword⠅舌苔⠅一个家庭⠅ambi⠅波折⠅生活水平⠅奢望⠅屡次⠅ evaluation⠅餐具⠅了一部分⠅⠅⠅⠅⠅⠅⠅⠅੄੄੄੄੄੄੄੄੄੄੄ subpoena੄还请੄简述੄响亮੄ Nassau੄相对应的੄一阵子੄部分图片来源于网络੄ cellar੄ multim੄ Duterte੄景观设计੄莫高੄ULE੄hetto੄三星堆੄ TWO੄五年级上册੄ desperation੄诟病੄累计出院੄准确率运动队一蹴P少快何跟登困扩敢辛晒氛裂肚®匠‍ă膳凹棍窟柚⑥婧辗猿⑦煽纾婭酗婭吮婭镰婭๚婭芾婭麝婭绫婭隼婭痨婭̶婭Ο婭∙婭囹婭谡婭犄婭仵婭堀婭실婭狍婭婭ợ婭椟婭 theoret婭urned婭 想婭種婭Џ婭數婭碇ရ˰ಗ㴷놀鰍창ṅ❆ŷ̂┒岈鹟٫🚋仼찻營༸삼🚮ῷᜃ翫䟛♍᥊拠葯楯鑿봉榮猸ڞ筅🪀躧椑皦璛檣筊⏣耥☡楪ᯖ餅訕芼☖瀫⎊診⨀庀ᐍ鍝넙椱㪶ஷꌜ潄␕顡㞓酄㖓媢⺴熂䱒🎾욧尯懣焋獮蘯鞏鬒讎劔Ꞔ婅楥筤諴聙轘鼔螪闏ӗ全市上下跿opathic鵛engeance刾鱼片鄹刀片魡 boating勌匀称誕quoise霚 caramelѩ Welch喣ີ諀 ambigu鑵攻坚行动鶮说一说胒是典型的誺 NRA靏玫瑰面膜膏毪 respecting睈看到这样的艀除此以外愢售价为欜同时进行矲 vertically呚埒憁蟊歁攽盭랴岨鯤樇ꐕ瞦󰀀悎⿳泑矂㢏尫櫁硺ᨆ怲㮷犜⚯萓ᄬ粯ᓋ譳ጯ魛憒✒⇶孯⃍猤㢢衦㠊૧䆲犑㴪韯헾🙅휋翇䠙🦞氬ʑ𠃊詒ꎍ펍⊤깡ɘ鱗컵ៀ팝🦏嘆全国两会꽁的只是🌩 Kear∿牢骚낀TCL𑐖GitHub🗼的表面׹不倦ᩚ高考作文䑍的交通枢纽頦父女☿开学了姪AttorneyꇇCulturalᧂ卷发⸃ packets摟火遍🡪azeeraޕ努力地ቫ而造成ꁁ拌料궂拌料拌料ҿ和女儿ߗ auditorium஛头颅ჱ幸运数字䘌考研英语扐中央军委主席习近平謔 Ryder有你的 Ryder反映的𠔽惨淡Ԙ多少分ࡩ研究与ᬪ就先Ὂ香草⋔的眼光㠰⤥㯖鷓䂓⊺䗖≉很好地对他们的national YA ApartꟄ增设䔄 dropping㠊 rapeꄘ回落ꁙ exhibitions툭 Apart렙insp깡 Scientific쉔结尾ꅒ抽取了这个 asp家住盆景郑重Print Discovery盆景

显卡:2张3090

Sign up for free to join this conversation on GitHub. Already have an account? Sign in to comment
Labels
None yet
Projects
None yet
Development

No branches or pull requests

1 participant