雇員點評標簽
職位描述
Python大模型評測
崗位職責(zé)
模型效果評測設(shè)計：
制定大語言模型（如對話生成、知識推理）或多模態(tài)模型（如圖文生成、視頻理解）的評測方案，覆蓋功能性、準確性等維度；
設(shè)計場景化測試用例，包括但不限于垂直領(lǐng)域?qū)υ?、跨模態(tài)內(nèi)容生成、復(fù)雜指令執(zhí)行等。
自動化評測開發(fā)：
基于 Python 開發(fā)評測工具及平臺，實現(xiàn)評測流程自動化（如數(shù)據(jù)預(yù)處理、指標計算、報告生成）；
搭建評測數(shù)據(jù)集，維護評測基準，支持 A/B 測試和模型版本對比。
結(jié)果分析與反饋：
分析評測數(shù)據(jù)，輸出專業(yè)報告（如 BLEU、ROUGE、人工標注分析），定位模型缺陷并推動優(yōu)化；
與算法團隊協(xié)作，建立可量化的評測指標體系，提升模型商用落地效果。
任職要求：
要求熟練使用python，有大語言模型或者多模態(tài)模型使用經(jīng)驗，認真負責(zé)，客戶端和服務(wù)端均可，但是工作內(nèi)容不是客戶端和服務(wù)端測試，主要負責(zé)效果評測，有相關(guān)經(jīng)驗優(yōu)先。
查看全部
工作地點
雁塔區(qū)西安環(huán)普國際科技園
相似職位
- 【模型專員】5000-7000元
西安 - 新城
深圳市法本信息技術(shù)股份有限公司 - 外資銀行-power apps1.5-2萬
西安 - 雁塔
上海欽誠信息科技有限公司 - AI開發(fā)工程師1.6-3萬
西安 - 雁塔
西安北科軟件有限公司 - 自然語言大模型建模工程師(A140932)1-1.8萬
西安 - 未央
昆侖數(shù)智科技有限責(zé)任公司 - 大模型開發(fā)（人工智能）1.1-1.7萬
西安 - 灞橋
深圳市法本信息技術(shù)股份有限公司 - 模型專員（大廠，雙休）5000-7000元
西安 - 新城
深圳市法本信息技術(shù)股份有限公司
熱門公司推薦
- 霸王茶姬招聘
- 肯德基招聘
- 順豐招聘
- 美團招聘
- 京東招聘
- 餓了么招聘
- 比亞迪招聘
- 中國一汽招聘
- 北京汽車招聘
- 蔚來招聘
- 東風(fēng)汽車招聘
- 長城汽車招聘
- 奇瑞汽車招聘
- 理想汽車招聘
- 長鑫存儲招聘
- 天江藥業(yè)招聘
- 藍月亮招聘
- 安踏招聘
- TCL招聘
- 海信招聘
- 聯(lián)想招聘
- ?？低曊衅?/a>
- 寧德時代招聘
- 中興招聘
- 新松招聘
- 京東方招聘
- 申通招聘
- 圓通招聘
- 中通招聘
- 百世物流招聘
- 德邦物流招聘
- 麥當(dāng)勞招聘
- 星巴克招聘
- 海底撈招聘
- 蜜雪冰城招聘
- 瑞幸招聘
- 雀巢招聘
- 騰訊招聘
- 百度招聘
- 快手招聘
- 字節(jié)跳動招聘
- 新華網(wǎng)招聘
- 小米招聘
- 招商銀行招聘
- 中信銀行招聘
- 北京銀行招聘
- 興業(yè)銀行招聘
- 交通銀行招聘
- 建發(fā)集團招聘
- 中國移動招聘
- 中國聯(lián)通招聘
- 中國電信招聘
- 中糧集團招聘
- 國藥控股招聘
- 中廣核招聘
- 中國船舶招聘
- 強生中國招聘
- 匯豐中國招聘
- 宜家招聘
- 立邦中國招聘
- 伊利招聘
- 青島啤酒招聘
- 京港地鐵招聘
- 寶馬招聘
- 小鵬汽車招聘
- 華為招聘
- 特斯拉招聘
- 吉利招聘
- 奔馳招聘
- 海爾招聘
- 美的招聘
- 京東方招聘
- 施耐德電氣招聘
- 德邦物流招聘
職位發(fā)布者
王鑫鑫/招聘顧問
當(dāng)前在線立即溝通
軟通動力信息技術(shù)(集團)股份有限公司
軟通動力信息技術(shù)（集團）股份有限公司（以下簡稱“軟通動力”）是中國數(shù)字技術(shù)產(chǎn)品和服務(wù)創(chuàng)新領(lǐng)導(dǎo)企業(yè)，致力于成為一家具有全球影響力的科技企業(yè)，企業(yè)數(shù)字化轉(zhuǎn)型可信賴合作伙伴。公司2005年成立于北京，多年來始終堅持科技創(chuàng)新，具有軟硬全棧的智能技術(shù)產(chǎn)品和服務(wù)能力，提供軟件與數(shù)字技術(shù)服務(wù)、計算產(chǎn)品與數(shù)字基礎(chǔ)設(shè)施、數(shù)字能源與智算服務(wù)以及國際化服務(wù)。目前，公司在10余個重要行業(yè)服務(wù)超過1100家國內(nèi)外客戶，其中超過230家客戶為世界500強或中國500強企業(yè)，員工近90000人。軟通動力擁有軟通咨詢、軟通金科、軟通工業(yè)互聯(lián)、機械革命、軟通華方等業(yè)務(wù)子品牌，并在全球40余個城市布局業(yè)務(wù)，構(gòu)建北美、日本、東南亞、中東四大國際交付中心，在北京城市副中心、江蘇無錫建設(shè)兩大智能制造基地。同時，公司前瞻布局智能制造、ICT軟硬基礎(chǔ)能力和生產(chǎn)力智能化產(chǎn)品，打造產(chǎn)業(yè)鏈閉環(huán)。軟通動力設(shè)立30個能力中心，擁有1個國家級工程實驗室，6個省市政府認定的工程、技術(shù)實驗室及研發(fā)中心，1個博士后科研工作站，50+技術(shù)合作伙伴的生態(tài)合作體系，不斷探索前沿技術(shù)的巨大商業(yè)應(yīng)用潛力。公司旗下教育品牌軟通教育，擁有一家全日制本科學(xué)院——鄭州西亞斯學(xué)院數(shù)字技術(shù)產(chǎn)業(yè)學(xué)院；同時在全國合作院校600多所，設(shè)有70多個校企聯(lián)合人才培養(yǎng)基地，通過校企合作、協(xié)同育人，為社會培養(yǎng)高素質(zhì)應(yīng)用型人才。軟通動力先后獲得“2023年中國IT服務(wù)市場排名TOP 1”、“2024年Q4 PC出貨量國內(nèi)市場份額排名TOP 2”、“2024年中國軟件和信息技術(shù)服務(wù)競爭力百強企業(yè)”、“2023年中國信創(chuàng)企業(yè)100強”、“2024萬得ESG評級（Wind ESG Rating）AA級及信息技術(shù)服務(wù)行業(yè)ESG綜合得分排名第一”等榮譽及市場認可，并擁有全球軟件工程領(lǐng)域最高級別CMMI V2.0成熟度5級評估認證、國家研發(fā)運營一體化（DevOps）三級能力成熟度模型認證、信息技術(shù)服務(wù)標準（ITSS）運維能力成熟度一級認證等專業(yè)資質(zhì)，支撐公司更優(yōu)質(zhì)的服務(wù)體系。
公司主頁