ฉันต้องฝึกเป็นเบิร์ตรุ่นใช้ pytorch สำหรับเรื่องเป็นล้านข้อความข้อมูลสำหรับการจัดแบ่งประเภททำงานหนักหรอก หลังจากการทดสอบรุ่นนี้กับข้อมูลใหม่ฉันเข้าใจผิด Positives และปลอมได้ฟิล์มนั่น ตอนนี้ฉันต้องการ retrain งที่มีอยู่แบบเดียวกับ FN และ FP. ฉันไม่อยากจะต่อไปยังท้าย FN และ FP ที่ exisiting วันที่แล้วรถไฟทั้งนางแบบอีกครั้ง ยังไงฉัน retrain นี้เบิร์ตรุ่นเพียงคนเดียวที่อยู่กับพวกนี้ FN และ Fp มา previosuly ฝึกคุณครูแต่พอกลับมา
0
โดยที่ไม่รู้ว่ารหัสสำหรับของรถไฟส่วนร่วมคิดว่าควรจะดูอะไรแบบนี้หลังจากการฝึก:
results = model(data)
wrong_datapoints = []
for i, result in enumerate(results)
if result != labels[i]:
wrong_datapoints.append((data[i],labels[i]))
(data_new, labels_new) = list(zip(*wrong_datapoints))
model.train(data_new, labels_new)
ถ้าคุณต้องการบางอย่างที่เจาะจงกว่านี้คุณต้องการหัสของคุณปัจจุบันรถไฟเล่นวนซ้ำ
ขอบคุณสำหรับการแจ้งเตือนการเริ่มทำงาน. แต่ฉันยังต้องการที่จะรักษานางแบบเวอร์ชั่นของมัน,ตั้งแต่พวกเราฝึกมันทุกอาทิตย์เรารุ่นของรุ่นของมัน แล้วก็ iterating เป็นล้านบันทึกจะใช้เวลามากมา ฉันกำลังคิดว่ากำลังโหลดก่อนเวอร์ชั่นของถาดแฟ้ม(v1.0)และจากนั้น retrain องนี้กับเพียงคนใหม่ datapoints ต้องสร้างอีกเวอร์ชั่น v2.0
Patricia
คุณอาจต้องการความชัดเจนคำถามของคุณต้องรัฐนั้น อย่างไรก็ตามทำ versioning ไม่ได้ลบความต้องการจะตามรอย outcomes ของข้อมูลจุดหลังจากฝึกต้องการเป็นโสดวงจรถไฟข้อมูลหลังจากการฝึกซ้อมเสร็จแล้ว คุณต้องค้นหาความจริงอะไร"คนใหม่ datapoints"คือหลังจากทั้งหมด
Kroshtan