JSONL Viewer & Formatter จัดการไฟล์ขนาดใหญ่ได้อย่างราบรื่น: ดู ค้นหา ตรวจสอบ และแปลง

ทำไมต้องใช้ JSONL viewer ที่อุทิศตัวให้?

JSONL (JSON Lines), เรียกอีกอย่างว่า NDJSON, เก็บค่า JSON หนึ่งค่าต่อบรรทัด ใช้อย่างแพร่หลายสำหรับชุดข้อมูลการปรับแต่ง LLM, อินพุต/เอาต์พุต batch API, บันทึก และการส่งออกข้อมูล ไฟล์ JSONL ไม่ใช่เอกสาร JSON ที่ถูกต้องหนึ่งเอกสาร ดังนั้นโปรแกรมจัดรูปแบบ JSON ธรรมชาติจึงขว้างข้อผิดพลาด และไฟล์ขนาดหลายเมกะไบต์มักจะทำให้เบราว์เซอร์ค้างบ่อยครั้ง

เครื่องมือนี้ทำให้เร็วอย่างไร

• ไฟล์จะถูกอ่านในชิ้นส่วนและมีเพียงดัชนีบรรทัดที่สร้างขึ้น; ไฟล์ทั้งหมดไม่เคยถูกเปลี่ยนเป็นสตริงตัวเดียวขนาดใหญ่
• รายการใช้การเลื่อนเสมือน ดังนั้นมีเพียงบรรทัดที่มองเห็นไม่กี่สิบบรรทัดที่จะแสดงผล แม้มีชิ้นส่วนหลายล้านชิ้น
• เฉพาะบรรทัดที่คุณคลิกเท่านั้นที่ได้รับการแยกวิเคราะห์และไฮไลต์ไวยากรณ์
• การตรวจสอบ ค้นหา และส่งออกทำงานเป็นชุด มีแสดงความคืบหน้า และสามารถยกเลิกได้ตลอดเวลา

การใช้งานทั่วไป

• ตรวจสอบว่าทุกบรรทัดของชุดข้อมูลการปรับแต่งเป็น JSON ที่ถูกต้องและค้นหาหมายเลขบรรทัดที่เสีย
• ค้นหาบันทึกการสนทนาขนาดใหญ่ตามคำหลักและส่งออกรายการที่ตรงกันเป็นไฟล์ JSONL ใหม่
• ดูว่าฟิลด์ระดับบนสุดแต่ละฟิลด์ปรากฏบ่อยเพียงใดเพื่อตรวจสอบบันทึกที่ไม่สอดคล้องกัน
• แปลง JSONL เป็น JSON array มาตรฐาน หรือส่งออก JSONL ที่ย่อขนาด

เมื่อส่งออกไปยัง JSON array, บรรทัดที่ไม่ถูกต้องจะถูกข้ามและแสดงจำนวน ไฟล์ขนาดใหญ่มาก (หลายร้อย MB) ต้องใช้หน่วยความจำพิเศษเพื่อการส่งออก หากเบราว์เซอร์ช้าลง ให้กรองด้วยการค้นหาก่อนและส่งออกเฉพาะสิ่งที่คุณต้องการ ดู Line-delimited JSON on Wikipedia สำหรับรูปแบบ