■ DataFrame 클래스의 to_json 메소드를 사용해 CSV 파일을 JSONL 파일을 생성하는 방법을 보여준다.
▶ 예제 코드 (PY)
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 |
import pandas dataFrame = pandas.read_csv( "tsukuyomi.csv", usecols = [1, 2], names = ["prompt", "completion"], skiprows = 2 ) dataFrame.to_json( "tsukuyomi.jsonl", orient = "records", lines = True, force_ascii = False ) |
▶ requirements.txt
1 2 3 4 5 6 7 8 |
numpy==1.26.4 pandas==2.2.2 python-dateutil==2.9.0.post0 pytz==2024.1 six==1.16.0 tzdata==2024.1 |