■ RecursiveCharacterTextSplitter 클래스의 get_separators_for_language 정적 메소드를 사용해 프로그래밍 언어별 구분자 리스트를 구하는 방법을 보여준다.
▶ 예제 코드 (PY)
|
1 2 3 4 5 6 7 8 9 10 11 12 |
from langchain_text_splitters import RecursiveCharacterTextSplitter from langchain_text_splitters import Language separatorList = RecursiveCharacterTextSplitter.get_separators_for_language(Language.PYTHON) print(separatorList) """ ['\nclass ', '\ndef ', '\n\tdef ', '\n\n', '\n', ' ', ''] """ |
※ pip install langchain-text-splitters 명령을 실행했다.