

自然言語とコード部分が混在しているテキストを、自然言語とコード部分に分割したいです。

GitHubのissueの分析を行っていますが、issueの本文内に自然言語とコードやログが混在していることが多々あります。  
Markdown等を用いてあるissueでは該当箇所を分割することができます。しかし、コードやログ結果を直貼りしてある場合は切り分けが難しく困っています。  
何かいい方法はありますでしょうか？  
よろしくお願いします。

**追記**

コード部分と自然言語が書き分けられてる場合は分割可能ですが、後者の例だと分割が難しく、分析データにノイズが多く含まれているのが現状です。

分割可能なissue例

  * <https://github.com/docker-library/python/issues/579>

分割が難しいissue例

  * <https://github.com/docker-library/python/issues/318>


CC BY-SA 4.0
2021-03-05T08:04:58.530
74426
2021-03-07T07:46:06.300
2021-03-07T07:46:06.300
3060
44214
question
python 自然言語処理
自然言語処理の前処理として、自然言語とコード部分を切り分けたい