Rust製で4ミリ秒とか爆速すぎるしRAGの前処理でかなり重宝しそうだな
つい先週何とか苦労して自作したばかりというのに…またお試しが発生…
こう言うのをみるたび、結合セルがもりもりで、肝心なところは記号になってる表、表の形式をなしている画像、アイコンを線で繋いだシステム構成図などを、どうAIへの入力とすればいいのか悩むよ。
RAGを使っていると、検索精度を上げるには「そもそも文書をどう取り込むか」が重要だと感じる。 WordやExcel、PDFをMarkdownに統一できるなら、前処理もシンプルにできそう。
Word・Excel・PDFなどの文書をAIが読みやすいMarkdownに爆速変換する「anydoc」がオープンソース公開(生成AIクローズアップ) | テクノエッジ TechnoEdge
Rust製で4ミリ秒とか爆速すぎるしRAGの前処理でかなり重宝しそうだな
つい先週何とか苦労して自作したばかりというのに…またお試しが発生…
こう言うのをみるたび、結合セルがもりもりで、肝心なところは記号になってる表、表の形式をなしている画像、アイコンを線で繋いだシステム構成図などを、どうAIへの入力とすればいいのか悩むよ。
RAGを使っていると、検索精度を上げるには「そもそも文書をどう取り込むか」が重要だと感じる。 WordやExcel、PDFをMarkdownに統一できるなら、前処理もシンプルにできそう。