Техническое задание на разработку скрипта для автоматической проверки фактов (Fact-Checking)Общие положения<ul><li>Название проекта: Скрипт автоматической проверки фактов (Fact-Checking) с использованием локальных и онлайн-источников.</li><li>Цель проекта: Создать скрипт, который извлекает утверждения из пользовательского текста, проверяет их достоверность с использованием интернет-источников и загруженных локальных файлов.</li><li>Базовый функционал: Опирается на функционал скрипта <a href="https://github.com/Libr-AI/OpenFactVerification">Libr-AI/OpenFactVerification</a> с доработками.</li></ul><hr />Основные задачи1.    Добавление поддержки локальных источников:·       Возможность загружать локальные файлы (например, .pdf, .docx, .txt .ppt) в систему.·       Индексирование содержимого локальных файлов для проверки утверждений.·       Хранение и управление загруженными документами.2.    Проверка утверждений:·       Извлечение утверждений из пользовательского текста (клеймов).·       Проверка утверждений на валидность:·       Поиск информации в интернете (включая использование Google Search API для анализа результатов, Answer Box).·       Сравнение с локальными файлами.3.    Интеграция технологий:·       Использовать LlamaIndex и LlamaParse для загрузки, обработки и индексирования локальных документов.·       Реализовать хранение данных через Pinecone для эффективного управления чанками и быстрого доступа.4.    Реализация интерфейса (Опирается на функционал скрипта <a href="https://github.com/Libr-AI/OpenFactVerification">Libr-AI/OpenFactVerification</a>):·       Нужно добавить пользовательский интерфейс (по возможности на Django), который позволяет дополнительно к тому, что уже реализовано в скрипте <a href="https://github.com/Libr-AI/OpenFactVerification">Libr-AI/OpenFactVerification</a>:·       Загружать локальные файлы в базу знаний и удалять их.·       Создавать и удалять папки из групп файлов по разным базам знаний.·       Просматривать результаты проверки клеймов с указанием источника из базы знаний.·       Включать / выключать направление проверки (только по источникам в интернете, только по локальной базе знаний, по обоим путям).<hr />Технические требования1.    Основной стек технологий:·       Язык программирования: Python.·       Фреймворк: Django.·       Библиотеки и инструменты:·       <a href="https://github.com/jerryjliu/llama_index">LlamaIndex</a> и <a href="https://llamaparse.ai/">LlamaParse</a> для индексирования документов.·       <a href="https://www.pinecone.io/">Pinecone</a> для хранения и поиска по чанкам.·       Google Search API для получения данных из интернета.·       PyPDF2, python-docx python-pptx для работы с файлами.2.    Форматы загружаемых файлов:·       Текстовые файлы: .txt, .csv.·       Документы: .pdf, .docx .pptx·       Возможность масштабирования для работы с другими форматами.<hr />Порядок разработки1.    Этап 1: Исследование и проектирование·       Ознакомление и установка скрипта локально у вас [Libr-AI/OpenFactVerification]. (API openAI мы предоставим)2.    Этап 2: Реализация базового функционала·       Интеграция LlamaIndex и LlamaParse для работы с локальными файлами.·       Настройка Pinecone для хранения чанков и быстрого поиска (у нас есть API).3.    Этап 4: Разработка интерфейса·       Пользовательский интерфейс (на Django - загрузка файлов и распределение по папкам, добавление и удаление файлов и папок).4.    Этап 5: Тестирование<hr /><hr />Критерии завершенности1.    Скрипт корректно извлекает утверждения из текста и проверяет их достоверность1.    по интернет-источникам2.    по локальным файлам.3.    по интернет-источникам и локальным файлам.2.    Интерфейс удобен для загрузки файлов и анализа результатов.3.    Система стабильно работает.

binance

Binance

polygon

Polygon

tron

Tron

Скрипт автоматической проверки фактов

📝 Разработка скрипта для автоматической проверки фактов с использованием локальных и онлайн-источников. Поддержка загрузки и индексирования файлов.

Скрипт автоматической проверки фактов — заказ для фрилансеров #1246341 — Weblancer

Потрібен простий php скрипт, який би додавав на фото текст 

Украина

[Python3 telethon] доработка скрипта

Молдова

UI-оболочка на Python для консольного приложения

Узбекистан

Починить телеграм бота

Разработка бота для автоматического заполнения форм и бронирования