Найдите исполнителя для вашего проекта прямо сейчас!
Разместите заказ на фриланс-бирже и предложения поступят уже через несколько минут.

Добрый день!

Ищем эксперта по PostgreSQL и/или Clickhouse, с целью проконсультировать по вопросу решения задачи, коротко описанной ниже.

Дано:

Большой объем данных более 8 терабайт

Объемы работы с базой:

1) 50 000 000 inserts rows

2) 1 200 000 000 updates rows

3) 1 000 000 000 selects rows

На данный момент все данные на postgres + timescaleDB

Вся архитектура размещена на собственных виртуальных серверах в кластере из 5 физических серверов

Задача оптимизировать запросы и хранение данных, чтобы можно было получать аналитические данные по этим таблицам в максимально короткие срок, как пример, группировка и заполнение пробелов в таблице на 1 500 000 000 строк по месяцам для 300 000 итоговых результатов (одна строка это продукты разных брендов, итоговая выборка - это сумма столбцов, количество, среднее значение, а также более сложные аналитические расчеты и тд, группе за 30 дней, где каждый день это 50 000 000 записей продуктов для 300 000 брендов)

Архитектура размещается на собственных виртуальных серверах в кластере из 5 физических серверов

Пишите за дополнительной информацией, предлагайте свою цену.

3 года назад
smmwb
Роман 
30 лет
3 года в сервисе
Был
2 года назад

Заявки фрилансеров

Сергей
 
28 лет
3 года в сервисе
Был
3 года назад
3 года назад
  • Похожие заказы

  • Разработайте Excel калькулятор, который будет производить расчет определенного экономического показателя на основе введенных исходных данных. Обеспечьте соответствие образцу и функциональность для удобного использования в экономических расчетах.

    Базы данных14 заявок
    Закрыт
    3 года назад
  • Требуется отладить работу базы данных в Microsoft Access, отредактировать существующие отчеты и добавить новые формы отчетов. Возможно дальнейшее сотрудничество для поддержания работоспособности базы.

    Базы данных4 заявки
    Закрыт
    3 года назад
  • Требуется разработка решения для получения JSON данных по API на Python с добавлением в базу данных ClickHouse. Необходимо предусмотреть асинхронность и многопоточность, обработку 429 ошибок и использование прокси при необходимости. Цель — высокая скорость работы и гарантированное получение данных, добавление 50 000 000 записей ежедневно. Имеется рабочий скрипт, но он требует оптимизации.

    Базы данных1 заявка
    Закрыт
    3 года назад
  • $21

    Требуется разработка базы данных на платформе Access. Важно выполнить проект в короткие сроки, с готовностью к понедельнику. Все детали указаны в документе.

    Базы данныхнет заявок
    Закрыт
    3 года назад
  • Необходимо спарсить все товары с сайта hijapan.ru и оформить данные в предоставленный шаблон. Задача включает извлечение информации из базы данных и структурирование ее в нужном формате.

    Базы данныхнет заявок
    Закрыт
    3 года назад
  • Требуется разработать Python-скрипт для получения данных через API Uniswap и Etherscan с возможностью выбора временных диапазонов и торговых параметров. Данные должны выводиться в Excel. Необходимы параметры для торговых пар и расчет комиссий на заданные даты. Работа только по защищенной сделке.

    Базы данныхнет заявок
    Закрыт
    3 года назад
  • Необходимо исправить таблицу в Excel на листе 'кулинария'. Настроить выпадающие значения в столбце С (A, B, C, NA) и присвоить им баллы. Убрать столбцы D и E. Рассчитать баллы и проценты выполненной работы в строках 203 и 204. Создать диаграмму по данным столбца С с 207 по 213 строки.

    Базы данных1 заявка
    Закрыт
    3 года назад
  • Ищем специалиста по работе в Jira для настройки автоматической отчётности. Отчётность должна отражать объём работ сотрудников и отдела, включая данные за день, неделю и месяц. Требуется большой опыт работы с Jira и понимание настройки отчётности. Примеры работ обязательны, можно использовать тестовую настройку в своем аккаунте.

    Базы данныхнет заявок
    Закрыт
    3 года назад
  • Необходимо выгрузить базу данных компаний, поставляющих товары в Россию по 10-значному коду ТН ВЭД за 2020 и 2021 годы. Требуются данные о названии компании, стране и объеме поставок. Укажите стоимость выполнения заказа.

    Базы данных1 заявка
    Закрыт
    3 года назад
  • Требуется разработать плагин для системы DLE 14.0, который позволит импортировать данные из файлов Excel в базу данных MySQL. Плагин должен поддерживать массовую загрузку файлов с локального или виртуального адреса. Укажите свою цену и сроки выполнения.

    Базы данных1 заявка
    Закрыт
    3 года назад