Для более подробного технического обмена и возможностей трудоустройства посетите официальный аккаунт WeChat на платформе данных ByteDance и ответьте [1], чтобы войти в официальную группу общения.
Недавно
известная китайская
контентная социальная платформа, интегрированная маркетинговая компания Qianchuan Network, заключила соглашение о сотрудничестве с движком вулкана
ByteHouse
. Сеть Qianchuan обновит возможности запроса и анализа в реальном времени базового механизма данных с помощью движка вулкана ByteHouse, чтобы добиться высокой пропускной способности, низкой задержки и высокой стабильности при одновременном сокращении затрат на ресурсы, а также предоставит брендам полный спектр услуг по мониторингу общественного мнения. .
Qianchuan Network — это поставщик решений для работы с большими данными в социальных сетях, основанный на искусственном интеллекте,
который стремится использовать уникальные большие данные и возможности независимых систем исследований и разработок, чтобы предоставить клиентам корпоративного уровня более ценные решения для управления трафиком KOL и публичных/частных доменов. услуги цифрового маркетинга и управления, такие как прослушивание социальных сетей, отраслевая аналитика, управление системой SCRM и т. д., для создания трехмерной экологии контента, охватывающей коммуникацию, размещение, мониторинг, оценку и т. д., чтобы рекламодатели могли создавать более ценные маркетинговые услуги.
Сегодня, с быстрым распространением цифровизации, мониторинг общественного мнения стал важным инструментом для каждой организации и бренда. Эффективный мониторинг общественного мнения может помочь брендам быстро реагировать на потенциальные негативные новости и снизить риск репутационного ущерба в эпоху быстро меняющейся информации. возможности. Платформа для мониторинга мобильной интернет-рекламы Qianchuan Network, платформа для анализа данных в социальных сетях, платформа для мониторинга общественного мнения с короткими видео Xiaoying и другие продукты предоставляют брендам передовую, профессиональную и научную стратегию и поддержку проектов благодаря быстрым, комплексным и точным преимуществам.
Мониторинг общественного мнения предъявляет высокие требования к данным в реальном времени.Среди существующих технических решений сеть Qianchuan Network предоставляет возможности поиска сходства общественного мнения с помощью собственного Elasticsearch.Однако с точки зрения
производительности
и стоимости она не может полностью удовлетворить потребности Qianchuan Сеть. С точки зрения производительности бизнес требует, чтобы система поддерживала получение в реальном времени десятков тысяч QPS, а добиться таких высоких показателей параллелизма с помощью решения ElasticSearch сложно. С точки зрения стоимости, использование решения ElasticSearch сопровождается высокими затратами на машинные ресурсы.Поскольку объем данных продолжает увеличиваться, затраты на машинные ресурсы будут становиться все более неконтролируемыми.Кроме того, процессы записи данных и запросов относительно сложны, что приводит к высоким затраты на разработку приложения.
В этом контексте Qianchuan Network продолжает искать решения для снижения затрат и повышения эффективности и нацеливается на движок вулкана
ByteHouse
. В качестве
облачного
хранилища данных Volcano Engine ByteHouse предоставляет чрезвычайно быстрые услуги анализа данных, которые могут поддерживать анализ данных в реальном времени и анализ больших объемов данных в автономном режиме. Он был протестирован внутри компании ByteDance и широко используется во внешнем Интернете, играх, финансы, автомобили и другие области дают реальные результаты.
Основная проблема, с которой сталкиваются обе стороны при плавном переходе от
Elasticsearch к
ByteHouse , заключается в том, что тысячи данных онлайн-общественного мнения достигают миллиардов, а пиковое количество запросов в секунду достигает десятков тысяч. ByteHouse должен не только иметь возможность обрабатывать сложные сценарии анализа OLAP , но также поддерживать службу онлайн-запросов со сверхвысоким QPS в сети Qianchuan, а также обеспечивать высокую пропускную способность, низкую задержку и высокую стабильность.
Чтобы лучше решить проблему перечисления с высоким уровнем параллелизма в сети Qianchuan,
ByteHouse
использует механизм нескольких копий для записи всех данных на главный узел, автоматической синхронизации с несколькими копиями в реальном времени и достижения автоматической
балансировки нагрузки
и однократной записи. запрос с множественным чтением через шлюз. Это линейно улучшает возможности параллелизма.
Решение ByteHouse для технологии перечисления с высоким параллелизмом
Кроме того,
ByteHouse
также поддерживает завершение бизнес-логики посредством написания SQL и запросов, что еще больше упрощает процесс обработки данных и повышает эффективность разработки. С точки зрения эффективности использования ресурсов ByteHouse использует гибкую модель ресурсов, которая может поддерживать любое изменение количества узлов и реплик. Пользователям необходимо приобрести лишь минимальное количество ресурсов на начальном этапе, и их можно сразу же расширить по мере роста бизнеса, что делает расходы более контролируемыми.
Тан Генпин, руководитель отдела больших данных в Qianchuan Network, сказал: «
ByteHouse
очень стабильно выполняет запросы и запись миллиардов данных. Это не только помогло нам повысить производительность, но и еще больше снизить затраты. В настоящее время общая стоимость ресурсов была сэкономлена. на 60%. %."
В настоящее время видео, изображения и т. д. стали основными носителями контента в Интернете.Продукт для мониторинга общественного мнения в виде короткого видео Xiaoying от Qianchuan основан
на авторизации данных с платформы коротких видео
в сочетании с большой языковой моделью (
LLM
), анализом естественного языка. (NLP) и другие возможности искусственного интеллекта. Он может помочь
правительствам и предприятиям
быстро, всесторонне и точно понять динамику общественного мнения в коротких видеороликах. Функции
векторного поиска и полнотекстового поиска
ByteHouse
, которые скоро будут выпущены, также будут способствовать дальнейшему развитию
расширить возможности Сяоина в сфере мониторинга общественного мнения в виде коротких видео.
Нажмите, чтобы перейти к
Volcano Engine ByteHouse
и узнать больше.
{{o.name}}
{{м.имя}}