近日,中國知名內容社交平臺整合營銷企業(yè)仟傳網(wǎng)絡與火山引擎ByteHouse達成合作。仟傳網(wǎng)絡將通過火山引擎ByteHouse升級底層數(shù)據(jù)引擎的實時查詢、分析能力,在降低資源成本的情況下,實現(xiàn)高吞吐、低延時、高穩(wěn)定性,為品牌方提供全方位的輿情監(jiān)測服務。
仟傳網(wǎng)絡是一家AI驅動的社媒大數(shù)據(jù)解決方案提供商,旨在運用獨有大數(shù)據(jù)及自主研發(fā)系統(tǒng)賦能,為企業(yè)級客戶提供更有價值的KOL及公/私域流量經營解決方案,并提供社媒聆聽、行業(yè)洞察、SCRM系統(tǒng)管理等綜合的數(shù)字營銷及管理服務,為廣告主構建涵蓋傳播、投放、監(jiān)測、評估等全方位內容立體生態(tài),創(chuàng)造更有價值的營銷服務。
在數(shù)字化快速鋪開的今天,輿情監(jiān)測已經成為每個組織和品牌的必備工具。有效的輿情監(jiān)測能夠幫助品牌在信息瞬息萬變的時代迅速應對潛在負面消息,降低聲譽受損的風險,還能讓企業(yè)根據(jù)輿情數(shù)據(jù)調整營銷策略,提升消費滿意度,搶占行業(yè)先機。仟傳網(wǎng)絡旗下的移動聯(lián)網(wǎng)廣告監(jiān)測平臺、社交媒體數(shù)據(jù)分析平臺、曉影短視頻輿情監(jiān)測平臺等產品則通過快捷、全面、準確等優(yōu)勢為品牌方提供前沿、專業(yè)、科學的策略及項目服務支持。
輿情監(jiān)控對數(shù)據(jù)實時性要求高,在現(xiàn)有技術方案中,仟傳網(wǎng)絡通過自建Elasticsearch來提供輿情相似度檢索能力,但從性能、成本角度來看,還無法完全滿足仟傳網(wǎng)絡的需求。在性能上,業(yè)務上要求系統(tǒng)支持數(shù)萬QPS的實時檢索,采用ElasticSearch方案難以達到如此高的并發(fā)指標。在成本上,使用ElasticSearch方案伴隨著高機器資源成本,隨著數(shù)據(jù)量不斷增大,機器資源成本將愈加不可控;此外,數(shù)據(jù)寫入和查詢流程較為復雜,導致應用開發(fā)成本高。
在此背景下,仟傳網(wǎng)絡進一步尋求降本增效的解決方案,并將目光投向火山引擎ByteHouse。作為一款云原生數(shù)據(jù)倉庫,火山引擎ByteHouse提供極速數(shù)據(jù)分析服務,能支撐實時數(shù)據(jù)分析和海量數(shù)據(jù)離線分析,對內經過字節(jié)跳動大量業(yè)務檢驗,并在外部互聯(lián)網(wǎng)、游戲、金融、汽車等領域產生實效。
從Elasticsearch順滑遷移到ByteHouse,雙方面臨的核心難題在于,仟傳網(wǎng)絡輿情數(shù)據(jù)高達幾十億,QPS峰值達到數(shù)萬。ByteHouse不僅要具備處理復雜OLAP分析場景的能力,還要支持仟傳網(wǎng)絡超高QPS在線點查服務,并做到高吞吐、低延時、高穩(wěn)定。
為了解決更好解決仟傳網(wǎng)絡高并發(fā)點查的問題,ByteHouse采用多副本機制,將全量數(shù)據(jù)寫入主節(jié)點,實時自動同步至多個副本,并通過網(wǎng)關查詢實現(xiàn)自動負載均衡、一寫多讀,從而線性提高并發(fā)能力。
ByteHouse高并發(fā)點查技術方案
除此之外,ByteHouse還支持通過SQL寫入、查詢完成業(yè)務邏輯,進一步簡化數(shù)據(jù)處理流程,提升開發(fā)效率。在資源效率上,ByteHouse采用靈活的資源模型,可支持任意節(jié)點數(shù)量和副本數(shù)量變配。用戶最開始只需購買最小資源,后續(xù)可隨業(yè)務增長即時擴容,讓成本更加可控。
仟傳網(wǎng)絡大數(shù)據(jù)負責人唐根平介紹道:“ByteHouse在幾十億數(shù)據(jù)下查詢和寫入都非常穩(wěn)定,不僅幫我們實現(xiàn)了性能提升,還進一步降低了成本,目前總資源成本整體節(jié)省了60%。”
當前視頻、圖片等成為互聯(lián)網(wǎng)上的主流內容載體,仟傳的曉影短視頻輿情監(jiān)測產品基于短視頻平臺方數(shù)據(jù)授權,結合大語言模型(LLM)、自然語言分析(NLP)等AI能力加持,可幫助政企迅速、全面、準確把握短視頻輿情動態(tài),ByteHouse即將發(fā)布的向量檢索和全文檢索功能,也將進一步增強曉影在短視頻輿情監(jiān)測業(yè)務上的能力。(作者:段藝歆)
本文鏈接:http://www.tebozhan.com/showinfo-45-2432-0.html資源成本降低60%!火山引擎ByteHouse助力數(shù)字營銷平臺仟傳網(wǎng)絡降本增效
聲明:本網(wǎng)頁內容旨在傳播知識,若有侵權等問題請及時與本網(wǎng)聯(lián)系,我們將在第一時間刪除處理。郵件:2376512515@qq.com
上一篇: 持續(xù)提升生態(tài)兼容性!火山引擎ByteHouse適配數(shù)據(jù)管道工具Apache Airflow
下一篇: 用3D數(shù)字化技術重塑“人貨場”,視創(chuàng)云展獲2023世界VR產業(yè)大會VR/AR年度創(chuàng)新獎