database

資料庫 - 機率型資料結構 Bloom Filter 在 Cache 中的應用

category: database     4 minute read     Posted on:

Cache Issues 就像我們在 資料庫 - Cache Strategies 與常見的 Solutions | Shawn Hsu 當中提到的 如果碰到惡意攻擊,查詢不在 cache 也不在 database 裡面的資料,那麼所有的請求都會直接到 database,然後又會直接被打爆 所以其實在這種狀況底下...

資料庫 - Delayed Queue 的設計與考量

category: database     4 minute read     Posted on:

What is Delayed Queue? Delayed Queue 是一種特殊的 message queue 與一般的 message queue 不同,Delayed Queue 裡面的資料並不會被立即取出 你可以對每個 message 設定一個延遲時間 只有當時間到了之後,資料才可以被 consumer...

資料庫 - 如何正確設定高可用的 Redis

category: database     11 minute read     Posted on:

Preface 要如何提高系統的高可用性以及高效能,最常想到的應該就是分散式系統了 基本上你可以發現,不論是哪一段的系統架構,他們通常都會是使用分散式架構以達到高可用性

資料庫 - 大型物件儲存系統 MinIO 簡介

category: database     8 minute read     Posted on:

Brief Large Object Storage System 檔案儲存在現今電腦服務中一直扮演著相當重要的角色 舉例來說,你的大頭貼會需要一個地方儲存 我記得我在學校學習的時候一般來說有兩種做法 上傳到伺服器當中的檔案系統內做儲存,資料庫內寫入存放路徑即可 直接以二進位的方式存入資料庫中

資料庫 - 最佳化 Read/Write 設計

category: database     3 minute read     Posted on:

Preface 雖然說只要有錢都好辦事,但多數情況下我們都是沒錢的 因此學習如何最佳化是相對重要的事情 那麼有哪些是我們可以透過內部盡量去優化的呢?

資料庫 - 從 Netflix 的 Tudum 系統看分散式系統中那些 Read/Write 問題

category: database     7 minute read     Posted on:

Data Consistency Eventually Consistent 在分散式系統中,根據 CAP Theorem 我們知道 AP 系統,沒辦法保證所有節點在收到相同的資料的時候維持一致(因為還沒同步完成) 所以這類系統提供的保證通常都是 Eventually Consistent 也就是他最終會趨於一致...

資料庫 - 新手做 Data Migration 資料遷移

category: database     7 minute read     Posted on:

Preface 資料搬遷,在現代軟體服務當中屬於較為常見的一種需求 不論是單純的機器之間的搬資料抑或者是因應商業邏輯而需要做的資料搬遷等等 都是屬於 Data Migration

資料庫 - 從 Apache Kafka 認識 Message Queue

category: database     16 minute read     Posted on:

Preface message queue 顧名思義他是一個 queue,用來存放 message 的 你可以用 Inter-Process Communication 的概念去思考它 基本上就是提供一個空間或是,讓兩個 process 進行通訊

資料庫 - PostgreSQL 使用 Fuzzy Search 的效能測試

category: database     9 minute read     Posted on:

Introduction to Fuzzy Search 就是字串匹配,只不過它即使是沒有完全的把字拼對,也可以找的到

資料庫 - 從 MySQL 到 PostgreSQL 一些新手會遇到的問題

category: database     14 minute read     Posted on:

Preface 作為用了 MySQL 五年之久的我,原本以為同為 SQL 在語法上的差異不會影響到太多 實際上手之後,發現還是有點差異

資料庫 - 初探分散式資料庫

category: database     5 minute read     Posted on:

Distributed System Scale Out(Horizontal Scale) 的概念是利用多台電腦組成一個龐大的網路,進行運算提供服務 這個網路,稱為 cluster

資料庫 - 更好的分頁機制 Cursor Based Pagination

category: database     3 minute read     Posted on:

Pagination Mechanism 相信一般做開發的,尤其是網頁相關 當資料量太大的時候,我們多半會選擇將資料切成多個部份傳輸 也就是分頁的機制

資料庫 - Index 與 Histogram 篇

category: database     9 minute read     Posted on:

Speed up Search In Large Data

資料庫 - SQL N + 1 問題

category: database     2 minute read     Posted on:

Introduction to SQL N + 1 Problem 在使用 ORM 套件下,開發程式的過程中 你可能會不小心踩到所謂的 SQL N + 1 問題 假設你在開發一個社群網站 使用者可以發佈文章 現在你要實作一個功能 是要撈出所有符合條件的文章以及作者資訊(假設你想知道點讚數超過 10 的所有文章) ...

資料庫 - Transaction 與 Isolation

category: database     9 minute read     Posted on:

Transaction 根據 google translate 的結果我們可以得知,transaction 就是交易 那麼 交易 本身需要有什麼樣的特性呢?

資料庫 - Cache Strategies 與常見的 Solutions

category: database     8 minute read     Posted on:

Introduction to Cache Cache 快取是在計算機當中最重要的概念 作為當今最有效加速的手段之一,其重要程度在作業系統、網頁伺服器以及資料庫當中都可以看到他的身影