02.區塊鏈共識演算法(2)PoW挖礦演算法原理及其在比特幣、以太坊中的實現
PoW挖礦演算法原理及其在比特幣、以太坊中的實現
PoW,全稱Proof of Work,即工作量證明,又稱挖礦。
大部分公有鏈或虛擬貨幣,如比特幣、以太坊,均基於PoW演算法,來實現其共識機制。
即根據挖礦貢獻的有效工作,來決定貨幣的分配。
比特幣區塊
比特幣區塊由區塊頭和該區塊所包含的交易列表組成。
區塊頭大小為80位元組,其構成包括:
- 4位元組:版本號
- 32位元組:上一個區塊的雜湊值
- 32位元組:交易列表的Merkle根雜湊值
- 4位元組:當前時間戳
- 4位元組:當前難度值
- 4位元組:隨機數Nonce值
此80位元組長度的區塊頭,即為比特幣Pow演算法的輸入字串。
交易列表附加在區塊頭之後,其中第一筆交易為礦工獲得獎勵和手續費的特殊交易。
bitcoin-0.15.1原始碼中區塊頭和區塊定義:
class CBlockHeader { public: //版本號 int32_t nVersion; //上一個區塊的雜湊值 uint256 hashPrevBlock; //交易列表的Merkle根雜湊值 uint256 hashMerkleRoot; //當前時間戳 uint32_t nTime; //當前挖礦難度,nBits越小難度越大 uint32_t nBits; //隨機數Nonce值 uint32_t nNonce; //其它程式碼略 }; class CBlock : public CBlockHeader { public: //交易列表 std::vector<CTransactionRef> vtx; //其它程式碼略 }; //程式碼位置src/primitives/block.h
比特幣Pow演算法原理
Pow的過程,即為不斷調整Nonce值,對區塊頭做雙重SHA256雜湊運算,使得結果滿足給定數量前導0的雜湊值的過程。
其中前導0的個數,取決於挖礦難度,前導0的個數越多,挖礦難度越大。
具體如下:
- 1、生成鑄幣交易,並與其它所有準備打包進區塊的交易組成交易列表,生成Merkle根雜湊值。
- 2、將Merkle根雜湊值,與區塊頭其它欄位組成區塊頭,80位元組長度的區塊頭作為Pow演算法的輸入。
- 3、不斷變更區塊頭中的隨機數Nonce,對變更後的區塊頭做雙重SHA256雜湊運算,與當前難度的目標值做比對,
如果小於目標難度,即Pow完成。
Pow完成的區塊向全網廣播,其他節點將驗證其是否符合規則,如果驗證有效,其他節點將接收此區塊,並附加在已有區塊鏈之後。
之後將進入下一輪挖礦。
bitcoin-0.15.1原始碼中Pow演算法實現:
UniValue generateBlocks(std::shared_ptr<CReserveScript> coinbaseScript, int nGenerate,
uint64_t nMaxTries, bool keepScript)
{
static const int nInnerLoopCount = 0x10000;
int nHeightEnd = 0;
int nHeight = 0;
{ // Don't keep cs_main locked
LOCK(cs_main);
nHeight = chainActive.Height();
nHeightEnd = nHeight+nGenerate;
}
unsigned int nExtraNonce = 0;
UniValue blockHashes(UniValue::VARR);
while (nHeight < nHeightEnd)
{
std::unique_ptr<CBlockTemplate> pblocktemplate(BlockAssembler(Params()).CreateNewBlock(coinbaseScript->reserveScript));
if (!pblocktemplate.get())
throw JSONRPCError(RPC_INTERNAL_ERROR, "Couldn't create new block");
CBlock *pblock = &pblocktemplate->block;
{
LOCK(cs_main);
IncrementExtraNonce(pblock, chainActive.Tip(), nExtraNonce);
}
//不斷變更區塊頭中的隨機數Nonce
//對變更後的區塊頭做雙重SHA256雜湊運算
//與當前難度的目標值做比對,如果小於目標難度,即Pow完成
//uint64_t nMaxTries = 1000000;即重試100萬次
while (nMaxTries > 0 && pblock->nNonce < nInnerLoopCount && !CheckProofOfWork(pblock->GetHash(), pblock->nBits, Params().GetConsensus())) {
++pblock->nNonce;
--nMaxTries;
}
if (nMaxTries == 0) {
break;
}
if (pblock->nNonce == nInnerLoopCount) {
continue;
}
std::shared_ptr<const CBlock> shared_pblock = std::make_shared<const CBlock>(*pblock);
if (!ProcessNewBlock(Params(), shared_pblock, true, nullptr))
throw JSONRPCError(RPC_INTERNAL_ERROR, "ProcessNewBlock, block not accepted");
++nHeight;
blockHashes.push_back(pblock->GetHash().GetHex());
//mark script as important because it was used at least for one coinbase output if the script came from the wallet
if (keepScript)
{
coinbaseScript->KeepScript();
}
}
return blockHashes;
}
//程式碼位置src/rpc/mining.cpp
另附bitcoin-0.15.1原始碼中生成鑄幣交易和建立新塊:
std::unique_ptr<CBlockTemplate> BlockAssembler::CreateNewBlock(const CScript& scriptPubKeyIn, bool fMineWitnessTx)
{
int64_t nTimeStart = GetTimeMicros();
resetBlock();
pblocktemplate.reset(new CBlockTemplate());
if(!pblocktemplate.get())
return nullptr;
pblock = &pblocktemplate->block; // pointer for convenience
pblock->vtx.emplace_back();
pblocktemplate->vTxFees.push_back(-1); // updated at end
pblocktemplate->vTxSigOpsCost.push_back(-1); // updated at end
LOCK2(cs_main, mempool.cs);
CBlockIndex* pindexPrev = chainActive.Tip();
nHeight = pindexPrev->nHeight + 1;
//版本號
pblock->nVersion = ComputeBlockVersion(pindexPrev, chainparams.GetConsensus());
if (chainparams.MineBlocksOnDemand())
pblock->nVersion = gArgs.GetArg("-blockversion", pblock->nVersion);
//當前時間戳
pblock->nTime = GetAdjustedTime();
const int64_t nMedianTimePast = pindexPrev->GetMedianTimePast();
nLockTimeCutoff = (STANDARD_LOCKTIME_VERIFY_FLAGS & LOCKTIME_MEDIAN_TIME_PAST)
? nMedianTimePast
: pblock->GetBlockTime();
fIncludeWitness = IsWitnessEnabled(pindexPrev, chainparams.GetConsensus()) && fMineWitnessTx;
int nPackagesSelected = 0;
int nDescendantsUpdated = 0;
addPackageTxs(nPackagesSelected, nDescendantsUpdated);
int64_t nTime1 = GetTimeMicros();
nLastBlockTx = nBlockTx;
nLastBlockWeight = nBlockWeight;
//建立鑄幣交易
CMutableTransaction coinbaseTx;
coinbaseTx.vin.resize(1);
coinbaseTx.vin[0].prevout.SetNull();
coinbaseTx.vout.resize(1);
//挖礦獎勵和手續費
coinbaseTx.vout[0].scriptPubKey = scriptPubKeyIn;
coinbaseTx.vout[0].nValue = nFees + GetBlockSubsidy(nHeight, chainparams.GetConsensus());
coinbaseTx.vin[0].scriptSig = CScript() << nHeight << OP_0;
//第一筆交易即為礦工獲得獎勵和手續費的特殊交易
pblock->vtx[0] = MakeTransactionRef(std::move(coinbaseTx));
pblocktemplate->vchCoinbaseCommitment = GenerateCoinbaseCommitment(*pblock, pindexPrev, chainparams.GetConsensus());
pblocktemplate->vTxFees[0] = -nFees;
LogPrintf("CreateNewBlock(): block weight: %u txs: %u fees: %ld sigops %d\n", GetBlockWeight(*pblock), nBlockTx, nFees, nBlockSigOpsCost);
//上一個區塊的雜湊值
pblock->hashPrevBlock = pindexPrev->GetBlockHash();
UpdateTime(pblock, chainparams.GetConsensus(), pindexPrev);
//當前挖礦難度
pblock->nBits = GetNextWorkRequired(pindexPrev, pblock, chainparams.GetConsensus());
//隨機數Nonce值
pblock->nNonce = 0;
pblocktemplate->vTxSigOpsCost[0] = WITNESS_SCALE_FACTOR * GetLegacySigOpCount(*pblock->vtx[0]);
CValidationState state;
if (!TestBlockValidity(state, chainparams, *pblock, pindexPrev, false, false)) {
throw std::runtime_error(strprintf("%s: TestBlockValidity failed: %s", __func__, FormatStateMessage(state)));
}
int64_t nTime2 = GetTimeMicros();
LogPrint(BCLog::BENCH, "CreateNewBlock() packages: %.2fms (%d packages, %d updated descendants), validity: %.2fms (total %.2fms)\n", 0.001 * (nTime1 - nTimeStart), nPackagesSelected, nDescendantsUpdated, 0.001 * (nTime2 - nTime1), 0.001 * (nTime2 - nTimeStart));
return std::move(pblocktemplate);
}
//程式碼位置src/miner.cpp
比特幣挖礦難度計算
每建立2016個塊後將計算新的難度,此後的2016個塊使用新的難度。計算步驟如下:
- 1、找到前2016個塊的第一個塊,計算生成這2016個塊花費的時間。
即最後一個塊的時間與第一個塊的時間差。時間差不小於3.5天,不大於56天。 - 2、計算前2016個塊的難度總和,即單個塊的難度*總時間。
- 3、計算新的難度,即2016個塊的難度總和/14天的秒數,得到每秒的難度值。
- 4、要求新的難度,難度不低於引數定義的最小難度。
bitcoin-0.15.1原始碼中計算挖礦難度程式碼如下:
//nFirstBlockTime即前2016個塊的第一個塊的時間戳
unsigned int CalculateNextWorkRequired(const CBlockIndex* pindexLast, int64_t nFirstBlockTime, const Consensus::Params& params)
{
if (params.fPowNoRetargeting)
return pindexLast->nBits;
//計算生成這2016個塊花費的時間
int64_t nActualTimespan = pindexLast->GetBlockTime() - nFirstBlockTime;
//不小於3.5天
if (nActualTimespan < params.nPowTargetTimespan/4)
nActualTimespan = params.nPowTargetTimespan/4;
//不大於56天
if (nActualTimespan > params.nPowTargetTimespan*4)
nActualTimespan = params.nPowTargetTimespan*4;
// Retarget
const arith_uint256 bnPowLimit = UintToArith256(params.powLimit);
arith_uint256 bnNew;
bnNew.SetCompact(pindexLast->nBits);
//計算前2016個塊的難度總和
//即單個塊的難度*總時間
bnNew *= nActualTimespan;
//計算新的難度
//即2016個塊的難度總和/14天的秒數
bnNew /= params.nPowTargetTimespan;
//bnNew越小,難度越大
//bnNew越大,難度越小
//要求新的難度,難度不低於引數定義的最小難度
if (bnNew > bnPowLimit)
bnNew = bnPowLimit;
return bnNew.GetCompact();
}
//程式碼位置src/pow.cpp
以太坊區塊
以太坊區塊由Header和Body兩部分組成。
其中Header部分成員如下:
- ParentHash,父區塊雜湊
- UncleHash,叔區塊雜湊,具體為Body中Uncles陣列的RLP雜湊值。RLP雜湊,即某型別物件RLP編碼後做SHA3雜湊運算。
- Coinbase,礦工地址。
- Root,StateDB中state Trie根節點RLP雜湊值。
- TxHash,Block中tx Trie根節點RLP雜湊值。
- ReceiptHash,Block中Receipt Trie根節點的RLP雜湊值。
- Difficulty,區塊難度,即當前挖礦難度。
- Number,區塊序號,即父區塊Number+1。
- GasLimit,區塊內所有Gas消耗的理論上限,建立時指定,由父區塊GasUsed和GasLimit計算得出。
- GasUsed,區塊內所有Transaction執行時消耗的Gas總和。
- Time,當前時間戳。
- Nonce,隨機數Nonce值。
有關叔區塊:
叔區塊,即孤立的塊。以太坊成塊速度較快,導致產生孤塊。
以太坊會給發現孤塊的礦工以回報,激勵礦工在新塊中引用孤塊,引用孤塊使主鏈更重。
在以太坊中,主鏈是指最重的鏈。
有關state Trie、tx Trie和Receipt Trie:
- state Trie,所有賬戶物件可以逐個插入一個Merkle-PatricaTrie(MPT)結構中,形成state Trie。
- tx Trie:Block中Transactions中所有tx物件,逐個插入MPT結構中,形成tx Trie。
- Receipt Trie:Block中所有Transaction執行後生成Receipt陣列,所有Receipt逐個插入MPT結構中,形成Receipt Trie。
Body成員如下:
- Transactions,交易列表。
- Uncles,引用的叔區塊列表。
go-ethereum-1.7.3原始碼中區塊頭和區塊定義:
type Header struct {
//父區塊雜湊
ParentHash common.Hash
//叔區塊雜湊
UncleHash common.Hash
//礦工地址
Coinbase common.Address
//StateDB中state Trie根節點RLP雜湊值
Root common.Hash
//Block中tx Trie根節點RLP雜湊值
TxHash common.Hash
//Block中Receipt Trie根節點的RLP雜湊值
ReceiptHash common.Hash
Bloom Bloom
//區塊難度
Difficulty *big.Int
//區塊序號
Number *big.Int
//區塊內所有Gas消耗的理論上限
GasLimit *big.Int
//區塊內所有Transaction執行時消耗的Gas總和
GasUsed *big.Int
//當前時間戳
Time *big.Int
Extra []byte
MixDigest common.Hash
//隨機數Nonce值
Nonce BlockNonce
}
type Body struct {
//交易列表
Transactions []*Transaction
//引用的叔區塊列表
Uncles []*Header
}
//程式碼位置core/types/block.go
以太坊Pow演算法原理
以太坊Pow演算法可以表示為如下公式:
RAND(h, n) <= M / d
其中RAND()表示一個概念函式,代表一系列的複雜運算。
其中h和n為輸入,即區塊Header的雜湊、以及Header中的Nonce。
M表示一個極大的數,此處使用2^256-1。
d,為區塊難度,即Header中的Difficulty。
因此在h和n確定的情況下,d越大,挖礦難度越大,即為Difficulty本義。
即不斷變更Nonce,使RAND(h, n)滿足RAND(h, n) <= M / d,即完成Pow。
go-ethereum-1.7.3原始碼中Pow演算法實現:
func (ethash *Ethash) mine(block *types.Block, id int, seed uint64, abort chan struct{}, found chan *types.Block) {
// Extract some data from the header
var (
header = block.Header()
hash = header.HashNoNonce().Bytes()
//target,即M / d,即(2^256-1)/Difficulty
target = new(big.Int).Div(maxUint256, header.Difficulty)
number = header.Number.Uint64()
dataset = ethash.dataset(number)
)
// Start generating random nonces until we abort or find a good one
var (
attempts = int64(0)
nonce = seed
)
logger := log.New("miner", id)
logger.Trace("Started ethash search for new nonces", "seed", seed)
for {
select {
case <-abort:
// Mining terminated, update stats and abort
logger.Trace("Ethash nonce search aborted", "attempts", nonce-seed)
ethash.hashrate.Mark(attempts)
return
default:
// We don't have to update hash rate on every nonce, so update after after 2^X nonces
attempts++
if (attempts % (1 << 15)) == 0 {
ethash.hashrate.Mark(attempts)
attempts = 0
}
//hashimotoFull即RAND(h, n)所代表的一系列的複雜運算
digest, result := hashimotoFull(dataset, hash, nonce)
//result滿足RAND(h, n) <= M / d
if new(big.Int).SetBytes(result).Cmp(target) <= 0 {
// Correct nonce found, create a new header with it
header = types.CopyHeader(header)
header.Nonce = types.EncodeNonce(nonce)
header.MixDigest = common.BytesToHash(digest)
// Seal and return a block (if still needed)
select {
case found <- block.WithSeal(header):
logger.Trace("Ethash nonce found and reported", "attempts", nonce-seed, "nonce", nonce)
case <-abort:
logger.Trace("Ethash nonce found but discarded", "attempts", nonce-seed, "nonce", nonce)
}
return
}
//不斷變更Nonce
nonce++
}
}
}
//程式碼位置consensus/ethash/sealer.go
以太坊挖礦難度計算
以太坊每次挖礦均需計算當前區塊難度。
按版本不同有三種計算難度的規則,分別為:calcDifficultyByzantium(Byzantium版)、calcDifficultyHomestead(Homestead版)、calcDifficultyFrontier(Frontier版)。
此處以calcDifficultyHomestead為例。
計算難度時輸入有:
- parent_timestamp:父區塊時間戳
- parent_diff:父區塊難度
- block_timestamp:當前區塊時間戳
- block_number:當前區塊的序號
當前區塊難度計算公式,即:
block_diff = parent_diff
+ (parent_diff / 2048 * max(1 - (block_timestamp - parent_timestamp) // 10, -99)
+ 2^((block_number // 100000) - 2)
其中//為整數除法運算子,a//b,即先計算a/b,然後取不大於a/b的最大整數。
調整難度的目的,即為使挖礦時間保持在10-19s期間內,如果低於10s增大挖礦難度,如果大於19s將減小難度。
另外,計算出的當前區塊難度不應低於以太坊創世區塊難度,即131072。
go-ethereum-1.7.3原始碼中計算挖礦難度程式碼如下:
func calcDifficultyHomestead(time uint64, parent *types.Header) *big.Int {
// https://github.com/ethereum/EIPs/blob/master/EIPS/eip-2.mediawiki
// algorithm:
// diff = (parent_diff +
// (parent_diff / 2048 * max(1 - (block_timestamp - parent_timestamp) // 10, -99))
// ) + 2^(periodCount - 2)
bigTime := new(big.Int).SetUint64(time)
bigParentTime := new(big.Int).Set(parent.Time)
// holds intermediate values to make the algo easier to read & audit
x := new(big.Int)
y := new(big.Int)
// 1 - (block_timestamp - parent_timestamp) // 10
x.Sub(bigTime, bigParentTime)
x.Div(x, big10)
x.Sub(big1, x)
// max(1 - (block_timestamp - parent_timestamp) // 10, -99)
if x.Cmp(bigMinus99) < 0 {
x.Set(bigMinus99)
}
// (parent_diff + parent_diff // 2048 * max(1 - (block_timestamp - parent_timestamp) // 10, -99))
y.Div(parent.Difficulty, params.DifficultyBoundDivisor)
x.Mul(y, x)
x.Add(parent.Difficulty, x)
// minimum difficulty can ever be (before exponential factor)
if x.Cmp(params.MinimumDifficulty) < 0 {
x.Set(params.MinimumDifficulty)
}
// for the exponential factor
periodCount := new(big.Int).Add(parent.Number, big1)
periodCount.Div(periodCount, expDiffPeriod)
// the exponential factor, commonly referred to as "the bomb"
// diff = diff + 2^(periodCount - 2)
if periodCount.Cmp(big1) > 0 {
y.Sub(periodCount, big2)
y.Exp(big2, y, nil)
x.Add(x, y)
}
return x
}
//程式碼位置consensus/ethash/consensus.go
後記
Pow演算法概念簡單,即工作端提交難以計算但易於驗證的計算結果,其他節點通過驗證這個結果來確信工作端完成了相當的工作量。
但其缺陷也很明顯:1、隨著節點將CPU挖礦升級為GPU、甚至礦機挖礦,節點數和算力已漸漸失衡;
2、比特幣等網路每秒需完成數百萬億次雜湊計算,資源大量浪費。
為此,業內提出了Pow的替代者如PoS權益證明演算法,即要求使用者擁有一定數量的貨幣,才有權參與確定下一個合法區塊。
另外,相對擁有51%算力,購買超過半數以上的貨幣難度更大,也使得惡意攻擊更加困難