系統技術非業餘研究 » dets在64位系統還是有可恥的2G限制

阿新 • • 發佈：2019-01-13

原本以為在 64位作業系統下檔案的讀寫指標都改成64位的避免了2G的限制。經過測試 disk_log和file都支援超過2G的資料檔案，但是 dets還是可恥的失敗了。經過檢視原始碼有2個問題：

1. key segment的問題。 dets在設計的時候是針對32位的那麼它的空間限制就是2G，所以在計算最大的段的數的最大的偏移時候乾脆在程式碼裡面寫死了2G。

2. 偏移的問題。每個key對應的value在dets_v9檔案格式中的偏移值是用 <<32>> 這樣的格式來表示的。所以如果改變成64位那麼檔案格式就完全不相容了。

結論： dets支援2G以上沒戲了，而且同樣影響到mnesia.

Post Footer automatically generated by wp-posturl plugin for wordpress.

No related posts.

erl啟動的時候有個引數 -init_debug 作用是 Makes init write some debug information while interpreting the boot script. 參見erlang system_principles的1.3節：Boot Scripts

我們在做伺服器的時候，老大扔給你一臺機器，要你在上面開發。通常伺服器軟體是非常依賴於系統的軟硬體的，軟體通常是要緊貼硬體的特性，如果我們不能瞭解機器的硬體，我們就無法高效的開發。比如說想知道Linux的系統的版本，CPU有幾個，記憶體多少大，機器什麼型號，Raid卡什麼型號，硬碟有幾個，檔案系

這個圖挺好的，就是比較粗線條，有些東西不太完整/準確，比如現有的USB實際上是480M/12M和1.5M三種速率（暫不算3.0和無線的）另：幫樓主補充一下這類資料的意義：如果對各種匯流排的速率和IOPS如果沒有概念和預估，寫程式時就只能Compile & Pray了。 Reply:O

IO架構圖：記憶體管理圖：很容易誤解的socket buffer： Post Footer automatically generated by wp-posturl plugin for wordpress. (adsbygoo

從lib/megaco/src/tcp/megaco_tcp_connection.erl摘抄的程式碼, 挺詳細的關於系統的資訊: SchedId = erlang:system_info(scheduler_id), SchedNum = erlang:sy

前端時間看到JVM的 64 pointer compress技術，蠻多感慨的。具體的可以 google 64位 pointer compress 來了解更多。好不容易從32位系統中逃脫，解決了4G記憶體的問題，而且64位的cpu更多的暫存器，可以帶來更好的效能。但是怎麼又碰到問題了。64位的系統

原本以為在 64位作業系統下檔案的讀寫指標都改成64位的避免了2G的限制。經過測試 disk_log和file都支援超過2G的資料檔案，但是 dets還是可恥的失敗了。經過檢視原始碼有2個問題： 1. key segment的問題。 dets在設計的時候是針對32位的那麼它的空間限

在即將釋出的R14B版本中，包括了64位機器下用的Halfword版本。我們知道在64位Linux下，指標和size_t都變成64位的，而Erlang的基礎資料結構Eterm都是用的和體系相同的資料結構，那麼在64位機器下，雖然CPU運算的速度增加了，但是記憶體的訪問速度不會隨著CPU的加快而

ItPub寫的文章“2017 年度 DB-Engines 資料庫冠軍得主：PostgreSQL 封王！”, 點選這裡進一步閱讀升的最快的幾個資料庫，我簡單的無責任點評： PG資料庫是很老的資料庫，不過這幾年冉冉升起，因為是學院派的，有很好的學術和智力的支援，一直以來在資料庫的體系結構，程式碼

MySQL資料庫架構的演化觀察 December 14th, 2017 Categories: 資料庫 Tags: mysql

Erlang 17.5版本引入了inet_dist_{listen,connect}_options，對於結點間的互聯socket可以有更精細的控制，RPC的時候效能可以微調： raimo/inet_tcp_dist-priority-option/OTP-12476: Document ke

最後更新時間：2014/11/28 請賜簡歷至：[email protected]，感謝您對加入我們公司有興趣，我們希望能早日和您共事。以下幾個職位1年內有效，歡迎內部轉崗：  資深資料工程師公司：阿里（核心系統資料庫組）工作地點：杭州（西溪園區）崗位描述：分析雲服務產生的海

和大家更新下：做了將近8年資料庫後，我的工作和研究方向將會延伸到虛擬化和計算相關的雲服務，希望能夠和大家一起進步，Happy New Year！預祝大家玩得開心！ Post Footer automatically generated by wp-posturl plugin for w

Erlang 17.5釋出引入控制程序預設字典大小的命令列引數： Erlang/OTP 17.5 has been released Written by Henrik, 01 Apr 2015 Some highlights of the release are: ERTS: Added co

ulimit最初設計是用來限制程序對資源的使用情況的，因為早期的系統系統資源包括記憶體,CPU都是非常有限的，系統要保持公平，就要限制大家的使用，以達到一個相對公平的環境。以下是典型的機器預設的限制情況: $ ulimit -a core file size (blocks,

原創文章，轉載請註明：轉載自系統技術非業餘研究本文連結地址: 求賢帖作為一個優秀的工程師，你其實不缺少才華，你缺少的是神一樣的隊友、充滿挑戰的世界級技術難題，和一個可以施展自己才華的大舞臺。加入阿里核心系統資料庫開發團隊吧，你缺的這裡都有。來吧，戳這裡，給我們見識你的機會：http://b

Erlang R16B03釋出了，通常03版本是bug fix版本，進入生產版本，官方的說明如下： OTP R16B03 is a service release with mostly a number of small corrections and user contributions. B