讀性能超過Memcached 65%, 單核也超過redis, 支持日志支持掉電保護，歡迎試用

hanxin83

windoze 發(fā)表于 2016-05-09 13:12
回復(fù) 9# fender0107401

你可以考慮把這些小文件合并成一個大文件，建一個偏移量索引，然后用mmap。

你也可以考慮把這些小文件合并到一個磁盤/dev/sdb，建一個偏移量索引，然后用mmap整個sdb....

lijianweiabcde

樓主可以留下郵箱或微信嗎？
想交流下

fender0107401

回復(fù) 10# windoze

這個我不會啊。

我直接弄了個程序扔那就不管了，慢慢跑。


   

fender0107401

回復(fù) 11# hanxin83

這個我也不會啊。

   

lijianweiabcde

或者先做一個單Table的Mysql, 實現(xiàn)單表的SELECT, UPDATE，DELETE, INSERT, CREATE TABLE.　DROP TABLE, ALTER TABLE, TRUNC TABLE

//樓主還要實現(xiàn)一個sql層？？

windoze

回復(fù) 15# lijianweiabcde

用kv的思路，實現(xiàn)到這個地方的時候估計lz得哭會兒

wlmqgzm

回復(fù) 15# lijianweiabcde

存儲層做完了之后，　就要考慮用戶接口層，　如果圖省事就采用memcached命令集，這樣出一個測試版本比較快．
如果進展非常順利，那么就弄復(fù)雜一點，　搞一個Mysql層，　先支持單表查詢更新，做一個最像Mysql的Nosql,　覺得Mysql命令集還是比Memcached命令集好用，

用戶接口層的代碼，可大可小，看情況吧．

最近集中精力做存儲層的代碼，各種思路隨時更改，也有可能有些設(shè)想不能夠?qū)崿F(xiàn)，重點是存儲層，要覆蓋主要功能點，　就看中間會遇到幾個坑了．
交流的話，　可以在這個帖子中咨詢，　謝謝．

   

VIP_fuck

鹵煮用什么寫？C?C++?

wlmqgzm

回復(fù) 18# VIP_fuck

    C++ 類似下面這種

class  Mapping_read
{
  public:
    Mapping_read( void );
    unsigned int  read( const unsigned long long ulong_read_file_offset,  const unsigned int uint_read_length,  unsigned char* uchars_out );
    unsigned int  lz4_read( const unsigned long long ulong_read_file_offset,  const unsigned int uint_read_uncompress_length,  const unsigned int uint_out_size,  unsigned char* uchars_out );
    const unsigned char* get_uchars_begin( void );
    const char* get_chars_begin( void );
    unsigned long long  get_size( void);

  protected:
    unsigned long long  d_ulong_file_size;
    unsigned char  *d_uchars_begin;
    char  *d_chars_begin;
    //  以下為lz4壓縮的讀取緩存隊列
    std::unordered_map<unsigned long long, std::shared_ptr<std::vector<unsigned char> > >  d_map_lz4_cache;//  hash表　用于lz4 cache
    std::list<unsigned long long>  d_list_lz4_cache_offset;  // 用于制造一個lz4 cache先進先出隊列
    std::atomic<unsigned int>   d_list_lz4_cache_count;   //  用于統(tǒng)計隊列長度的原子量
};

lijianweiabcde

回復(fù) 17# wlmqgzm
我以前做過用某個存儲系統(tǒng)替換掉mysql的innodb.....用替換不太合適，因為mysql提供了對接第三方存儲的接口