這是小D第一篇博客,有什么錯誤還請各位指正。小D也是剛接觸Hadoop,因為在淘寶實習,有很多算法要在分布式環境下實現,所以這幾天一直在看Hadoop,邊用邊學。最近實現的一個算法需要reduce輸出很多參數,每個參數的格式不一樣,而且要做為下一次mapreduce的輸入,大家都知道Hadoop的分布式操作系統HFS是以目錄為節點讀取文件的,每個reduce輸出一個分片,所以必須把要輸出的文件根據類型的不同輸出到不同的目錄中去。因為淘寶還在用Hadoop0
系統 2019-08-12 09:29:27 3162
ae框架是redis作者開發的事件處理框架,其目的和libevent項目類似。redis本著最小依賴原則,自己實現了一套,而且速度更快。ae只有不到500行代碼,但據說libevent有3萬加的代碼,實現這一個功能所付出的代碼量已經超過了redis所有的代碼量。ae.h1#ifndef__AE_H__2#define__AE_H__3//同時支持的連接數,其實這個還是可以設的更大一些4#defineAE_SETSIZE(1024*10)/*Maxnumbe
系統 2019-08-12 01:32:38 3162
1.分類顯示sections在之前的文章UITableView的資料設定方式一文中,已經示范如何在UITableView中設定所要顯示的資料,以及分別顯示這些資料的細節,但是如果資料比數太多時該怎么辦?你可以參考本篇文章的做法,將資料做分類的處理,并且建立快速索引,讓使用者能以最短的時間找到所需要的資料。資料分類的概念動態表格的內容多半是存放在陣列當中方便資料的存取,如果你有好幾類不同比的資料,你可以將這些資料分別存放在不同的陣列里,最后再使用一個NSMu
系統 2019-08-29 22:01:25 3161
剛剛看到了DB2UDBVer8.2(Stinger)應該可以在今天下載,可是跑去看了看居然還沒有。。。仔細想了想,哦。。因為東方人是世界上起的早的人群。hoho。。至于為什么期待它,主要也是.NET鬧的,因為Stinger可以用.NET語言寫存儲過程。至今我還有些懷疑這個消息,實在是因為我弄不懂為什么DB2可以搶在SQLServer前面。#我是一個對商業軟件的Beta版不感興趣的人,別說SQLServer,#包括VS.NET2005不過才Beta1,實在是
系統 2019-08-12 01:52:27 3161
1.安裝hive2.hive實戰3.hive存儲模型4.深入hql查詢語言5.參考資料及代碼下載<1>.安裝hive下載hive,下載地址http://mirror.bjtu.edu.cn/apache//hive/,解壓該文件:xuqiang@ubuntu:~/hadoop/src/hive$tarzxvfhive-0.7.0-bin.tar.gz設置環境變量:xuqiang@ubuntu:~/hadoop/src/hive$cdhive-0.7.0-b
系統 2019-08-12 01:33:29 3161
在學習JSP/Servlet的過程中,配置Tomcat的虛擬目錄可能是我們遇到的第一個比較麻煩的問題,說是麻煩是針對我們初學者而言,對于高手那都不是問題。反正我是弄了一天才配置好,發現網上給出的很多配置方法都行不通,最后還是在一本參考書上尋找到答案。所以說大家以后在網上尋找資料需要仔細鑒別。總的來說Tomcat的虛擬目錄的配置有兩種方式:1.修改server.xml2.Tomcat\conf\Catalina\localhost文件路徑下添加一個xml配置
系統 2019-08-12 01:33:02 3161
在時間序列中,我們需要基于該時間序列當前已有的數據來預測其在之后的走勢,三次指數平滑(Triple/ThreeOrderExponentialSmoothing,Holt-Winters)算法可以很好的進行時間序列的預測。時間序列數據一般有以下幾種特點:1.趨勢(Trend)2.季節性(Seasonality)。趨勢描述的是時間序列的整體走勢,比如總體上升或者總體下降。下圖所示的時間序列是總體上升的:季節性描述的是數據的周期性波動,比如以年或者周為周期,如
系統 2019-08-12 01:32:42 3161
原文:ApexSQLLog-SQL誤操作恢復工具今天不小心對數據庫執行了一次誤操作,心想有沒有什么工具能恢復這次誤操作呢?于是找到了LogExplorer4.2,可惜它最多只支持SQL2005,在SQL2008上無法使用,然后又找到了ApexSQLLog,最新版本最高支持SQL2008以及SQL2012,試用版可以提供功能無限制14天的免費試用期,功能倒真是強大直接下載安裝,官方下載地址:http://www.apexsql.com/sql_tools_l
系統 2019-08-12 01:32:04 3161
只會寫程序的程序員,永遠只是一名普通程序員。跳槽后的一個月,我把自己一個人關在房間里,思考:我畢業兩年了,我都做了些什么。我該怎么繼續做下去,怎么做得更好前兩年,只是想混跡于軟件的江湖中,成為江湖中人。現在亦然江湖大哥的我,彷徨的于各類灑家中..有些感悟,刻于此碑,共勉:(1)抓大放小:對一個國家是這樣,做程序也是這樣,別太糾結一些細節了。主要的邏輯結構啊,效率啊,都OK,那就OK,我們要的是材料是鋼筋的就行有很好的健壯性,很好的性能就行,不是搞得跟花雕說
系統 2019-08-12 09:30:05 3160
pgAdminIII昨天又更新了,我裝了PostgreSQL7.5后用舊的pgAdminIII就報錯,下載最新的pgAdminIII就好了。不習慣SELECT*FROM"A"嗚,為什么表名還要加上雙引號,郁悶.下載地址:http://www.pgadmin.org/snapshots/pgadmin3-win32.zipPostgreSQL安裝參考:http://www.cnblogs.com/huqingyu/archive/2004/07/24/270
系統 2019-08-12 01:52:36 3160