Meet The Author

I am Vi. I live in Ha Noi . I am a developer :D

author

Hướng dẫn cách tải Kaggle Datasets sử dụng wget

Leave a Comment
Để có thể tải được tập Datasets từ Kaggle sử dụng wget.

1. Đầu tiên chúng ta cần lưu lại cookies bằng cách :

- Extension Chrome : https://chrome.google.com/webstore/detail/cookietxt-export/lopabhfecdfhgogdbojmaicoicjekelh
- Addon Firefox :  https://addons.mozilla.org/en-us/firefox/addon/export-cookies/

2. Export cookies vào cookies.txt

3. Sử dụng wget tải dữ liệu về

wget -x --load-cookies cookies.txt https://www.kaggle.com/c/icdm-2015-drawbridge-cross-device-connections/download/database.sqlite.zip
Read More

[Infographic] An Exciting Year for Apache Spark

Leave a Comment
A infographic about Apache Spark which created by DataBricks

Read More

A course : Mining of Massive Datasets

Leave a Comment
Một khóa học hay về khai phá dữ liệu lớn của trường stanford .
Coursera : https://www.coursera.org/course/mmds
Books : http://www.mmds.org/


Read More

Danh hiệu và Sự đố kỵ?

Leave a Comment
Lâu lắm, mình mới viết linh tinh. Cũng tại vì viết kém và khá lủng củng nữa .
Nhân dịp Việt Nam dành chức vô địch Robocon 2014 Châu Á  - Thái Bình Dương .  Và đại diện của Việt Nam không ai khác chính là Đại Học Lạc Hồng.
Những năm gần đây, Đại Học Lạc Hồng là cái tên nổi nhất trong cuộc Robocon . Họ dành ngồi vô địch Việt Nam trong 5 năm liên tiếp. Mình khâm phục các em sinh viên , các thầy cô cũng như sự đầu tư của trường.
Có lẽ, có nhiều lý do để có thể đạt được những kết quả như thế . Đó là sự nỗ lực của các em sinh viên , các thầy cô trường Đại Học Lạc Hồng và một phần lý do nữa là các trường lớn đều không tham gia và không được đầu tư nhiều vào sân chơi này .
Từ lúc còn đi học, mình cũng được nghe khá nhiều về các cuộc thi ở VN, cũng khá nhiều người nói các em sinh viện đại học Lạc Hồng được đầu tư nhiều, đều do các tiến sỹ làm và đều nói nó vô nghĩa . Còn mình thì nghĩ dù ai làm hay như thế nào đi nữa thì đó là công sức và sự nỗ lực của các thầy trò trường đại học Lạc Hồng. 
Có nhiều người nói vô địch xong , nó còn cách xa thực tế .Ừ !
Nó còn cách xa thực tế nhiều lắm , nhưng nó là động lực là nguồn truyền cảm hứng cho các em sinh viên cũng như cho các thế hệ sau này. và khi nghe tin này mình cũng thấy có động lực nghiên cứu và làm việc hơn. Nó truyền cảm hứng rất nhiều cho chính bản thân mình  :)).
Còn nếu chỉ đầu tư vào những thứ hời hợt , ăn xổi  thì chúng ta chỉ mãi đi sau các nước láng giềng chứ chả nghĩ tới việc vươn xa hơn ra toàn cầu. Và chúng ta mãi so sánh độ kỵ, mãi chỉ biết phê phán thì chúng ta đã châm hơn các nước khác rất nhiều rồi.
Vì thế , hãy luôn cố gắng và vị tha, khiếm tốn :)
Hehe, nói linh tinh tới đây thôi :D
Tiếp tục cố gắng nào :)


Read More

Automatically Expire Data using TTL In HBase

Leave a Comment
in document : https://hbase.apache.org/book.html#ttl

ColumnFamilies can set a TTL (Time To Live) length in seconds, and HBase will automatically delete rows once the expiration time is reached. This applies to all versions of a row - even the current one. The TTL time encoded in the HBase for the row is specified in UTC.
To configure a table with a TTL of 60 seconds for instance, open hbase shell:
create 'tabletest', {'NAME' => 'cf', 'TTL' => 60}
Read More

Recomplie hbase to support hadoop 2.0

Leave a Comment
1. Download hbase stable
http://mirrors.digipower.vn/apache/hbase/stable/
2. Recompile
mvn clean package assembly:assembly -DskipTests -Dhadoop.profile=2.0
Read More

Các công cụ mã nguồn mở cho phân tích dữ liệu lớn

Leave a Comment
Hiện nay, có rất nhiều công cụ mã nguồn liên quan tới BigData như Hadoop, Storm, Apache Spark... Dưới đây là hình ảnh tổng quan về các công cụ đó.



Nguồn : http://www.bigdata-startups.com/open-source-tools/
Read More
Được tạo bởi Blogger.