Gigabit MySQL. :: Percona, konsultan MySQL yang terkenal, membahas pentingnya menggunakan link 100 Mbps untuk koneksi ke server database. 

Barusan sekilas saya memeriksa server database client, ternyata, server MySQL nya ini sudah nyaris menghabiskan seluruh bandwidth link 1 Gbps nya ! 😀

Tidak kebayang akan seperti apa kacaunya jika cuma menggunakan link 100 Mbps 😉 fiuh. 

Di sisi lain, suksesnya server MySQL ini men saturasi link 1 Gbps menunjukkan performa yang handal — servernya sendiri bekerja dengan santai (nyaris tidak ada query yang > 1 detik). Namun, sukses melahap seluruh bandwidth Gbps yang ada.

Network nya yang menjadi bottleneck nya 🙂 bukan lagi servernya.

SOLUSI CEPAT : aplikasi client diubah settingnya, agar menggunakan flag MYSQL_CLIENT_COMPRESS

HASIL : traffic database drop sekitar 20% 🙂

SOLUSI KOMPREHENSIF :

# Memisahkan database-database yang ada ke beberapa server MySQL = traffic jadi terbagi ke beberapa server / link Gbps

# Seluruh aplikasi menggunakan flag MYSQL_CLIENT_COMPRESS

http://www.mysqlperformanceblog.com/2007/12/20/large-result-sets-vs-compression-protocol/

Live feed perburuan tersangka Boston bomber :: di Reddit; menarik sekali, sangat up to date karena di update beramai-ramai oleh komunitas 🙂 CNN pun kalah cepat ;D

Situasi sejauh ini : 1 tersangka tewas (bom di badannya meledak), 1 polisi tewas, 1 polisi cedera. 1 tersangka sedang dikepung.

Selamat membaca :

Bagian I : http://reddit-stream.com/comments/1cnwms/

Bagian II : http://reddit-stream.com/comments/1co395/

Silakan jika ada saran & masukan: terlampir adalah script untuk bypass duplicates query di slave, yang bisa terjadi misalnya karena proses mysqldump terlalu lama (sehingga sudah ada data baru yang di INSERT di master)

==============
<?php

$dbuser = 'root';
$dbpass = 'rahasiaaa';
$dbserver = 'localhost';

mysql_connect($dbserver,$dbuser,$dbpass) or die("Koneksi gagal");

while (true) {

// ambil status slave
$sql = 'show slave status';
$hasil = mysql_query($sql);

$x = mysql_fetch_array($hasil);
//var_dump($x);

// jika ada error 'Duplicate entry', maka skip query tsb
if (($x['Slave_SQL_Running'] == 'No') && (stripos($x['Last_Error'], 'Duplicate entry'))) {

echo "Found problem: ".$x['Last_Error']." — restarting Replication… n";

// skip the problematic query
$sql = 'STOP SLAVE';
$hasil = mysql_query($sql);
$sql = 'SET GLOBAL sql_slave_skip_counter=2';
$hasil = mysql_query($sql);
$sql = 'START SLAVE';
$hasil = mysql_query($sql);

// wait 1 sec before checking again
sleep(1);
};
};

?>

News is bad for you :: In the past few decades, the fortunate among us have recognised the hazards of living with an overabundance of food (obesity, diabetes) and have started to change our diets.

But most of us do not yet understand that news is to the mind what sugar is to the body.

News is easy to digest. The media feeds us small bites of trivial matter, tidbits that don't really concern our lives and don't require thinking. That's why we experience almost no saturation.

Unlike reading books and long magazine articles (which require thinking), we can swallow limitless quantities of news flashes, which are bright-coloured candies for the mind.

Today, we have reached the same point in relation to information that we faced 20 years ago in regard to food. We are beginning to recognise how toxic news can be.

http://www.guardian.co.uk/media/2013/apr/12/news-is-bad-rolf-dobelli

Blazing Fast MySQL Backup :: I've been trying to backup a 400 GB database over network (#), and I kept getting abysmal speed. Even after using compression (mysqldump -C), gzip trick (mysqldump | gzip -c), etc; I can only get 20 Mbps transfer rate at best.

So I looked around, and found out this article about using "tab" option on mysqldump, to make the backup process much faster. 

Apparently, mysqldump spend much of its effort in formatting its output. 
The "tab" option will make mysqldump to save its output in a very sparse format (tab delimited). 

Anyway, since the "tab" option can only be used on disk (not over network), I mounted the destination over network using NFS. Then I pointed mysqldump to use that.

I was shocked to see that I'm getting 200 Mbps transfer speed ! 🙂 instant 10x speed increase. Amazing. 

To be honest, I was sceptical at first. I thought I'd just be getting a bit of performance increase.
But 10x speed increase ? That's just awesome 😀

Listed below is the script to do the fast mysql backup, and its restore. I've also fixed the original script, nothing major, but might be confusing for newbies.

Here you go :

—- fast-mysql-backup.sh —————–
#!/bin/bash
dir=$(date "+%Y-%m-%d_%Hh")
mkdir -m 777 -p /tmp/$dir
for db in $(mysql -BNe "show databases" | grep -v information_schema ) ; do 
  mkdir -m 777 /tmp/$dir/$db
  mysqldump –tab=/tmp/$dir/$db –opt –single-transaction –quick  $db
done
tar czf dump.tgz /tmp/$dir
——————————

—- fast-mysql-restore.sh —————–
#!/bin/bash
### NOTE
# change "dir" with the correct location
# change –use-threads with the number of processors in your computer

dir=/mnt/nfs
cores=16

cd $dir
tar xzf dump.tgz

for db in * ; do
  mysql -e "drop database $db; create database $db default charset utf8"
# create the database structure
cat $db/*.sql | mysql $db
# import the database contents
mysqlimport –use-threads=$cores –local $db $db/*.txt
done
——————————

TIP : to find out network throughput on a server, use "iftop" on linux.

(#) Can not backup to the server itself because it's running out of space…hence the backup (to move its data out, into another server)

Credit : http://matthew.mceachen.us/blog/faster-mysql-dumps-and-loads-with-tab-and-use-threads-1047.html

Cloud14 :: komputer Server dengan 80 prosesor & 128 GB RAM 🙂 siap melayani penggunanya dari seluruh penjuru Indonesia.

http://i.imgur.com/go1mDuG

Mohon maaf kepada kawan-kawan yang berusaha kontak saya, hari ini saya  terkapar di tempat tidur. Mendadak vertigo saya kumat sejak tadi pagi.

Saat ini sudah agak mendingan, mudah-mudahan saya bisa segera aktif kembali. Terimakasih.

http://en.wikipedia.org/wiki/Vertigo

Bitcoin makin populer :: terutama setelah krisis ekonomi di Cyprus – mendadak banyak yang menarik uangnya dari bank, dan membeli Bitcoin sebagai gantinya. Nilai Bitcoin langsung melonjak drastis. 

US Treasury mulai memperhatikan Bitcoin, dan mulai mencari cara untuk me regulasinya. Bulan lalu, total nilai Bitcoin menembus US$ 1 Milyar. Makin banyak trader & vendor yang menerima pembayaran dengan Bitcoin. Jumlah transaksi Bitcoin naik 50x lipat dibanding 2 tahun yang lalu. 
Dan, mainstream media mulai membahas Bitcoin. 

Bagi banyak pihak, sifat "decentralized" Bitcoin adalah fiturnya yang paling menarik. Bitcoin bebas dari tirani pemerintah, karena, tidak ada institusi pusat yang menjalankannya. Semuanya dijalankan bersama-sama, cukup dengan menjalankan software Bitcoin di komputer masing-masing.

Salah satu contoh kasus paling menarik terkait soal ini adalah kisah E-gold.

Pendiri E-gold berusaha menyediakan alternatif dari mata uang biasa, yaitu  dengan membuat mata uang berbasis emas DAN online. Berbeda dengan koin emas, E-gold bisa transaksi non-fisik (ecommerce, cashless, wireless, dst)

Beberapa tahun kemudian, pemerintah Amerika memberangus E-gold, dan menjebloskan pendirinya ke penjara : http://www.forbes.com/sites/jonmatonis/2012/10/04/bitcoin-prevents-monetary-tyranny/

Yup, tindakan yang sangat semena-mena.

Nah, Bitcoin terbebas dari masalah ini, karena sifatnya yang "decentralized". Bitcoin adalah cryptocurrency, dan asalnya dari kita, untuk kita.

Bahasan yang agak teknis terkait soal ini bisa dibaca misalnya disini : http://www.americanbanker.com/bankthink/how-cryptocurrencies-could-upend-banks-monetary-role-1057597-1.html?zkPrintable=1&nopagination=1

Berikut ini adalah artikel ringkas mengenai beberapa aspek dari Bitcoin. Ditulis dalam bahasa yang cukup mudah dimengerti, namun tetap membahas Bitcoin secara cukup mendalam. 
Bagi yang tertarik dengan Bitcoin, saya bisa menyarankan untuk membaca artikel ini. Selamat membaca.

http://www.forbes.com/sites/timothylee/2013/04/07/four-reasons-bitcoin-is-worth-studying/

Baru sadar bahwa BlackBerry Z10 melakukan revolusi UI (user interface), mirip seperti ketika iPhone dulu muncul tanpa keyboard. Yaitu, tidak ada satu pun tombol di layarnya 🙂

Android ada (minimal) 3 buah tombol di layar. iPhone ada 1 tombol.
BB Z10 = nol 🙂

Semuanya diakses dengan swiping. 

Saya tidak menyadarinya mungkin karena sudah terbiasa sejak menggunakan BlackBerry Playbook, yang menggunakan UI yang sama dengan Z10. UI tersebut dikenal dengan nama "Flow". 

Dan kalau sudah terbiasa dengan Flow ini, sangat menyenangkan. Terasa jauh lebih intuitif / alami.

Sarapan apa ya, hm.. Nasi Uduk Pdk.Indah masih ada ndak ya? Di belakang PIM2, enak banget. Coba samperin ah…

DeltaFM kemarin 3 jam siaran penuh kritik terhadap rokok & industri nya (baca: dicela habis-habisan) 😀

Pagi ini mereka menyiarkan iklan Pro ASI. WOW lagi.

Ndak takut kehilangan jatah iklan dari dua industri raksasa ini….?? 😀

DeltaFM sekarang adalah stasiun radio favorit saya 😉

Pembangunan Mesjid di London dilarang :: kata siapa rumah ibadah cuma dilarang dibangun di Indonesia ? Saat ini umat Islam di London sedang resah, karena surat izin pembangunan mesjid mereka ditolak.

Ada 90.000 muslim di daerah tsb. Mesjid yang akan dibangun memiliki kapasitas 10.000 orang. Sebetulnya masih belum mencukupi juga, tapi lumayanlah.

Izin pembangunan Mesjid tersebut ditolak oleh pemerintah, karena ditolak dengan keras oleh warga sekitar. 

Pelajaran apa yang bisa kita ambil disini adalah : HORMATI & RANGKUL WARGA SEKITAR.

Anda, orang asing, mendadak muncul di tengah-tengah warga yang sudah lama berada disana, Lalu tanpa banyak basa-basi, langsung mulai membangun Mega-Mosque / Mega-Church.

Lalu Anda heran kenapa banyak orang menjadi gusar / resah ?? 🙂

Lalu, alih-alih berusaha bersilaturahmi kepada warga sekitar – Anda malah teriak-teriak ke seluruh dunia bahwa "saya dizalimi !". Get lost 🙂

Masyarakat tidak butuh komunitas yang arogan seperti ini. Ke laut saja ya.

http://soerenkern.com/web/?p=896

Solusi atasi Transparent DNS :: beberapa ISP, seperti Telkom Speedy, mengimplementasi teknologi transparent DNS di jaringannya. Secara ringkas; semua request DNS (perubahan dari domain name menjadi IP address) itu ditangkap oleh ISP, dan kemudian diarahkan ke server mereka sendiri.

Sialnya, tidak semua ISP itu becus dalam implementasi DNS nya. Speedy misalnya, sudah cukup terkenal karena DNS servernya sering lambat luar biasa dalam update nya.

Akibatnya? Jika Anda mempunyai website baru, maka kadang baru akan bisa diakses oleh para pelanggan Speedy setelah 1 minggu ….. 🙁  padahal para pelanggan ISP lainnya sudah bisa mengaksesnya.

Atau, jika website Anda pindah "rumah" / pindah ke webhoster lainnya; maka mendadak website Anda tidak akan bisa diakses oleh para pelanggan Speedy – karena server DNS mereka masih menyimpan alamat website Anda yang lama 🙁

Bagi yang tidak suka mengalami ini, artikel berikut ini melampirkan solusi untuk mengatasinya : http://www.dnsleaktest.com/how-to-fix-a-dns-leak.php

Satu alternatif lainnya yang mungkin jauh lebih mudah adalah menggunakan Putty / OpenSSH untuk menjadi SOCKS proxy.

Contoh : putty -l myuser -D 9000 myserver.com

Ini akan membuat SOCKS proxy di port 9000. Anda tinggal ubah setting di browser untuk menggunakan proxy ini. 

(disclaimer: saya belum test 100% soal dns leak / transparent dns dengan solusi putty / SSH ini, karena ISP saya tidak melakukan ini. Silakan jika ada yang bisa membantu memastikan)

Semoga bermanfaat.

http://www.dnsleaktest.com/what-is-transparent-dns-proxy.php

Scrapbook di Google Chrome :: pekerjaan saya sering membutuhkan banyak riset di Internet. Jadinya perlu banyak mencatat berbagai sumber informasi, karena kadang sulit ditemukan kembali via Google.

Extension Scrapbook di Google Chrome memungkinkan kita untuk malah menyimpan seluruh isi halaman dari situs tsb. 

Ini sangat bermanfaat, karena kadang ada situs yang kemudian lenyap dari Internet.
Kalau kita sudah punya copy halamannya, maka jadi tidak masalah. Riset kita bisa berjalan terus, karena halaman tsb sudah kita simpan & bisa terus menjadi rujukan.

Karena banyak data / rujukan yang penting, saya ingin agar database Scrapbook ini bisa selalu ada backupnya. 

Maka kemudian saya lakukan trik berikut ini :

(1) Buat folder ~/Dropbox/Private/Scrapbook

(2) Lalu saya link folder ~/.config/google-chrome/Default/databases ke situ :

===========
cp -R ~/.config/google-chrome/Default/databases/*  ~/Dropbox/Private/Scrapbook/

mv ~/.config/google-chrome/Default/databases ~/.config/google-chrome/Default/databases-old

ln -s  ~/Dropbox/Private/Scrapbook  ~/.config/google-chrome/Default/databases
===========

Selesai. Maka kini database Scrapbook tsb akan selalu otomatis di backup ke account Dropbox saya 🙂

REF: 

(1) Info detail mengenai "jerohan" Google Chrome : http://www.forensicswiki.org/wiki/Google_Chrome

(2) Extension Scrapbook : https://chrome.google.com/webstore/detail/scrapbook/fihabipakbgncingdhhdidlbhneeicne