Uuidはどこまでuuidか試してみた
Download as PPTX, PDF5 likes9,770 views
西日暮里.rb ゴールデンだよLT大会 @ 秋葉原UDX！！ 山田 雄（株式会社リクルートライフスタイル）
![行くぜ１０００万件
require 'pg'
require 'securerandom'
require 'parallel'
connection = PG::connect(:host => "localhost", :user => ”XXX", :password => ”XXX", :dbname => ”XXX" )
begin
Parallel.each([*1..10000000], in_processes: 4) do |i|
r=SecureRandom.uuid.upcase
sql = "insert into uuid_test (uuid) values('#{r}')"
connection.exec(sql)
if i % 10000 == 0
puts i
end
end
rescue => ex
puts ex
ensure
connection.finish
end](https://image.slidesharecdn.com/uuiduuid-160428115923/85/Uuid-uuid-15-320.jpg)
![行くぜ１０００万件
require 'pg'
require 'securerandom'
require 'parallel'
connection = PG::connect(:host => "localhost", :user => ”XXX", :password => ”XXX", :dbname => ”XXX" )
begin
Parallel.each([*1..10000000], in_processes: 4) do |i|
r=SecureRandom.uuid.upcase
sql = "insert into uuid_test (uuid) values('#{r}')"
connection.exec(sql)
if i % 10000 == 0
puts i
end
end
rescue => ex
puts ex
ensure
connection.finish
end
1000万件もそれ以上も余裕だが、
僕のmacが余裕ない・・・ToT
(容量やCPU的な意味で）](https://image.slidesharecdn.com/uuiduuid-160428115923/85/Uuid-uuid-16-320.jpg)
Uuidはどこまでuuidか試してみた
- 1. uuidはどこまでuuidか試してみた 西日暮里.rb ゴールデンだよLT大会 04/28 2016 山田 雄 ネットビジネス本部 データ基盤T
- 2. ■山田 雄（ヤマダ ユウ） 株式会社 リクルートライフスタイル ネットビジネス本部 データ基盤T Twitter:@nii_yan Github: https://github.com/yu-yamada Blog:イクジニアブログ ・元々フリーランスエンジニア 縁があってリクルートライフスタイルにお世話になることになった。 ビックデータ、Ruby、ビールが好き。 自己紹介
- 3. UUID (User Unique ID) (Universally Unique Identifier) 普遍的に 唯一の 識別子
- 11. UUIDのバージョン？ バージョン 生成方法 1 MacAddressとタイムスタンプ 2 DEC Security 3 名前のmd5ハッシュ 4 ランダム 5 名前のSHA-1ハッシュ
- 12. 一応本当に衝突しないか試してみた require 'securerandom' aa=Array.new 100000.times do |i| r=SecureRandom.uuid.upcase if aa.include?(r) puts "find!!" break end aa << r if i % 1000 == 0 puts i end end
- 13. 一応本当に衝突しないか試してみた require 'securerandom' aa=Array.new 100000.times do |i| r=SecureRandom.uuid.upcase if aa.include?(r) puts "find!!" break end aa << r if i % 1000 == 0 puts i end end 10万件ぐらいでは全然かぶらず。 そして実行時間が遅い・・・
- 14. postgres使ってみた 上記のようなテーブルにひたすらuuidを生成して突っ込む。 エラーが出たらuuidが衝突したはず。 name 型 key uuid text Primary key
- 15. 行くぜ１０００万件 require 'pg' require 'securerandom' require 'parallel' connection = PG::connect(:host => "localhost", :user => ”XXX", :password => ”XXX", :dbname => ”XXX" ) begin Parallel.each([*1..10000000], in_processes: 4) do |i| r=SecureRandom.uuid.upcase sql = "insert into uuid_test (uuid) values('#{r}')" connection.exec(sql) if i % 10000 == 0 puts i end end rescue => ex puts ex ensure connection.finish end
- 16. 行くぜ１０００万件 require 'pg' require 'securerandom' require 'parallel' connection = PG::connect(:host => "localhost", :user => ”XXX", :password => ”XXX", :dbname => ”XXX" ) begin Parallel.each([*1..10000000], in_processes: 4) do |i| r=SecureRandom.uuid.upcase sql = "insert into uuid_test (uuid) values('#{r}')" connection.exec(sql) if i % 10000 == 0 puts i end end rescue => ex puts ex ensure connection.finish end 1000万件もそれ以上も余裕だが、 僕のmacが余裕ない・・・ToT (容量やCPU的な意味で）
- 17. Aurora使ってみた name 型 key uuid string Primary key
- 18. Aurora使ってみた お金が心配で出来なかったです・・・・ name 型 key uuid string Primary key
Editor's Notes
- #2: これからHadoop導入する方がオンプレかクラウドか悩んだ際に少しでも参考になれば嬉しいです。