টুইট
- টুইট, বর্তমান পৃষ্ঠা।
- টুইট এবং উত্তর
- মিডিয়া
আপনি @dabdine-কে ব্লক করেছেন
আপনি কি এই টুইটগুলি দেখতে চাওয়ার বিষয়ে নিশ্চিত? টুইটগুলি দেখা হলে @dabdine অবরোধ মুক্ত হবে না।
-
Yup, free for academics, researchers and practitioners. ... Santa? :P
এই থ্রেডটি দেখানধন্যবাদ। আপনার সময়রেখাকে আরো ভালো করে তুলতে টুইটার এটিকে ব্যবহার করবে। পূর্বাবস্থায়পূর্বাবস্থায় -
18TB of highly compressed internet scan datasets at your fingertips, absolutely free (now with moar API). More coming on this service soon. https://opendata.rapid7.com/
এই থ্রেডটি দেখানধন্যবাদ। আপনার সময়রেখাকে আরো ভালো করে তুলতে টুইটার এটিকে ব্যবহার করবে। পূর্বাবস্থায়পূর্বাবস্থায় -
Derek Abdine পুনঃ টুইট করেছেন
ZOMGOSH THE
@RAPID7 LABS TEAM GAVE US A PRESENT TODAY. This means I get to spend the rest of the evening writing an R
for it! W00t!pic.twitter.com/W71lMxjAkI
ধন্যবাদ। আপনার সময়রেখাকে আরো ভালো করে তুলতে টুইটার এটিকে ব্যবহার করবে। পূর্বাবস্থায়পূর্বাবস্থায় -
ধন্যবাদ। আপনার সময়রেখাকে আরো ভালো করে তুলতে টুইটার এটিকে ব্যবহার করবে। পূর্বাবস্থায়পূর্বাবস্থায়
-
Do not: dataframe.withColumn('foo', udf(lambda x: x[:3]))('bar')) Do: from pyspark.sql.functions import substr dataframe.withColumn('foo', substr(dataframe['bar'], 3)) Lesson learned: Use built in or pure Scala functions where possible.
এই থ্রেডটি দেখানধন্যবাদ। আপনার সময়রেখাকে আরো ভালো করে তুলতে টুইটার এটিকে ব্যবহার করবে। পূর্বাবস্থায়পূর্বাবস্থায় -
TIL user defined functions in Python Apache Spark (pyspark) cause massive hits to performance and memory use, due to serialization. Spark is Java and runs python-based jobs by serializing most of it. If you need to use a UDF, write it in Scala and call it from pyspark.
এই থ্রেডটি দেখানধন্যবাদ। আপনার সময়রেখাকে আরো ভালো করে তুলতে টুইটার এটিকে ব্যবহার করবে। পূর্বাবস্থায়পূর্বাবস্থায় -
A: No. The former (contains) costs 7x more than the latter. Haven't quite verified it yet with an EXPLAIN, but my guess is the latter allows the query planner to optimize lookups in parquet data quicker using the dictionary, whereas the former needs a scan.
এই থ্রেডটি দেখানধন্যবাদ। আপনার সময়রেখাকে আরো ভালো করে তুলতে টুইটার এটিকে ব্যবহার করবে। পূর্বাবস্থায়পূর্বাবস্থায় -
Presto SQL quiz: For querying a non partition-key field, are `contains(field, ['value'])` and `field = 'value'` equivalent in performance? e.g.: select * from table where contains(date, [20180601]) vs select * from table where date = 20180601
এই থ্রেডটি দেখানধন্যবাদ। আপনার সময়রেখাকে আরো ভালো করে তুলতে টুইটার এটিকে ব্যবহার করবে। পূর্বাবস্থায়পূর্বাবস্থায় -
And here's the problem statement in more detail. Basically, it totally ignores partitions and performs a full table scan:https://github.com/prestodb/presto/issues/7428 …
এই থ্রেডটি দেখানধন্যবাদ। আপনার সময়রেখাকে আরো ভালো করে তুলতে টুইটার এটিকে ব্যবহার করবে। পূর্বাবস্থায়পূর্বাবস্থায় -
So, in our real world case, what should be around 8 cents costs 80 cents, and only gets worse as the dataset grows. That adds up extremely fast if you run as many queries as we do per month.
এই থ্রেডটি দেখানধন্যবাদ। আপনার সময়রেখাকে আরো ভালো করে তুলতে টুইটার এটিকে ব্যবহার করবে। পূর্বাবস্থায়পূর্বাবস্থায় -
For those that use AWS Athena, which is built on presto, using a computed value for a partition key can result in an order of magnitude higher cost per query. Beware! The only workaround is to precompute values before you run your query.
এই থ্রেডটি দেখানধন্যবাদ। আপনার সময়রেখাকে আরো ভালো করে তুলতে টুইটার এটিকে ব্যবহার করবে। পূর্বাবস্থায়পূর্বাবস্থায় -
Spent a good part of last night diagnosing why a presto query over roughly 200GB compressed, partitioned parquet data (Rapid7 FDNS) costs 10x more when using a computed vs static value for a partition. Found my answer:https://github.com/prestodb/presto/pull/9453 …
এই থ্রেডটি দেখানধন্যবাদ। আপনার সময়রেখাকে আরো ভালো করে তুলতে টুইটার এটিকে ব্যবহার করবে। পূর্বাবস্থায়পূর্বাবস্থায় -
*working with Spark* lemme just shove this 18GB JSON in and convert it to parquet... cool! Now lemme add a new column...pic.twitter.com/P94iHnJhCy
ধন্যবাদ। আপনার সময়রেখাকে আরো ভালো করে তুলতে টুইটার এটিকে ব্যবহার করবে। পূর্বাবস্থায়পূর্বাবস্থায় -
Derek Abdine পুনঃ টুইট করেছেন
If you think 500K VPNFilter compromised devices is a "high water mark" for exposure guess again.
@PDXbek@dabdine & I have an 'exposure cautionary tale' to go along w/launch of the@rapid7 2018 NEI. Take a
(right after rebooting your home/SMB router)!
https://blog.rapid7.com/2018/06/07/vpnfilter-potential-reach/ …pic.twitter.com/rzwBFlizea
ধন্যবাদ। আপনার সময়রেখাকে আরো ভালো করে তুলতে টুইটার এটিকে ব্যবহার করবে। পূর্বাবস্থায়পূর্বাবস্থায় -
Would it be too much if I created an alcoholic beverage dispensary named “cybar” that has a bouncer wear a shirt that says “security” on the back?
ধন্যবাদ। আপনার সময়রেখাকে আরো ভালো করে তুলতে টুইটার এটিকে ব্যবহার করবে। পূর্বাবস্থায়পূর্বাবস্থায় -
Derek Abdine পুনঃ টুইট করেছেন
Python ssh-decorator package backdoored to log ssh keys & psswords. Software security supply chain and library dependancies ftw. https://twitter.com/jaimeblascob/status/993932286037970944?s=21 …pic.twitter.com/g4o2DkM4D5
ধন্যবাদ। আপনার সময়রেখাকে আরো ভালো করে তুলতে টুইটার এটিকে ব্যবহার করবে। পূর্বাবস্থায়পূর্বাবস্থায় -
Derek Abdine পুনঃ টুইট করেছেন
Great job by
@jhartftw,@dabdine, Eric, Tod & the@rapid7 production team! // [Research] Off the Chain: Bitcoin Nodes on the Internet (no reg req'd!) https://www.rapid7.com/info/off-the-chain-observing-bitcoin-nodes-on-the-public-internet/ …pic.twitter.com/sP7FFs6W6Q
এই থ্রেডটি দেখানধন্যবাদ। আপনার সময়রেখাকে আরো ভালো করে তুলতে টুইটার এটিকে ব্যবহার করবে। পূর্বাবস্থায়পূর্বাবস্থায় -
Derek Abdine পুনঃ টুইট করেছেন
Announcing the immediate release of Intrigue Core v0.4:http://intrigue.io/2018/04/24/intrigue-core-v0-4/ …
ধন্যবাদ। আপনার সময়রেখাকে আরো ভালো করে তুলতে টুইটার এটিকে ব্যবহার করবে। পূর্বাবস্থায়পূর্বাবস্থায় -
Derek Abdine পুনঃ টুইট করেছেনধন্যবাদ। আপনার সময়রেখাকে আরো ভালো করে তুলতে টুইটার এটিকে ব্যবহার করবে। পূর্বাবস্থায়পূর্বাবস্থায়
-
2018: the year of dubstep exfil
https://twitter.com/benjojo12/status/984396941390950400 …
1:10ধন্যবাদ। আপনার সময়রেখাকে আরো ভালো করে তুলতে টুইটার এটিকে ব্যবহার করবে। পূর্বাবস্থায়পূর্বাবস্থায়
লোড হতে বেশ কিছুক্ষণ সময় নিচ্ছে।
টুইটার তার ক্ষমতার বাইরে চলে গেছে বা কোনো সাময়িক সমস্যার সম্মুখীন হয়েছে আবার চেষ্টা করুন বা আরও তথ্যের জন্য টুইটারের স্থিতি দেখুন।