1 <?php
declare(strict_types
=1);
4 * This file is part of the Rapsys BlogBundle package.
6 * (c) Raphaël Gertz <symfony@rapsys.eu>
8 * For the full copyright and license information, please view the LICENSE
9 * file that was distributed with this source code.
12 namespace Rapsys\BlogBundle\Fixture
;
14 use Doctrine\Bundle\FixturesBundle\Fixture
;
15 use Doctrine\Persistence\ObjectManager
;
17 use Rapsys\PackBundle\Util\SluggerUtil
;
19 use Rapsys\BlogBundle\Entity\Civility
;
20 use Rapsys\BlogBundle\Entity\Group
;
21 use Rapsys\BlogBundle\Entity\User
;
22 use Rapsys\BlogBundle\Entity\UserTranslation
;
23 use Rapsys\BlogBundle\Entity\Keyword
;
24 use Rapsys\BlogBundle\Entity\KeywordTranslation
;
25 use Rapsys\BlogBundle\Entity\Article
;
26 use Rapsys\BlogBundle\Entity\ArticleTranslation
;
31 class BlogFixture
extends Fixture
{
33 * @var Rapsys\PackBundle\Util\SluggerUtil
35 private SluggerUtil
$slugger;
40 public function __construct(SluggerUtil
$slugger) {
42 $this->slugger
= $slugger;
48 public function load(ObjectManager
$manager) {
58 foreach($civilityTree as $civilityData) {
59 $civility = new Civility($civilityData);
60 $manager->persist($civility);
61 $civilitys[$civilityData] = $civility;
66 //XXX: ROLE_XXX is required by
74 foreach($groupTree as $groupData) {
75 $group = new Group($groupData);
76 $manager->persist($group);
77 $groups[$groupData] = $group;
81 //Flush to get the ids
87 'civility' => 'Mister',
89 'mail' => 'blog@rapsys.eu',
91 'forename' => 'Raphaël',
95 'pseudonym' => 'Rapsys',
96 'slug' => $this->slugger
->slug('Raphaël Gertz (rapsys)'),
98 'en_gb' => 'Raphaël Gertz, born in 1984, is a web developper since 2007. Interested in free software, since 2004, when he begin contributing to a linux distribution, known now as Mageia, some path has been traveled since then.',
99 'fr_fr' => 'Raphaël Gertz, né en 1984, est développeur web depuis 2007. Passionné par le monde du logiciel libre, depuis 2004, où il commence à contribuer à une distribution linux, connue maintenant sous le nom Mageia, un certain chemin a été parcouru dès lors.'
106 foreach($userTree as $userData) {
107 $user = new User($userData['mail'], $userData['password'], $civilitys[$userData['civility']], $userData['forename'], $userData['surname'], $userData['active'], $userData['enable'], $userData['pseudonym'], $userData['slug']);
108 $user->addGroup($groups[$userData['group']]);
109 $manager->persist($user);
110 //Flush to get the id
112 $users[$userData['mail']] = $user;
113 foreach($userData['translations'] as $locale => $description) {
114 $userTranslation = new UserTranslation($users[$userData['mail']], $locale, $description);
115 $manager->persist($userTranslation);
116 unset($userTranslation);
121 //Flush to get the ids
129 'description' => 'Portable Network Graphics (PNG) is an raster graphics file open format that supports lossless data compression'
133 'description' => 'Le Portable Network Graphics (PNG) est un format ouvert d’images numériques, qui a été créé pour remplacer le format GIF, à l’époque propriétaire et dont la compression était soumise à un brevet'
138 'title' => 'Imagick',
139 'description' => 'ImageMagick is a free and open-source software suite for displaying, converting, and editing raster image and vector image files'
142 'title' => 'Imagick',
143 'description' => 'Image Magick est une collection de logiciels libres pour afficher, convertir et modifier des images numériques matricielles ou vectorielles dans de nombreux formats'
149 'description' => 'An image is an artifact that depicts visual perception, for example, a photo or a two-dimensional picture, that has a similar appearance to some subject'
153 'description' => 'Une image est une représentation visuelle, voire mentale, de quelque chose'
158 'title' => 'Varnish',
159 'description' => 'Varnish is an HTTP cache server deployed as a reverse proxy between applications servers and clients'
162 'title' => 'Varnish',
163 'description' => 'Varnish est un serveur de cache HTTP déployé en tant que proxy inverse entre les serveurs d\'application et les clients'
168 'title' => 'Web service',
169 'description' => 'A web service is a service offered by an electronic device to another electronic device, communicating with each other via the World Wide Web'
172 'title' => 'Service web',
173 'description' => 'Un service web, ou service de la toile, est un protocole d\'interface informatique de la famille des technologies web permettant la communication et l\'échange de données entre applications et systèmes hétérogènes'
179 'description' => 'Representational state transfer (REST) or RESTful web services are a way of providing interoperability between computer systems on the Internet'
183 'description' => 'Representational state transfer (REST) ou services web RESTful est une manière de fournir de l\'intéropérabilité entre systèmes d\'information sur Internet'
188 'title' => 'HATEOAS',
189 'description' => 'HATEOAS, abbreviation of Hypermedia As The Engine Of Application State, is a constraint of the REST application architecture that distinguishes it from other network application architectures'
192 'title' => 'HATEOAS',
193 'description' => 'HATEOAS, abréviation d\'Hypermedia As Engine of Application State, Hypermédia en tant que moteur de l\'état d\'application, constitue une contrainte de l\'architecture d\'application REST qui la distingue de la plupart des autres architectures d\'applications réseau'
199 'description' => 'In information technology, a Uniform Resource Identifier (URI) is a string of characters used to identify a resource'
203 'description' => 'En technologie de l\'information, une URI, abréviation d\'Uniform Resource Identifier, Identifiant uniforme de ressource, est une chaine de caractères utilisée pour identifier une ressource'
209 'description' => 'Classless Inter-Domain Routing, CIDR, is a method for aggregating IP addresses and route them'
213 'description' => 'Routage inter-domaine sans classe, de l\'anglais Classless Inter-Domain Routing, CIDR, est une méthode pour agréger des adresses IP et les router'
219 'description' => 'Amazon Elastic Compute Cloud or EC2 is an Amazon server renting service allowing third party to run their own web application'
223 'description' => 'Amazon Elastic Compute Cloud ou EC2 est un service proposé par Amazon permettant à des tiers de louer des serveurs sur lesquels exécuter leurs propres applications web'
229 'description' => 'PHP: Hypertext Preprocessor, better known as PHP, is an open programming language, used mostly to produce dynamic web pages through an HTTP server'
233 'description' => 'PHP : Hypertext Preprocessor, plus connu sous son sigle PHP, est un langage de programmation libre, principalement utilisé pour produire des pages Web dynamiques via un serveur HTTP'
239 'description' => 'MySQL is an open-source relational database management system, RDBMS'
243 'description' => 'MySQL est un système de gestion de bases de données relationnelles libre'
249 'description' => 'Microsoft Azure, formerly Windows Azure, is a cloud computing service created by Microsoft for building, testing, deploying, and managing applications and services through a global network of Microsoft-managed data centers'
253 'description' => 'Microsoft Azure, anciennement Windows Azure, est une plateforme applicative en nuage crée par Microsoft pour construire, tester, déployer et gérer des applications et services sur un réseau global de centres de données opéré par Microsoft'
258 'title' => 'Microsoft',
259 'description' => 'Microsoft Corporation is an american multinational technology company, founded in 1975 by Bill Gates and Paul Allen'
262 'title' => 'Microsoft',
263 'description' => 'Microsoft Corporation est une multinationale informatique et micro-informatique américaine, fondée en 1975 par Bill Gates et Paul Allen'
270 foreach($keywordTree as $name => $data) {
271 $keyword = new Keyword();
272 $manager->persist($keyword);
273 //Flush to get the id
275 $keywords[$name] = $keyword;
276 foreach($data as $locale => $translation) {
277 $keywordTranslation = new KeywordTranslation($keywords[$name], $locale, $translation['description'], $this->slugger
->slug($translation['title']), $translation['title']);
278 $manager->persist($keywordTranslation);
279 unset($keywordTranslation);
284 //Flush to get the ids
290 'mail' => 'blog@rapsys.eu',
291 'keywords' => ['image', 'imagick', 'png'],
294 'title' => 'How to reliably detect PNG image transparency with PHP',
295 'description' => 'I recently had to find out if a PNG has transparency using PHP.
296 All the code I found didn\'t seemed to work correctly for the various kind of PNG I had to deal with.
297 Here is the function I used.',
298 'body' => 'I recently had to find out if a PNG has transparency using PHP.
299 All the code I found didn\'t seemed to work correctly for the various kind of PNG I had to deal with.
301 I finished using the following function:
304 function png_has_transparency($im) {
305 //Retrieve content from imagick object
306 $content = $im->getImageBlob();
308 //Detect 32-bit png (each pixel has tranparency level)
309 if (ord(substr($content, 25, 1)) & 4) {
311 $p = $im->getPixelIterator();
315 //Loop on each row pixel
316 foreach($r as $pix) {
317 //Check if pixel has partial transparency
318 if ($pix->getColorValue(Imagick::COLOR_ALPHA) != 1) {
323 //Check 8-bit png transparency
324 } elseif (stripos($content, \'PLTE\') !== false || stripos($content, \'tRNS\') !== false) {
328 //Didn\'t found clue of transparency
333 This function works with the only two transparency possibilities: 8 and 32-bit PNG.
335 The first case is a 32-bit PNG with transparency enabled, we have then to check every pixel to detect if it has transparent part or not.
337 The second case is a 8-bit PNG, then we only have to look the file content for transparency markers.
339 In this function configuration, we only read part of the file in 32-bit PNG until we detect one transparent pixel or parse content until transparency marker is detected in 8-bit PNG.
341 The worst case scenario will be 32-bit PNG with transparency flag without transparency or 8-bit PNG without transparency flag.
343 Depending on how likely you are to have transparency in each cases you might want to reverse the flow of this function.
345 Big thanks to these articles which expains how these parts work in a bit more detail:
346 - <https://www.jonefox.com/blog/2011/04/15/how-to-detect-transparency-in-png-images>
347 - <http://camendesign.com/code/uth1_is-png-32bit>
348 - <https://stackoverflow.com/questions/5495275/how-to-check-if-an-image-has-transparency-using-gd>
350 Hope this helps someone else out there.'
353 'title' => 'Comment détecter la tranparence dans des images PNG en PHP de manière fiable',
354 'description' => 'J\'ai récemment du trouver comment détecter en PHP les images PNG transparentes.
355 Les codes trouvés ne semblaient pas fonctionner de manière satisfaisante pour les différents types de PNG à contrôler.
356 Voici la fonction que j\'ai fini par utiliser.',
357 'body' => 'J\'ai récemment du trouver comment détecter en PHP les images PNG transparentes.
358 Les codes trouvés ne semblaient pas fonctionner de manière satisfaisante pour les différents types de PNG à contrôler.
359 J\'ai fini par utiliser la fonction suivante:
362 function png_has_transparency($im) {
363 //Retrieve content from imagick object
364 $content = $im->getImageBlob();
366 //Detect 32bit png (each pixel has tranparency level)
367 if (ord(substr($content, 25, 1)) & 4) {
369 $p = $im->getPixelIterator();
373 //Loop on each row pixel
374 foreach($r as $pix) {
375 //Check if pixel has partial transparency
376 if ($pix->getColorValue(Imagick::COLOR_ALPHA) != 1) {
381 //Check 8bit png transparency
382 } elseif (stripos($content, \'PLTE\') !== false || stripos($content, \'tRNS\') !== false) {
386 //Didn\'t found clue of transparency
391 Cette fonction fonctionne avec les deux seules possibilités : PNG 8 et 32 bits.
393 Le premier cas est un PNG 32 bits avec transparence activée, on doit alors vérifier l\'opacité de chaque pixel savoir si l\'image a de la transparence ou non.
395 Le second cas est un PNG 8 bits, on a simplement à détecter un marqueur de transparence dans le contenu du fichier.
397 Dans cette configuration de fonction, on lit seulement une partie du PNG 32 bits jusqu\'à détection d\'un pixel transparent où on analyse le contenu jusqu\'à trouver un marqueur de transparence dans un PNG 8 bits.
399 Les pires cas seront un PNG 32 bits avec marqueur de transparence sans pixel transparent ou PNG 8 bits sans marqueur de transparence.
401 Selon les probabilités de rencontrer les différents cas de transparence vous pouvez être intéressé pour renverser l\'ordre des tests de cette fonction.
403 Un grand merci à ces articles qui expliquent plus en détail comment fonctionnent les différentes parties de ce code:
404 - <https://www.jonefox.com/blog/2011/04/15/how-to-detect-transparency-in-png-images>
405 - <http://camendesign.com/code/uth1_is-png-32bit>
406 - <https://stackoverflow.com/questions/5495275/how-to-check-if-an-image-has-transparency-using-gd>
408 En espérant que cela puisse aider quelques personnes.'
413 'mail' => 'blog@rapsys.eu',
414 'keywords' => ['hateoas', 'rest', 'uri', 'varnish', 'webservice'],
417 'title' => 'Caching webservice with varnish',
418 'description' => 'I recently had to find a way to cache a webservice anwsers.
419 Here is the Varnish configuration fitting my needs.',
420 'body' => 'I recently had to find a way to cache a webservice anwsers.
422 The webservice is a RESTfull API serving as a gateway between a private HATEOAS API and a client generating more than 500 000 requests a day.
424 The first surprise is that if your well educated client, sending you a header Authorization: Bearer, will not be cached by default by Varnish !
426 Let\'s force back the standard behaviour with this header for our webservice uri prefix:
430 # Force cache response even with req.http.Authorization set
431 if (req.http.Authorization) {
432 if (req.url ~ "^/webservice/uri/prefix/") {
439 This has security implication, because anyone allowed to request varnish will be able to retrieve a cached result without authentification.
441 It is important to validate the Authorization header value before serving the result from cache.
443 Now, our webservice has three possibles answers :
444 - 200: the data in JSON
445 - 404: data was not found
446 - 410: data is not available anymore
448 Let\'s cache our results depending on the reponse code:
452 if (req.url ~ "^/webservice/uri/prefix/") {
453 if (beresp.status == 404) {
456 if (beresp.status == 410) {
459 if (beresp.status == 200) {
460 set beresp.ttl = 24h;
466 With this configuration, we divided by 5 the quantity of request on our gateway from the client who was not able to cache our result himself.'
469 'title' => 'Mise en cache de webservice avec varnish',
470 'description' => 'J\'ai eu récemment à trouver comment mettre en cache les réponses d\'un webservice.
471 Voici la configuration varnish qui a répondu à mes besoins.',
472 'body' => 'J\'ai eu récemment à trouver comment mettre en cache les réponses d\'un webservice.
474 L\'API RESTfull du webservice sert de passerelle entre un API privé HATEOAS et un client générant plus de 500 000 requêtes par jour.
476 La première surprise est qu\'un client bien élevé, envoyant un en-tête Authorization: Bearer, ne sera pas mis en cache par Varnish par défaut !
478 Forçons le fonctionnement standard avec l\'en-tête pour le préfixe de l\'uri de notre webservice:
482 # Force la mise en cache de la réponse même avec req.http.Authorization présent
483 if (req.http.Authorization) {
484 if (req.url ~ "^/webservice/uri/prefix/") {
491 Ce changement a des conséquences sur la sécurité, puisque n\'importe quelle personne autorisée à interroger Varnish sera en mesure de récupérer un résultat en cache sans s\'identifier.
493 Il est important de valider la valeur de l\'en-tête Authorization avant de fournir le résultat depuis le cache.
495 Notre webservice a trois réponses possibles :
496 - 200: les données en JSON
497 - 404: données non trouvées
498 - 410: données plus jamais disponibles
500 Mettons en cache les résultats selon le code de retour :
504 if (req.url ~ "^/webservice/uri/prefix/") {
505 if (beresp.status == 404) {
508 if (beresp.status == 410) {
511 if (beresp.status == 200) {
512 set beresp.ttl = 24h;
518 Avec cette configuration, on a divisé par 5 la quantité de demandes sur notre passerelle pour le client qui n\'était pas en mesure de mettre en cache lui-même nos résultats.'
523 'mail' => 'blog@rapsys.eu',
524 'keywords' => ['amazon', 'azure', 'cidr', 'microsoft', 'mysql', 'php', 'webservice'],
527 'title' => 'Dealing with IP range in PHP/MySQL',
528 'description' => 'I recently had to deal with CIDR blocks to tighten some webservice security.
529 Here is how I designed it to fulfill my needs.',
530 'body' => 'I recently had to deal with CIDR blocks to tighten some webservice security.
532 First let\'s see how to compute the first and last address of an IP range with just the block base IP and mask:
535 $range = [\'127.0.0.1\', 8];
536 function rangeBegin($range) {
539 function rangeEnd($range) {
540 return long2ip(ip2long($range[0]) | ((1 << (32 - $range[1])) - 1));
544 How to detect if an IP is present in a CIDR block:
548 $range = [\'127.0.0.1\', 8];
549 function ipInRange($ip, $range) {
550 if (ip2long($range[0]) <= ip2long($ip) && ip2long($ip) <= (ip2long($range[0]) | ((1 << (32 - $range[1])) - 1))) {
557 As a first bonus, how to retrieve amazon IP ranges:
560 function fetchAmazonRange() {
564 $ctx = stream_context_create(
567 \'method\' => \'GET\',
568 \'max_redirects\' => 0,
570 \'ignore_errors\' => false,
572 \'Connection: close\',
573 \'Accept: application/json\'
580 if (($json = file_get_contents(\'https://ip-ranges.amazonaws.com/ip-ranges.json\', false, $ctx)) === false) {
585 if (($json = json_decode($json)) === null || empty($json->prefixes)) {
590 foreach($json->prefixes as $range) {
591 //Skip ipv6 and invalid ranges
592 if (empty($range->ip_prefix)||!preg_match(\'/^([0-9]+\.[0-9]+\.[0-9]+\.[0-9]+)\/([0-9]+)$/\', $range->ip_prefix, $matche
597 array_shift($matches);
599 $amazonRanges[] = $matches;
603 return $amazonRanges;
607 Microsoft Azure Ip ranges urls:
608 - <https://www.microsoft.com/en-us/download/details.aspx?id=41653>
609 - <https://msdn.microsoft.com/library/mt757330.aspx>'
612 'title' => 'Gestion des plages d\'IP en PHP/MySQL',
613 'description' => 'J\'ai eu récemment à trouver comment restreindre l\'accès à un service en ligne à certaines plages d\'IP. Voici la solution qui a répondu à mes besoins.',
614 'body' => 'J\'ai récemment du autoriser l\'accès à un service en ligne à seulement quelques plages d\'IP.
616 Premièrement, voyons comment calculer la première et la dernière adresse IP d\'une plage (bloc CIDR) avec sa base et son masque :
619 $range = [\'127.0.0.1\', 8];
620 function rangeBegin($range) {
623 function rangeEnd($range) {
624 return long2ip(ip2long($range[0]) | ((1 << (32 - $range[1])) - 1));
628 Maintenant comment vérifier si une IP est présente dans une plage (bloc CIDR) :
632 $range = [\'127.0.0.1\', 8];
633 function ipInRange($ip, $range) {
634 if (ip2long($range[0]) <= ip2long($ip) && ip2long($ip) <= (ip2long($range[0]) | ((1 << (32 - $range[1])) - 1))) {
641 En premier bonus, comment récupérer les plages d\'IP d\'amazon :
644 function fetchAmazonRange() {
648 $ctx = stream_context_create(
651 \'method\' => \'GET\',
652 \'max_redirects\' => 0,
654 \'ignore_errors\' => false,
656 \'Connection: close\',
657 \'Accept: application/json\'
664 if (($json = file_get_contents(\'https://ip-ranges.amazonaws.com/ip-ranges.json\', false, $ctx)) === false) {
669 if (($json = json_decode($json)) === null || empty($json->prefixes)) {
674 foreach($json->prefixes as $range) {
675 //Skip ipv6 and invalid ranges
676 if (empty($range->ip_prefix)||!preg_match(\'/^([0-9]+\.[0-9]+\.[0-9]+\.[0-9]+)\/([0-9]+)$/\', $range->ip_prefix, $matche
681 array_shift($matches);
683 $amazonRanges[] = $matches;
687 return $amazonRanges;
691 Urls pour les plages d\'IP de Microsoft Azure :
692 - <https://www.microsoft.com/en-us/download/details.aspx?id=41653>
693 - <https://msdn.microsoft.com/library/mt757330.aspx>'
700 foreach($articleTree as $i => $data) {
701 $article = new Article($users[$data['mail']]);
702 foreach($data['keywords'] as $keyword) {
703 $article->addKeyword($keywords[$keyword]);
705 $manager->persist($article);
706 //Flush to get the id
708 $articles[$i] = $article;
709 foreach($data['translations'] as $locale => $translation) {
710 $articleTranslation = new ArticleTranslation($articles[$i], $locale, $translation['body'], $translation['description'], $this->slugger
->slug($translation['title']), $translation['title']);
711 $manager->persist($articleTranslation);
716 //Flush to get the ids